佳發(fā)大數(shù)據(jù)處理平臺(tái)基于 HDFS、Hbase、Kudu 等從 GB 到 PB 級別的存儲(chǔ)方案，提供數(shù)據(jù)全量接入，將業(yè)務(wù)數(shù)據(jù)從各類數(shù)據(jù)源導(dǎo)入數(shù)據(jù)倉庫以及其他相關(guān)大數(shù)據(jù)環(huán)境，提供關(guān)系型數(shù)據(jù)庫和日志的增量實(shí)時(shí)/準(zhǔn)實(shí)時(shí)接入，將業(yè)務(wù)庫中增量數(shù)據(jù)和應(yīng)用日志實(shí)時(shí)導(dǎo)入到大數(shù)據(jù)環(huán)境，并通過數(shù)據(jù)可視化分析，對全省無線電使用狀況進(jìn)行實(shí)時(shí)監(jiān)測。
上圖為大數(shù)據(jù)處理平臺(tái)部分頁面展示
數(shù)據(jù)采集、存儲(chǔ)與計(jì)算能力。隨著數(shù)據(jù)量的飛速增長，數(shù)據(jù)來源和數(shù)據(jù)結(jié)構(gòu)更為多樣，數(shù)據(jù)處理方式需滿足各個(gè)場景下的數(shù)據(jù)分析與應(yīng)用需求。實(shí)現(xiàn)多數(shù)據(jù)系統(tǒng)的統(tǒng)一存儲(chǔ)、管理和業(yè)務(wù)系統(tǒng)數(shù)據(jù)的統(tǒng)一。不再需要從多個(gè)業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫中提取數(shù)據(jù)再進(jìn)行整合。
上圖為大數(shù)據(jù)處理平臺(tái)部分頁面展示
增強(qiáng)自主分析能力，持續(xù)挖掘業(yè)務(wù)價(jià)值。建立更加靈活、便捷的可視化分析，提高數(shù)據(jù)分析自主性，增強(qiáng)數(shù)據(jù)分析效率，提高數(shù)據(jù)價(jià)值貢獻(xiàn)。
上圖為大數(shù)據(jù)處理平臺(tái)部分頁面展示
佳發(fā)大數(shù)據(jù)處理平臺(tái)實(shí)現(xiàn)了高效的ETL開發(fā)和數(shù)據(jù)倉庫建設(shè)，建設(shè)了統(tǒng)一的數(shù)據(jù)清洗、計(jì)算流程，滿足了數(shù)據(jù)分析與數(shù)據(jù)挖掘、數(shù)據(jù)報(bào)表、報(bào)告等業(yè)務(wù)場景對數(shù)據(jù)消費(fèi)的需求；搭建了同時(shí)滿足離線計(jì)算和實(shí)時(shí)計(jì)算應(yīng)用場景的大數(shù)據(jù)平臺(tái)。隨著互聯(lián)網(wǎng)快速的發(fā)展，單純的離線計(jì)算已經(jīng)不能滿足正常的業(yè)務(wù)需求，實(shí)時(shí)計(jì)算應(yīng)用場景也已經(jīng)成為了各個(gè)單位必須考慮的業(yè)務(wù)場景；提供了簡單易用的操作界面，相關(guān)技術(shù)人員可以快速上手進(jìn)行平臺(tái)管理和維護(hù)；通過認(rèn)證、授權(quán)、審計(jì)，提供全方位的數(shù)據(jù)安全技術(shù)保障；基于有數(shù)，不僅使數(shù)據(jù)庫中的數(shù)據(jù)更加美觀易懂，各業(yè)務(wù)部門還能通過自助式分析查詢所需數(shù)據(jù)，更高效地支持業(yè)務(wù)決策。