第4章 基于大智移云技術(shù)的財(cái)政數(shù)字化轉(zhuǎn)型平臺(tái)總體建設(shè)方案

4.1 財(cái)政數(shù)字化轉(zhuǎn)型平臺(tái)部署架構(gòu)設(shè)計(jì)

整個(gè)財(cái)政數(shù)字化技術(shù)部署架構(gòu)分為數(shù)據(jù)源、服務(wù)器集群數(shù)據(jù)處理與存儲(chǔ)、數(shù)據(jù)庫、數(shù)據(jù)接口（API）、數(shù)據(jù)門戶5個(gè)方面，完成財(cái)政支出、經(jīng)濟(jì)運(yùn)行、社會(huì)發(fā)展、精準(zhǔn)扶貧等財(cái)政相關(guān)數(shù)據(jù)的收集、處理、存儲(chǔ)與可視化。

（1）數(shù)據(jù)源 數(shù)據(jù)源包括AGENT和CMDB，其中AGENT表示非數(shù)據(jù)庫數(shù)據(jù)的內(nèi)外部系統(tǒng)數(shù)據(jù)，包括財(cái)政數(shù)據(jù)特征、財(cái)政需求、經(jīng)濟(jì)運(yùn)轉(zhuǎn)、Wind API、社會(huì)監(jiān)控等信息；CMDB表示數(shù)據(jù)庫結(jié)構(gòu)內(nèi)外部數(shù)據(jù)信息，包括財(cái)政部門組織架構(gòu)、工作職責(zé)、考核要求等靜態(tài)數(shù)據(jù)。

（2）集群 集群是指功能相同，組合在一起擴(kuò)大其功能的一組服務(wù)器。Kafka集群作為數(shù)據(jù)管道，實(shí)時(shí)傳輸財(cái)政管理相關(guān)數(shù)據(jù)。CDH集群用于將半結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù)，用于將秒粒度的數(shù)據(jù)聚合為分鐘、小時(shí)、天粒度的數(shù)據(jù)。MPP集群開拓分布式空間，可以是實(shí)體服務(wù)器，也可以是云端服務(wù)器，用于保存財(cái)政相關(guān)數(shù)據(jù)。ELS集群用于財(cái)政相關(guān)數(shù)據(jù)的多維快速全文檢索。

（3）數(shù)據(jù)庫 小批量保存財(cái)政管理可視化的定制化圖形與報(bào)表數(shù)據(jù)。

（4）數(shù)據(jù)接口（API） 獲取外部特定數(shù)據(jù)的通道，比如Wind金融終端、百度地圖、天氣預(yù)報(bào)、統(tǒng)計(jì)年鑒等數(shù)據(jù)。

（5）數(shù)據(jù)門戶（TOMCAT Web）網(wǎng)絡(luò)頁面端的數(shù)據(jù)開放接口，用于實(shí)現(xiàn)財(cái)政數(shù)據(jù)共享與開發(fā)財(cái)政數(shù)據(jù)API供外部訪問。

財(cái)政數(shù)字化平臺(tái)部署架構(gòu)設(shè)計(jì)如圖4-1所示，其中Kafka是數(shù)據(jù)傳輸?shù)墓艿溃捎跀?shù)據(jù)庫不支持對(duì)每條數(shù)據(jù)進(jìn)行一次訪問，因此，通過管道將多條數(shù)據(jù)合為一條，減少訪問次數(shù)。CDH是分布式的數(shù)據(jù)處理與運(yùn)算框架。MPP是分布式數(shù)據(jù)庫，存儲(chǔ)大量歷史數(shù)據(jù)。ELS是全文檢索技術(shù)，實(shí)現(xiàn)大規(guī)模數(shù)據(jù)的關(guān)鍵字快速查找。API指數(shù)據(jù)接口。整個(gè)架構(gòu)通過Kafka技術(shù)從財(cái)政部門AGENT中獲取實(shí)時(shí)的數(shù)據(jù)，在CDH集群中進(jìn)行解析與聚合處理，與較為靜態(tài)的CMDB數(shù)據(jù)關(guān)聯(lián)，保存到MPP集群中，TOMCAT Web數(shù)據(jù)門戶、數(shù)據(jù)接口、數(shù)據(jù)庫通過接入MPP集群獲取所需的數(shù)據(jù)。

圖4-1 財(cái)政數(shù)字化平臺(tái)部署架構(gòu)設(shè)計(jì)