第4章 基于大智移云技術的財政數字化轉型平臺總體建設方案

4.1 財政數字化轉型平臺部署架構設計

整個財政數字化技術部署架構分為數據源、服務器集群數據處理與存儲、數據庫、數據接口（API）、數據門戶5個方面，完成財政支出、經濟運行、社會發展、精準扶貧等財政相關數據的收集、處理、存儲與可視化。

（1）數據源 數據源包括AGENT和CMDB，其中AGENT表示非數據庫數據的內外部系統數據，包括財政數據特征、財政需求、經濟運轉、Wind API、社會監控等信息；CMDB表示數據庫結構內外部數據信息，包括財政部門組織架構、工作職責、考核要求等靜態數據。

（2）集群 集群是指功能相同，組合在一起擴大其功能的一組服務器。Kafka集群作為數據管道，實時傳輸財政管理相關數據。CDH集群用于將半結構化數據轉化為結構化數據，用于將秒粒度的數據聚合為分鐘、小時、天粒度的數據。MPP集群開拓分布式空間，可以是實體服務器，也可以是云端服務器，用于保存財政相關數據。ELS集群用于財政相關數據的多維快速全文檢索。

（3）數據庫 小批量保存財政管理可視化的定制化圖形與報表數據。

（4）數據接口（API） 獲取外部特定數據的通道，比如Wind金融終端、百度地圖、天氣預報、統計年鑒等數據。

（5）數據門戶（TOMCAT Web）網絡頁面端的數據開放接口，用于實現財政數據共享與開發財政數據API供外部訪問。

財政數字化平臺部署架構設計如圖4-1所示，其中Kafka是數據傳輸的管道，由于數據庫不支持對每條數據進行一次訪問，因此，通過管道將多條數據合為一條，減少訪問次數。CDH是分布式的數據處理與運算框架。MPP是分布式數據庫，存儲大量歷史數據。ELS是全文檢索技術，實現大規模數據的關鍵字快速查找。API指數據接口。整個架構通過Kafka技術從財政部門AGENT中獲取實時的數據，在CDH集群中進行解析與聚合處理，與較為靜態的CMDB數據關聯，保存到MPP集群中，TOMCAT Web數據門戶、數據接口、數據庫通過接入MPP集群獲取所需的數據。

圖4-1 財政數字化平臺部署架構設計