第3章 財(cái)政數(shù)字化轉(zhuǎn)型項(xiàng)目需求規(guī)格說(shuō)明

3.1 財(cái)政數(shù)字化轉(zhuǎn)型項(xiàng)目建設(shè)需求

隨著財(cái)政改革力度的推進(jìn)與加深，財(cái)政相關(guān)業(yè)務(wù)逐漸完善，業(yè)務(wù)范圍涉及全國(guó)各級(jí)組織單位，數(shù)據(jù)資源種類繁多，每日新增數(shù)據(jù)呈現(xiàn)兆級(jí)的爆炸性增長(zhǎng)趨勢(shì)。財(cái)政數(shù)字化的發(fā)展，對(duì)數(shù)據(jù)的采集、存儲(chǔ)到最后的數(shù)據(jù)檢索與可視化等各個(gè)流程，都提出了全新的要求。

3.1.1 實(shí)現(xiàn)財(cái)政大數(shù)據(jù)采集

鑒于財(cái)政業(yè)務(wù)相關(guān)數(shù)據(jù)具有數(shù)量眾多、種類廣泛、更新頻率高、數(shù)據(jù)格式多樣化等特點(diǎn)，財(cái)政相關(guān)數(shù)據(jù)采集技術(shù)應(yīng)當(dāng)進(jìn)行改善。從工具角度來(lái)看，采集工具應(yīng)當(dāng)包括且不局限于Web網(wǎng)頁(yè)（Web Page）、手機(jī)App（Application，應(yīng)用程序）、財(cái)政相關(guān)單位內(nèi)部系統(tǒng)、外部數(shù)據(jù)API等；從數(shù)據(jù)種類來(lái)看，涉及數(shù)據(jù)應(yīng)當(dāng)包括MySQL（關(guān)系型數(shù)據(jù)庫(kù)管理系統(tǒng)）數(shù)據(jù)、Excel文件以及以數(shù)據(jù)報(bào)表為代表的結(jié)構(gòu)化數(shù)據(jù)，以Json機(jī)器日志文件為代表的半結(jié)構(gòu)化數(shù)據(jù)，需要后期處理轉(zhuǎn)換的圖片、視頻、音頻等非結(jié)構(gòu)化數(shù)據(jù)；從數(shù)據(jù)時(shí)效性出發(fā)，數(shù)據(jù)應(yīng)當(dāng)涵蓋財(cái)政管理操作日志等實(shí)時(shí)性數(shù)據(jù)文件、相關(guān)項(xiàng)目監(jiān)控日志等半實(shí)時(shí)性數(shù)據(jù)文件以及其他的半靜態(tài)數(shù)據(jù)文件和全靜態(tài)數(shù)據(jù)文件。在數(shù)據(jù)采集過(guò)程中，力求保證數(shù)據(jù)的多層次、多樣化以及高并發(fā)特點(diǎn)不會(huì)影響到業(yè)務(wù)需要，從而保證數(shù)據(jù)采集工作的質(zhì)量與高效。

3.1.2 實(shí)現(xiàn)財(cái)政大數(shù)據(jù)存儲(chǔ)

目前，財(cái)政數(shù)字化平臺(tái)搭建中關(guān)于數(shù)據(jù)存儲(chǔ)部分的主要難題還是在于數(shù)據(jù)量大的問(wèn)題，并且隨著財(cái)政業(yè)務(wù)每天輸出的大量數(shù)據(jù)，這一現(xiàn)狀將逐漸加劇。對(duì)于財(cái)政數(shù)字化的轉(zhuǎn)型來(lái)說(shuō)，萬(wàn)億字節(jié)以上的存儲(chǔ)容量是必需的，同時(shí)需要預(yù)留足夠的空間以滿足每日新增的千兆級(jí)的財(cái)政相關(guān)數(shù)據(jù)。同時(shí)，由于當(dāng)前財(cái)政數(shù)據(jù)管理系統(tǒng)不統(tǒng)一導(dǎo)致數(shù)據(jù)存儲(chǔ)形式多種多樣，因此在不同財(cái)政數(shù)據(jù)系統(tǒng)合并數(shù)據(jù)時(shí)往往會(huì)出現(xiàn)數(shù)據(jù)格式不一致的問(wèn)題，故財(cái)政數(shù)字化平臺(tái)應(yīng)當(dāng)建立起統(tǒng)一的數(shù)據(jù)轉(zhuǎn)換機(jī)制，使得財(cái)政數(shù)據(jù)能夠以標(biāo)準(zhǔn)化的格式存儲(chǔ)于數(shù)字平臺(tái)中。

3.1.3 實(shí)現(xiàn)財(cái)政大數(shù)據(jù)檢索

由于財(cái)政業(yè)務(wù)逐漸完善、細(xì)化，對(duì)于財(cái)政相關(guān)數(shù)據(jù)的檢索需求逐漸呈現(xiàn)個(gè)性化發(fā)展趨勢(shì)，并且對(duì)數(shù)據(jù)檢索的響應(yīng)速度也提出了更高要求。財(cái)政數(shù)字平臺(tái)中的數(shù)據(jù)檢索功能，不再僅僅局限于簡(jiǎn)單的關(guān)鍵字匹配服務(wù)，還應(yīng)當(dāng)提供更加個(gè)性化的條件篩選、模糊查找以及正則匹配等多種數(shù)據(jù)檢索服務(wù)；同時(shí)，面對(duì)千兆級(jí)增長(zhǎng)的財(cái)政數(shù)據(jù)，平臺(tái)檢索速度不能因此有所降低，相反應(yīng)當(dāng)通過(guò)改善檢索技術(shù)，升級(jí)相關(guān)數(shù)據(jù)存儲(chǔ)機(jī)制，盡可能地減少響應(yīng)時(shí)間，提升數(shù)據(jù)檢索效率，確保數(shù)據(jù)檢索的高并發(fā)性能。

3.1.4 實(shí)現(xiàn)財(cái)政大數(shù)據(jù)分析

財(cái)政數(shù)據(jù)遍布全國(guó)，涉及多部門，導(dǎo)致數(shù)據(jù)分析工作消耗大量計(jì)算機(jī)內(nèi)存，相應(yīng)的技術(shù)需求門檻也隨之提升。財(cái)政數(shù)字化平臺(tái)應(yīng)當(dāng)充分利用Hadoop分布式架構(gòu)的優(yōu)勢(shì)，針對(duì)海量數(shù)據(jù)實(shí)現(xiàn)高維數(shù)據(jù)的實(shí)時(shí)運(yùn)算，鑒于其占用硬盤空間較大的問(wèn)題，可以將數(shù)據(jù)上傳至云端以便數(shù)據(jù)存儲(chǔ)與數(shù)據(jù)運(yùn)算。另外，在數(shù)字平臺(tái)中針對(duì)目標(biāo)數(shù)據(jù)進(jìn)行分析，可以考慮結(jié)合深度挖掘、大數(shù)據(jù)、機(jī)器學(xué)習(xí)等大智移云技術(shù)，創(chuàng)建相應(yīng)運(yùn)算模塊，簡(jiǎn)化數(shù)據(jù)分析工作流程，為數(shù)據(jù)分析工作提供新思路。

3.1.5 實(shí)現(xiàn)財(cái)政數(shù)據(jù)可視化

面對(duì)種類繁多的財(cái)政相關(guān)數(shù)據(jù)，經(jīng)過(guò)數(shù)據(jù)分析處理后輸出的分析結(jié)果應(yīng)當(dāng)以更加直觀明了的可視化圖形界面進(jìn)行展示，根據(jù)數(shù)據(jù)不同維度輸出相應(yīng)含義的統(tǒng)計(jì)圖形。相較于傳統(tǒng)的數(shù)據(jù)展示，數(shù)據(jù)可視化逐漸成為一種數(shù)據(jù)展示工具，擁有更高的復(fù)雜度以及開發(fā)量，能夠?qū)崿F(xiàn)數(shù)據(jù)與圖表的有機(jī)結(jié)合，根據(jù)業(yè)務(wù)需要確定具體的數(shù)據(jù)展現(xiàn)方式，從傳統(tǒng)的二維數(shù)據(jù)展示拓展到更加全面的多維數(shù)據(jù)展示，并且，應(yīng)當(dāng)附帶更加智能且人性化的人機(jī)交互功能，以提高數(shù)據(jù)分析結(jié)果的實(shí)用性和有效性。

3.1.6 實(shí)現(xiàn)財(cái)政大數(shù)據(jù)挖掘

伴隨著財(cái)政業(yè)務(wù)產(chǎn)生的相關(guān)數(shù)據(jù)日益增加，財(cái)政實(shí)踐活動(dòng)與相關(guān)業(yè)務(wù)數(shù)據(jù)的結(jié)合日益緊密，借助于大智移云技術(shù)的優(yōu)勢(shì)，建立財(cái)政數(shù)據(jù)云平臺(tái)，有利于對(duì)傳統(tǒng)數(shù)據(jù)處理方式無(wú)法處理的各類數(shù)據(jù)庫(kù)、Excel結(jié)構(gòu)化數(shù)據(jù)進(jìn)行深度挖掘，并根據(jù)具體的數(shù)據(jù)處理規(guī)則針對(duì)半結(jié)構(gòu)化數(shù)據(jù)進(jìn)行解析，而對(duì)于欠缺解析規(guī)則的非結(jié)構(gòu)化數(shù)據(jù)，則借助于流式計(jì)算、數(shù)據(jù)分布等大智移云技術(shù)手段分析其數(shù)據(jù)邏輯與關(guān)聯(lián)。針對(duì)財(cái)政數(shù)據(jù)進(jìn)行必要的數(shù)據(jù)挖掘，有利于財(cái)政業(yè)務(wù)部門根據(jù)場(chǎng)景需求與業(yè)務(wù)需要進(jìn)行數(shù)據(jù)分析，充分發(fā)揮相關(guān)數(shù)據(jù)資源的價(jià)值與作用，為后續(xù)的財(cái)政決策、財(cái)政核算等一系列工作提供有效的數(shù)據(jù)支持。

3.1.7 實(shí)現(xiàn)財(cái)政智能化決策

隨著財(cái)政改革的不斷深入，財(cái)政決策越發(fā)凸顯其重要性。借助于大智移云技術(shù)，財(cái)政數(shù)字化平臺(tái)能夠通過(guò)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等不同數(shù)字媒介獲取數(shù)據(jù)信息，并與財(cái)政部門、金融機(jī)構(gòu)等財(cái)政業(yè)務(wù)相關(guān)部門達(dá)成數(shù)據(jù)共享，為財(cái)政決策合理化提供數(shù)據(jù)支持；同時(shí)，財(cái)政決策更加需要的是對(duì)海量數(shù)據(jù)的篩選、處理操作，利用大數(shù)據(jù)技術(shù)獲取決策需要的業(yè)務(wù)相關(guān)數(shù)據(jù)資源，為政策執(zhí)行者提供個(gè)性化的數(shù)據(jù)檢索服務(wù)，并結(jié)合適當(dāng)?shù)臄?shù)據(jù)加工模型進(jìn)行數(shù)據(jù)處理，進(jìn)而通過(guò)圖表等可視化的方式展現(xiàn)數(shù)據(jù)，提供合理的政策建議，以進(jìn)一步推動(dòng)財(cái)政決策的數(shù)據(jù)可靠性及其效果預(yù)測(cè)的科學(xué)性。