大數據、云會計時代的到來,加快了 各行業財務信息化的進程,同時也積累了 海量的財務數據和業務數據。如何對這 些數據進行挖掘、管理、分析并加以利用, 是當前每個管理者急需解決的問題。
搭建大數據架構是基礎
以重慶海事局為例,該局的基建項目 從可行性研究、立項、審批、批復、前期準 備、開工建設、竣工驗收到資產交互,項目 周期較長且涉及到財務、紀檢監督、基建 裝備等諸多參與方,這些特點決定了基建 項目管理是一個數據量龐大的工作。 大數據、云會計環境下的基建項目管 理,通過融合財務云平臺和基建業務系 統,采用分布式計算架構,結合并行數據 庫技術,有效地搭載基建項目的各類業務 數據,支持大數據的流處理模式和批處理 模式,實現基建項目海量數據的存儲與維 護。同時,跨層級分布式的業務處理為系 統功能的柔性重組提供了一個松耦合的 集成框架。 針對財務云平臺和基建業務系統產 生的海量、多源異構的數據,利用大數據 的理念、方法和技術,建立大數據基礎設 施體系,能夠為重慶海事局的安全監控提 供數據和決策支撐,對項目過程中的建設 單位執行基本建設程序情況、項目參建單
位依法建設和履約情況、項目參建單位依 法建設和履約情況、建設單位對工程管理 情況、在建項目合同執行及管理情況、在 建項目廉政情況等提供有效的技術支持, 實現保安全、高效率、低成本的目標。
統一大數據標準是前提
基建項目的大數據來源,一方面是財 務云平臺的財務數據,主要包括財務統 計、項目概算、收支報銷等;另一方面是基 建業務系統對項目狀態的實時動態數據 采集。 對采集數據標準的統一,是實現數據 集中管理、融合共享的前提,是建立基建 項目中心數據庫與統一挖掘模型的基礎。 起初,利用大數據并行數據庫技術建 立分布式業務數據庫,為基建項目各個業 務子系統提供高自由度的數據環境。隨 后,分別建立業務數據模型與標準模型的 映射管理,其中包括結構化數據的字段映 射、半結構化和非結構化數據的語義映射 等大數據映射標準。最后,分別將各業務 子系統數據庫的數據按照時間節點橫向 劃分,通過多個節點并行數據處理任務, 為實現基建項目大數據分析挖掘提供數 據準備。
數據清洗與處理是核心
基建項目領域涵蓋面廣且部門交叉
性強,在處理過程中存在大量的數據交換 與存儲,且這些數據結構復雜,包括結構 化、半結構化和非結構化數據,遠超出普通 管理信息系統數據處理能力的范圍,必須 借助大數據技術才能對其進行有效的存儲 和分析。因此,解決基建項目大數據的處 理問題是保證數據交換與存儲的可靠性、 數據分析與預測的科學性的核心因素。 在基建項目管理過程中,所有的業務 處理都是通過數據的流動來實現的,包括
子系統內部數據流動和跨系統分布式的 數據流動。因此,在建立集成中心數據庫 時采用服務器的分布式存儲與控制的方 式,會大大提高系統穩定性且減少系統響 應時間,實現更穩定的信息化保障方式和 更好的用戶體驗。同時,還應當考慮服務 器集群的分級、分類構建,半結構化與非 結構化數據在不同類型服務器中的分片 存儲與處理,異地數據加密與備份等。
數據分析與挖掘是目的
在確定基建項目管理系統的系統架 構、數據標準和數據處理的基礎上,即可 完成對數據的智能化處理,即建立分級索 引庫和挖掘模型庫,實現對海量數據抽 取、轉換、加載、搜索、挖掘、分析和預測。 通過大數據挖掘,打破業務數據之間 的屏障,使之統一化、透明化,能夠解決管 理過程中的許多決策問題。例如通過對 基建項目三年滾動計劃數據的挖掘分析, 預測工程建設中的違規違紀,實現工程項 目定量、定向管控安排,防止工程建設項 目中的腐敗問題;通過對工程建設實時動 態監控,分析建設單位執行基本建設程序 情況、項目參建單位依法建設和履約情 況、建設單位對工程管理情況、在建項目 合同執行及管理情況等;通過對基建項目 管理系統中業務人員、指揮人員、系統訪 問人員的行為進行數據挖掘分析,提供可 靠的各類人群數據模型等。
李陵 程平 崔納牟倩/文