- 項目簡介
福州水務集團有限公司于2020年1月啟動智慧水務大數據中心研究和建設,并于2020年6月投入應用。大數據中心包括數據集成采集整合、數據倉庫建設、數據資產管理、數據開發與分析模型、數據質量管理、數據運維與安全、數據共享服務等功能。大數據中心解決了業務數據孤島問題,達到了數據總體管理、各業務系統數據互通的目的,實現了數據標準化治理、可視化分析,為各層管理者提供更為全面的數據感知和決策支持及數據資產全面治理和價值挖掘。 - 主要技術內容
圖 總體架構圖
(1)創新點
1)基于云計算的大數據中心構建技術。提出了采用云計算支撐保留既有業務系統+新建大數據中心的技術架構,采用了云計算技術對各系統大量數據進行匯聚,實現了大量數據按照標準進行分類入庫,實現了各類數據分層計算,并建立了各類數據分析與應用計算模型。
2)基于變更數據獲取的大數據實時同步技術。開發了對業務數據庫的CDC(變更數據獲取) 日志進行實時解析匯聚程序,解決了業務系統數據庫之間數據共享實時性差,實現了大數據中心及業務系統數據庫之間大數據量表的實時增量同步,解決了歷史數據變更等問題,提高了數據實時性。
3)基于Hadoop+API的大數據分析與服務技術。針對Hadoop技術進行二次開發,優化分布式計算程序支持針對水務業務特點的云計算和大數據的分析挖掘;建立API市場融合各業務主題域數據,實現了跨系統、跨部門自動化數據流轉,提升了數據精準性。
(2)應用及推廣前景
福州水務集團有限公司大數據中心匯聚各類生產運營、營收客服與管理管控型系統,形成水務數據資產,整合有效業務表數量1297張、總行數18.4億條、分析計算模型563個;建立字段級數據血緣關系網絡,建立數據服務市場,形成統一數據共享通道,共注冊接口總數551個,累計調用次數1809萬次/年,平均日調用3萬余次;大數據中心以水務實際需求和可持續發展為出發點,可在大、中、小型水務公司推廣應用。
(3)經濟、社會效益情況
1)經濟效益方面。大數據中心解決了需要保留已建各項業務系統及平臺的問題,節省了重新建設系統及平臺投資約2500萬元。在大數據中心的支撐下,福州水務集團有限公司年節約人工、能耗及維護費用約3100萬元。
2)社會效益方面。2022年12345訴求量同比下降21.07%,數字城管訴求量同比下降11.72%,榕水熱線968933日工單量同比下降5%,線下營業廳接待人次同比下降23.84%,線下營業廳辦件量同比減少23.88%,對外服務能力和質量顯著提高。