系統介紹
水務大數據平臺覆蓋全鏈路的數據集成、開發、治理、服務等場景。將原來通過人工經驗+人工約定的數據模型搭建改為系統化的規范方式,實現從模型的配置到在線設計并輸出服務的規范化過程。
系統特點
1. 對數字資產進行全面梳理,推進數據采集、清洗、治理,打通部分業務部門的數據孤島,實現數據標準化治理、可視化分析。
2. 結合業務駕駛艙、決策分析平臺、移動分析門戶等信息化系統規劃建設集成,為企業決策者提供可視化分析平臺。
系統架構
分為7個子系統:
1. 數據存儲與利用子系統:支持服務器集群技術、多服務器負載均衡、高性能計算處理,且性能應能隨節點數呈線性增長。
2. 數據采集與集成子系統:多源采集適配、日志采集與解析、任務圖形化采集、增量數據同步。
3. 數據開發子系統:數據處理任務開發、任務調度配置、資源包管理、任務管理等功能。
4. 數據共享服務子系統:數據服務目錄、數據服務計量、數據服務安全管理、消息推送、消息隊列。
5. 數據質量管理子系統:數據質量規則配置、數據質量校驗、數據質量報告
6. 數據資產管理子系統:包含數據標準管理、數據資源目錄管理、元數據管理、全鏈路數據血緣管理、資產價值評估。
7. 數據運維與安全子系統:包含底層運行平臺監控、數據質量監控、任務運行監控、數據處理監控、數據運維報表、數據資源巡檢、數據安全管理。
系統展示
1、首頁可根據角色與需求快速進入相關模塊。
2、數據規劃基于水務行業生態、特征預劃分的業務邏輯空間和技術邏輯空間,為數據集成和資產分類提供了基礎依據。
3、數據資產是水務中臺的數據地圖、字典,全方位展示了中臺的數據對象(集群、數據源、數據模型、調度作業、數據服務等)。
4、數據服務是大數據中心對外共享和復用數據的開放地,提供了自有數據開放(API服務)、三方數據注冊開放(三方API服務)、訪問授權、服務使用監控等能力。
5、數據運維模塊監控、預警數據在集成、標準化、主題化和場景化過程中產生的時效、代碼、質量等問題,是大數據中心從記錄到信息可持續性的基礎保障。