海量的數據一方面為運營商帶來大量的信息資產,另一方面無用數據、干擾數據也呈現指數級增加。數據質量的好壞直接關系到信息提供的準確程度。數據質量問題得不到有效解決,數據資產將不能有效反映企業運營和市場事實,經營決策將失去可靠依據。因此,圍繞企業大數據的生命周期,實現對關鍵數據的全過程質量監控尤為重要。
浩鯨科技大數據解決方案通過數據質量評估體系建設、落實質量檢測分析與監控、建立持續改進的工作機制,實現數據質量控制的全面性、可控性、可度量性、可迅速定位和有效解決質量問題,對數據質量隱患主動發現。
一、標準化的質量稽核模型
內置幾十種質量測評技術,包括數據的出數時間及時性、出數區間及時性、主鍵重復、非空判定、取值范圍、總數一致性、求和一致性、字段明細一致性等,滿足各類業務數據的檢測規則的定義;通過插件模式進行靈活擴展,適應企業當下及未來的數據質量管理需求的變化。
二、閉環高效問題處理機制
問題產生后動態均衡派單、告警;問題處理全過程通過系統進行可視化透明跟蹤;問題處理的經驗經歸納、提煉、總結,形成質量知識,沉淀到知識庫進行共享。
三、多維度全面分析
通過數據統計分析、可視化數據透視分析等技術,自動生成質量分析視圖、數據質量報告和數據問題處理效率,協助用戶對問題數據進行質量分析,為用戶進行有針對性的質量改進提供有力支撐。
2018年數據質量管理系統在廣西電信上線,每天智能自動發現及處理99%以上的數據質量問題,有效提升數據可信和可靠度;由于產品高度自動化,降低運維人力投入,大大縮短管理周期,有效降低60%的數據管理成本,為干凈高品質的數據資產保駕護航。