大數據時代,讓很多企業看到了數據資產的價值,開始探索應用場景和商業模式,并建設相關技術平臺,深入挖掘
數據價值。
但在這個過程中,數據混亂、結構不佳、不準確或者不完整等數據質量問題都嚴重限制了數據價值的挖掘。事實上,Gartner 的研究也表明“糟糕的數據質量會使組織每年平均損失 970 萬美元”。無獨有偶,前段時間的新聞報道了21家銀行機構因監管數據質量被罰8760萬元,也可以看出數據質量問題也越來越受到國家層面的重視。
那么,作為當下多個政企應用數據的痛點所在,數據質量的問題究竟如何解決呢?億信華辰依托多年的行業探索和實踐沉淀,推出了這套“
數據標準化及質量管控解決方案”,助力提升政企數據決策和治理能力,促進政企數據資源運營。
方案概述
數據標準化及質量管控解決方案目的是為企業設立數據標準規范,提高并管控數據質量,保證企業數據的準確性、一致性、完整性、合理性、及時性、有效性等,保證業務
數據應用及業務決策的正確性。該方案可以解決以下問題:
數據標準規范化
數據標準規范化貫穿數據全生命周期,數據標準化之后才能更好地管控數據的質量,有助于數據融合交換與共享,支撐更高層面的數據應用。
數據質量度量化
全方位管理企業的數據質量,實現可定義的數據質量檢核和維度分析,可量化的質量評價指標,以及問題跟蹤。
數據關系脈絡化
通過影響分析和血緣分析,分析數據來源,可快速定位數據質量問題的來源,可事前評估元數據的變更對企業造成的影響,幫助企業降低風險。
方案內容
該方案以數據標準化及質量管控平臺為基礎,提供元
數據采集、
元數據管理、數據標準編制、數據標準管理流程制定、數據質量問題檢查、數據質量管控等多種功能,遵循PDCA模型原則,逐步提高數據質量,為數據標準化的落地提供有力支撐。該方案的框架如下圖:

整個方案主要包括以下3方面的建設:
1、元數據管理——源頭控制
元數據管理是通過流程、制度、技術等手段,對技術、管理、業務元數據進行有效管理,了解業務系統的完整性,精確快速分析業務數據之間的關系,助力問題數據的追溯定位,輔助項目開發交付等。幫助各行各業用戶獲得更多的數據洞察力,進而挖掘出隱藏在資源中的價值。
通過企業的數據需求戰略,定義元數據架構,采集、維護、檢核、分析元數據,通過元數據變更管控,保證數據抽取、數據服務的正確性,從源頭控制數據質量。
2、數據標準建立與評估——確保質量
建設數據標準管控體系,包括數據標準定義、數據標準流程、數據標準應用等,通過對基礎數據標準、指標數據標準、代碼數據標準進行統一定義、統一管理,消除跨系統數據的非一致性,形成一套符合企業自身需求的應用標準,防止用語的混用,通過標準評估來維持企業數據模型的一貫性,確保數據的正確性及質量。
3、數據質量管控——形成閉環
通過業務數據質量規范形成質檢規則,定期檢查業務數據的正確性,監控錯誤數據整改過程,將質量評估、質量檢核、質量整改與質量報告等工作環節進行流程整合,形成完整的
數據質量管理閉環。降低政企數據管理成本,減少因數據不可靠導致的決策偏差和損失。
方案應用價值建立規范,統一數據定義
規范數據的定義,確保數據口徑一致,幫助企業建立全局的數據標準體系,為提高數據質量提供標準定義、約束規則。
提高質量,保證數據價值
通過數據標準化管理,及時發現、解決數據問題,形成質量管控機制,實現數據全方位監控,保證數據整合、應用、決策的正確性,提高數據價值。同時,高質量的數據還有助于降低IT建設及運維成本,降本增效。
統籌管理,驅動業務拓展
通過數據標準化管理,理清企業數據字典,保障數據來源可溯、數據流向清晰、數據分布明確。可以將數據管理各環節打通,實現完整的數據管控流程。同時還能促進業務流程和資源配置的優化,提高業務管理能力,驅動企業數字化,拓展業務范圍。
深化應用,促進開放共享
數據標準化管理能夠消除數據的不一致性,建立規范的數據應用標準,實現數據廣泛共享,并能夠將數據作為組織的寶貴資產應用于業務、管理、戰略決策中,發揮數據資產的價值。
方案實踐贛州銀行城商行數據管理平臺
建設內容:贛州銀行城商行數據管理平臺的總體目標是完成各銀行各業務條線產品的梳理,新建系統全面落標,規范字段命名,規范業務接口,提升監管數據的數據質量,為業務發展及金融創新提供助力。
項目價值:經過贛州銀行行方與億信項目團隊的通力配合,基于明確的項目目標,完成了包含元數據管理、數據標準管理、數據質量管控三大主體模塊的數據管理平臺建設。
元數據管理:長達5個月的元數據管理,實現新信貸、新總賬、新理財、核算等系統的注釋填充率到達100%,實現了元數據的變更事前可控管理。
數據標準管理:總計梳理8個主題、1244條標準,對7000多個關鍵字段進行落地評估,將治理初期20%的標準通過率提升到現在的85%。
數據質量管控:根據EAST4.0的要求,梳理了300余條規則,建立了相應的預警機制,實現了監管報送指標的自動化監管,保證了數據質量。
江蘇某市大數據管理平臺
建設內容:在現有建設的基礎上,進一步提升數據質量,建立數據標準,通過涵蓋全數據生命周期
數據治理,建設覆蓋數據全生命周期的大
數據治理平臺,打破信息孤島,接入涵蓋全市各政務57個部門超17億條數據,打通省級數據資產共享直連鏈路,建立健全數據質量管理機制,提供各類數據服務。
項目價值:通過大數據治理平臺的建設,實現了全市政務數據質量管理通用規則制定、執行、問題跟蹤及數據更改過程管理;實現2個基礎數據庫和7類公共數據源數據標準的制定和統一管理;實現了57個部門,超17億條存量數據的共享交換,打通了省級數據共享直連鏈路,提高了數據的使用價值。
該市數據質量得到有效提升,數據管理機制也得到建立健全,為該市政府各部門政務數據挖掘、預測分析、政府決策提供可信的數據支撐。
(部分內容來源網絡,如有侵權請聯系刪除)