在數字經濟快速發展的今天,為了善用日積月累的大數據信息,挖掘數據背后的價值,更加高效的產生數據效益,許多公司走上了
數據治理的踐行之路。
可是面對日漸繁雜,結構不一的數據,企業進行數據治理并不是一件簡單的事情,首先橫亙在面前的最大問題就是數據間的不一致性。而
數據標準管理,則是為解決這一數據病癥而誕生的一劑良方。

什么是數據標準?
數據標準是一套由管理制度、管控流程、技術工具共同組成的體系,通過這套體系來推廣和應用統一的數據定義、數據分類、紀律格式和轉換、編碼等來對數據的標準化,保障數據定義和使用的一致性、準確性和完整性的規范性約束。
為什么要做數據標準?
長久以來,絕大多數企業的系統建設都是依據業務需求來的,沒有一個整體的規劃,沒有考慮是否與其它系統的功能或數據存在重復的問題,而且各個系統由不同的廠商和產品搭建,所以不同系統之間數據的不一致性難以避免,也造成多種數據問題:
1、數據共享難以實現數據存儲結構不一致,調用多系統的數據時,由于某些數據在不同系統中數據存儲結構不同,導致數據無法直接關聯,影響不同系統之間的數據共享。
2、數據同名不同義導致錯誤
數據定義不一致,不同系統對數據的命名、業務含義、取值范圍等定義不同,比如同名不同義、同義不同名等。
3、溝通成本增加
數據理解不一致,不同人員對數據的理解不一致,導致在數據使用時浪費很多時間來進行溝通。
4、數據來源不明
數據來源不一致,數據存在多個來源,在使用數據時,不清楚應該取哪個系統的數據。
做數據標準的好處有哪些?
上述問題,任何一個的出現都會讓人頭痛不已,但是通過數據標準的建設,卻可以有效消除數據跨系統的非一致性,從根源上解決數據定義和使用的不一致問題,為企業數據建設帶來諸多好處:
數據標準的統一制定與管理,可保證數據定義和使用的一致性,促進企業級單一數據視圖的形成,促進信息資源共享。
通過評估已有系統標準建設情況,可及時發現現有系統標準問題,支撐系統改造,減少數據轉換,促進系統集成,提高
數據質量。
數據標準可作為新建系統參考依據,為企業系統建設整體規劃打好基礎,減少系統建設工作量,保障新建系統完全符合標準。
同時,數據標準建設也為企業各類人員提供了強有力的支撐:
對業務人員而言,數據標準建設可提升業務規范性,保障人員對數據業務含義理解一致,支撐業務
數據分析、挖掘及信息共享;
對技術人員而言,有數據標準作為支撐,可提升系統實施工作效率,保障系統建設符合規范,同時降低出錯率,提升數據質量;
對管理人員而言,數據標準建設可提供更加完整、準確的數據,更好的支撐經營決策、精細化管理。
如何建設數據標準?
要讓數據從下至上、從里到外真正做到高度一致,一定要進行有組織有紀律的規劃,再按規劃的流程進行實施,定能事半功倍。數據標準建設的實施流程如下:
1、標準規劃
從實際情況出發,結合業界經驗,收集國家標準、現行標準、新系統需求標準以及行業通行標準等,梳理出數據標準建設的整體范圍,定義數據標準體系框架和分類,并制定數據標準的實施計劃。不是所有的數據都需要建立數據標準,企業實際數據模型中有上萬個字段,有些模型還會經常變換更新,沒有必要將這些信息全部納入到標準體系中,僅需對核心數據建立標準并落地,即可達到預期效果,同時也提升了工作效率。數據標準范圍圈定建議如下:
共享性高、使用頻率高的字段需要入標
監管報送或發文涉及到的業務信息需要入標
結合數據使用情況,對于關鍵數據的字段盡量入標
數據應用有使用需求的字段需要入標
與系統人員溝通其系統內重要信息來輔助入標判斷
2、標準編制
數據標準管理辦公室根據數據需求展開數據的編制工作、確定數據項,數據標準管理執行組根據所需數據項提供數據屬性信息,例如:數據項的名稱、編碼、類型、長度、業務含義、數據來源、質量規則、安全級別、值域范圍等。數據標準管理辦公室對這些數據項進行標準化定義形成初稿并提交審核。
3、標準評審發布
數據標準管理委員會對數據標準初稿進行審核,判斷數據標準是否符合企業的應用和管理需求,是否符合企業數據戰略要求。如數據標準審查不通過,則由數據標準管理辦公室進行修訂,直到滿足企業數據標準的發布要求。
標準通過審查后,由數據標準管理辦公室面向全公司進行數據標準的發布。該過程中數據標準管理執行組需要配合進行數據標準發布對現有應用系統、數據模型的影響評估,并做好相應的應對策略。
4、標準落地執行
把已定義的數據標準與業務系統、應用和服務進行映射,標明標準和現狀的關系以及可能影響到的應用。該過程中,對于企業新建的系統應當直接應用定義好的數據標準,對于舊系統則建議建立相應的數據映射關系,進行數據轉換,逐步進行數據標準的落地。
當然,不是所有的數據標準都能夠完全落地,實際工作中可能會存在歷史系統無法改造的情況,所以首先確定數據標準落地策略和落地范圍,并制定相應的落地方案,然后推動數據標準落地方案的執行,對標準落地情況進行跟蹤并評估成效。
5、標準維護增強
數據標準后續可能會隨著業務的發展變化、國標行標的變化、以及監管要求的變化需要不斷更新和完善。在數據標準維護階段,需要對標準變更建立相應的管理流程,并做好標準版本管理。
更智能的數據標準建設方案
數據標準建設一般都要從上述五個步驟來下手,其中任何一個步驟單拎出來看工作量都是相當龐大,像標準的落地及維護想要完全依靠人工也不太現實。對于企業而言,需要一套完善、易用且更加智能的數據標準建設方案幫助其將數據標準建設工作落地。
億信華辰旗下的EsDataStandard數據標準管理平臺,可以有效的幫助企業建立規范的數據應用標準,消除數據的不一致性,從根本上改善和解決系統的數據質量問題,實現數據有效共享,并通過智能化的管理方法,讓企業輕松享受大數據帶來的便利和效益。
1、內置標準一鍵應用
平臺內置一批國標、行標,可一鍵應用大大提高項目交付效率。另外平臺內置標準的技術、業務、管理、質量屬性,結合靈活的定義方式,從手工創建、導入、拾取、智能識別等,可幫助客戶快速構建基礎標準、指標標準、代碼標準。
2、智能追蹤標準歷史
平臺支持標準增、刪、改、查、發布、審核等各種基礎操作,其變更過程能被自動記錄,通過變更版本控制,追蹤標準歷史。另外平臺還提供了靈活細致的用戶權限管理機制,滿足不同用戶管理各自的標準的場景。
3、可視化的界面一目了然
實現數據從創建到消亡全生命周期的可視化,數據標準的建立也是完全可視的,并且實現全角色的可視化,不管是執行層還是決策層都可對數據標準的完善起到關鍵作用。
EsDataStandard數據標準管理平臺包括:標準分類管理、標準增刪改查、標準導入導出、標準評審、標準發布、標準版本管理、標準落地映射、標準落地評估、標準監控等功能。同時為更好的保障數據標準的落地,最好結合
元數據管理工具一起使用。
如果你已經非常明確自家數據體系存在數據病癥,急缺一個可以妙手回春的良醫的話,EsDataStandard數據標準管理平臺一定是一個非常明智的選擇。
(部分內容來源網絡,如有侵權請聯系刪除)