制造業(yè)的數(shù)據(jù)治理尚處于早期階段，而數(shù)據(jù)質(zhì)量管理是所有數(shù)據(jù)類項(xiàng)目重點(diǎn)關(guān)注的領(lǐng)域。數(shù)據(jù)治理以數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量和元數(shù)據(jù)的管理為根本，是企業(yè)實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)價(jià)值創(chuàng)造的基礎(chǔ)。上周，在由武漢市經(jīng)濟(jì)和信息化局主辦的“萬企育才工程”之《制造業(yè)數(shù)據(jù)管理與應(yīng)用（一期）》專題培訓(xùn)班上，億信華辰數(shù)據(jù)治理專家溫來松結(jié)合制造業(yè)數(shù)字化轉(zhuǎn)型現(xiàn)狀以及自身工作經(jīng)驗(yàn)，分享了制造業(yè)數(shù)據(jù)質(zhì)量提升的實(shí)踐方法。

01、提升數(shù)據(jù)質(zhì)量的必要性

數(shù)據(jù)已成為制造企業(yè)發(fā)展的驅(qū)動(dòng)力，高質(zhì)量的數(shù)據(jù)是支撐業(yè)務(wù)管理和業(yè)務(wù)決策的基礎(chǔ)。而數(shù)據(jù)質(zhì)量問題一直困擾著企業(yè)決策者、管理者和執(zhí)行者。在企業(yè)里，每天都圍繞著數(shù)據(jù)發(fā)生很多“故事”，但是也會(huì)有不少“事故”。

據(jù)統(tǒng)計(jì)分析，造成數(shù)據(jù)質(zhì)量不佳的原因，包括從數(shù)據(jù)采集/錄入到數(shù)據(jù)加工/處理 再到數(shù)據(jù)應(yīng)用展現(xiàn)各個(gè)環(huán)節(jié)。任何一個(gè)環(huán)節(jié)出錯(cuò)，都將導(dǎo)致數(shù)據(jù)的錯(cuò)誤，甚至源頭數(shù)據(jù)本身就是錯(cuò)誤的。所以，數(shù)據(jù)質(zhì)量問題不僅僅是一個(gè)技術(shù)管理，它有可能出現(xiàn)在業(yè)務(wù)和管理的過程中。

全流程的數(shù)據(jù)問題產(chǎn)生原因

正如此，數(shù)據(jù)質(zhì)量提升在數(shù)據(jù)管理項(xiàng)目中尤為重要，其目的是為企業(yè)設(shè)立數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范，提高并管控?cái)?shù)據(jù)質(zhì)量，保證企業(yè)數(shù)據(jù)的準(zhǔn)確性、一致性、完整性、獨(dú)特性、時(shí)效性、有效性等，保證業(yè)務(wù)數(shù)據(jù)應(yīng)用及業(yè)務(wù)決策的正確性。

在“制造產(chǎn)業(yè)數(shù)字化轉(zhuǎn)型”背景下，面對來源豐富、特征多元的數(shù)據(jù)，數(shù)據(jù)融合管理正逐漸成為企業(yè)各部門信息渠道建設(shè)和管理的重要內(nèi)容與要求。數(shù)據(jù)質(zhì)量提升是提升領(lǐng)導(dǎo)決策和治理能力，促進(jìn)企業(yè)數(shù)據(jù)資源運(yùn)營的必要步驟。

02、數(shù)據(jù)質(zhì)量提升的概念

什么是數(shù)據(jù)質(zhì)量？

DAMA對于數(shù)據(jù)質(zhì)量的定義是：為確保滿足數(shù)據(jù)消費(fèi)者的需求，應(yīng)用數(shù)據(jù)管理技術(shù)進(jìn)行規(guī)劃，實(shí)施和控制等管理活動(dòng)。DCMM更是把數(shù)據(jù)質(zhì)量作為一大能力域，并規(guī)劃了二級能力項(xiàng)包括數(shù)據(jù)質(zhì)量需求、數(shù)據(jù)質(zhì)量檢查、數(shù)據(jù)質(zhì)量分析、數(shù)據(jù)質(zhì)量提升。

數(shù)據(jù)質(zhì)量是保證數(shù)據(jù)應(yīng)用的基礎(chǔ)，業(yè)內(nèi)明確了數(shù)據(jù)質(zhì)量評價(jià)指標(biāo)框架，評估數(shù)據(jù)質(zhì)量包括以下6個(gè)維度：
完整性：指的是數(shù)據(jù)信息是否存在缺失的狀況。
唯一性：是指數(shù)據(jù)集內(nèi)的任何實(shí)體不會(huì)重復(fù)出現(xiàn)。
一致性：指確保數(shù)據(jù)值在數(shù)據(jù)機(jī)內(nèi)和數(shù)據(jù)集之間表達(dá)的相符程度。
準(zhǔn)確性：指是指數(shù)據(jù)記錄的信息是否存在異常或錯(cuò)誤。
及時(shí)性：指數(shù)據(jù)的更新頻度符合預(yù)期。
有效性：是指描述數(shù)據(jù)遵循預(yù)定的語法規(guī)則的程度。

那什么是數(shù)據(jù)質(zhì)量提升呢？

數(shù)據(jù)質(zhì)量提升通常被理解為對應(yīng)用系統(tǒng)中的業(yè)務(wù)數(shù)據(jù)、數(shù)據(jù)倉庫中的匯集數(shù)據(jù)通過一系列的數(shù)據(jù)清洗、轉(zhuǎn)換、修改，使得數(shù)據(jù)在完整性、獨(dú)特性、時(shí)效性、有效性、準(zhǔn)確性、一致性方面達(dá)成滿足報(bào)表查詢、決策支持、預(yù)警預(yù)測等數(shù)據(jù)應(yīng)用的過程。數(shù)據(jù)質(zhì)量提升是企業(yè)在數(shù)據(jù)戰(zhàn)略的引導(dǎo)下，制定合乎企業(yè)自身的數(shù)據(jù)管理制度，合理規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)，并通過專業(yè)化平臺，進(jìn)行一系列標(biāo)準(zhǔn)化、數(shù)據(jù)治理工作，使得數(shù)據(jù)成為企業(yè)資產(chǎn)的過程。

數(shù)據(jù)質(zhì)量提升是數(shù)據(jù)管理的一部分，數(shù)據(jù)質(zhì)量提升的包括三個(gè)方面的建設(shè)內(nèi)容：

管理體系建設(shè)：通過優(yōu)化數(shù)據(jù)治理組織架構(gòu)，制定數(shù)據(jù)治理制度規(guī)范，形成企業(yè)數(shù)據(jù)治理體系，促進(jìn)數(shù)據(jù)質(zhì)量提升工作有效提升
平臺能力建設(shè)：為數(shù)據(jù)質(zhì)量提升提供高效的技術(shù)手段，同時(shí)打破數(shù)據(jù)孤島，實(shí)現(xiàn)企業(yè)數(shù)據(jù)在同一平臺進(jìn)行高效管理
數(shù)據(jù)治理實(shí)施：提升數(shù)據(jù)質(zhì)量、打造持續(xù)升值的數(shù)據(jù)資產(chǎn)，提優(yōu)質(zhì)的數(shù)據(jù)服務(wù)。將數(shù)據(jù)變?yōu)槿瘓F(tuán)人員可閱讀、易理解的內(nèi)容，并可以快速結(jié)合到業(yè)務(wù)中，加強(qiáng)數(shù)據(jù)應(yīng)用能力，將數(shù)據(jù)轉(zhuǎn)變?yōu)樯a(chǎn)力

數(shù)據(jù)質(zhì)量提升的階段劃分

03、提升制造業(yè)數(shù)據(jù)質(zhì)量的方法

制造業(yè)數(shù)字化轉(zhuǎn)型的核心在于數(shù)據(jù)，數(shù)據(jù)的鏈接、匯聚和治理是制造業(yè)企業(yè)數(shù)字化轉(zhuǎn)型的第一步。制造企業(yè)究竟要如何提升數(shù)據(jù)質(zhì)量？經(jīng)過10多年的摸索，億信華辰作為數(shù)據(jù)治理領(lǐng)域的領(lǐng)航者，現(xiàn)在已經(jīng)有了一整套行之有效的管理數(shù)據(jù)質(zhì)量的方法，具體實(shí)施步驟如下：

數(shù)據(jù)質(zhì)量提升的標(biāo)準(zhǔn)流程

步驟1：調(diào)研數(shù)據(jù)問題

針對相關(guān)業(yè)務(wù)部門及IT系統(tǒng)開展問卷調(diào)查，收集在信息使用中存在的障礙和挑戰(zhàn)，理清數(shù)據(jù)現(xiàn)狀和用戶需求。以調(diào)研問卷為基礎(chǔ)，針對項(xiàng)目發(fā)起者重點(diǎn)關(guān)注的領(lǐng)域組織專項(xiàng)面對面訪談，從源系統(tǒng)、數(shù)據(jù)應(yīng)用系統(tǒng)、業(yè)務(wù)部門、科技主管部門到數(shù)據(jù)治理主管領(lǐng)導(dǎo)，逐步建立整體架構(gòu)視圖，勾勒出目標(biāo)藍(lán)圖。

步驟2：數(shù)據(jù)治理成熟度評估

企業(yè)數(shù)據(jù)成熟度階段分為數(shù)據(jù)積累階段、初始階段、體系階段、定量管理階段、持續(xù)優(yōu)化階段。認(rèn)知自身所處的數(shù)據(jù)成熟度，對于企業(yè)來說十分必要。目前，制造行業(yè)的信息化建設(shè)已取得顯著效果，企業(yè)普遍希望通過數(shù)據(jù)治理為建設(shè)數(shù)據(jù)應(yīng)用夯實(shí)基礎(chǔ)，從而實(shí)現(xiàn)數(shù)據(jù)價(jià)值。

步驟3：確定治理目標(biāo)、獲取高層支持

數(shù)據(jù)治理是一把手工程。數(shù)據(jù)治理是一個(gè)跨部門、跨系統(tǒng)的活動(dòng)，需要得到高層的極大支持。

步驟4：制定數(shù)據(jù)治理實(shí)施路線圖

步驟5：搭建數(shù)據(jù)治理組織體系

組織跨部門的數(shù)據(jù)治理工作小組，確定組織目標(biāo)與定位，確定組織形式與層級，明確管理內(nèi)容和職責(zé)劃分，設(shè)置崗位與人員安排。

步驟6：梳理業(yè)務(wù)系統(tǒng)，摸清家底

不僅是對數(shù)據(jù)，還需要對業(yè)務(wù)流程進(jìn)行“全面體檢”，梳理業(yè)務(wù)系統(tǒng)，摸清數(shù)據(jù)現(xiàn)狀。

步驟7：建立元數(shù)據(jù)存儲庫

步驟8.1：基礎(chǔ)標(biāo)準(zhǔn)定義模板

步驟8.2：數(shù)據(jù)質(zhì)量管理閉環(huán)機(jī)制

在質(zhì)量管理的發(fā)展過程中形成了眾多的質(zhì)量管理理論，PDCA循環(huán)通過計(jì)劃、執(zhí)行、檢查、處理四個(gè)循環(huán)反復(fù)的步驟進(jìn)行質(zhì)量管理。PDCA映射到數(shù)據(jù)問題閉環(huán)管理，包括數(shù)據(jù)問題發(fā)現(xiàn)，到問題定位、跟蹤問題處理、完善問題知識庫，到考核評價(jià)，形成一種可持續(xù)運(yùn)行、可持續(xù)解決問題的機(jī)制。

步驟8.3：主數(shù)據(jù)管理

步驟9：建立數(shù)據(jù)治理長效機(jī)制

數(shù)據(jù)質(zhì)量管理貫穿數(shù)據(jù)的全生命周期，是一個(gè)長期的、需要持續(xù)開展的工作，需要業(yè)務(wù)人員和技術(shù)人員共同努力，才能獲得高質(zhì)量的數(shù)據(jù)。因此需要從以下幾方面建立長效機(jī)制，持續(xù)優(yōu)化迭代提升數(shù)據(jù)價(jià)值：
1.推進(jìn)數(shù)據(jù)資產(chǎn)化，使得數(shù)據(jù)戰(zhàn)略與業(yè)務(wù)戰(zhàn)略結(jié)合統(tǒng)一
2.數(shù)據(jù)治理可視化展示，直觀呈現(xiàn)，從數(shù)據(jù)治理域的各維度分析
3.治理成效評估，通過成果度量成效，并定期向委員會(huì)匯報(bào)
4.推廣數(shù)據(jù)治理文化，宣傳數(shù)據(jù)戰(zhàn)略，建立數(shù)據(jù)論壇
5.建立體系化數(shù)據(jù)服務(wù)體系，形成統(tǒng)一的數(shù)據(jù)服務(wù)入口

治理成效評估示例

04、數(shù)據(jù)質(zhì)量提升的落地實(shí)踐

制造行業(yè)已經(jīng)開始逐步進(jìn)行數(shù)據(jù)治理和管理應(yīng)用的探索，并取得落地成果。億信華辰積極布局?jǐn)?shù)據(jù)治理領(lǐng)域，以DCMM和DAMA為理論框架，結(jié)合實(shí)踐構(gòu)建閉環(huán)式數(shù)據(jù)管理體系，數(shù)據(jù)治理產(chǎn)品已成功應(yīng)用于諸多企業(yè)。

案例一：某主機(jī)廠數(shù)據(jù)治理項(xiàng)目

客戶痛點(diǎn)：隨著造車技術(shù)的不斷進(jìn)步，車企進(jìn)入定制化時(shí)代，它需要以更低的成本生產(chǎn)多樣化的產(chǎn)品，從而滿足不同顧客的多種需求。對數(shù)據(jù)本身而言，業(yè)務(wù)量的增長加快了數(shù)據(jù)膨脹的速度，因此，數(shù)據(jù)治理已經(jīng)成為大勢所趨。

解決方案：打造車企集團(tuán)層面的數(shù)字化運(yùn)營體系按”119”進(jìn)行整體設(shè)計(jì)。高效積累數(shù)據(jù)資產(chǎn)，賦能業(yè)務(wù)應(yīng)用場景，助力企業(yè)構(gòu)建扎實(shí)的數(shù)據(jù)根基，實(shí)現(xiàn)數(shù)字化經(jīng)營。

咨詢規(guī)劃：結(jié)合理論組織架構(gòu)，組建車企決策、管理、執(zhí)行三層治理組織架構(gòu)，包括：治理管理委員會(huì)、治理管理部門、執(zhí)行工作小組。咨詢成果輸出分為兩個(gè)方面：一是數(shù)據(jù)治理體系，二是數(shù)據(jù)治理管理辦法。
平臺建設(shè)：數(shù)據(jù)治理平臺架構(gòu)于數(shù)據(jù)底座之上，采集車企各系統(tǒng)及服務(wù)的元數(shù)據(jù)、主數(shù)據(jù)模型，構(gòu)建標(biāo)準(zhǔn)、進(jìn)行質(zhì)量管控，實(shí)現(xiàn)資產(chǎn)化運(yùn)營，賦能業(yè)務(wù)部門及應(yīng)用創(chuàng)新。
治理服務(wù)：基于車企數(shù)據(jù)治理業(yè)務(wù)需求，通過數(shù)據(jù)采集、主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全，數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)服務(wù)、數(shù)據(jù)指標(biāo)等全方位治理，實(shí)現(xiàn)數(shù)據(jù)價(jià)值提升。
治理成果:
1.構(gòu)建 6 大業(yè)務(wù)領(lǐng)域，11個(gè)核心應(yīng)用系統(tǒng)之間的數(shù)據(jù)鏈路，通過數(shù)據(jù)地圖展示系統(tǒng)間依賴關(guān)系，層層深入了解數(shù)據(jù)的業(yè)務(wù)含義，通過元數(shù)據(jù)分析，了解影響范圍

2.建立數(shù)據(jù)質(zhì)量檢查&整改機(jī)制，完成數(shù)據(jù)入湖、數(shù)據(jù)分析環(huán)節(jié)的數(shù)據(jù)質(zhì)檢工作，構(gòu)建 7 個(gè)質(zhì)檢模型，48 個(gè)質(zhì)檢規(guī)則，76個(gè) 質(zhì)檢方案。保障大數(shù)據(jù)平臺中的數(shù)據(jù)完整性、真實(shí)性、準(zhǔn)確性、及時(shí)性、規(guī)范性，為數(shù)據(jù)分析、決策支持、數(shù)據(jù)挖掘提供有效支撐。

3.基于元數(shù)據(jù)信息和集團(tuán)職能全景圖構(gòu)建數(shù)據(jù)分類目錄，第一階段梳理形成人力資源域、營銷域、供應(yīng)鏈域數(shù)據(jù)資產(chǎn)，并數(shù)據(jù)治理平臺門戶實(shí)現(xiàn)了數(shù)據(jù)分類自動(dòng)化和數(shù)據(jù)資產(chǎn)可視化，制定了數(shù)據(jù)分類維護(hù)方案，保證分類的準(zhǔn)確性和實(shí)時(shí)性。

案例二：某電力集團(tuán)數(shù)據(jù)質(zhì)量管理項(xiàng)目

為快速解決現(xiàn)有系統(tǒng)中存在的飛碼異常、表碼倒走、臺區(qū)/用戶漏采、日超容等問題，在數(shù)據(jù)服務(wù)平臺中規(guī)劃數(shù)據(jù)質(zhì)量管理平臺，快速定位問題數(shù)據(jù)，對數(shù)據(jù)進(jìn)行定期巡檢，提升數(shù)據(jù)質(zhì)量，為后續(xù)的數(shù)據(jù)分析提供有效的數(shù)據(jù)基礎(chǔ)。

數(shù)據(jù)服務(wù)平臺分期建設(shè)數(shù)據(jù)源管理平臺、數(shù)據(jù)集成平臺、數(shù)據(jù)權(quán)限管理平臺、數(shù)據(jù)質(zhì)量管理平臺、數(shù)據(jù)緩沖區(qū)、數(shù)據(jù)分析平臺、統(tǒng)計(jì)對外服務(wù)接口等多個(gè)模塊，多模塊協(xié)同整合多源數(shù)據(jù)，提升數(shù)據(jù)質(zhì)量，面向不同用戶提供相關(guān)數(shù)據(jù)支持服務(wù)。

其中數(shù)據(jù)質(zhì)量管理部分則借助億信華辰數(shù)據(jù)質(zhì)量管理工具，全面提升數(shù)據(jù)質(zhì)量，減少因數(shù)據(jù)不可靠導(dǎo)致的用戶決策偏差和損失。同時(shí)按照指定檢測數(shù)據(jù)源，定義之間規(guī)則，定期巡檢，推送質(zhì)檢報(bào)告的流程為用戶提供全面完善的質(zhì)檢方案。

案例三：南山集團(tuán)主數(shù)據(jù)管理項(xiàng)目

確定南山集團(tuán)建立一套全生命周期的物料主數(shù)據(jù)管理模式，該方案以數(shù)據(jù)標(biāo)準(zhǔn)與制度二者為基石，以管理組織、流程和平臺三者為實(shí)現(xiàn)手段，實(shí)現(xiàn)物料主數(shù)據(jù)全面高效的管理。

完成人力資源、財(cái)務(wù)、采購、營銷、指標(biāo)及其他基礎(chǔ)等六大類主數(shù)據(jù)建設(shè)，其中物料主數(shù)據(jù)，涉及40+大類，3000+小類，10萬+實(shí)體數(shù)據(jù)，并實(shí)現(xiàn)供應(yīng)鏈等其他經(jīng)營系統(tǒng)的數(shù)據(jù)對接共享。

案例四：山能源臨礦集團(tuán)數(shù)據(jù)資產(chǎn)項(xiàng)目

山東能源臨礦集團(tuán)通過建立集團(tuán)級大數(shù)據(jù)資產(chǎn)平臺，運(yùn)用大數(shù)據(jù)技術(shù)實(shí)現(xiàn)數(shù)據(jù)采集、清洗、分析建模，實(shí)現(xiàn)了集團(tuán)全量多源異構(gòu)數(shù)據(jù)采集，并對核心的人力、財(cái)務(wù)、設(shè)備、煤質(zhì)、生產(chǎn)安全數(shù)據(jù)進(jìn)行數(shù)據(jù)治理，形成高質(zhì)量的數(shù)據(jù)資產(chǎn)。

通過數(shù)據(jù)資產(chǎn)目錄對全集團(tuán)發(fā)布，并用業(yè)務(wù)元數(shù)據(jù)解釋數(shù)據(jù)含義，便于業(yè)務(wù)人員尋找自己所需的數(shù)據(jù)。業(yè)務(wù)人員可以對自己所需數(shù)據(jù)提出申請，數(shù)據(jù)管理員審批通過后，業(yè)務(wù)人員可以利用零代碼敏捷分析工具自助分析取數(shù)，實(shí)現(xiàn)數(shù)據(jù)賦能，支持日常生產(chǎn)經(jīng)營管理。