導(dǎo)讀：近年來，數(shù)據(jù)治理和數(shù)據(jù)資產(chǎn)化成為了工業(yè)數(shù)字化進(jìn)程中的重點(diǎn)，得到了越來越多企業(yè)的重視。如果您是企業(yè)數(shù)據(jù)技術(shù)團(tuán)隊(duì)負(fù)責(zé)人，負(fù)責(zé)數(shù)據(jù)治理或者數(shù)據(jù)管理相關(guān)工作，董事長或總經(jīng)理需要圍繞企業(yè)未來產(chǎn)業(yè)發(fā)展，要求你把數(shù)據(jù)治理工作落實(shí)、落地，做大、做強(qiáng)，應(yīng)該如何怎么去開展工作呢？本次分享關(guān)注的就是工業(yè)產(chǎn)業(yè)怎樣和數(shù)據(jù)技術(shù)去結(jié)合，怎么讓數(shù)據(jù)價(jià)值去落地變現(xiàn)。工業(yè)大數(shù)據(jù)創(chuàng)新中心更多專注于工業(yè)領(lǐng)域，我們將嘗試從上述角度出發(fā)，分享一些我們在數(shù)據(jù)治理最后一公里實(shí)踐過程中面臨的挑戰(zhàn)、獲得的經(jīng)驗(yàn)和和進(jìn)行的思考。

01??背景

工業(yè)數(shù)字化這個(gè)領(lǐng)域工業(yè)大數(shù)據(jù)創(chuàng)新中心已經(jīng)做了差不多有十年了。十年前，當(dāng)我們?nèi)ジI(yè)企業(yè)的領(lǐng)導(dǎo)談數(shù)據(jù)、談數(shù)據(jù)價(jià)值的時(shí)候，還要從最基礎(chǔ)的概念，比如什么是大數(shù)據(jù)技術(shù)開始講，但這幾年基本上都不用談這些了，幾乎所有工業(yè)企業(yè)都已經(jīng)把數(shù)據(jù)技術(shù)、價(jià)值和自己企業(yè)的產(chǎn)業(yè)發(fā)展和未來業(yè)務(wù)發(fā)展緊密結(jié)合起來了。產(chǎn)生這些變化的原因不僅僅是國家在大力推動(dòng)，也包括了企業(yè)自身行業(yè)發(fā)展，企業(yè)數(shù)字化轉(zhuǎn)型發(fā)展的需求。

從另外一個(gè)角度，上述變化其實(shí)也反映了企業(yè)不僅認(rèn)知到數(shù)據(jù)的價(jià)值，而且更進(jìn)一步，尤其是“十四五”數(shù)據(jù)經(jīng)濟(jì)提上日程之后，大家對數(shù)據(jù)技術(shù)和產(chǎn)業(yè)結(jié)合，產(chǎn)業(yè)價(jià)值落地的進(jìn)程實(shí)施也越來越快。在企業(yè)內(nèi)部和“提質(zhì)增效、節(jié)能降耗”、“高質(zhì)量發(fā)展”、“雙碳目標(biāo)”、“產(chǎn)業(yè)數(shù)字化轉(zhuǎn)型”結(jié)合，甚至有很多企業(yè)已經(jīng)開始對外把數(shù)據(jù)資源服務(wù)作為開源增收、業(yè)務(wù)創(chuàng)新、多元化發(fā)展的一大利器。

這樣的現(xiàn)象，不僅針對各個(gè)行業(yè)的單點(diǎn)企業(yè)，現(xiàn)在已經(jīng)在整個(gè)行業(yè)、產(chǎn)業(yè)鏈去延展。比如新能源、工程機(jī)械、電子制造等一些行業(yè)，不僅僅停留或滿足于賣設(shè)備，而是在此基礎(chǔ)之上去附加數(shù)據(jù)增值服務(wù)。幾大發(fā)電集團(tuán)在進(jìn)行電站規(guī)劃建設(shè)實(shí)施、招投標(biāo)時(shí)，都會把數(shù)字化能力作為對上游企業(yè)的一個(gè)考察能力項(xiàng)。產(chǎn)業(yè)鏈形成更高效的協(xié)同，需要提升整個(gè)產(chǎn)業(yè)鏈的數(shù)字化水平，而不僅僅是一家企業(yè)的提升。在當(dāng)前的大背景下，數(shù)據(jù)在中間發(fā)揮作用就越來越越多。數(shù)據(jù)已經(jīng)真正成為企業(yè)的重要資產(chǎn)，是生產(chǎn)經(jīng)營的核心要素，是企業(yè)從過去自動(dòng)化、信息化向未來數(shù)字化、智能化轉(zhuǎn)型升級的關(guān)鍵要素。這點(diǎn)基本上已經(jīng)成為行業(yè)公認(rèn)的共識。

但在落地過程當(dāng)中，大家會面臨很多的問題。如果真正從數(shù)據(jù)價(jià)值落地的環(huán)節(jié)，以終為始倒推來看，最困難、最具挑戰(zhàn)的環(huán)節(jié)實(shí)際在于數(shù)據(jù)。比如數(shù)據(jù)怎么獲取？獲取之后如何進(jìn)行治理？如何讓數(shù)據(jù)達(dá)到業(yè)務(wù)落地的質(zhì)量要求？怎么加快數(shù)據(jù)效率？等問題。我們訪談了很多的工業(yè)企業(yè)，也了解過他們在數(shù)字化轉(zhuǎn)型過程中的實(shí)踐努力，基本上所有企業(yè)都會認(rèn)可整個(gè)過程中 80% 左右的精力和時(shí)間是花在數(shù)據(jù)環(huán)節(jié)的。下圖是我們梳理的數(shù)據(jù)治理流程。

一個(gè)好的數(shù)據(jù)基礎(chǔ)為后面數(shù)據(jù)價(jià)值的挖掘，數(shù)據(jù)創(chuàng)新，迭代效率提升非常有幫助。進(jìn)一步，企業(yè)要想進(jìn)行內(nèi)部跨部門協(xié)作，甚至企業(yè)間的高效協(xié)同，建立高質(zhì)量的、易于理解的，可溝通的，普適認(rèn)知的數(shù)據(jù)標(biāo)準(zhǔn)又是整個(gè)過程的基礎(chǔ)。再進(jìn)一步，圍繞數(shù)據(jù)價(jià)值鏈，各協(xié)作方去打破邊界，產(chǎn)生知識和數(shù)據(jù)的交流，去減少?zèng)_突，然后達(dá)到全局最優(yōu)，數(shù)據(jù)治理是這件事情的基礎(chǔ)。再往前，企業(yè)生產(chǎn)過程中，特別是當(dāng)環(huán)境有很多動(dòng)態(tài)性、變化性需求，生產(chǎn)制造企業(yè)如何從上游設(shè)計(jì)一直到后面整個(gè)交付過程中，更快的，更動(dòng)態(tài)的去匹配上述市場的變化？數(shù)據(jù)在整個(gè)過程中如何為收益增加產(chǎn)生更大作用？數(shù)據(jù)治理是數(shù)據(jù)價(jià)值能夠得到持續(xù)釋放的重要因素。數(shù)據(jù)治理工作是一件需要長期持續(xù)的事情。大家都知道“故事好講”，就是數(shù)字化的場景這個(gè)故事是很容易講，但長期持續(xù)去釋放價(jià)值則是很具有挑戰(zhàn)性的。如何利用數(shù)據(jù)治理的能力去提升數(shù)據(jù)價(jià)值，釋放這樣持續(xù)可靠性和質(zhì)量，是我們在工業(yè)領(lǐng)域進(jìn)行數(shù)據(jù)治理的一個(gè)目標(biāo)。數(shù)據(jù)最終還是為業(yè)務(wù)去服務(wù)的，提供更高效的數(shù)據(jù)資源和數(shù)據(jù)相關(guān)工具，讓數(shù)據(jù)的挖掘、業(yè)務(wù)結(jié)合變得更容易。讓更多的人，更多的團(tuán)隊(duì)，更多業(yè)務(wù)流程參與進(jìn)來，賦能工業(yè)用戶，是我們數(shù)據(jù)治理的核心的價(jià)值。下圖是我們總結(jié)的工業(yè)數(shù)據(jù)治理價(jià)值的一些體現(xiàn)。

下面從另外一個(gè)角度，描述一下工業(yè)數(shù)據(jù)治理的挑戰(zhàn)。

工業(yè)數(shù)據(jù)從技術(shù)角度從下往上看，本身的“接存管用”具有多種特征，比如工業(yè)數(shù)據(jù)本來就是多元異構(gòu)的海量數(shù)據(jù)，具體來講有以下特征： 數(shù)據(jù)是分散的。來源很廣，包括信息化的系統(tǒng)，也包括生產(chǎn)系統(tǒng)，傳感器監(jiān)測系統(tǒng)采集的數(shù)據(jù)。 數(shù)據(jù)是多維的。數(shù)據(jù)類型上工業(yè)實(shí)際數(shù)據(jù)也包括結(jié)構(gòu)化的設(shè)備臺賬數(shù)據(jù)，非結(jié)構(gòu)化的工業(yè)視頻，業(yè)務(wù)上覆蓋了“人機(jī)料法環(huán)測”多個(gè)維度。 數(shù)據(jù)量巨大。生產(chǎn)過程的核心要素?cái)?shù)據(jù)量是非常大的，比如我們采集的風(fēng)力發(fā)電機(jī)組、大型風(fēng)機(jī)、半導(dǎo)體產(chǎn)線，它的數(shù)據(jù)量非常大。數(shù)據(jù)采集頻率也很高，比如高頻振動(dòng)數(shù)據(jù)。此外，設(shè)備上相應(yīng)的數(shù)據(jù)采集點(diǎn)也越來越多，海量多源異構(gòu)的數(shù)據(jù)都需要去治理。

不僅僅數(shù)據(jù)接入和使用的問題，數(shù)據(jù)治理繞不開的一個(gè)問題是怎么和業(yè)務(wù)去結(jié)合。工業(yè)生產(chǎn)過程中，生產(chǎn)復(fù)雜度高，可能有上百工序，上千臺的機(jī)臺，有些復(fù)雜的生產(chǎn)工序可能長達(dá)幾個(gè)月，如何把這些數(shù)據(jù)有機(jī)的組織起來，進(jìn)行資源化，甚至未來資產(chǎn)化，為上層業(yè)務(wù)服務(wù)。在這個(gè)過程當(dāng)中有很多技術(shù)問題需要去處理。整個(gè)過程數(shù)據(jù)是動(dòng)態(tài)變化的，從定義到精度都不是一成不變的。工業(yè)生產(chǎn)過程中數(shù)據(jù)都是動(dòng)態(tài)化的，工藝的提升、主控程序升級、傳感器升級換代等都會帶來整個(gè)過程動(dòng)態(tài)化，這是工業(yè)領(lǐng)域數(shù)據(jù)資產(chǎn)化我們面臨實(shí)際困難和挑戰(zhàn)。

02?實(shí)踐

實(shí)踐方面，這里分兩大類和大家進(jìn)行簡單分享：

一類是針對高端復(fù)雜裝備，即高技術(shù)裝備的數(shù)據(jù)治理，比如風(fēng)力發(fā)電機(jī)組、汽輪機(jī)、煤礦機(jī)械、大型鼓風(fēng)機(jī)、空壓機(jī)等，都是工業(yè)生產(chǎn)當(dāng)中的核心裝備。圍繞著核心設(shè)備生產(chǎn)過程、運(yùn)行環(huán)境、運(yùn)行過程、后續(xù)優(yōu)化運(yùn)維開展大量的工作。

這張圖是風(fēng)力發(fā)電過程當(dāng)中產(chǎn)生的數(shù)據(jù)。會發(fā)現(xiàn)周圍林林總總各種 Scada 數(shù)據(jù)、測風(fēng)數(shù)據(jù)、環(huán)境數(shù)據(jù)、故障信息都會匯聚起來，數(shù)據(jù)量非常驚人。

我們一個(gè)項(xiàng)目中每天光運(yùn)行數(shù)據(jù)可能就有 2 億多條，而且僅僅是結(jié)構(gòu)化數(shù)據(jù)，還沒有算非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)量。我們面臨的生產(chǎn)環(huán)境過程數(shù)據(jù)治理是一個(gè)無邊界的情況，有源源不斷的數(shù)據(jù)進(jìn)來，要求我們能夠?qū)崟r(shí)對這些多種多樣數(shù)據(jù)去進(jìn)行處理，而且數(shù)據(jù)類型、頻次、價(jià)值密度都不一樣，都為后續(xù)的數(shù)據(jù)治理、價(jià)值挖掘帶來了挑戰(zhàn)。之前我們也是花了大量的時(shí)間跟工業(yè)用戶一起梳理他們的數(shù)據(jù)資產(chǎn)，才構(gòu)建了能夠與業(yè)務(wù)去結(jié)合的數(shù)據(jù)治理框架制度。除了風(fēng)電之外還有煤礦、機(jī)械等行業(yè)，不只是關(guān)注單臺設(shè)備的數(shù)據(jù)治理，還需要關(guān)注設(shè)備間的聯(lián)動(dòng)，要形成協(xié)同，形成配合。數(shù)據(jù)頻率不夠高一些故障沒法做到及時(shí)診斷和預(yù)警。

還有很多動(dòng)設(shè)備，比如說新能源車輛，工程機(jī)械像挖機(jī)、裝載機(jī)等，全國到處跑，數(shù)據(jù)一方面是分布動(dòng)態(tài)，數(shù)據(jù)是從全國各個(gè)地方收集回來的，對數(shù)據(jù)治理的實(shí)效性、數(shù)據(jù)質(zhì)量評估、數(shù)據(jù)價(jià)值挖掘帶來了非常大一些挑戰(zhàn)。

另外一塊是產(chǎn)線相關(guān)，就是高端復(fù)雜的一些長流程生產(chǎn)線。特別明顯是在半導(dǎo)體生產(chǎn)過程中 ，一頭是原材料，另一頭是產(chǎn)品，在一批批的相應(yīng)制造過程中會面臨大量的工序環(huán)節(jié)，有大量不同類型機(jī)臺數(shù)據(jù)，然后整個(gè)生產(chǎn)過程很長，有幾個(gè)月。

在生產(chǎn)制造過程中，生產(chǎn)效率、自動(dòng)化程度主要圍繞設(shè)備工藝、質(zhì)量、環(huán)境的數(shù)據(jù)信息。如何進(jìn)行有機(jī)的組織，形成比較好的數(shù)據(jù)關(guān)聯(lián)和治理，為后續(xù)像波動(dòng)性分析、根因分析、效率分析、優(yōu)化分析去提供基礎(chǔ)。比如說大家可以想象，高鐵能那么平穩(wěn)的運(yùn)行也是因?yàn)樗詈蟪鰜淼匿撥壴O(shè)計(jì)精度非常高，我們要做的數(shù)據(jù)質(zhì)量或者數(shù)據(jù)分析其實(shí)不僅僅是看它的某一個(gè)生產(chǎn)環(huán)節(jié)，某一個(gè)工藝段，而是需要把整個(gè)工藝段數(shù)據(jù)去進(jìn)行相應(yīng)分析、關(guān)聯(lián)，然后就進(jìn)行有機(jī)組織后為后面的分析去服務(wù)。

03?思考

下面談我們在數(shù)據(jù)治理方面的一些思考。首先，談數(shù)據(jù)治理的時(shí)候我們的觀點(diǎn)是什么呢？雖然我們往往最后是從數(shù)據(jù)平臺上來看到數(shù)據(jù)的，但整個(gè)數(shù)據(jù)治理是一個(gè)端到端的過程。等我們看到數(shù)據(jù)，發(fā)現(xiàn)數(shù)據(jù)的時(shí)候，其實(shí)基本上都已經(jīng)到了最后一個(gè)環(huán)節(jié)。一些基礎(chǔ)的，很核心的根因性的問題修復(fù)是做不了的。所以數(shù)據(jù)治理我們第一個(gè)觀點(diǎn)就是數(shù)據(jù)治理需要放大到整個(gè)鏈路來看。比如以新能源為例，從現(xiàn)場 PCL、新能源的中控，到監(jiān)控軟件，到區(qū)域公司，到集團(tuán)公司，從數(shù)據(jù)的業(yè)務(wù)出發(fā)，數(shù)據(jù)的質(zhì)量要求是不一樣的，所以需要順著鏈路進(jìn)行整個(gè)的治理規(guī)劃。但未來我們想象也不僅僅是企業(yè)內(nèi)部的事情，還會涉及企業(yè)的內(nèi)外協(xié)同。比如說運(yùn)營企業(yè)，上游有裝備制造企業(yè)，裝備制造企業(yè)上面還有它的零部件，往下游走背后的像金融公司等一大堆產(chǎn)業(yè)鏈面上的公司。這個(gè)過程中我們需要放大到整個(gè)產(chǎn)業(yè)鏈的角度來進(jìn)行數(shù)據(jù)治理。

另外一個(gè)也是做了很多工作之后，比較觸發(fā)我的一個(gè)思考圖。

這個(gè)圖是我們一個(gè)工業(yè)企業(yè)的合作伙伴的團(tuán)隊(duì)負(fù)責(zé)人跟領(lǐng)導(dǎo)匯報(bào)時(shí)用的一張圖。我們跟他們一起做了很長時(shí)間，為數(shù)據(jù)治理投入了非常多的人力和精力，也做了很多方式的工作在上面，所以具有同樣的感觸。但從企業(yè)發(fā)展角度，很多領(lǐng)導(dǎo)關(guān)注的還是能夠呈現(xiàn)出可感知的，可量化的業(yè)務(wù)價(jià)值。這也是我們共同的希望。面對這樣的問題，我們怎么樣去平衡好數(shù)據(jù)治理的投入和產(chǎn)出？或者怎么衡量成熟度？怎么樣讓業(yè)務(wù)價(jià)值能夠感覺更多？倒過來看看，圍繞著數(shù)據(jù)業(yè)務(wù)的價(jià)值，在數(shù)據(jù)治理上面怎么去做，怎么去投入？

這個(gè)是我們簡化后的一個(gè)簡單數(shù)據(jù)治理概念模型，從生產(chǎn)系統(tǒng)到后面平臺到上面價(jià)值應(yīng)用。當(dāng)然實(shí)際工業(yè)生產(chǎn)過程的數(shù)據(jù)鏈路和數(shù)據(jù)價(jià)值鏈路肯定比這個(gè)復(fù)雜的多。套用一下電網(wǎng)分區(qū)，從一區(qū)拿到數(shù)據(jù)，匯總到在三區(qū)的平臺上面，再去構(gòu)建應(yīng)用來為產(chǎn)業(yè)服務(wù)，基本上是這樣的概念模型。

那實(shí)際數(shù)據(jù)治理通常應(yīng)該在哪個(gè)環(huán)節(jié)發(fā)生？是進(jìn)平臺的時(shí)候入手去治理，還是把它轉(zhuǎn)換成數(shù)據(jù)服務(wù)的時(shí)候去做數(shù)據(jù)治理，還是在用數(shù)據(jù)的時(shí)候再根據(jù)業(yè)務(wù)場景需要去做數(shù)據(jù)治理？可能名稱叫法會存在差異，也可以叫做數(shù)據(jù)預(yù)處理，或者數(shù)據(jù)的資源化服務(wù)，這些不重要，只是講這樣的一個(gè)概念。這是我們經(jīng)常見到的數(shù)據(jù)的治理點(diǎn)。從最開始接觸到工業(yè)時(shí)，我們當(dāng)時(shí)就一個(gè)理念。就特別希望的把事情就做到前面。然后我們必須一次性，全量、實(shí)時(shí)的去完成數(shù)據(jù)質(zhì)量，或者數(shù)據(jù)資源化的工作。我們做了很多的嘗試，數(shù)量不管多少都接進(jìn)來，然后用了很多技術(shù)，去做了大量的實(shí)時(shí)數(shù)據(jù)治理，然后轉(zhuǎn)換成相應(yīng)的標(biāo)準(zhǔn)化數(shù)據(jù)服務(wù)，高質(zhì)量的數(shù)據(jù)服務(wù)為后面的應(yīng)用去服務(wù)，希望是一次治理出收益。其實(shí)從現(xiàn)在來看，這樣的理念也仍然是我們一直在追求的目標(biāo)。但從實(shí)際的角度來講，過程當(dāng)中會面臨非常多的挑戰(zhàn)。

下面從當(dāng)時(shí)我們做過的一些案例簡單給大家看看。我們出發(fā)點(diǎn)是希望從源頭就避免數(shù)據(jù)垃圾進(jìn)垃圾出，希望進(jìn)來就清洗好，后面大家就能搞質(zhì)量，去發(fā)現(xiàn)問題。所以我們有很多基礎(chǔ)工作要做，數(shù)據(jù)質(zhì)量核查、監(jiān)控告警、異常數(shù)據(jù)處理修復(fù)等工作多了很多。

但實(shí)際問題是，工業(yè)企業(yè)實(shí)際生產(chǎn)過程當(dāng)中，它的標(biāo)準(zhǔn)和現(xiàn)場的生產(chǎn)運(yùn)行中間還是有一些不匹配的地方。然后對于數(shù)據(jù)質(zhì)量的要求，不同的口徑，不同部門提的要求也是不一樣的。特別是我們?nèi)プ鰯?shù)據(jù)修復(fù)的過程當(dāng)中，要求就更是千奇百怪了。比如很簡單一個(gè)補(bǔ)數(shù)，數(shù)據(jù)缺失了要補(bǔ)數(shù)，有些按照平均數(shù)據(jù)補(bǔ)，有些要求固定值，有些按中位數(shù)、做插值去補(bǔ)，還有很多跟行業(yè)相關(guān)的，比如風(fēng)力發(fā)電，我們碰到過中間有一臺風(fēng)機(jī)的數(shù)據(jù)缺失了一段，然后讓你用周圍的，跟他距離相近，空間相近的一些機(jī)組數(shù)據(jù)去補(bǔ)。數(shù)據(jù)治理手段和方式其實(shí)從我們角度看，很難一開始就形成一個(gè)統(tǒng)一的、一致的、而且未來很長段時(shí)間不會變的標(biāo)準(zhǔn)。

第二點(diǎn)，就是我們治理過程中，其實(shí)也會屏蔽一些后續(xù)的有用信息。比如說有些數(shù)據(jù)是零，可能意味著，比如對環(huán)保，他可能就意味要么是傳感器壞掉了，還有也可能是瞞報(bào)、漏報(bào)的一些問題。它也有它的含義和業(yè)務(wù)價(jià)值。所以治理到什么程度，怎么和業(yè)務(wù)去結(jié)合其實(shí)也是一個(gè)蠻大的挑戰(zhàn)。

還有一個(gè)問題，數(shù)據(jù)治理，特別是去做全量實(shí)時(shí)的數(shù)據(jù)治理的時(shí)候，數(shù)據(jù)每天都在進(jìn)，會占用大量的計(jì)算資源。但從數(shù)據(jù)價(jià)值的利用的率來看，不是所有的工業(yè)數(shù)據(jù)都會被后面反復(fù)的大量、高質(zhì)量的去使用。這就會造成大量數(shù)據(jù)計(jì)算資源的浪費(fèi)。

還有些很實(shí)際的問題，比如說數(shù)據(jù)治理規(guī)則會變，肯定要允許規(guī)則改變。但一旦規(guī)則變了之后 ，過去的歷史數(shù)據(jù)怎么處理？要不要重新算？重新算會重新占用資源，如果不算版本之間怎么去達(dá)成一致，達(dá)成協(xié)同？如果出現(xiàn)跨年度比如十年的一個(gè)報(bào)表，標(biāo)準(zhǔn)不一樣結(jié)果肯定會出現(xiàn)偏差。這些都是我們在現(xiàn)實(shí)當(dāng)中碰到的一些實(shí)際的問題。大家可以想象，如果今天你在這個(gè)位置上，或者類似的工作安排上，你都會去想這些事情。這不是個(gè)別現(xiàn)象，我們很多投入和成效不成正比。還有種做法，我們也實(shí)踐過，就是接入數(shù)據(jù)的時(shí)候就治理一批，然后說治理了。同時(shí)把原始數(shù)據(jù)也存了。然后會發(fā)現(xiàn)說其實(shí)他對資源的占用還是一樣。而且比起原來這種做法，存了兩份、更多份的數(shù)據(jù)，導(dǎo)致的開銷更大。所以我們現(xiàn)在在提的一個(gè)概念（僅代表我們個(gè)人的觀點(diǎn)），我們把它叫做分階段按區(qū)數(shù)據(jù)治理。什么叫分階段，其實(shí)我們認(rèn)為，在不同的點(diǎn)，不同的環(huán)節(jié)去做數(shù)據(jù)治理。在每個(gè)階段去做好每個(gè)階段應(yīng)該做的事就行了。

第一個(gè)階段，我們更多的是去做數(shù)據(jù)質(zhì)量評估和識別，包括完整性評估、重復(fù)性、實(shí)效性、正確性的評估，而盡量不去改這個(gè)數(shù)據(jù)。在這個(gè)過程當(dāng)中需要有技術(shù)架構(gòu)去做這件事。怎么去做這件事情，怎么把數(shù)據(jù)標(biāo)準(zhǔn)轉(zhuǎn)換成企業(yè)的落地數(shù)據(jù)治理系統(tǒng)，或者數(shù)據(jù)管理系統(tǒng)的一部分。

比如要解決工業(yè)領(lǐng)域的數(shù)據(jù)重復(fù)性問題。看起來發(fā)現(xiàn)數(shù)據(jù)重復(fù)是很簡單的事，但想象一下，面對的工業(yè)數(shù)據(jù)是源源不斷的接入情況下，數(shù)據(jù)重復(fù)性問題不是一天暴露的，經(jīng)常發(fā)生歷史數(shù)據(jù)重新發(fā)送的情況。

除了重復(fù)性還有數(shù)據(jù)完整性的問題，從設(shè)備、機(jī)臺、工藝對象進(jìn)行完整性分析，從時(shí)間維度、批次維度等進(jìn)行數(shù)據(jù)可視化呈現(xiàn)，后續(xù)相關(guān)分析時(shí)對數(shù)據(jù)質(zhì)量、完整性進(jìn)行相對直觀的了解。

數(shù)據(jù)存在缺失時(shí)需要補(bǔ)數(shù)，需要按設(shè)備正確的去分析然后依據(jù)人工規(guī)則、行業(yè)專家經(jīng)驗(yàn)、機(jī)器學(xué)習(xí)來形成智能、自動(dòng)化的分析手段，節(jié)省治理環(huán)節(jié)的人力和精力付出。工業(yè)領(lǐng)域的數(shù)據(jù)還需要正確性分析、實(shí)效性分析。

工業(yè)數(shù)據(jù)是很長的一個(gè)鏈路，數(shù)字化車間基本不會圍繞著一個(gè)個(gè)單臺設(shè)備去做，如果放大到大的生產(chǎn)系統(tǒng)、企業(yè)集團(tuán)內(nèi)部，數(shù)據(jù)的傳輸實(shí)效性是非常嚴(yán)重的一個(gè)問題。按天為顆粒度會產(chǎn)生滯后性，當(dāng)應(yīng)用出現(xiàn)問題后，怎么及時(shí)的鎖定、發(fā)現(xiàn)問題，時(shí)效性不太容易暴露，但也是實(shí)際工業(yè)領(lǐng)域數(shù)據(jù)治理過程中需要去考慮的事情。以上是第一步，也就是數(shù)據(jù)治理接入的環(huán)節(jié)。在這個(gè)環(huán)節(jié)需要更多的去發(fā)現(xiàn)問題，及時(shí)做出數(shù)據(jù)補(bǔ)錄等異常數(shù)據(jù)處理。第二個(gè)環(huán)節(jié)是數(shù)據(jù)存下來了之后，當(dāng)要到用的時(shí)候，我們提了一個(gè)概念叫“按需數(shù)據(jù)資源化”，也就數(shù)據(jù)需要依照業(yè)務(wù)場景和價(jià)值出發(fā)，在統(tǒng)一規(guī)劃和架構(gòu)的支撐下，按需的來做數(shù)據(jù)資源化工作，從而實(shí)現(xiàn)數(shù)據(jù)的一致性。

這里的一致性我們把它放大了，不僅僅指的數(shù)據(jù)的名稱的一致，也包括理解上的一致性。比如在不同環(huán)節(jié)、部門、公司去用數(shù)據(jù)時(shí)，大家對名稱、含義、精度等各方面的理解是一致的。這個(gè)過程當(dāng)中有很多工作做。為什么傳統(tǒng)工業(yè)企業(yè)去做數(shù)據(jù)分析、使用時(shí)，經(jīng)常會做成豎井式的建設(shè)？從業(yè)務(wù)出發(fā)很容易干成豎井式的，各自封閉，生產(chǎn)監(jiān)測系統(tǒng)、監(jiān)控系統(tǒng)建了十幾套，彼此不相通，結(jié)果沒法做聯(lián)合解讀。

另外一種常見做法是底下建個(gè)大平臺把數(shù)據(jù)收了，但是數(shù)據(jù)價(jià)值無法去體現(xiàn)，數(shù)據(jù)價(jià)值釋放緩慢或困難。所以我們的想法是中間缺了一層，業(yè)務(wù)和數(shù)據(jù)之間還需要加入一層領(lǐng)域模型層。領(lǐng)域模型層就是要把IT角度管理的數(shù)據(jù)，比如不同數(shù)據(jù)庫、數(shù)據(jù)引擎、數(shù)據(jù)模型，能夠和特定行業(yè)、生產(chǎn)、設(shè)備去關(guān)聯(lián)，結(jié)合，將數(shù)據(jù)面向領(lǐng)域進(jìn)行資源化，這個(gè)環(huán)節(jié)主要就是做面向業(yè)務(wù)領(lǐng)域的映射。

然后上面的數(shù)字化應(yīng)用，不管是良率分析，還是運(yùn)行故障分析、能耗分析，都是圍繞一個(gè)統(tǒng)一的數(shù)據(jù)資源層或者數(shù)據(jù)模型層來進(jìn)行分析。這樣做的目的是希望應(yīng)用能夠有效、可靠、敏捷的使用數(shù)據(jù)，或者換個(gè)角度說，能夠讓數(shù)據(jù)能夠有效、可靠、敏捷的被加工，去釋放價(jià)值。

所以這個(gè)過程當(dāng)中我們要引入一些面向產(chǎn)業(yè)、行業(yè)、設(shè)備的數(shù)據(jù)資產(chǎn)模型。讓數(shù)據(jù)掛在生產(chǎn)系統(tǒng)的設(shè)備、資產(chǎn)數(shù)據(jù)數(shù)上，業(yè)務(wù)應(yīng)用部分?jǐn)?shù)據(jù)探索價(jià)值、挖掘、訪問都不是直接去訪問底層數(shù)據(jù)庫的接口，而是從業(yè)務(wù)領(lǐng)域，用業(yè)務(wù)語言去訪問數(shù)據(jù)進(jìn)行分析。

因?yàn)檫@個(gè)分析過程中我們對底層的數(shù)據(jù)、數(shù)據(jù)存儲方式并不感興趣，感興趣的是發(fā)生故障后，要研究故障過去發(fā)生的時(shí)候運(yùn)行數(shù)據(jù)怎么樣的，振動(dòng)數(shù)據(jù)是什么樣子的，類似的故障以前有沒有發(fā)生過，當(dāng)時(shí)發(fā)生了誰來修的，更換的什么件，同樣的故障在其他的類型的設(shè)備身上有沒有發(fā)生過，又是怎么修的，用到哪家的件，被更換的用一批次的件都運(yùn)行在哪？這些是我們在做相關(guān)分析時(shí)腦海當(dāng)中構(gòu)建的業(yè)務(wù)數(shù)據(jù)藍(lán)圖。我們要和底層的數(shù)據(jù)結(jié)合起來，將相關(guān)資產(chǎn)模型，映射到我們的平臺上面去做數(shù)據(jù)資產(chǎn)模型的管理，然后把設(shè)備生產(chǎn)相關(guān)的數(shù)據(jù)組織起來。

后面第三步是做了映射，但其實(shí)我們還是沒法解決所有的問題。就是真正做場景分析時(shí)，我們對數(shù)據(jù)的質(zhì)量要求，結(jié)合業(yè)務(wù)目標(biāo)，包括數(shù)據(jù)分析結(jié)果的精度、誤報(bào)率、漏報(bào)率的要求都不一樣，對數(shù)據(jù)處理的手段和方式也不一樣，所以我們還需要去考慮在分析環(huán)節(jié)去提供一套靈活的，可組裝的，按需構(gòu)建的數(shù)據(jù)治理或者數(shù)據(jù)預(yù)處理機(jī)制，來滿足業(yè)務(wù)使用數(shù)據(jù)最后一公里的需要。

我們也不是把它限制死，還是可以進(jìn)一步結(jié)合業(yè)務(wù)場景去加工。通過可視化組裝式數(shù)據(jù)處理這種方式，能夠把數(shù)據(jù)處理、特征提取、數(shù)據(jù)治理相關(guān)能力，結(jié)合數(shù)據(jù)標(biāo)準(zhǔn)固化成一個(gè)個(gè)的算子。

算子大家可以簡單理解是一段數(shù)據(jù)處理邏輯。然后未來大家去做數(shù)據(jù)分析時(shí)只需要進(jìn)行算子組合就可以完成相應(yīng)數(shù)據(jù)處理，而且在這個(gè)過程當(dāng)中我們還提供一定的開放性和靈活性。數(shù)據(jù)治理不是一蹴而就的，開放性支持大家去增加新算子，去擴(kuò)展新的數(shù)據(jù)治理能力，并去把它固化、沉淀下來，變成未來系統(tǒng)可構(gòu)建的一部分。

經(jīng)過調(diào)試等核心功能的處理完善，最后把數(shù)據(jù)變成按需治理后的數(shù)據(jù)資源。當(dāng)然這樣的迭代過程可以是反復(fù)被加工的，或者說能夠一層層的去加工。比如原始數(shù)據(jù)第一次加工算出了設(shè)備的故障預(yù)警信息，然后基于預(yù)警信息就可以去做后面的備件預(yù)測，去做后面的運(yùn)維排程，就進(jìn)行第二次加工，根據(jù)備件預(yù)測可以去做財(cái)務(wù)預(yù)算、計(jì)劃，就算第三次加工。

我們在平臺上從數(shù)據(jù)治理角度還有個(gè)理念，就是數(shù)據(jù)治理的過程也是一個(gè)階段一個(gè)階段不斷迭代的，至于幾個(gè)階段可能需要結(jié)合不同行業(yè)進(jìn)行探索。我們覺得分階段有必要，但分幾次階段、幾次資源化還是需要結(jié)合行業(yè)實(shí)際做好。當(dāng)前我們認(rèn)知是四次資源化來實(shí)現(xiàn)業(yè)務(wù)產(chǎn)品的支撐。當(dāng)然后面我們也歡迎其他的行業(yè)大家一起來交流，共同來探討。

技術(shù)手段之外，還有一個(gè)話題就是體系的建設(shè)。體系的建設(shè)不僅僅是技術(shù)工作、技術(shù)選型、技術(shù)架構(gòu)，也不僅僅是數(shù)據(jù)標(biāo)準(zhǔn)、相關(guān)規(guī)范的建設(shè)，還包含了跟大家的日常更結(jié)合的更緊密一些。組織能力建設(shè)、制度建設(shè)，特別是數(shù)據(jù)使用識別過程當(dāng)中可能需要懂?dāng)?shù)據(jù)技術(shù)，懂計(jì)算機(jī)技術(shù)，了解業(yè)務(wù)領(lǐng)域這樣一個(gè)“三T融合”的團(tuán)隊(duì)建設(shè)。團(tuán)隊(duì)需要各個(gè)小組緊密配合，然后結(jié)合業(yè)務(wù)發(fā)展、實(shí)時(shí)動(dòng)態(tài)記錄去進(jìn)行數(shù)據(jù)價(jià)值落地支撐。我們把它叫“數(shù)字化辦公室”。

除此之外，當(dāng)然還會有相應(yīng)工作流程和方法。從場景驅(qū)動(dòng)的方式，從數(shù)據(jù)的層層加工、分階段加工的流程，去支撐整個(gè)事情去落地。背后當(dāng)然也還有相應(yīng)的數(shù)據(jù)底座、數(shù)據(jù)架構(gòu)、加工工具之類的支撐。組織、工作方法流程、工具支撐這三大要素構(gòu)建了我們認(rèn)為工業(yè)領(lǐng)域數(shù)據(jù) 資源化資產(chǎn)化的核心要素。

04?總結(jié)

投身數(shù)據(jù)治理的團(tuán)隊(duì)都繞不開回答的開頭的那個(gè)問題，就是怎么去衡量投入產(chǎn)出？怎么讓從內(nèi)部領(lǐng)導(dǎo)、相關(guān)業(yè)務(wù)部門，到外部的業(yè)務(wù)合作伙伴和團(tuán)隊(duì)能夠感受到我們的工作的可感知的、可量化的業(yè)務(wù)價(jià)值？

首先從業(yè)務(wù)角度去審視我們做的所有的工作，這是我覺得非常重要的一件事情。以終為始的去看，以業(yè)務(wù)價(jià)值去看，看看這件事情在我們前期投入是否合理，因?yàn)椴皇撬行枨蠖际且度脒M(jìn)去的。

第二個(gè)是分階段地去做數(shù)據(jù)治理。把過去曾經(jīng)嘗試過的“畢其功于一役”的事情分階段的去做。特別現(xiàn)在大家談的數(shù)據(jù)湖數(shù)據(jù)倉“湖倉一體”也部分的有點(diǎn)這種感覺。

第三個(gè)是按需去做數(shù)據(jù)治理、數(shù)據(jù)資源化和資產(chǎn)化。結(jié)合業(yè)務(wù)的需要。在統(tǒng)一框架和統(tǒng)一支撐下，業(yè)務(wù)需要一批我先治理一批，慢慢豐富、完善、迭代。治理一批、產(chǎn)生一批價(jià)值，成熟一批。最后一點(diǎn)是體系化的建設(shè)。工業(yè)數(shù)字化很多工作，不管是數(shù)據(jù)治理還是數(shù)據(jù)價(jià)值挖掘，或者是數(shù)據(jù)業(yè)務(wù)落地，都不僅僅是技術(shù)問題，在整個(gè)過程當(dāng)中組織架構(gòu)體系如何去建設(shè)也是一個(gè)重點(diǎn)需要去同步去考慮的事情。