女王范兒

2022-09-29

導(dǎo)讀：主數(shù)據(jù)（Master Data）是具有共享性的基礎(chǔ)數(shù)據(jù)，可以在企業(yè)內(nèi)跨越各個業(yè)務(wù)部門被重復(fù)使用的，因此通常長期存在且應(yīng)用于多個系統(tǒng)。由于主數(shù)據(jù)是企業(yè)基準數(shù)據(jù)，數(shù)據(jù)來源單一、準確、權(quán)威，具有較高的業(yè)務(wù)價值，因此是企業(yè)執(zhí)行業(yè)務(wù)操作和決策分析的數(shù)據(jù)標準。

不論是大數(shù)據(jù)還是小數(shù)據(jù)，持續(xù)地提升數(shù)據(jù)質(zhì)量才是企業(yè)數(shù)據(jù)治理之道！

▌主數(shù)據(jù)具備3個主要特征
①高價值：主數(shù)據(jù)是所有業(yè)務(wù)處理都離不開的實體數(shù)據(jù)，與大數(shù)據(jù)相比價值密度非常高。
②高共享：主數(shù)據(jù)是跨部門、跨系統(tǒng)高度共享的數(shù)據(jù)。
③相對穩(wěn)定：與交易數(shù)據(jù)相比主數(shù)據(jù)是相對穩(wěn)定的，變化頻率較低。變化頻率較低并不意味著一成不變，例如：客商更名會引起客商主數(shù)據(jù)的變動、人員調(diào)動會引起人員主數(shù)據(jù)的變動等等。

▌主數(shù)據(jù)的4個超越：即超越業(yè)務(wù)，超越部門、超越系統(tǒng)、超越技術(shù)。

①超越業(yè)務(wù)，主數(shù)據(jù)是跨越了業(yè)務(wù)界限，在多個業(yè)務(wù)領(lǐng)域中被廣泛使用的數(shù)據(jù)，其核心屬性也是來自業(yè)務(wù)。例如：物料主數(shù)據(jù)，它有自身的自然屬性，如：規(guī)格、材質(zhì)，也有業(yè)務(wù)賦予的核心屬性，如：設(shè)計參數(shù)、工藝參數(shù)、采購、庫存要求、計量要求、財務(wù)要求等。同時，主數(shù)據(jù)也要服務(wù)于業(yè)務(wù)，可謂是———從業(yè)務(wù)中來到業(yè)務(wù)中去。

②超越部門，主數(shù)據(jù)是組織范圍內(nèi)共享的、跨部門的數(shù)據(jù)，不歸屬某一特定的部門，是企業(yè)的核心數(shù)據(jù)資產(chǎn)。

③超越系統(tǒng)，主數(shù)據(jù)是多個系統(tǒng)之間的共享數(shù)據(jù)，是應(yīng)用系統(tǒng)建設(shè)的基礎(chǔ)，同時也是數(shù)據(jù)分析系統(tǒng)重要的分析對象。

④超越技術(shù)，主數(shù)據(jù)是要解決不同異構(gòu)系統(tǒng)之間的核心數(shù)據(jù)共享問題，從來不會局限于一種特定的技術(shù)。在不同環(huán)境、不同場景下，主數(shù)據(jù)的技術(shù)是可以靈活應(yīng)對的。主數(shù)據(jù)的集成架構(gòu)是多樣的，如：總線型結(jié)構(gòu)、星型結(jié)構(gòu)、端到端結(jié)構(gòu)；集成技術(shù)也是多樣的，如：webservice、REST、ETL、MQ、kafka等；不論是架構(gòu)還是技術(shù)，沒有最好的只有更合適的。企業(yè)在做技術(shù)選型的時候，要充分考慮企業(yè)的核心業(yè)務(wù)需求和未來的發(fā)展要求去構(gòu)建自身的主數(shù)據(jù)技術(shù)體系。

▌企業(yè)主數(shù)據(jù)管理的常見問題

數(shù)據(jù)入口多，重復(fù)錄入、一物多碼、多碼一物 數(shù)據(jù)分類、數(shù)據(jù)編碼不統(tǒng)一、不一致 關(guān)鍵數(shù)據(jù)項為空或填寫錯誤、填寫不規(guī)范 領(lǐng)導(dǎo)不重視，沒有相應(yīng)的管理辦法，主數(shù)據(jù)的質(zhì)量不高 存在數(shù)據(jù)孤島，異構(gòu)系統(tǒng)數(shù)據(jù)沒有打通

一、主數(shù)據(jù)的問題80%是管理問題
很多企業(yè)的信息部門都很困惑，主數(shù)據(jù)管理工作就是典型的錢少、活多、看不見效果、領(lǐng)導(dǎo)不重視、還經(jīng)常挨領(lǐng)導(dǎo)罵，干的很苦逼。豈不知，主數(shù)據(jù)的問題80%都是管理問題。高層領(lǐng)導(dǎo)不關(guān)注、沒有專業(yè)的主數(shù)據(jù)管理團隊、沒有規(guī)范的主數(shù)據(jù)管理制度和流程，數(shù)據(jù)標準和技術(shù)標準缺失、數(shù)據(jù)管理重視程度不足，數(shù)據(jù)維護隨意無檢查機制、沒有定期的數(shù)據(jù)質(zhì)量檢驗和清洗 ……，這都是造成主數(shù)據(jù)質(zhì)量不高的重要因素。主數(shù)據(jù)是超越業(yè)務(wù)、超越部門的數(shù)據(jù)，要想將主數(shù)據(jù)做好，需要各層級領(lǐng)導(dǎo)足夠重視、全員參與，同時，構(gòu)筑起主數(shù)據(jù)管理的基礎(chǔ)能力，包括：組織、流程、 標準和工具。

在主數(shù)據(jù)管理基礎(chǔ)能力中，組織、流程、 標準的建設(shè)80%決定了主數(shù)據(jù)項目的成敗和建設(shè)效果。

二、主數(shù)據(jù)實施80%靠企業(yè)自身
企業(yè)在實施主數(shù)據(jù)項目的時候，都希望找到最專業(yè)的主數(shù)據(jù)團隊、最強大的主數(shù)據(jù)產(chǎn)品。但是聘請同樣的團隊，采用同樣的產(chǎn)品，有的企業(yè)的建設(shè)效果明顯，有的企業(yè)建設(shè)效果卻差強人意，這是為什么？存在這種情況，很多一部分原因是企業(yè)太過依賴于外部力量，而對內(nèi)部能力建設(shè)重視不足。

主數(shù)據(jù)建設(shè)是一個持續(xù)運營、不斷優(yōu)化的過程，依靠外部資源，不能保證主數(shù)據(jù)質(zhì)量的持續(xù)優(yōu)化。沒有相應(yīng)的組織體系、制度文化和技術(shù)體系支撐，將嚴重影響主數(shù)據(jù)項目的建設(shè)效果。同時，數(shù)據(jù)的整理、清洗、編碼等工作，都是必需要企業(yè)自己來做的，外部資源能支持更多的是經(jīng)驗和方法。

所以，打鐵還需自身硬，企業(yè)自身需要具備數(shù)據(jù)思維，領(lǐng)導(dǎo)要對主數(shù)據(jù)管理足夠重視，建設(shè)起自身的主數(shù)據(jù)管理能力。同時，借鑒外部先進的方法、技術(shù)和經(jīng)驗，是項目成功的重要保障。這就是我的第二個觀點，主數(shù)據(jù)管理80%靠企業(yè)自身。

三、主數(shù)據(jù)效果80%靠運營
客戶常常困惑“我的錢也花了，管理體系也建立了，項目也算實施成功了，可為什么還是見不到效果”。存在這種疑惑很正常，原因有兩個方面：一方面，主數(shù)據(jù)從本身特性和應(yīng)用架構(gòu)上是偏底層的，與分析型數(shù)據(jù)不同，主數(shù)據(jù)可視化能力弱，它是服務(wù)于數(shù)據(jù)分析，卻常常被忽視。另一方面，主數(shù)據(jù)主數(shù)據(jù)管理工作是一個需要持續(xù)迭代、持續(xù)運營的過程，主數(shù)據(jù)價值會在運營過程中慢慢體現(xiàn)出來。主數(shù)據(jù)管理切勿追求一步都到位，應(yīng)該循序漸進、持續(xù)提升。

主數(shù)據(jù)項目的實施能夠幫助企業(yè)初步建立起主數(shù)據(jù)的管理體系，包括：管理組織、制度和流程、數(shù)據(jù)標準、技術(shù)規(guī)范以及初始的主數(shù)據(jù)代碼庫等。但做好持續(xù)的運營工作，是發(fā)揮主數(shù)據(jù)價值的關(guān)鍵。有些項目實施過程很成功，但系統(tǒng)運行一段時間，比如半年、一年后，突然發(fā)現(xiàn)，主數(shù)據(jù)的質(zhì)量已經(jīng)回到了“解放前”。出現(xiàn)這種情況的主要原因是主數(shù)據(jù)管理相關(guān)制度和標準沒有貫徹到位，沒有定期進行數(shù)據(jù)質(zhì)量檢查和清洗。所以，實施主數(shù)據(jù)項目，只是數(shù)據(jù)治理的一個開始，企業(yè)要保持高質(zhì)量的數(shù)據(jù)，必須持續(xù)的運營和不斷的優(yōu)化。