大數(shù)據(jù)在中國(guó)的大地上蓬勃發(fā)展，帶動(dòng)了許多新的理念的誕生，數(shù)據(jù)治理就是其中之一，這兩年已建立好的數(shù)據(jù)中心或者正在建的數(shù)據(jù)中心都在如火如荼的進(jìn)行，在企業(yè)內(nèi)部，也已經(jīng)開始由原來的業(yè)務(wù)部門和IT部門演變出來數(shù)據(jù)管理部門，通過開展數(shù)據(jù)管理辦法、制定數(shù)據(jù)標(biāo)準(zhǔn)、保證數(shù)據(jù)質(zhì)量、維護(hù)數(shù)據(jù)架構(gòu)、提供平臺(tái)與工具等工作作為數(shù)字化轉(zhuǎn)型的基礎(chǔ)設(shè)施，數(shù)據(jù)治理已經(jīng)成為數(shù)據(jù)團(tuán)隊(duì)履行數(shù)據(jù)職責(zé)的重要手段。目前很多大數(shù)據(jù)公司都推出了很多數(shù)據(jù)治理相關(guān)產(chǎn)品，相信這些工具和平臺(tái)也會(huì)越來越成熟，數(shù)據(jù)治理相關(guān)工具本身不是數(shù)據(jù)治理最難的問題，針對(duì)企業(yè)目前在數(shù)據(jù)管理方面存在的問題主要還是業(yè)務(wù)規(guī)劃咨詢，針對(duì)企業(yè)數(shù)據(jù)架構(gòu)進(jìn)行規(guī)劃，如何構(gòu)建企業(yè)數(shù)據(jù)管控體系，實(shí)現(xiàn)數(shù)據(jù)全生命周期的統(tǒng)一管理，建立數(shù)據(jù)標(biāo)準(zhǔn)與規(guī)范，提供全面、統(tǒng)一的數(shù)據(jù)服務(wù)，靈活支撐業(yè)務(wù)，為企業(yè)精細(xì)化管理提供保障，為企業(yè)發(fā)展創(chuàng)造價(jià)值，提升企業(yè)運(yùn)營(yíng)與管理能力，打造企業(yè)核心競(jìng)爭(zhēng)力。針對(duì)企業(yè)數(shù)據(jù)架構(gòu)進(jìn)行規(guī)劃咨詢，整個(gè)過程基本上主要分為以下幾個(gè)階段來推進(jìn)工作：

在第一階段統(tǒng)籌規(guī)劃中建設(shè)組織責(zé)任體系，首先是把主要工作職責(zé)定義好，這個(gè)是做任何事情的前提。數(shù)據(jù)治理組織責(zé)任體系大致分為：數(shù)據(jù)治理委員會(huì)、數(shù)據(jù)管理部門、數(shù)據(jù)生產(chǎn)部門（業(yè)務(wù)部門）、數(shù)據(jù)消費(fèi)部門（業(yè)務(wù)部門、客戶）、數(shù)據(jù)開發(fā)部門（如果很多企業(yè)沒有該部門，一般進(jìn)行招投標(biāo)來完成IT廠商的選定）。針對(duì)各組織體系運(yùn)行的認(rèn)責(zé)機(jī)制流程參考如下圖所示：

PS：數(shù)據(jù)資產(chǎn)盤點(diǎn)原則與方法明確了相關(guān)組織責(zé)任體系后，接下來就是如何完成數(shù)據(jù)標(biāo)準(zhǔn)的制定，這是目前企業(yè)數(shù)據(jù)管理部門最頭痛的問題。一般企業(yè)做這項(xiàng)工作至少需要4-5個(gè)人，同時(shí)牽頭組織人還需要具備以下技能： 掌握業(yè)務(wù)，如果不懂，組內(nèi)必須有人要懂 熟悉有哪些部門，每個(gè)部門的職責(zé)是什么 針對(duì)數(shù)據(jù)庫(kù)有比較深的理解 針對(duì)數(shù)據(jù)架構(gòu)有比較深的理解 針對(duì)數(shù)據(jù)治理實(shí)施方法論有比較深的理解 數(shù)據(jù)治理組織是依據(jù)業(yè)內(nèi)的業(yè)務(wù)經(jīng)營(yíng)理念、業(yè)務(wù)戰(zhàn)略、IT戰(zhàn)略以及數(shù)據(jù)戰(zhàn)略共同的推動(dòng)，結(jié)合企業(yè)實(shí)際的情況形成實(shí)施數(shù)據(jù)治理的有效保障，盡管各家企業(yè)形式、歸口部門及人員設(shè)置有所不同，但組織的形成是建設(shè)數(shù)據(jù)治理長(zhǎng)久機(jī)制的基礎(chǔ)性工作，從一定程度上來說，組織建設(shè)是“人”的建設(shè)。它激發(fā)了組織活力，保障數(shù)據(jù)治理日常化和持久化。

說完數(shù)據(jù)治理組織，然后說下數(shù)據(jù)資產(chǎn)盤點(diǎn)和制定數(shù)據(jù)標(biāo)準(zhǔn)，事實(shí)上，數(shù)據(jù)資產(chǎn)盤點(diǎn)和制定數(shù)據(jù)標(biāo)準(zhǔn)是相鋪相成的。

傳統(tǒng)意義上的資產(chǎn)盤點(diǎn)是指對(duì)資產(chǎn)進(jìn)行定期清點(diǎn)，以確定各種財(cái)產(chǎn)在一定時(shí)間的實(shí)存數(shù)。數(shù)據(jù)資產(chǎn)盤點(diǎn)則是對(duì)企業(yè)擁有的數(shù)據(jù)進(jìn)行清點(diǎn)，已確定企業(yè)當(dāng)前擁有的數(shù)據(jù)。數(shù)據(jù)資產(chǎn)盤點(diǎn)將幫助企業(yè)弄清以下問題： 企業(yè)有多少數(shù)據(jù)？ 企業(yè)有哪些數(shù)據(jù)？ 企業(yè)的數(shù)據(jù)價(jià)值如何？ 企業(yè)的這些數(shù)據(jù)分布在什么地方？最有價(jià)值的數(shù)據(jù)存儲(chǔ)在什么位置？ 企業(yè)數(shù)據(jù)的歸屬和責(zé)任人是誰？ 數(shù)據(jù)資產(chǎn)盤點(diǎn)的成果是數(shù)據(jù)資產(chǎn)清單或數(shù)據(jù)資產(chǎn)目錄，它能從全局層面直觀的展現(xiàn)企業(yè)擁有的數(shù)據(jù)資產(chǎn)情況，幫助企業(yè)進(jìn)行更有效的數(shù)據(jù)利用和管理，明確企業(yè)的數(shù)據(jù)保護(hù)目標(biāo)，協(xié)助企業(yè)完成數(shù)據(jù)安全保護(hù)體系的構(gòu)建。企業(yè)的數(shù)據(jù)資產(chǎn)盤點(diǎn)，應(yīng)該以數(shù)據(jù)價(jià)值為導(dǎo)向，以統(tǒng)一標(biāo)準(zhǔn)為核心。因此，在進(jìn)行數(shù)據(jù)資產(chǎn)盤點(diǎn)前，我們需要明確以下幾點(diǎn)： 企業(yè)在日常經(jīng)營(yíng)活動(dòng)中，積累了體量龐大的數(shù)據(jù) 只有可控的、能為企業(yè)帶來利益的數(shù)據(jù)才是數(shù)據(jù)資產(chǎn) 數(shù)據(jù)使用和保護(hù)的前提是知道有哪些數(shù)據(jù)、在哪里 統(tǒng)一的數(shù)據(jù)定義和價(jià)值標(biāo)準(zhǔn)，將有利于數(shù)據(jù)的使用和管理 明確數(shù)據(jù)的歸屬，將為跨業(yè)務(wù)的數(shù)據(jù)使用和數(shù)據(jù)安全保護(hù)落實(shí)提供便利

下面介紹數(shù)據(jù)資產(chǎn)盤點(diǎn)的方法和步驟，主要?dú)w納為6個(gè)階段：構(gòu)建數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)發(fā)現(xiàn)、數(shù)據(jù)定義、分類分級(jí)、明確歸屬、數(shù)據(jù)資產(chǎn)目錄。

（1）構(gòu)建數(shù)據(jù)標(biāo)準(zhǔn)

企業(yè)的數(shù)據(jù)往往來源于各個(gè)業(yè)務(wù)，而各業(yè)務(wù)的數(shù)據(jù)來源、數(shù)據(jù)定義和價(jià)值標(biāo)準(zhǔn)，可能存在極大的差別，這將不利于數(shù)據(jù)的整合、全局管理和使用。因此，企業(yè)在進(jìn)行數(shù)據(jù)資產(chǎn)盤點(diǎn)前，首先要根據(jù)企業(yè)所在行業(yè)的相關(guān)標(biāo)準(zhǔn)，結(jié)合企業(yè)自身的業(yè)務(wù)情況構(gòu)建數(shù)據(jù)標(biāo)準(zhǔn)，形成全局統(tǒng)一的數(shù)據(jù)定義和數(shù)據(jù)價(jià)值體系。數(shù)據(jù)資產(chǎn)盤點(diǎn)工作，將在此數(shù)據(jù)標(biāo)準(zhǔn)的指導(dǎo)下展開。

（2）數(shù)據(jù)發(fā)現(xiàn)數(shù)據(jù)發(fā)現(xiàn)是解決數(shù)據(jù)在哪里、有多少的問題。隨著企業(yè)的業(yè)務(wù)不斷發(fā)展，數(shù)據(jù)量將呈指數(shù)級(jí)上升，這些數(shù)據(jù)可能散布在各個(gè)角落。數(shù)據(jù)發(fā)現(xiàn)就是從全局出發(fā)，系統(tǒng)性的掃描企業(yè)內(nèi)的數(shù)據(jù)資產(chǎn)，確定數(shù)據(jù)存儲(chǔ)的位置和數(shù)據(jù)量，形成數(shù)據(jù)的存儲(chǔ)分布地圖。數(shù)據(jù)發(fā)現(xiàn)的核心在于全面、系統(tǒng)的掃描，以避免出現(xiàn)數(shù)據(jù)遺漏的情況。

（3）數(shù)據(jù)定義數(shù)據(jù)定義是解決有哪些數(shù)據(jù)的問題。針對(duì)掃描的數(shù)據(jù)存儲(chǔ)位置，需要對(duì)數(shù)據(jù)進(jìn)行識(shí)別和定義，標(biāo)記數(shù)據(jù)內(nèi)容，并基于數(shù)據(jù)內(nèi)容和存儲(chǔ)方式，明確數(shù)據(jù)的組織結(jié)構(gòu)，形成庫(kù)-表-字段的數(shù)據(jù)框架，即明確庫(kù)中有哪些表、表內(nèi)有哪些數(shù)據(jù)，結(jié)合數(shù)據(jù)發(fā)現(xiàn)的成果，繪制數(shù)據(jù)資產(chǎn)地圖，將數(shù)據(jù)的存儲(chǔ)位置、存儲(chǔ)內(nèi)容、存儲(chǔ)量清晰的進(jìn)行呈現(xiàn)。

（4）分類分級(jí)分類分級(jí)是解決哪些數(shù)據(jù)有價(jià)值、數(shù)據(jù)價(jià)值高低的問題。數(shù)據(jù)的分類應(yīng)該基于業(yè)務(wù)，數(shù)據(jù)的分級(jí)應(yīng)該基于價(jià)值，數(shù)據(jù)的分類分級(jí)應(yīng)該構(gòu)建的數(shù)據(jù)標(biāo)準(zhǔn)指導(dǎo)下進(jìn)行。通過數(shù)據(jù)的分類分級(jí)，對(duì)發(fā)現(xiàn)定義的數(shù)據(jù)進(jìn)行數(shù)據(jù)價(jià)值和重要性層面的全面梳理和標(biāo)記，為數(shù)據(jù)使用、價(jià)值挖掘、數(shù)據(jù)保護(hù)提供價(jià)值依據(jù)。

（5）明確歸屬通過調(diào)研、業(yè)務(wù)關(guān)聯(lián)、存儲(chǔ)對(duì)象關(guān)聯(lián)等方式，確定數(shù)據(jù)資產(chǎn)的業(yè)務(wù)歸屬和責(zé)任人，有助于掌握數(shù)據(jù)的來源和去向、明確相關(guān)責(zé)任歸屬，為跨業(yè)務(wù)的數(shù)據(jù)使用、數(shù)據(jù)關(guān)聯(lián)分析、數(shù)據(jù)分類保護(hù)等提供目標(biāo)和責(zé)任指向。

（6）數(shù)據(jù)資產(chǎn)目錄數(shù)據(jù)資產(chǎn)目錄是數(shù)據(jù)資產(chǎn)盤點(diǎn)的最終成果，也是數(shù)據(jù)資產(chǎn)管理的第一步。它將企業(yè)內(nèi)的所有數(shù)據(jù)進(jìn)行匯總，構(gòu)建出一張全局的數(shù)據(jù)地圖，清晰的展現(xiàn)出企業(yè)擁有的數(shù)據(jù)內(nèi)容、數(shù)據(jù)量、數(shù)據(jù)價(jià)值、數(shù)據(jù)存儲(chǔ)位置以及數(shù)據(jù)歸屬和責(zé)任人，幫助企業(yè)掌握其擁有的所有數(shù)據(jù)及數(shù)據(jù)價(jià)值，為企業(yè)進(jìn)行數(shù)據(jù)使用、數(shù)據(jù)價(jià)值挖掘以及數(shù)據(jù)保護(hù)提供指導(dǎo)依據(jù)，同時(shí)指導(dǎo)企業(yè)進(jìn)行數(shù)據(jù)規(guī)劃和數(shù)據(jù)體系搭建。

有人會(huì)問，那到底如何開展上述工作呢？為了摸清企業(yè)有多少個(gè)業(yè)務(wù)系統(tǒng)、每個(gè)業(yè)務(wù)系統(tǒng)里面有多少?gòu)埍怼I(yè)務(wù)系統(tǒng)中的業(yè)務(wù)表哪些是空的、分別有哪些部門在使用和產(chǎn)生數(shù)據(jù)等問題，首先需要制定一個(gè)數(shù)據(jù)資產(chǎn)調(diào)研表，下圖為政務(wù)信息資源目錄調(diào)研表模版表，面向政府部門的：

依據(jù)上述調(diào)研表的信息按業(yè)務(wù)主題域進(jìn)行數(shù)據(jù)分類、識(shí)別相關(guān)實(shí)體、構(gòu)建數(shù)據(jù)模型，規(guī)范主數(shù)據(jù)與編碼規(guī)則。如何針對(duì)業(yè)務(wù)主題域進(jìn)行分類？首先要知道企業(yè)的業(yè)務(wù)經(jīng)營(yíng)范圍和相關(guān)職責(zé)是什么，就是搞清楚企業(yè)業(yè)務(wù)，比如政務(wù)資源里面把信息分成人口、法人、宏觀經(jīng)濟(jì)、空間地理等分類；法院體系把人、案件、車輛、辦公進(jìn)行業(yè)務(wù)主題分類。如何查找實(shí)體數(shù)據(jù)？實(shí)體數(shù)據(jù)在數(shù)據(jù)庫(kù)進(jìn)行存儲(chǔ)的時(shí)候，主要有以下幾大特性： 數(shù)據(jù)更新頻率低 數(shù)據(jù)訪問頻率高 數(shù)據(jù)有唯一性 許多表引用該表信息 這些信息其實(shí)可以根據(jù)程序進(jìn)行一次數(shù)據(jù)探查，可以大致判斷出實(shí)體數(shù)據(jù)是哪些表，得到一個(gè)需要人工進(jìn)行調(diào)整的ER關(guān)系進(jìn)行手動(dòng)打標(biāo)，如果是人工的話就應(yīng)該是調(diào)查加操作sql語句來判斷相關(guān)情況。完成實(shí)體數(shù)據(jù)定義后，同步的行為表、數(shù)據(jù)字典表也可以進(jìn)行整理出來，在整理過程中相關(guān)的數(shù)據(jù)模型也同步形成。至此，盤點(diǎn)數(shù)據(jù)資產(chǎn)階段結(jié)束，接下來要定義數(shù)據(jù)標(biāo)準(zhǔn)。數(shù)據(jù)標(biāo)準(zhǔn)一般分為基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)和指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)，所謂基礎(chǔ)標(biāo)準(zhǔn)既是按照業(yè)務(wù)主題域劃分后形成每一個(gè)數(shù)據(jù)元、代碼集、編碼集都屬于數(shù)據(jù)基礎(chǔ)標(biāo)準(zhǔn)。指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)，構(gòu)建指標(biāo)體系是一個(gè)完整的過程。 代碼集：一個(gè)代碼集代表一個(gè)數(shù)據(jù)元，怎么理解呢？例如：性別是一個(gè)數(shù)據(jù)元，那么他的值域范圍是一個(gè)數(shù)據(jù)字典里面的值，主要包括男、女、其他三種之一。代碼集和數(shù)據(jù)元之間最大的差異為：該數(shù)據(jù)元如果是代碼集，那么他的取值范圍是依據(jù)代碼集范圍而來的。 編碼集：編碼規(guī)則也是數(shù)據(jù)標(biāo)準(zhǔn)的定義范圍，只是使用范圍是不一樣的。編碼集既可用于數(shù)據(jù)元的編碼規(guī)范，也可以用戶目錄和分類的相關(guān)規(guī)范。 數(shù)據(jù)元：專業(yè)定義又稱數(shù)據(jù)類型，通過定義、標(biāo)識(shí)、表示以及允許值等一系列屬性描述的數(shù)據(jù)單元，在特定的語義環(huán)境中被認(rèn)為是不可再分的最小數(shù)據(jù)單元。數(shù)據(jù)元的屬性一般分為通用屬性和行業(yè)屬性，通用屬性目前國(guó)家針對(duì)數(shù)據(jù)元定義了22個(gè)核心屬性，針對(duì)每個(gè)行業(yè)的屬性，企業(yè)里面可以自行定義新的屬性，上文圖1和圖2里面就體現(xiàn)了不同行業(yè)針對(duì)數(shù)據(jù)元的屬性是有差異的。 一般來說，數(shù)據(jù)標(biāo)準(zhǔn)梳理一般是自上而下來做的，這種方式梳理出來可能很完整，但是落不了地。目前行業(yè)盛行的方式自下而上做的，通過數(shù)據(jù)治理平臺(tái)可以自動(dòng)采集一些技術(shù)元數(shù)據(jù)，再通過這些數(shù)據(jù)的特征跟數(shù)據(jù)的數(shù)據(jù)元信息建立關(guān)聯(lián)關(guān)系。這個(gè)過程的技術(shù)相對(duì)復(fù)雜，需要結(jié)合技術(shù)平臺(tái)和人工確認(rèn)兩個(gè)環(huán)節(jié)，需要通過業(yè)務(wù)屬性、技術(shù)屬性的特征建立相關(guān)數(shù)據(jù)標(biāo)準(zhǔn)。最后分享在梳理數(shù)據(jù)標(biāo)準(zhǔn)中的常見的幾個(gè)問題：

1、定義數(shù)據(jù)標(biāo)準(zhǔn)的時(shí)候發(fā)現(xiàn)幾個(gè)系統(tǒng)都有同類數(shù)據(jù)時(shí)應(yīng)該怎么辦？在這里應(yīng)該找到“權(quán)威元”。舉個(gè)列子，把衛(wèi)計(jì)委的人口信息和公安的人口信息都獲取過來，發(fā)現(xiàn)都有人口信息，但是又有差異，那么應(yīng)該如何做，這個(gè)時(shí)候，就需要知道，公安管人口的，一切人口基礎(chǔ)信息以公安為主，那么就會(huì)將公安作為權(quán)威元來進(jìn)行比對(duì)數(shù)據(jù)間的問題，這樣也可能倒過來完善權(quán)威元的數(shù)據(jù)信息，企業(yè)內(nèi)部業(yè)務(wù)部門數(shù)據(jù)職責(zé)和系統(tǒng)使用道理一樣。

2、梳理過程中的多個(gè)數(shù)據(jù)元如何形成一個(gè)數(shù)據(jù)集？在前面講到，針對(duì)已有數(shù)據(jù)資產(chǎn)進(jìn)行了獲取技術(shù)屬性，在底層存儲(chǔ)的時(shí)候，基本是在一個(gè)表中，首先可以針對(duì)一張表里面的數(shù)據(jù)元分成小類，在業(yè)務(wù)里面叫數(shù)據(jù)集，在A表中有一個(gè)身份證號(hào)碼，在B表中也有一個(gè)身份證號(hào)碼，那么在兩個(gè)數(shù)據(jù)集中也會(huì)存在，所有可以確定一個(gè)關(guān)系是一個(gè)數(shù)據(jù)元可以存在多個(gè)數(shù)據(jù)集中。

3、針對(duì)定義好的數(shù)據(jù)集如何區(qū)分大類或者叫資源主題域？這個(gè)其實(shí)就是前面提到了主題如何分域的問題，首先標(biāo)準(zhǔn)肯定要去對(duì)應(yīng)資源，資源需要確定在哪些部門里面，部門里面有哪些系統(tǒng)在管理這些資源，按照這個(gè)方式首先就梳理出來資源生成數(shù)據(jù)標(biāo)準(zhǔn)，有了數(shù)據(jù)標(biāo)準(zhǔn)后，需要結(jié)合實(shí)際業(yè)務(wù)場(chǎng)景生成數(shù)據(jù)服務(wù)，數(shù)據(jù)服務(wù)可以形成主題庫(kù)、主數(shù)據(jù)、指標(biāo)庫(kù)等多種形態(tài)。

4、數(shù)據(jù)質(zhì)量規(guī)則如何去梳理和生成？在數(shù)據(jù)標(biāo)準(zhǔn)基礎(chǔ)之上定義質(zhì)量體系，質(zhì)量問題一般分為兩類：語法錯(cuò)誤和語義錯(cuò)誤。語法錯(cuò)誤，可以依據(jù)現(xiàn)有的長(zhǎng)度、類型、值域等內(nèi)容進(jìn)行基礎(chǔ)版規(guī)定；語義錯(cuò)誤是需要結(jié)合業(yè)務(wù)場(chǎng)景來確定數(shù)據(jù)一致性、完整性等規(guī)則。這個(gè)梳理可以從數(shù)據(jù)庫(kù)層面去梳理，很多時(shí)候數(shù)據(jù)庫(kù)表中其實(shí)存在很多關(guān)系，往往以前在設(shè)計(jì)的時(shí)候沒有形成物理關(guān)系，可以通過觀察數(shù)據(jù)得知，肯定存在主外鍵關(guān)系，把業(yè)務(wù)質(zhì)量規(guī)則就按照這個(gè)方式去配置，通過不斷完善業(yè)務(wù)邏輯和使用數(shù)據(jù)服務(wù)去優(yōu)化數(shù)據(jù)質(zhì)量定義。本文來源摩兔起航