精益數(shù)據(jù)方法強(qiáng)調(diào)通過共享、開放、協(xié)同的方式，讓企業(yè)的數(shù)據(jù)流動(dòng)起來，共享起來，充分的協(xié)作起來，同時(shí)將數(shù)據(jù)治理融入業(yè)務(wù)場景中，在數(shù)據(jù)生產(chǎn)的全鏈路中實(shí)施數(shù)據(jù)治理工作。

為了實(shí)現(xiàn)這一個(gè)目標(biāo)，企業(yè)需要對應(yīng)的技術(shù)平臺(tái)，也就是企業(yè)級(jí)數(shù)據(jù)資產(chǎn)目錄。

數(shù)據(jù)資產(chǎn)目錄的定義和價(jià)值

1. 數(shù)據(jù)資產(chǎn)目錄的定義

數(shù)據(jù)資產(chǎn)目錄是公司數(shù)據(jù)資產(chǎn)的清單，方便用戶快速找到所需的信息。

該目錄包含元數(shù)據(jù)，它提供其他數(shù)據(jù)的基本信息，結(jié)合數(shù)據(jù)治理和數(shù)據(jù)探索的相關(guān)工具，構(gòu)成了企業(yè)級(jí)數(shù)據(jù)資產(chǎn)目錄，如圖?5-12?所示。

圖?5-12　數(shù)據(jù)資產(chǎn)目錄在企業(yè)中的定位

企業(yè)數(shù)據(jù)資產(chǎn)目錄是對企業(yè)所有數(shù)據(jù)資產(chǎn)進(jìn)行中心化管理的手段，企業(yè)通過元數(shù)據(jù)將數(shù)據(jù)源和數(shù)據(jù)產(chǎn)品等進(jìn)行標(biāo)準(zhǔn)化的注冊、管理等操作，讓最終的數(shù)據(jù)用戶可以方便地使用。

2. 數(shù)據(jù)資產(chǎn)目錄的 4 個(gè)核心價(jià)值

數(shù)據(jù)資產(chǎn)目錄是數(shù)據(jù)管理的核心抓手，企業(yè)通過數(shù)據(jù)資產(chǎn)目錄能夠提高數(shù)據(jù)使用和開發(fā)的效率。

數(shù)據(jù)資產(chǎn)目錄主要有如下?4?個(gè)價(jià)值。

（1）統(tǒng)一數(shù)據(jù)管理

企業(yè)的?IT?團(tuán)隊(duì)無法為越來越多的業(yè)務(wù)人員和數(shù)據(jù)分析師提供所需的所有數(shù)據(jù)，導(dǎo)致業(yè)務(wù)人員和數(shù)據(jù)分析師無法了解企業(yè)現(xiàn)有的數(shù)據(jù)集數(shù)量、數(shù)據(jù)集的內(nèi)容以及每個(gè)數(shù)據(jù)集的質(zhì)量和實(shí)用性。他們花費(fèi)太多時(shí)間來查找和理解數(shù)據(jù)，經(jīng)常重新創(chuàng)建已經(jīng)存在的數(shù)據(jù)集，經(jīng)常使用不正確的數(shù)據(jù)集，導(dǎo)致分析不充分和不正確，這也是精益數(shù)據(jù)方法所提到的浪費(fèi)的核心根源。

所以幫助業(yè)務(wù)人員和數(shù)據(jù)分析師實(shí)現(xiàn)自助式數(shù)據(jù)生產(chǎn)是數(shù)據(jù)治理的根本，為此，要先實(shí)現(xiàn)數(shù)據(jù)的統(tǒng)一管理。

數(shù)據(jù)資產(chǎn)目錄應(yīng)該是企業(yè)唯一且統(tǒng)一的數(shù)據(jù)資產(chǎn)管理工具，也是企業(yè)單一可信的數(shù)據(jù)出口。所以，數(shù)據(jù)資產(chǎn)目錄應(yīng)該清晰、結(jié)構(gòu)化地將所有的數(shù)據(jù)資產(chǎn)按類別或標(biāo)簽進(jìn)行管理，讓所有的用戶能夠在一套數(shù)據(jù)體系下、一個(gè)平臺(tái)上獲取、分析和利用數(shù)據(jù)，讓數(shù)據(jù)更容易被理解，從而減少錯(cuò)誤，降低風(fēng)險(xiǎn)，提高數(shù)據(jù)分析效率，從而實(shí)現(xiàn)數(shù)據(jù)自助服務(wù)和分析。

（2）自助式探索分析

數(shù)據(jù)資產(chǎn)目錄應(yīng)該對不同角色的用戶提供對應(yīng)的數(shù)據(jù)探索、瀏覽和分析的功能，從而讓用戶方便地根據(jù)業(yè)務(wù)需要，用自己熟悉的方式瀏覽、查找、探索數(shù)據(jù)。

（3）安全合規(guī)保障

數(shù)據(jù)資產(chǎn)目錄對所有的數(shù)據(jù)、數(shù)據(jù)產(chǎn)品和服務(wù)進(jìn)行分級(jí)、分類、分權(quán)限管理，根據(jù)不同的身份對用戶授權(quán)，滿足企業(yè)的數(shù)據(jù)安全合規(guī)的要求。

（4）高效協(xié)同生產(chǎn)

數(shù)據(jù)資產(chǎn)目錄是所有用戶訪問數(shù)據(jù)的唯一入口，要讓所有用戶能夠高效協(xié)同，比如提供統(tǒng)一的知識(shí)庫、數(shù)據(jù)自服務(wù)、數(shù)據(jù)標(biāo)簽以及協(xié)同開發(fā)等功能。

3. 數(shù)據(jù)資產(chǎn)目錄優(yōu)化企業(yè)數(shù)據(jù)生產(chǎn)全鏈路

在沒有數(shù)據(jù)資產(chǎn)目錄的時(shí)候，企業(yè)的數(shù)據(jù)生產(chǎn)全鏈路如圖?5-13?所示。

圖?5-13　沒有數(shù)據(jù)資產(chǎn)目錄時(shí)的企業(yè)數(shù)據(jù)生產(chǎn)全鏈路

由于沒有統(tǒng)一的數(shù)據(jù)管理工具，所有的數(shù)據(jù)相關(guān)的文檔、數(shù)據(jù)產(chǎn)品和數(shù)據(jù)都分散在企業(yè)不同的系統(tǒng)中，所以當(dāng)需要數(shù)據(jù)的時(shí)候，工作人員就只能通過分散的文檔和各種溝通會(huì)議來獲得數(shù)據(jù)，然后評(píng)估數(shù)據(jù)是不是完整，再進(jìn)行數(shù)據(jù)的探索和理解。如果數(shù)據(jù)不準(zhǔn)確或者不是所需要的，則又要回到原點(diǎn)去尋找數(shù)據(jù)。

在數(shù)據(jù)處理和數(shù)據(jù)分析階段，相關(guān)人員如果需要更多的數(shù)據(jù)，就要尋找更多的數(shù)據(jù)文檔和組織更多的溝通會(huì)議。從尋找數(shù)據(jù)開始，到數(shù)據(jù)分析結(jié)果出來，再到數(shù)據(jù)產(chǎn)品構(gòu)建好，這個(gè)過程費(fèi)時(shí)費(fèi)力，并且新的數(shù)據(jù)分析結(jié)果和數(shù)據(jù)產(chǎn)品又變成了數(shù)據(jù)孤島，當(dāng)別人利用數(shù)據(jù)的時(shí)候依然需要溝通。這樣的過程低效、隨機(jī)性很大，并且很容易導(dǎo)致數(shù)據(jù)質(zhì)量問題。

當(dāng)企業(yè)構(gòu)建起數(shù)據(jù)資產(chǎn)目錄后，數(shù)據(jù)生產(chǎn)的全鏈路就形成了，如圖?5-14?所示。

數(shù)據(jù)資產(chǎn)目錄支撐下的數(shù)據(jù)生產(chǎn)全鏈路

數(shù)據(jù)資產(chǎn)目錄是企業(yè)所有數(shù)據(jù)產(chǎn)品和元數(shù)據(jù)的管理工具，能夠集中地注冊、管理數(shù)據(jù)資產(chǎn)，全面地監(jiān)控?cái)?shù)據(jù)生產(chǎn)的過程，讓用戶對數(shù)據(jù)進(jìn)行探索分析，把數(shù)據(jù)治理的工作分散融入數(shù)據(jù)生產(chǎn)全鏈路中。這樣從尋找數(shù)據(jù)、獲取數(shù)據(jù)、評(píng)估數(shù)據(jù)、理解數(shù)據(jù)、數(shù)據(jù)處理、分析數(shù)據(jù)，到最后數(shù)據(jù)結(jié)果和數(shù)據(jù)產(chǎn)品的分享，所有工作人員都可以實(shí)時(shí)通過數(shù)據(jù)資產(chǎn)目錄協(xié)作，而且所有的操作都會(huì)被記錄下來，不同人可以對數(shù)據(jù)進(jìn)行點(diǎn)評(píng)、打標(biāo)簽，分享自己對這個(gè)數(shù)據(jù)的理解，從而幫助其他人更好地查找和利用數(shù)據(jù)。數(shù)據(jù)資產(chǎn)目錄的目標(biāo)是提供快速且低成本的方式來盤點(diǎn)、分類和組織分散且雜亂無章的數(shù)據(jù)資產(chǎn)，讓所有人用同一個(gè)工具進(jìn)行數(shù)據(jù)的查找、訪問和協(xié)作。數(shù)據(jù)資產(chǎn)目錄幫助企業(yè)構(gòu)建統(tǒng)一的一站式數(shù)據(jù)治理能力，是精益數(shù)據(jù)治理的典型實(shí)現(xiàn)方式。

數(shù)據(jù)資產(chǎn)目錄的典型功能模塊

企業(yè)數(shù)據(jù)資產(chǎn)目錄是數(shù)據(jù)治理和利用的核心工具，主要由如圖?5-15?所示的

功能模塊構(gòu)成。

數(shù)據(jù)資產(chǎn)目錄的?8?個(gè)核心功能模塊

1. 數(shù)據(jù)獲取

數(shù)據(jù)資產(chǎn)目錄要提供全面的數(shù)據(jù)連接、獲取的功能，讓企業(yè)的各類數(shù)據(jù)能夠接入進(jìn)來。在現(xiàn)在數(shù)據(jù)復(fù)雜度越來越高的情況下，企業(yè)數(shù)據(jù)資產(chǎn)目錄要兼容數(shù)據(jù)倉庫、數(shù)據(jù)湖、云上數(shù)據(jù)系統(tǒng)等多種數(shù)據(jù)源。但是，數(shù)據(jù)的存儲(chǔ)并不是數(shù)據(jù)資產(chǎn)目錄的核心功能，數(shù)據(jù)依然可以按業(yè)務(wù)需求以多種形式存儲(chǔ)在不同的地方。數(shù)據(jù)資產(chǎn)目錄要建立全面的數(shù)據(jù)注冊、接入、管理的能力，從而管理好每一個(gè)數(shù)據(jù)的全生命周期。

2. 數(shù)據(jù)探索

數(shù)據(jù)探索是數(shù)據(jù)資產(chǎn)目錄被使用最頻繁的功能，能幫助用戶縮短查找數(shù)據(jù)的時(shí)間，大幅度提升數(shù)據(jù)生產(chǎn)的效率。數(shù)據(jù)資產(chǎn)目錄提供的數(shù)據(jù)探索功能主要

有以下幾點(diǎn)作用。

●?幫助用戶搜索到需要的數(shù)據(jù)和數(shù)據(jù)產(chǎn)品。

●?幫助用戶查看數(shù)據(jù)，為用戶提供全面的數(shù)據(jù)描述信息，也就是元數(shù)據(jù)，

幫助用戶更好地理解數(shù)據(jù)。

●?幫助數(shù)據(jù)探索數(shù)據(jù)的全生命周期信息，也就是數(shù)據(jù)血緣，從而確認(rèn)數(shù)據(jù)

的正確性。

所以，數(shù)據(jù)資產(chǎn)目錄要提供多樣化的數(shù)據(jù)探索功能，主要包括按關(guān)鍵詞搜索、按標(biāo)簽搜索、按訪問熱度瀏覽、按相關(guān)性瀏覽等。數(shù)據(jù)運(yùn)營人員要對用戶的行為數(shù)據(jù)等進(jìn)行深度挖掘分析，從而幫助用戶快速定位到正確的數(shù)據(jù)，通過數(shù)據(jù)資產(chǎn)目錄給用戶推薦更匹配的數(shù)據(jù)。

3. 數(shù)據(jù)管理

數(shù)據(jù)資產(chǎn)目錄是根據(jù)數(shù)據(jù)資產(chǎn)藍(lán)圖構(gòu)建的，界面信息呈樹狀結(jié)構(gòu)。企業(yè)所有的數(shù)據(jù)資產(chǎn)，包括源數(shù)據(jù)、數(shù)據(jù)集、數(shù)據(jù)產(chǎn)品等，都要?dú)w類并掛接到數(shù)據(jù)資產(chǎn)目錄中。并且數(shù)據(jù)資產(chǎn)目錄要通過豐富的業(yè)務(wù)和技術(shù)元數(shù)據(jù)對這些數(shù)據(jù)資產(chǎn)進(jìn)行全面、清晰的描述，方便用戶打標(biāo)簽和評(píng)論。

精益數(shù)據(jù)方法認(rèn)為，數(shù)據(jù)資產(chǎn)目錄不僅要管理好源數(shù)據(jù)，還要將所有二次加工的數(shù)據(jù)、報(bào)表、數(shù)據(jù)集等納入管理。

4. 數(shù)據(jù)質(zhì)量管理

數(shù)據(jù)資產(chǎn)目錄不僅具備數(shù)據(jù)資產(chǎn)倉庫的作用，還要依據(jù)元數(shù)據(jù)和數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)規(guī)范，構(gòu)建起數(shù)據(jù)質(zhì)量管理的能力。數(shù)據(jù)資產(chǎn)目錄要按業(yè)務(wù)需求對所有的數(shù)據(jù)資產(chǎn)進(jìn)行掃描，然后將數(shù)據(jù)質(zhì)量反饋記錄下來，從而在管理數(shù)據(jù)的同時(shí)全面監(jiān)控?cái)?shù)據(jù)質(zhì)量。數(shù)據(jù)資產(chǎn)目錄要能夠跟蹤數(shù)據(jù)質(zhì)量，生成數(shù)據(jù)日志，方便用戶整理和準(zhǔn)備數(shù)據(jù)。此外，數(shù)據(jù)資產(chǎn)目錄使用人工智能來自動(dòng)管理數(shù)據(jù)質(zhì)量，主要管理工作包括檢測最近更新的數(shù)據(jù)存儲(chǔ)的異常情況，將業(yè)務(wù)術(shù)語和標(biāo)簽添加到新數(shù)據(jù)集，檢測可能關(guān)聯(lián)的數(shù)據(jù)集，改善搜索體驗(yàn)。

5. 異常監(jiān)測和管理

數(shù)據(jù)資產(chǎn)目錄要構(gòu)建起自動(dòng)的數(shù)據(jù)監(jiān)測功能，通過將數(shù)據(jù)治理的規(guī)范標(biāo)準(zhǔn)嵌入腳本中，掃描數(shù)據(jù)資產(chǎn)實(shí)時(shí)獲取數(shù)據(jù)資產(chǎn)和數(shù)據(jù)加工過程中的異常情況，起到監(jiān)測重要數(shù)據(jù)問題的作用。

6. 數(shù)據(jù)可視化和分析

用戶在找到數(shù)據(jù)后要進(jìn)行數(shù)據(jù)可視化和數(shù)據(jù)分析，所以數(shù)據(jù)資產(chǎn)目錄也需要將數(shù)據(jù)可視化和分析的功能集成進(jìn)來，為用戶提供流暢的使用體驗(yàn)。

7. 數(shù)據(jù)共享和協(xié)作

數(shù)據(jù)的生產(chǎn)、加工和利用是一個(gè)集體活動(dòng)，所以數(shù)據(jù)資產(chǎn)目錄也要提供一定的共享和協(xié)作功能，大幅減少用戶在查找、生產(chǎn)和利用數(shù)據(jù)過程中的浪費(fèi)。

具體的共享和協(xié)作功能如下。

●?用戶可以共同編輯、維護(hù)元數(shù)據(jù)信息和數(shù)據(jù)知識(shí)庫。

●?用戶可以共享自己的數(shù)據(jù)探索、分析、生產(chǎn)、利用的成果，供其他用戶使用。

●?用戶可以給數(shù)據(jù)資產(chǎn)打標(biāo)簽，做評(píng)論，從而發(fā)現(xiàn)問題，提出問題，供他人參考。

●?每一個(gè)數(shù)據(jù)和數(shù)據(jù)產(chǎn)品都關(guān)聯(lián)到具體的人或團(tuán)隊(duì)，方便用戶之間進(jìn)行交流。

●?用戶可以協(xié)作開發(fā)、協(xié)作編輯、協(xié)作建模。

8. 元數(shù)據(jù)管理

元數(shù)據(jù)管理是數(shù)據(jù)資產(chǎn)目錄最重要的功能，也是最基礎(chǔ)的功能。數(shù)據(jù)資產(chǎn)目錄的整體運(yùn)作就是以元數(shù)據(jù)為基礎(chǔ)的。數(shù)據(jù)資產(chǎn)目錄應(yīng)該全面地管理所有數(shù)據(jù)的兩類元數(shù)據(jù)：技術(shù)元數(shù)據(jù)和業(yè)務(wù)元數(shù)據(jù)。數(shù)據(jù)資產(chǎn)目錄不僅要實(shí)現(xiàn)對元數(shù)據(jù)的定義和管理，還要通過工具和技術(shù)手段對接入的數(shù)據(jù)源自動(dòng)進(jìn)行元數(shù)據(jù)的采集和生成，從而減少人工的工作量，提升數(shù)據(jù)治理的效率。