DAMA國際數(shù)據(jù)管理協(xié)會對數(shù)據(jù)治理定義:數(shù)據(jù)治理是對數(shù)據(jù)資產(chǎn)的管理活動行使權(quán)力和控制的活動集合(規(guī)劃、監(jiān)控和執(zhí)行)。
數(shù)據(jù)治理涵蓋了從前端業(yè)務(wù)系統(tǒng)、后端業(yè)務(wù)數(shù)據(jù)庫再到業(yè)務(wù)終端的
數(shù)據(jù)分析,從源頭到終端再回到源頭,形成的一個(gè)閉環(huán)負(fù)反饋系統(tǒng)。從目的來講,數(shù)據(jù)治理就是要對數(shù)據(jù)的獲取、處理和使用進(jìn)行監(jiān)督管理。

具體一點(diǎn)來講,數(shù)據(jù)治理就是以服務(wù)組織戰(zhàn)略目標(biāo)為基本原則,通過組織成員的協(xié)同努力,流程制度的制定,以及數(shù)據(jù)資產(chǎn)的梳理、采集清洗、結(jié)構(gòu)化存儲、可視化管理和多維度分析,實(shí)現(xiàn)
數(shù)據(jù)資產(chǎn)價(jià)值獲取、業(yè)務(wù)模式創(chuàng)新和經(jīng)營風(fēng)險(xiǎn)控制的過程。今天小億就來帶著大家從各概念定義本身來說說數(shù)據(jù)治理。
01、元數(shù)據(jù)
元數(shù)據(jù)是關(guān)于數(shù)據(jù)的數(shù)據(jù),是為了描述數(shù)據(jù)的相關(guān)信息而存在的數(shù)據(jù)。
元數(shù)據(jù)不僅僅表示數(shù)據(jù)的類型、名稱、值等信息,它可以理解為是一組用來描述數(shù)據(jù)的信息組/數(shù)據(jù)組,該信息組/數(shù)據(jù)組中的一切數(shù)據(jù)、信息,都描述/反映了某個(gè)數(shù)據(jù)的某方面特征,則該信息組/數(shù)據(jù)組可稱為一個(gè)元數(shù)據(jù)。

▲技術(shù)元數(shù)據(jù)
例如:元數(shù)據(jù)可以為數(shù)據(jù)說明其元素或?qū)傩裕Q、大小、數(shù)據(jù)類型等),或其結(jié)構(gòu)(長度、字段、數(shù)據(jù)列),或其相關(guān)數(shù)據(jù)(位于何處、如何聯(lián)系、擁有者)。在日常生活中,元數(shù)據(jù)無所不在。只要有一類事物,就可以定義一套元數(shù)據(jù)。

▲業(yè)務(wù)元數(shù)據(jù)
除此以外,在
數(shù)據(jù)倉庫體系中,元數(shù)據(jù)代表了一種統(tǒng)計(jì)數(shù)據(jù)從元數(shù)據(jù)、數(shù)據(jù)倉庫到
數(shù)據(jù)應(yīng)用的全鏈路信息,記錄了統(tǒng)計(jì)數(shù)據(jù)從產(chǎn)生到展示的全部過程。可以說,有了元數(shù)據(jù),開發(fā)人員便可以方便地找到統(tǒng)計(jì)數(shù)據(jù)背后的計(jì)算邏輯與過程,用于指導(dǎo)開發(fā)工作并追蹤數(shù)據(jù)問題,可以極大地提升工作的效率。
02、主數(shù)據(jù)
在2018年中國信通院牽頭編寫的《
主數(shù)據(jù)管理實(shí)踐白皮書(1.0版)》中,主數(shù)據(jù)定義的概念如下:“指滿足跨部門業(yè)務(wù)協(xié)同需要的、反映核心業(yè)務(wù)實(shí)體狀態(tài)屬性的組織機(jī)構(gòu)的基礎(chǔ)信息。主數(shù)據(jù)相對于交易數(shù)據(jù)而言,屬性更加穩(wěn)定,準(zhǔn)確度要求更高,唯一識別。”
企業(yè)主數(shù)據(jù)指企業(yè)內(nèi)一致并共享的業(yè)務(wù)主體,如圖所示,是各個(gè)系統(tǒng)(包括操作型系統(tǒng)、事務(wù)型應(yīng)用系統(tǒng)、分析型系統(tǒng))間一致并共享的數(shù)據(jù);是用來描述核心業(yè)務(wù)的實(shí)體,例如員工、組織機(jī)構(gòu)、客戶、供應(yīng)商、會計(jì)科目等相關(guān)數(shù)據(jù)。主數(shù)據(jù)與其他數(shù)據(jù)的關(guān)系如圖所示:

具有以下特點(diǎn)
1.權(quán)威性:主數(shù)據(jù)作為企業(yè)最重要的數(shù)據(jù)資產(chǎn),它的設(shè)計(jì)并不面向業(yè)務(wù)系統(tǒng),而應(yīng)該保持相對的獨(dú)立,它服務(wù)于但又高于使用主數(shù)據(jù)的業(yè)務(wù)系統(tǒng);
2.全局性:主數(shù)據(jù)是超越部門與流程而存在的,以滿足跨部門業(yè)務(wù)協(xié)同而建立的,可以認(rèn)為是所有職能部門業(yè)務(wù)過程的“最大公約數(shù)”;

3.共享性:主數(shù)據(jù)是在兩個(gè)或多個(gè)系統(tǒng)之間,需要共享的數(shù)據(jù),才能定義為主數(shù)據(jù)。因此主數(shù)據(jù)必須應(yīng)用一種能夠被各種異構(gòu)系統(tǒng)所兼容的技術(shù)架構(gòu);
4.擴(kuò)展性:主數(shù)據(jù)在設(shè)計(jì)的時(shí)候,就需要考慮未來做擴(kuò)展的可能性。因此主數(shù)據(jù)數(shù)據(jù)項(xiàng)定義時(shí)應(yīng)當(dāng)遵守開閉原則,即對擴(kuò)展開放對修改關(guān)閉, 凡是已經(jīng)定義的主數(shù)據(jù)數(shù)據(jù)項(xiàng)原則上不應(yīng)當(dāng)再次修改。
03、數(shù)據(jù)標(biāo)準(zhǔn)
數(shù)據(jù)標(biāo)準(zhǔn)是指企業(yè)為保障數(shù)據(jù)的內(nèi)外部使用和交換的一致性和準(zhǔn)確性而制定的規(guī)范性約束。而數(shù)據(jù)標(biāo)準(zhǔn)管理則是一套由管理制度、管控流程、技術(shù)工具共同組成的體系,是通過這套體系的推廣,應(yīng)用統(tǒng)一的數(shù)據(jù)定義、數(shù)據(jù)分類、記錄格式和轉(zhuǎn)換、編碼等實(shí)現(xiàn)數(shù)據(jù)的標(biāo)準(zhǔn)化。
數(shù)據(jù)標(biāo)準(zhǔn)管理的目標(biāo)是通過統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)制定和發(fā)布,結(jié)合制度約束、系統(tǒng)控制等手段,實(shí)現(xiàn)數(shù)據(jù)的完整性、有效性、一致性、規(guī)范性、開放性和共享性管理,為
數(shù)據(jù)資產(chǎn)管理提供經(jīng)管理依據(jù)。

▲數(shù)據(jù)治理體系架構(gòu)
對于大多數(shù)企業(yè)而言,他們已有各種各樣的信息規(guī)范,如建模規(guī)范,但是這些規(guī)范只是為了約束開發(fā)工作,更多的時(shí)候強(qiáng)調(diào)的是數(shù)據(jù)字典表達(dá)的規(guī)范。而企業(yè)級數(shù)據(jù)標(biāo)準(zhǔn)的目標(biāo)卻是使企業(yè)內(nèi)部在業(yè)務(wù)和數(shù)據(jù)上達(dá)成共識,業(yè)務(wù)共識在先,數(shù)據(jù)共識在后。從一個(gè)IT管理的數(shù)據(jù)規(guī)范變成企業(yè)級的數(shù)據(jù)標(biāo)準(zhǔn),將是非常大的轉(zhuǎn)變,這個(gè)轉(zhuǎn)變的核心是以數(shù)據(jù)標(biāo)準(zhǔn)提高業(yè)務(wù)的規(guī)范性和業(yè)務(wù)協(xié)同能力,同時(shí)約束IT系統(tǒng)建設(shè)。
04、數(shù)據(jù)質(zhì)量
數(shù)據(jù)質(zhì)量是指在業(yè)務(wù)環(huán)境下,數(shù)據(jù)符合數(shù)據(jù)消費(fèi)者的使用目的,數(shù)據(jù)質(zhì)量需要滿足業(yè)務(wù)場景具體的需求。數(shù)據(jù)質(zhì)量包含兩個(gè)方面:數(shù)據(jù)自身的質(zhì)量和數(shù)據(jù)的過程質(zhì)量。
數(shù)據(jù)自身的質(zhì)量很好理解,比如數(shù)據(jù)必須真實(shí)準(zhǔn)確地反映實(shí)際發(fā)生的業(yè)務(wù),任何業(yè)務(wù)操作的數(shù)據(jù)都沒有被遺漏,數(shù)據(jù)存在各種約束條件,這種約束條件不能自相矛盾等等。

數(shù)據(jù)的過程質(zhì)量就是數(shù)據(jù)的使用過程符合標(biāo)準(zhǔn)規(guī)范,比如
數(shù)據(jù)存儲:數(shù)據(jù)是否被安全地存儲到了合適的介質(zhì)上,能夠保證數(shù)據(jù)不受外來因素的破壞。當(dāng)然數(shù)據(jù)存儲只是數(shù)據(jù)使用過程的一個(gè)環(huán)節(jié),除此之外還包括獲取、傳輸、應(yīng)用和刪除等一系列的使用過程,這其實(shí)也是數(shù)據(jù)生命周期的各個(gè)階段。
05、數(shù)據(jù)指標(biāo)
根據(jù)百度百科的定義,預(yù)期中打算達(dá)到的指數(shù)、規(guī)格、標(biāo)準(zhǔn),一般用數(shù)據(jù)表示就是指標(biāo)。
而數(shù)據(jù)指標(biāo)有別于傳統(tǒng)意義上的統(tǒng)計(jì)指標(biāo),它是通過對數(shù)據(jù)進(jìn)行分析得到的一個(gè)匯總結(jié)果,是將業(yè)務(wù)單元精分和量化后的度量值,使得業(yè)務(wù)目標(biāo)可描述、可度量、可拆解。但只有對業(yè)務(wù)有參考價(jià)值的可統(tǒng)計(jì)的數(shù)據(jù)才能叫做指標(biāo),因?yàn)樗从沉擞脩糇隽四男┬袨椋o業(yè)務(wù)帶來了怎樣的結(jié)果指標(biāo)。

而數(shù)據(jù)指標(biāo)體系是通過技術(shù)手段,從不同的“維度”梳理業(yè)務(wù)過程,將零散的、有關(guān)聯(lián)性的指標(biāo),系統(tǒng)化的組織起來,通過數(shù)據(jù)看板或接口形式,提供給運(yùn)營、算法等不同的業(yè)務(wù)方使用。
一個(gè)好的數(shù)據(jù)指標(biāo)體系能幫助使用者準(zhǔn)確快速地下結(jié)論,比如定義業(yè)務(wù)運(yùn)作的好壞、能滿足多場景的歸因,即使出現(xiàn)異動,也能快速定位原因,最終提高發(fā)現(xiàn)問題、分析問題、解決問題的效率。
06、數(shù)據(jù)交換
出于各種原因,組織會選擇數(shù)據(jù)交換與共享。例如,內(nèi)部與內(nèi)部的數(shù)據(jù)交換共享,企業(yè)與企業(yè)之間的數(shù)據(jù)交換共享,以及政府或企業(yè)對個(gè)人或服務(wù)提供商的數(shù)據(jù)交換與共享。數(shù)據(jù)交換共享就是讓不同地方使用不同計(jì)算機(jī)、不同軟件的用戶能夠讀取他人數(shù)據(jù)并進(jìn)行各種操作運(yùn)算和分析。

也就是當(dāng)數(shù)據(jù)從一個(gè)系統(tǒng)跨授權(quán)邊界訪問或傳遞到另一個(gè)系統(tǒng)時(shí),就需要使用一個(gè)或多個(gè)協(xié)議來指定每個(gè)組織的責(zé)任、要訪問或交換的數(shù)據(jù)類型和影響界別、如何使用交換數(shù)據(jù),以及在交換系統(tǒng)的兩端處理、存儲或傳輸數(shù)據(jù)時(shí)如何保證數(shù)據(jù)安全。
常見的數(shù)據(jù)交換/共享場景包括但不限于:在授權(quán)用戶之間共享數(shù)據(jù)和信息;提供對數(shù)據(jù)的自定義訪問;合作進(jìn)行聯(lián)合項(xiàng)目;提供完整的、短暫的、間歇性的、永久的或臨時(shí)的數(shù)據(jù)交換共享活動;通過交換共享減少數(shù)據(jù)收集工作量和成本;提供在線培訓(xùn);為關(guān)鍵數(shù)據(jù)和備份文件提供安全存儲。
07、數(shù)據(jù)資產(chǎn)
在理論層面,目前并沒有對數(shù)據(jù)資產(chǎn)的權(quán)威定義。我們選取業(yè)界較為認(rèn)可的概念,即:數(shù)據(jù)資產(chǎn)是指由企業(yè)擁有或者控制的,能夠?yàn)槠髽I(yè)帶來未來經(jīng)濟(jì)利益的,以物理或電子的方式記錄的數(shù)據(jù)資源,如文件資料、電子數(shù)據(jù)等。但在企業(yè)中,并非所有的數(shù)據(jù)都構(gòu)成數(shù)據(jù)資產(chǎn),數(shù)據(jù)資產(chǎn)是能夠?yàn)槠髽I(yè)產(chǎn)生價(jià)值的數(shù)據(jù)資源。
數(shù)據(jù)資產(chǎn)管理是對存量數(shù)據(jù)進(jìn)行系統(tǒng)化梳理,與數(shù)據(jù)標(biāo)準(zhǔn)匹配,推動數(shù)據(jù)資源轉(zhuǎn)化為數(shù)據(jù)資產(chǎn)的過程,即指規(guī)劃、控制和提供數(shù)據(jù)及信息的一組業(yè)務(wù)職能,包括開發(fā)、執(zhí)行和監(jiān)督有關(guān)數(shù)據(jù)的計(jì)劃、政策、方案、項(xiàng)目、流程、方法和程序,從而控制、保護(hù)、交互和提高數(shù)據(jù)資產(chǎn)的價(jià)值。數(shù)據(jù)資產(chǎn)管理需要充分融合業(yè)務(wù)、技術(shù)和管理,以確保數(shù)據(jù)資產(chǎn)保值增值。

▲數(shù)據(jù)治理實(shí)施步驟
在數(shù)據(jù)治理架構(gòu)中,數(shù)據(jù)資產(chǎn)管理位于底層數(shù)據(jù)和數(shù)據(jù)管理與應(yīng)用之間,處于承上啟下的重要地位。對上支撐數(shù)據(jù)安全管理等職能建設(shè)以價(jià)值發(fā)掘?yàn)閷?dǎo)向的數(shù)據(jù)應(yīng)用,對下實(shí)現(xiàn)底層數(shù)據(jù)的梳理、對接數(shù)據(jù)標(biāo)準(zhǔn),達(dá)成企業(yè)內(nèi)部“統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)”的目標(biāo)。
08、小結(jié)
數(shù)據(jù)治理就是實(shí)現(xiàn)
數(shù)據(jù)價(jià)值的過程。這個(gè)過程怎么實(shí)現(xiàn)?通過采集、傳輸、儲存等一系列標(biāo)準(zhǔn)化流程將原本零散的數(shù)據(jù)變成格式規(guī)范、結(jié)構(gòu)統(tǒng)一的數(shù)據(jù),同時(shí)對其進(jìn)行嚴(yán)格規(guī)范的綜合數(shù)據(jù)監(jiān)控,保證數(shù)據(jù)質(zhì)量;然后對這些標(biāo)準(zhǔn)化的數(shù)據(jù)進(jìn)行進(jìn)一步的加工分析,形成具有指導(dǎo)意義的業(yè)務(wù)監(jiān)控報(bào)表、業(yè)務(wù)監(jiān)控模型等,來幫助企業(yè)進(jìn)行輔助決策。
比如,睿治
數(shù)據(jù)治理平臺是由億信華辰完全自主研發(fā)的、開創(chuàng)性的、一站式綜合數(shù)據(jù)治理整體解決方案。睿治數(shù)據(jù)治理平臺融合
數(shù)據(jù)集成、數(shù)據(jù)交換、實(shí)時(shí)計(jì)算存儲、
元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理、主數(shù)據(jù)管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)安全管理、數(shù)據(jù)生命周期管理十大產(chǎn)品模塊,打通數(shù)據(jù)治理各個(gè)環(huán)節(jié),十大產(chǎn)品模塊可獨(dú)立或任意組合使用,快速滿足政府、企業(yè)各類不同的數(shù)據(jù)治理場景。

▲睿治數(shù)據(jù)治理平臺架構(gòu)圖
(部分內(nèi)容來源網(wǎng)絡(luò),如有侵權(quán)請聯(lián)系刪除)