數(shù)據(jù)治理是將一個企業(yè)或政府部門的數(shù)據(jù)作為戰(zhàn)略資產(chǎn)來管理，需要建立一套從數(shù)據(jù)采集到處理應(yīng)用的管理機(jī)制，以提高數(shù)據(jù)質(zhì)量，實(shí)現(xiàn)廣泛的數(shù)據(jù)共享，最終實(shí)現(xiàn)數(shù)據(jù)價值最大化。

數(shù)據(jù)治理平臺的建設(shè)背景

隨著大數(shù)據(jù)時代的來臨以及信息技術(shù)的發(fā)展，人們產(chǎn)生的數(shù)據(jù)量正在以指數(shù)級的速度在增長，并且數(shù)據(jù)正以多元結(jié)構(gòu)（結(jié)構(gòu)化與非結(jié)構(gòu)化）趨勢發(fā)展。如今各行業(yè)都開始了大數(shù)據(jù)平臺的建設(shè)，希望利用大數(shù)據(jù)的能力，來實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型。如此海量的、多元結(jié)構(gòu)的數(shù)據(jù)就要求利用有效的方法來管理。目前大數(shù)據(jù)平臺的突出問題主要體現(xiàn)在以下四方面：

1、 對平臺中的數(shù)據(jù)不了解；

2、 沒有統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)

3、 不能高效快捷獲取數(shù)據(jù)

4、 難以搭建數(shù)據(jù)之間的關(guān)聯(lián)體系

數(shù)據(jù)治理是將一個企業(yè)或政府部門的數(shù)據(jù)作為戰(zhàn)略資產(chǎn)來管理，需要建立一套從數(shù)據(jù)采集到處理應(yīng)用的管理機(jī)制，以提高數(shù)據(jù)質(zhì)量，實(shí)現(xiàn)廣泛的數(shù)據(jù)共享，最終實(shí)現(xiàn)數(shù)據(jù)價值最大化。

數(shù)據(jù)治理平臺的建設(shè)目標(biāo)

基于數(shù)據(jù)治理體系，可以分為六大建設(shè)目標(biāo)：

（1）數(shù)據(jù)接入標(biāo)準(zhǔn)化：對源頭采集的數(shù)據(jù)制定統(tǒng)一標(biāo)準(zhǔn)，全程實(shí)時監(jiān)控接入了多少數(shù)據(jù)，通過設(shè)置預(yù)警閥值，應(yīng)該接入多少數(shù)據(jù)，及時發(fā)現(xiàn)源頭采集問題。

(2）數(shù)據(jù)處理自動化：通過人工智能技術(shù)，以機(jī)器算法代替人力勞動，提高生產(chǎn)效率。

(3）數(shù)據(jù)監(jiān)控智能化：通過定義接口規(guī)范，實(shí)現(xiàn)數(shù)據(jù)監(jiān)控的統(tǒng)一管理，以短信、郵箱方式及時提醒、發(fā)現(xiàn)并解決問題。

(4）數(shù)據(jù)組織知識化：收集不同業(yè)務(wù)的數(shù)據(jù)集，進(jìn)行預(yù)處理，自主建模，可視化分析，形成知識圖譜。

(5）數(shù)據(jù)運(yùn)行可視化：將ETL工具、業(yè)務(wù)流程與數(shù)據(jù)治理平臺結(jié)合，打通數(shù)據(jù)治理實(shí)施各個環(huán)節(jié)，由平臺驅(qū)動各產(chǎn)品協(xié)作完成整個數(shù)據(jù)治理過程。

(6）數(shù)據(jù)應(yīng)用自助化：通過數(shù)據(jù)治理平臺，企業(yè)用戶可自助獲取高質(zhì)量數(shù)據(jù)，并且平臺還會根據(jù)企業(yè)用戶需求，提供各種服務(wù)。

數(shù)據(jù)治理平臺的建設(shè)思路

形成數(shù)據(jù)治理體系

大數(shù)據(jù)中心的建設(shè)需要通過數(shù)據(jù)治理體系來實(shí)施，主要包括五大部分：

(1）制定標(biāo)準(zhǔn)，建立統(tǒng)一標(biāo)準(zhǔn)規(guī)范。

(2）數(shù)據(jù)處理，對導(dǎo)入數(shù)據(jù)進(jìn)行清洗，提高數(shù)據(jù)質(zhì)量。

(3）資產(chǎn)管理，實(shí)時監(jiān)控記錄數(shù)據(jù)數(shù)量、來源、標(biāo)準(zhǔn)情況等。

(4）共享服務(wù)，實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)共享。

(5）數(shù)據(jù)應(yīng)用，實(shí)現(xiàn)數(shù)據(jù)治理價值，根據(jù)應(yīng)用效果，對治理體系進(jìn)行改進(jìn)。

構(gòu)建數(shù)據(jù)治理架構(gòu)

圖為億信華辰睿治智能數(shù)據(jù)治理平臺產(chǎn)品架構(gòu)圖，睿治數(shù)據(jù)治理平臺融合數(shù)據(jù)集成、數(shù)據(jù)交換、實(shí)時計算存儲、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理、主數(shù)據(jù)管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)安全管理、數(shù)據(jù)生命周期管理十大產(chǎn)品模塊，打通數(shù)據(jù)治理各個環(huán)節(jié)，十大產(chǎn)品模塊可獨(dú)立或任意組合使用，快速滿足政府、企業(yè)各類不同的數(shù)據(jù)治理場景。

構(gòu)建數(shù)據(jù)中心架構(gòu)

數(shù)據(jù)中心是按照四層架構(gòu)，包括源數(shù)據(jù)區(qū)、緩沖區(qū)、基礎(chǔ)區(qū)和專題區(qū)：

(1）源數(shù)據(jù)區(qū)，是數(shù)據(jù)中心匯聚的基礎(chǔ)，比如組織機(jī)構(gòu)的業(yè)務(wù)數(shù)據(jù)，以結(jié)構(gòu)化數(shù)據(jù)為主體，也包括非結(jié)構(gòu)化數(shù)據(jù)和流式數(shù)據(jù)。

(2）緩沖區(qū)，是數(shù)據(jù)中心和業(yè)務(wù)系統(tǒng)之間的緩存區(qū)，避免數(shù)據(jù)治理對各業(yè)務(wù)流程產(chǎn)生影響。

(3）基礎(chǔ)區(qū)包括兩部分，結(jié)構(gòu)化標(biāo)準(zhǔn)庫，是對緩沖庫數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化處理之后的數(shù)據(jù)；業(yè)務(wù)整合區(qū)是對所有數(shù)據(jù)進(jìn)行建模、打造知識體系的過程，其中模型主要包括主題域模型、主數(shù)據(jù)模型，以及將數(shù)據(jù)縱橫關(guān)聯(lián)的知識圖譜和標(biāo)簽庫。

(4）專題區(qū)涵蓋了所有業(yè)務(wù)專題，是數(shù)據(jù)治理成果的一種展現(xiàn)方式。

數(shù)據(jù)梳理

數(shù)據(jù)梳理是數(shù)據(jù)治理的前提，即總結(jié)分析數(shù)據(jù)資源，掌握業(yè)務(wù)流程。將數(shù)據(jù)治理過程中，對數(shù)據(jù)進(jìn)行預(yù)處理、分析、建模、可視化后的結(jié)果，以報表等展現(xiàn)出來。

數(shù)據(jù)治理的目標(biāo)是提高數(shù)據(jù)的質(zhì)量（準(zhǔn)確性、及時性、完整性、唯一性、一致性，有效性），確保數(shù)據(jù)的安全性（保密性、完整性及可用性），實(shí)現(xiàn)數(shù)據(jù)資源在各組織機(jī)構(gòu)部門的共享，推進(jìn)數(shù)據(jù)資源的整合、服務(wù)和共享，從而提升企事業(yè)單位信息化水平，充分發(fā)揮數(shù)據(jù)資產(chǎn)作用。通過實(shí)施數(shù)據(jù)治理工具，可以讓數(shù)據(jù)質(zhì)量變得更好，發(fā)掘數(shù)據(jù)資產(chǎn)的商業(yè)價值，實(shí)現(xiàn)如下目標(biāo)：對業(yè)務(wù)的支撐；降低經(jīng)營風(fēng)險、安全保障；對決策進(jìn)行支持；滿足風(fēng)險控制和外部監(jiān)管要求；實(shí)現(xiàn)企業(yè)可持續(xù)發(fā)展。關(guān)于數(shù)據(jù)治理工具，我推薦睿治智能數(shù)據(jù)治理平臺，主要原因有：

1）平臺支持多種數(shù)據(jù)庫、文件等結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。

2）支持通過元數(shù)據(jù)批量盤點(diǎn)數(shù)據(jù)資產(chǎn)，自動活化資產(chǎn)目錄信息，及時響應(yīng)資源的變更情況。

3）可以快捷開發(fā)出多種數(shù)據(jù)服務(wù)類型，包括：數(shù)據(jù)查詢、下載、共享交換、API和敏捷分析，還能提供分析產(chǎn)品授權(quán)使用、基于分析模型報表開發(fā)、驗(yàn)證接口調(diào)用、主題文件批量下載等高附加值服務(wù)。

4）消費(fèi)者獲取的數(shù)據(jù)可依據(jù)數(shù)據(jù)安全中對資產(chǎn)的分級分類要求做響應(yīng)的脫敏和加密處理。

5)消費(fèi)者在門戶中可以通過關(guān)鍵字檢索的方式查找需要的數(shù)據(jù)資產(chǎn)，瀏覽數(shù)據(jù)資產(chǎn)詳情并發(fā)起數(shù)據(jù)服務(wù)的使用申請。