隨著公司業(yè)務(wù)的不斷發(fā)展，各IT系統(tǒng)保存了大量的數(shù)據(jù)，但數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一，數(shù)據(jù)共享難度高，數(shù)據(jù)孤島嚴(yán)重，領(lǐng)導(dǎo)層無法看到貫穿各環(huán)節(jié)的全貌數(shù)據(jù)。業(yè)務(wù)人員跨系統(tǒng)、跨專業(yè)線分析難以實(shí)現(xiàn)，且不能保證數(shù)據(jù)的準(zhǔn)確性。IT人員缺乏統(tǒng)一的數(shù)據(jù)管理工具支撐各IT系統(tǒng)數(shù)據(jù)整合。

希望借助于外部成熟的軟件和經(jīng)驗(yàn)來助力公司數(shù)字化轉(zhuǎn)型，最終選擇億信華辰睿治數(shù)據(jù)治理平臺，并借鑒制造業(yè)數(shù)據(jù)治理推廣經(jīng)驗(yàn)(以技術(shù)支持形式)來提升公司數(shù)字的價值,做到管對數(shù)據(jù)，管好數(shù)據(jù)，把數(shù)據(jù)轉(zhuǎn)換成生產(chǎn)力。

系統(tǒng)平臺建設(shè)思路按照“1+2+2“即“一個體系兩個中心兩個應(yīng)用”進(jìn)行設(shè)計。

“兩個應(yīng)用”分別是數(shù)據(jù)資產(chǎn)門戶和數(shù)據(jù)API服務(wù)應(yīng)用。

“兩個中心”分別是匯聚中心、數(shù)據(jù)中心。匯聚中心是數(shù)據(jù)的采集匯聚及ETL功能平臺；數(shù)據(jù)中心基于匯聚的數(shù)據(jù)實(shí)現(xiàn)數(shù)據(jù)湖/數(shù)據(jù)倉庫的建設(shè)，為上層的數(shù)據(jù)治理及數(shù)據(jù)應(yīng)用提供數(shù)據(jù)基礎(chǔ)，數(shù)據(jù)中心同時要實(shí)現(xiàn)數(shù)據(jù)數(shù)據(jù)治理活動包括數(shù)據(jù)資產(chǎn)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全等相關(guān)功能。

“一個體系”是指建立數(shù)據(jù)的管理體系和管理規(guī)范體系，制定企業(yè)的數(shù)據(jù)管理模式、策略和標(biāo)準(zhǔn)，通過對數(shù)據(jù)的標(biāo)準(zhǔn)化、資產(chǎn)化管理，實(shí)現(xiàn)企業(yè)各業(yè)務(wù)數(shù)據(jù)的匯聚融合、各環(huán)節(jié)數(shù)據(jù)的一致性，實(shí)現(xiàn)數(shù)據(jù)的整合統(tǒng)一、避免數(shù)據(jù)重復(fù)和沖突影響數(shù)據(jù)的質(zhì)量，影響數(shù)據(jù)分析挖掘及可視化效果。

項(xiàng)目建設(shè)架構(gòu)如下：

1.元數(shù)據(jù)管理

• 接入了30多個業(yè)務(wù)系統(tǒng)的元數(shù)據(jù)，涉及到十幾種數(shù)據(jù)庫
• 利用元模型自定義屬性的功能，自定義了多個業(yè)務(wù)屬性，以此驅(qū)動業(yè)務(wù)系統(tǒng)補(bǔ)充了元數(shù)據(jù)各類屬性信息，提升元數(shù)據(jù)信息可讀性
• 定時元數(shù)據(jù)采集任務(wù)，實(shí)時更新對應(yīng)的數(shù)據(jù)資產(chǎn)，采用EXCEL補(bǔ)錄適配器進(jìn)行數(shù)據(jù)補(bǔ)錄，實(shí)現(xiàn)元數(shù)據(jù)屬性的批量維護(hù)
• 對所在數(shù)據(jù)集成的調(diào)度任務(wù)進(jìn)行了采集，進(jìn)行ETL任務(wù)的血緣分析

2.數(shù)據(jù)質(zhì)量管理

• 對HR系統(tǒng)人員基本信息（例如緊急聯(lián)系人、家屬信息、個人信息、員工信息等）進(jìn)行了質(zhì)檢，并驅(qū)動業(yè)務(wù)端進(jìn)行數(shù)據(jù)的補(bǔ)充和修改，并定期形成了數(shù)據(jù)質(zhì)量報告，管理層可清晰掌握數(shù)據(jù)質(zhì)量整改成效
• 對關(guān)鍵系統(tǒng)關(guān)注信息，如抽取及時性進(jìn)行質(zhì)檢，并發(fā)送質(zhì)量預(yù)警至企業(yè)微信

3.數(shù)據(jù)集成

• 涉及多種數(shù)據(jù)類型，大表數(shù)據(jù)量在十億級別，利用表輸入-hadoop 輸出組件完成數(shù)據(jù)入湖工作，將來源各個業(yè)務(wù)系統(tǒng)的數(shù)據(jù)抽取到數(shù)據(jù)抽取到Hadoop大數(shù)據(jù)底座
• 除了完成抽取入湖工作以外，還用了多個類型的其他組件完成ETL任務(wù)開發(fā)
• 目前在運(yùn)行的調(diào)度3000多個

4.數(shù)據(jù)資產(chǎn)

• 根據(jù)元數(shù)據(jù)智能添加資產(chǎn)4000+多個，涉及敏感字段資產(chǎn)利用數(shù)據(jù)安全進(jìn)行敏感數(shù)據(jù)脫敏后在上架
• 根據(jù)資產(chǎn)開放API接口30+，部分接口累計調(diào)用30W+次
• 自定義多個標(biāo)簽，可根據(jù)標(biāo)簽定義資產(chǎn)

• 基于企業(yè)系統(tǒng)現(xiàn)狀，盤點(diǎn)了企業(yè)各大業(yè)務(wù)系統(tǒng)，摸清了企業(yè)數(shù)據(jù)情況，使得IT部門對企業(yè)內(nèi)部系統(tǒng)有了全局把控，同時，表的屬性中添加了IT負(fù)責(zé)人工號、IT負(fù)責(zé)人、業(yè)務(wù)負(fù)責(zé)人工號、業(yè)務(wù)負(fù)責(zé)人、業(yè)務(wù)歸屬部門、等業(yè)務(wù)屬性，驅(qū)動業(yè)務(wù)系統(tǒng)補(bǔ)充了元數(shù)據(jù)各類屬性信息，提升數(shù)據(jù)信息可讀性，讓數(shù)據(jù)真正意義上有了主人。
• 利用數(shù)據(jù)資產(chǎn)盤點(diǎn)，設(shè)計數(shù)據(jù)資產(chǎn)門戶，提供預(yù)覽、下載、數(shù)據(jù)分析和API接口等服務(wù)，實(shí)現(xiàn)了各業(yè)務(wù)系統(tǒng)數(shù)據(jù)能在統(tǒng)一的平臺進(jìn)行共享查詢服務(wù)，促使數(shù)據(jù)價值能充分的利用，也讓IT技術(shù)部門給業(yè)務(wù)部門提供服務(wù)擁有了更便捷的方式。
• 
  
• 對原HR系統(tǒng)質(zhì)量較差的數(shù)據(jù)進(jìn)行全面的數(shù)據(jù)質(zhì)量檢查，初始業(yè)務(wù)人員對有質(zhì)量問題的數(shù)據(jù)進(jìn)行整改，有效的提高了HR系統(tǒng)的數(shù)據(jù)質(zhì)量。
• 
  
• 利用數(shù)據(jù)安全首先識別出了敏感數(shù)據(jù)，然后數(shù)據(jù)資產(chǎn)上架前進(jìn)行數(shù)據(jù)脫敏處理，全方位進(jìn)行數(shù)據(jù)安全保障。