元數(shù)據(jù)是數(shù)據(jù)的“說明書”，元數(shù)據(jù)管理工具是企業(yè)數(shù)據(jù)治理的重要抓手，它可以幫助企業(yè)解決數(shù)據(jù)查找難、理解難等問題，促進(jìn)數(shù)據(jù)的集成和共享。一個趁手的元數(shù)據(jù)管理工具是什么樣的呢？

01、系統(tǒng)架構(gòu)

從應(yīng)用角度看，元數(shù)據(jù)管理平臺可分為數(shù)據(jù)源層、元數(shù)據(jù)采集層、元數(shù)據(jù)管理層、元數(shù)據(jù)應(yīng)用層四層架構(gòu)，如圖1所示。
億信華辰元數(shù)據(jù)管理平臺EsPowerMeta是基于B/S架構(gòu)的軟件平臺，架構(gòu)分為5層，數(shù)據(jù)源層、采集層、數(shù)據(jù)層、功能層和訪問層。下圖為億信華辰元數(shù)據(jù)管理產(chǎn)品的整體架構(gòu)圖。

△億信華辰元數(shù)據(jù)管理平臺架構(gòu)圖
1. 數(shù)據(jù)源層
企業(yè)的元數(shù)據(jù)來自多個方面：

● 業(yè)務(wù)系統(tǒng)中的元數(shù)據(jù)，例如ERP、CRM、SCM、OA等；
● 數(shù)據(jù)管理平臺中的元數(shù)據(jù)，例如數(shù)據(jù)倉庫、ODS、數(shù)據(jù)湖等；

● 數(shù)據(jù)處理工具中的元數(shù)據(jù)，例如ETL工具的腳本元數(shù)據(jù)；

● 數(shù)據(jù)分析工具中的元數(shù)據(jù)，例如Cognos、Power BI中的元數(shù)據(jù)；

● 各種半結(jié)構(gòu)化數(shù)據(jù)源，例如Word、PDF、Excel等各種格式化電子文件。
億信華辰元數(shù)據(jù)管理平臺提供直連多種不同類型的數(shù)據(jù)源，包括：數(shù)據(jù)庫類型、ETL類型、文件類型、業(yè)務(wù)系統(tǒng)類型等。
2. 元數(shù)據(jù)采集層
元數(shù)據(jù)采集層主要通過對各類數(shù)據(jù)源的適配，實(shí)現(xiàn)元數(shù)據(jù)的統(tǒng)一采集，并將其存儲于符合CWM標(biāo)準(zhǔn)的中央元數(shù)據(jù)倉庫中。億信華辰元數(shù)據(jù)管理平臺針對不同數(shù)據(jù)源提供豐富的適配器，實(shí)現(xiàn)端到端的自動化采集。同時(shí)支持適配器擴(kuò)展，實(shí)現(xiàn)最大限度的自動化采集。
3. 元數(shù)據(jù)數(shù)據(jù)層
元數(shù)據(jù)數(shù)據(jù)層是基于關(guān)系數(shù)據(jù)庫的元數(shù)據(jù)存儲，用于實(shí)現(xiàn)元數(shù)據(jù)和元模型的數(shù)據(jù)的物理存儲。
4. 元數(shù)據(jù)功能層
元數(shù)據(jù)功能層提供了元數(shù)據(jù)管理產(chǎn)品的基本功能，包括元模型增刪改查及版本發(fā)布功能、元數(shù)據(jù)增刪改查及版本管理、元數(shù)據(jù)變更管理、元數(shù)據(jù)分析應(yīng)用、元數(shù)據(jù)檢核以及產(chǎn)品的系統(tǒng)管理功能。
5.元數(shù)據(jù)訪問層
元數(shù)據(jù)訪問層用于給用戶提供訪問控制服務(wù)。通過門戶訪問和后臺訪問，可以實(shí)現(xiàn)多種角色的訪問控制。同時(shí)訪問層還提供了多種形式的接口服務(wù)，可以很方便地與其它 IT 系統(tǒng)進(jìn)行集成。

02、元數(shù)據(jù)采集

通過元數(shù)據(jù)管理平臺可以將分散、異構(gòu)的信息資源進(jìn)行統(tǒng)一采集、描述、定位、檢索、評估、分析，實(shí)現(xiàn)數(shù)據(jù)的結(jié)構(gòu)化，為機(jī)器處理創(chuàng)造可能，從而大大降低數(shù)據(jù)治理的人工成本。
1. 采集內(nèi)容
元數(shù)據(jù)采集內(nèi)容主要包括業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)和操作元數(shù)據(jù)，詳細(xì)說明見下表。

元數(shù)據(jù)采集內(nèi)容說明
2. 采集方式
元數(shù)據(jù)管理工具是否強(qiáng)大，部分體現(xiàn)在其對各類數(shù)據(jù)源的采集能力上，支持的各類數(shù)據(jù)源類型越多，說明元數(shù)據(jù)采集能力越強(qiáng)大。元數(shù)據(jù)采集方式主要有兩種：自動化采集和人工采集。
（1）自動化采集
自動化采集主要是通過元數(shù)據(jù)管理工具提供的各類適配器進(jìn)行元數(shù)據(jù)采集。在元數(shù)據(jù)采集過程中，元數(shù)據(jù)采集適配器十分重要，元數(shù)據(jù)采集既要適配各種DB、各類ETL、各類數(shù)據(jù)倉庫和報(bào)表產(chǎn)品，還要適配各類結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)源。元數(shù)據(jù)采集適配器可以通過自動化的方式對企業(yè)各類數(shù)據(jù)源的元數(shù)據(jù)進(jìn)行統(tǒng)一采集、統(tǒng)一管理。
億信元數(shù)據(jù)管理平臺內(nèi)置57個采集適配器，讓用戶通過配置數(shù)據(jù)源參數(shù)及定時(shí)采集任務(wù)，進(jìn)行自動化采集，實(shí)現(xiàn)直連數(shù)據(jù)源的端到端元數(shù)據(jù)采集。在保證自動化采集的同時(shí)，還支持對適配器進(jìn)行擴(kuò)展。

（2）人工采集
在元數(shù)據(jù)管理實(shí)踐中，最難采集的往往不是技術(shù)元數(shù)據(jù)或操作元數(shù)據(jù)，而是業(yè)務(wù)元數(shù)據(jù)。由于企業(yè)缺乏統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，業(yè)務(wù)系統(tǒng)豎井化建設(shè)，系統(tǒng)建設(shè)過程中沒有對業(yè)務(wù)元數(shù)據(jù)進(jìn)行統(tǒng)一定義，所以即使通過元數(shù)據(jù)適配器將業(yè)務(wù)系統(tǒng)的技術(shù)元數(shù)據(jù)采集到元數(shù)據(jù)倉庫中，也很難識別這些表、視圖、存儲過程、數(shù)據(jù)結(jié)構(gòu)的業(yè)務(wù)含義。這就需要采用人工的方式對現(xiàn)有數(shù)據(jù)的業(yè)務(wù)元數(shù)據(jù)進(jìn)行補(bǔ)齊，以實(shí)現(xiàn)元數(shù)據(jù)的統(tǒng)一管理。

03、元數(shù)據(jù)管理

1. 元數(shù)據(jù)管理功能
億信華辰元數(shù)據(jù)管理平臺EsPowerMeta提供元數(shù)據(jù)檢索、元模型管理、元數(shù)據(jù)維護(hù)、元數(shù)據(jù)變更管理、元數(shù)據(jù)版本管理、元數(shù)據(jù)核檢等功能。
● 元數(shù)據(jù)檢索：提供對元數(shù)據(jù)的全文檢索功能。檢索支持對檢索范圍、檢索類型、修改時(shí)間進(jìn)行過濾，過濾條件支持保存，讓用戶可以將常用的過濾條件保存使用，以便能夠更加快速瀏覽所需元數(shù)據(jù)。
● 元模型管理：以 Meta Object Facility(MOF)規(guī)范為基礎(chǔ)，支持 XMI格式的元模型導(dǎo)入和導(dǎo)出，同時(shí)內(nèi)置大量技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)的元模型，用戶可直接使用。
● 元數(shù)據(jù)維護(hù)：提供對信息對象的基本信息、屬性、被依賴關(guān)系、依賴關(guān)系、組合關(guān)系等元數(shù)據(jù)的新增、修改、刪除、查詢、發(fā)布等功能，以管理企業(yè)的數(shù)據(jù)標(biāo)準(zhǔn)。
● 元數(shù)據(jù)版本管理：提供元數(shù)據(jù)的版本管理功能，對于元數(shù)據(jù)新增、修改、刪除、發(fā)布和狀態(tài)變更都有相應(yīng)的流程，同時(shí)支持對元數(shù)據(jù)進(jìn)行發(fā)布、查看歷史版本、導(dǎo)出歷史版本、版本對比操作等。
● 元數(shù)據(jù)變更監(jiān)控：支持實(shí)時(shí)對元數(shù)據(jù)變更進(jìn)行監(jiān)控，并提供變更訂閱功能，將用戶關(guān) 心的元數(shù)據(jù)的變更情況定期發(fā)送到用戶郵箱。
● 元數(shù)據(jù)核檢：提供元數(shù)據(jù)質(zhì)量檢核功能，包括一致性檢核、屬性填充率檢核和組合關(guān)系檢核，是保障元數(shù)據(jù)質(zhì)量的重要手段之一。
2. 元數(shù)據(jù)分析功能
億信華辰元數(shù)據(jù)管理平臺提供了豐富的分析應(yīng)用，包括：血緣分析、影響分析、全鏈分析、 關(guān)聯(lián)度分析、屬性差異分析、對比分析等，同時(shí)支持將分析結(jié)果進(jìn)行導(dǎo)出和收藏。
● 數(shù)據(jù)資源地圖：基于企業(yè)元數(shù)據(jù)生成并以拓?fù)鋱D的形式展示企業(yè)數(shù)據(jù)資源的全景地圖，方便用戶清晰直觀地查找和瀏覽企業(yè)數(shù)據(jù)資源。
● 血緣分析：也叫血統(tǒng)分析，采用向上追溯的方式查找數(shù)據(jù)來源于哪里，經(jīng)過了哪些加工和處理。常用于在發(fā)現(xiàn)數(shù)據(jù)問題時(shí)，快速定位和找到數(shù)據(jù)問題的原因。
● 影響分析：功能與血緣分析類似，只是血緣分析是向上追溯，而影響分析是向下追蹤，用來查詢和定位數(shù)據(jù)去了哪里。常用于當(dāng)元數(shù)據(jù)發(fā)生變更時(shí)，分析和評估變更對下游業(yè)務(wù)的影響。
● 全鏈分析：用來分析指定元數(shù)據(jù)前后與其有關(guān)系的所有元數(shù)據(jù)，不僅反映了元數(shù)據(jù)的來源與加工過程，也反映了元數(shù)據(jù)的使用情況，使用全鏈分析可清晰的了解該元數(shù)據(jù)的來龍去脈。
● 關(guān)聯(lián)度分析：分析不同數(shù)據(jù)實(shí)體之間的關(guān)聯(lián)關(guān)系，從而判斷數(shù)據(jù)的重要程度。
● 屬性差異分析：用來比較同類型元數(shù)據(jù)之間屬性值的差異，方便用戶識別相似元數(shù)據(jù)之間的存在的微小差距。

04、元數(shù)據(jù)管理的關(guān)鍵技術(shù)

一般來說，元數(shù)據(jù)管理項(xiàng)目需要用到眾多技術(shù)，包括：高度靈活可擴(kuò)展的架構(gòu)、角色訪問控制和分層、與其他系統(tǒng)的集成。
● 高度靈活可擴(kuò)展的架構(gòu)
企業(yè)數(shù)據(jù)環(huán)境中的數(shù)據(jù)雜亂，形態(tài)多樣，標(biāo)準(zhǔn)不一，若要實(shí)現(xiàn)所有元數(shù)據(jù)的有效采集或者自動化采集和存儲，必須有高度靈活可擴(kuò)展的架構(gòu)支撐，也意味著元數(shù)據(jù)的架構(gòu)要能和企業(yè)的各種模型進(jìn)行“交流”。
● 角色訪問控制和分層
企業(yè)元數(shù)據(jù)管理涉及到很多不同的人員，優(yōu)秀的元數(shù)據(jù)管理工具應(yīng)該做好角色訪問控制，具體實(shí)現(xiàn)方法可以歸結(jié)為兩種：
（1）在平臺匯總建立角色分層機(jī)制/角色組，將企業(yè)中的不同角色按照具體需求分類到不同的角色組中，對不同角色組展示不同的功能。
（2）在工具內(nèi)部建立角色與功能之間的映射，并且支持根據(jù)企業(yè)情況進(jìn)行靈活配置（畢竟各企業(yè)的角色和所對應(yīng)的功能不盡相同），根據(jù)映射對不同角色展示不同的功能。
● 與其他系統(tǒng)的集成
要實(shí)現(xiàn)元數(shù)據(jù)驅(qū)動，除了元數(shù)據(jù)分類和模型的標(biāo)準(zhǔn)化，元數(shù)據(jù)管理工具是否與企業(yè)的其他系統(tǒng)（比如CRM、ERP、SCM、OA等系統(tǒng)，還有同與數(shù)據(jù)管理相關(guān)的數(shù)據(jù)標(biāo)準(zhǔn)系統(tǒng)、數(shù)據(jù)質(zhì)量系統(tǒng)）集成，為其他系統(tǒng)提供元數(shù)據(jù)服務(wù)，是主要的關(guān)鍵點(diǎn)。
一種方法是向企業(yè)中的不同角色、不同用戶、不同系統(tǒng)提供可以靈活配置的接口，實(shí)現(xiàn)全企業(yè)的而高效協(xié)作；另一種方法是將元數(shù)據(jù)管理工具直接集成到企業(yè)的portal中，在企業(yè)其他信息系統(tǒng)中保留元數(shù)據(jù)存儲庫的入口。
億信華辰元數(shù)據(jù)管理平臺是基于 B/S 架構(gòu)的軟件平臺，研發(fā)過程中遵循軟件工程迭代開發(fā)和面向?qū)ο笤O(shè)計(jì)思想，更是運(yùn)用了先進(jìn)的軟件開發(fā)技術(shù)，包括但不限于：

SQL 解析技術(shù)
全文檢索技術(shù)
采用 Meta Object Facility(MOF)規(guī)范
支持 XMI 數(shù)據(jù)交換標(biāo)準(zhǔn)
采用 RESTful 架構(gòu)
支持標(biāo)準(zhǔn)的 OLAP 分析
遵循事實(shí)結(jié)構(gòu)的星型數(shù)據(jù)倉庫模型
用戶 WEB 界面采用 AJAX 技術(shù)
使用國際化編碼 UTF－8

05、總結(jié)

元數(shù)據(jù)管理工具提供了可靠、便捷的工具，能夠?qū)ζ髽I(yè)分散的元數(shù)據(jù)進(jìn)行統(tǒng)一、集中化管理，幫助企業(yè)繪制數(shù)據(jù)地圖、統(tǒng)一數(shù)據(jù)口徑、標(biāo)明數(shù)據(jù)方位、控制模型變更。利用元數(shù)據(jù)管理工具可以更好地獲取、共享、理解和應(yīng)用企業(yè)的數(shù)據(jù)信息，降低數(shù)據(jù)集成和管理成本，提高數(shù)據(jù)資產(chǎn)的透明度。