如獸般的姿態(tài)

2023-01-05

通過元數(shù)據(jù)管理平臺(tái)可以將分散、異構(gòu)的信息資源進(jìn)行統(tǒng)一采集、描述、定位、檢索、評(píng)估、分析，實(shí)現(xiàn)數(shù)據(jù)的結(jié)構(gòu)化，為機(jī)器處理創(chuàng)造可能，從而大大降低數(shù)據(jù)治理的人工成本。

1. 采集內(nèi)容
元數(shù)據(jù)采集內(nèi)容主要包括業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)和操作元數(shù)據(jù)，詳細(xì)說明見下表。

元數(shù)據(jù)采集內(nèi)容說明

2. 采集方式
元數(shù)據(jù)管理工具是否強(qiáng)大，部分體現(xiàn)在其對(duì)各類數(shù)據(jù)源的采集能力上，支持的各類數(shù)據(jù)源類型越多，說明元數(shù)據(jù)采集能力越強(qiáng)大。元數(shù)據(jù)采集方式主要有兩種：自動(dòng)化采集和人工采集。

（1）自動(dòng)化采集
自動(dòng)化采集主要是通過元數(shù)據(jù)管理工具提供的各類適配器進(jìn)行元數(shù)據(jù)采集。在元數(shù)據(jù)采集過程中，元數(shù)據(jù)采集適配器十分重要，元數(shù)據(jù)采集既要適配各種DB、各類ETL、各類數(shù)據(jù)倉庫和報(bào)表產(chǎn)品，還要適配各類結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)源。元數(shù)據(jù)采集適配器可以通過自動(dòng)化的方式對(duì)企業(yè)各類數(shù)據(jù)源的元數(shù)據(jù)進(jìn)行統(tǒng)一采集、統(tǒng)一管理。

億信元數(shù)據(jù)管理平臺(tái)內(nèi)置57個(gè)采集適配器，讓用戶通過配置數(shù)據(jù)源參數(shù)及定時(shí)采集任務(wù)，進(jìn)行自動(dòng)化采集，實(shí)現(xiàn)直連數(shù)據(jù)源的端到端元數(shù)據(jù)采集。在保證自動(dòng)化采集的同時(shí)，還支持對(duì)適配器進(jìn)行擴(kuò)展。

（2）人工采集
在元數(shù)據(jù)管理實(shí)踐中，最難采集的往往不是技術(shù)元數(shù)據(jù)或操作元數(shù)據(jù)，而是業(yè)務(wù)元數(shù)據(jù)。由于企業(yè)缺乏統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，業(yè)務(wù)系統(tǒng)豎井化建設(shè)，系統(tǒng)建設(shè)過程中沒有對(duì)業(yè)務(wù)元數(shù)據(jù)進(jìn)行統(tǒng)一定義，所以即使通過元數(shù)據(jù)適配器將業(yè)務(wù)系統(tǒng)的技術(shù)元數(shù)據(jù)采集到元數(shù)據(jù)倉庫中，也很難識(shí)別這些表、視圖、存儲(chǔ)過程、數(shù)據(jù)結(jié)構(gòu)的業(yè)務(wù)含義。這就需要采用人工的方式對(duì)現(xiàn)有數(shù)據(jù)的業(yè)務(wù)元數(shù)據(jù)進(jìn)行補(bǔ)齊，以實(shí)現(xiàn)元數(shù)據(jù)的統(tǒng)一管理。