時光隊長

2022-11-26

數(shù)據(jù)治理工具如何選型？關注2個維度8個方向
2022-11-24 16:24·億信華辰
數(shù)據(jù)治理的本質是盤點數(shù)據(jù)資產(chǎn)、治理數(shù)據(jù)質量，實施數(shù)據(jù)全生命周期的管理，這里面包括了建組織、立制度或者使用一款數(shù)據(jù)治理的軟件幫助企業(yè)開展數(shù)據(jù)治理的相關工作等等。根據(jù)不同的數(shù)據(jù)治理項目特點，會用到不同的技術或工具。擁有一套趁手好用的平臺和工具，無疑能夠讓您的數(shù)據(jù)治理工作事半功倍。

對于數(shù)據(jù)治理工具的選型，通常大家會關心以下問題，例如：

企業(yè)通常利用本地部署還是基于云的工具？
目前是否有中心化的數(shù)據(jù)平臺？是否需要一個能與多個數(shù)據(jù)平臺集成的工具？大概范圍是什么樣？
是否需要一個工具來處理來自多個數(shù)據(jù)源的大量數(shù)據(jù)？
用戶是否需要自助式的數(shù)據(jù)服務滿足工作流程中的數(shù)據(jù)需求？


數(shù)據(jù)治理工具全景圖（來源：大數(shù)據(jù)標準工作組）

那么整體對于企業(yè)來講，如何來選擇一款數(shù)據(jù)治理的軟件能更大程度地保障管理效果，促進管理目標達成，結合十多年的從業(yè)經(jīng)歷，給大家提供以下兩個維度作為參考，既關注工具本身，也要考慮企業(yè)自身實力。

工具的能力
數(shù)據(jù)治理工具選型的首要因素是工具自身，具體可以從功能、性能、架構、采購成本四個方面進行考慮。

1、產(chǎn)品功能

對于數(shù)據(jù)治理工具功能的考察要結合企業(yè)自身的業(yè)務需求，要選擇最適合企業(yè)現(xiàn)狀和發(fā)展要求的。在數(shù)據(jù)治理領域，目前有兩個學術流派，一是全面的數(shù)據(jù)治理體系，二是面向主題的數(shù)據(jù)治理，這兩套體系沒有誰高誰低，針對不同的企業(yè)選擇適合的策略和適合的工具。

假如您的企業(yè)中沒有或技術人員不足，那么選擇的數(shù)據(jù)治理工具的功能一定要簡單易用并且功能點要覆蓋企業(yè)的業(yè)務需求，盡量減少定制化開發(fā)的功能。假如您的企業(yè)技術實力雄厚，可以選擇一個穩(wěn)定的框架，部分功能可以定制開發(fā)，這樣也許更加易用和適用。

在功能指標上，不同的數(shù)據(jù)治理主題關注的功能和工具不同，例如：元數(shù)據(jù)管理、數(shù)據(jù)質量管理、數(shù)據(jù)標準管理、主數(shù)據(jù)管理等。從技術選型角度來看，數(shù)據(jù)治理工具落地需要考慮的功能列表有：

跨平臺支持各主流數(shù)據(jù)庫和數(shù)據(jù)平臺的元數(shù)據(jù)信息
管理關鍵數(shù)據(jù)資產(chǎn)，如數(shù)據(jù)字典
跟蹤和管理元數(shù)據(jù)操作歷史和變更記錄
批量導入和更新元數(shù)據(jù)
分配數(shù)據(jù)治理流程角色和策略
定義工作流程和管理用戶權限
通過數(shù)據(jù)探查快速分析業(yè)務數(shù)據(jù)情況
自動化追蹤數(shù)據(jù)質量指標和效果
……

這個話題會涉及很多技術細節(jié)，這里就不再一一展開了。但是，要重點強調的是數(shù)據(jù)治理工具的選型一定要了解其工作方式及其自動化程度，以及完成特定任務可能需要的特定功能。最后，至關重要的是要考慮數(shù)據(jù)控制、安全性和許可等因素。

此外，評估和選擇數(shù)據(jù)治理工具不僅取決于功能，還取決于您如何使用這些工具來增加業(yè)務價值。例如，如果您對元數(shù)據(jù)管理有要求，請確保在使用具有該功能的數(shù)據(jù)治理工具之前，應該搞清楚為什么要用元數(shù)據(jù)工具，它能幫助企業(yè)的業(yè)務價值帶來些什么或改變什么？

2、產(chǎn)品性能

數(shù)字化時代，企業(yè)的數(shù)據(jù)環(huán)境變得多樣而復雜，大數(shù)據(jù)的4V特征（體量大、多樣化、速度快、密度低）已經(jīng)展現(xiàn)的淋漓盡致。考慮到需要處理的大量數(shù)據(jù)以及業(yè)務需求的日益復雜，對于任何正在評估的新技術和工具，都必須考慮性能和可伸縮性。數(shù)據(jù)治理的工具需要能夠支持大量并發(fā)用戶和非常大的數(shù)據(jù)集，尤其是針對數(shù)據(jù)模型工具、數(shù)據(jù)質量工具、數(shù)據(jù)集成工具、數(shù)據(jù)存取工具。

3、產(chǎn)品架構

產(chǎn)品架構包括了數(shù)據(jù)架構、技術架構、應用架構、安全架構、部署架構等。在數(shù)據(jù)治理項目中，數(shù)據(jù)架構更多的是需要根據(jù)企業(yè)的現(xiàn)狀和需求進行規(guī)劃設計的，比如數(shù)據(jù)的分層分級、數(shù)據(jù)的存儲、數(shù)據(jù)的讀取、數(shù)據(jù)的安全控制等。

技術架構重點是考察供應商產(chǎn)品的技術先進性。當下微服務架構、人工治理、區(qū)塊鏈、大數(shù)據(jù)、云計算等都是流行的技術，如果您考察的產(chǎn)品用的技術架構比較老舊，則與主流架構生態(tài)的融合則會存在一定的障礙。

應用架構是從功能組件的適用性、易用性，以及功能組件的關聯(lián)性等方面進行考量的。

安全架構是考察產(chǎn)品在數(shù)據(jù)安全防護和個人隱私數(shù)據(jù)保護層面的功能和成熟度。

此外，在部署模式上是否支持云部署也是一個需要考慮的點，因為很多中小企業(yè)不得不考慮成本問題，機房、服務器和人力資源都是需要投入資金的。

4、采購成本

數(shù)據(jù)治理工具選型通常會受到財務預算的限制，因而采購成本也是不少企業(yè)在選型時重點考慮的因素。然而，對采購成本的控制不等于簡單的報價和還價，價低者為最佳，還應該包含對很多隱性因素的考量，比如購買成本、實施成本、升級成本、學習成本等。

現(xiàn)實中大多數(shù)企業(yè)都只關注購置成本，并試圖將其最小化，而不是以總擁有成本為標準。正如前兩年的云計算項目，出現(xiàn)了很多“0元中標”情況。事實上，這種看似購置價為“0”的項目，每年都需要需要投入大量服務費、運營費，總的成本并不低。要相信：“羊毛出在羊身上”。