大數(shù)據(jù)的建設(shè)和管理是一個(gè)專(zhuān)業(yè)且復(fù)雜的工程，涵蓋了業(yè)務(wù)梳理、標(biāo)準(zhǔn)制定、元數(shù)據(jù)管理、數(shù)據(jù)模型管理、數(shù)據(jù)匯聚、清洗加工、中心存儲(chǔ)、資源目錄編制、共享交換、數(shù)據(jù)維護(hù)、數(shù)據(jù)失效等等過(guò)程。中間任何一個(gè)環(huán)節(jié)出問(wèn)題，都將導(dǎo)致數(shù)據(jù)質(zhì)量問(wèn)題。
大部分大型組織經(jīng)過(guò)大數(shù)據(jù)建設(shè)，已經(jīng)獲得比較好的數(shù)據(jù)建設(shè)成果，也有了比較可觀(guān)的數(shù)據(jù)量的積累，但將這些數(shù)據(jù)直接拿來(lái)支撐業(yè)務(wù)的辦理卻是一個(gè)很大的風(fēng)險(xiǎn)，原因就是只要一筆數(shù)據(jù)不正確，都可能帶來(lái)很大的業(yè)務(wù)風(fēng)險(xiǎn)，導(dǎo)致客戶(hù)的抱怨，這也正是業(yè)務(wù)部門(mén)對(duì)大數(shù)據(jù)建設(shè)成果報(bào)有懷疑態(tài)度的重要原因。

在大數(shù)據(jù)建設(shè)項(xiàng)目的執(zhí)行過(guò)程，將其分為事前預(yù)防、事中監(jiān)控、事后改善三個(gè)階段。

1、事前預(yù)防
制定質(zhì)量管理機(jī)制：基于數(shù)據(jù)管理的復(fù)雜性和誘因的多重性特點(diǎn)，解決數(shù)據(jù)質(zhì)量問(wèn)題僅僅依靠一個(gè)技術(shù)工具是不夠的，我們需要建立長(zhǎng)效工作機(jī)制。即根據(jù)組織特點(diǎn)，制定符合自身環(huán)境的工作制度，制定每個(gè)環(huán)節(jié)的工作流程，規(guī)定各個(gè)參與方的責(zé)任，確定各項(xiàng)數(shù)據(jù)的權(quán)威部門(mén)，制定數(shù)據(jù)質(zhì)量指標(biāo)，制定數(shù)據(jù)質(zhì)量修復(fù)流程等等。
制定數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)：數(shù)據(jù)標(biāo)準(zhǔn)成功定義的與否，直接決定了大數(shù)據(jù)建設(shè)的成果和數(shù)據(jù)質(zhì)量的高低，需要在融合國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)和地方標(biāo)準(zhǔn)的基礎(chǔ)上，融合組織自身的業(yè)務(wù)特色需求。
制定質(zhì)量監(jiān)測(cè)模型：數(shù)據(jù)質(zhì)量模型代表的是業(yè)務(wù)需求，它是從業(yè)務(wù)需求的角度而描述出來(lái)的質(zhì)量需求。
制定質(zhì)量監(jiān)測(cè)規(guī)則：數(shù)據(jù)監(jiān)測(cè)規(guī)則代表的具體的質(zhì)量檢測(cè)手段，它是從技術(shù)角度來(lái)描述數(shù)據(jù)質(zhì)量要求是如何被滿(mǎn)足的，包括規(guī)范性、完整性、準(zhǔn)確性、致性、時(shí)效性、可訪(fǎng)問(wèn)性，等等。

2、事中監(jiān)控
監(jiān)控原始數(shù)據(jù)質(zhì)量：數(shù)據(jù)采集工作從數(shù)據(jù)源頭獲取最原始的數(shù)據(jù)，在數(shù)據(jù)采集過(guò)程中將數(shù)據(jù)分為“好數(shù)據(jù)”“壞數(shù)據(jù)”，“好數(shù)據(jù)”入庫(kù)，“壞數(shù)據(jù)”則反饋給源頭修復(fù)，因?yàn)閿?shù)據(jù)來(lái)源部門(mén)最懂這些數(shù)據(jù)，也最能在源頭上把數(shù)據(jù)問(wèn)題徹底修復(fù)掉。
監(jiān)控?cái)?shù)據(jù)中心質(zhì)量：經(jīng)過(guò)各種采集、清洗、加工過(guò)程，數(shù)據(jù)被存入數(shù)據(jù)倉(cāng)庫(kù)中，這些數(shù)據(jù)也將被業(yè)務(wù)部門(mén)使用，所以，對(duì)于這些成果數(shù)據(jù)的質(zhì)量監(jiān)控和修復(fù)則猶為重要。對(duì)于這類(lèi)數(shù)據(jù)問(wèn)題，我們可能使用簡(jiǎn)單的空值檢查、規(guī)范性檢查、值域檢查、邏輯檢查、一致性檢查、等等規(guī)則就可以檢查出來(lái)，也可能需要諸如多源比較、數(shù)據(jù)佐證、數(shù)據(jù)探索、波動(dòng)檢查、離群檢查等等方法才可以檢查出來(lái)。
反饋數(shù)據(jù)質(zhì)量問(wèn)題：數(shù)據(jù)質(zhì)量監(jiān)控過(guò)程中，會(huì)發(fā)現(xiàn)兩類(lèi)問(wèn)題，一類(lèi)是源頭的數(shù)據(jù)質(zhì)量問(wèn)題，一類(lèi)是數(shù)據(jù)中心的數(shù)據(jù)質(zhì)量問(wèn)題，數(shù)據(jù)質(zhì)量團(tuán)隊(duì)需要將這些問(wèn)題及時(shí)反饋給源頭部門(mén)和數(shù)據(jù)倉(cāng)庫(kù)建設(shè)團(tuán)隊(duì)。
考核數(shù)據(jù)質(zhì)量考核：數(shù)據(jù)質(zhì)量的考核是為了能夠引起各個(gè)參與部門(mén)和參與團(tuán)隊(duì)對(duì)數(shù)據(jù)質(zhì)量的重視，需要及時(shí)統(tǒng)計(jì)分析各種數(shù)據(jù)質(zhì)量問(wèn)題，并制定出相應(yīng)的應(yīng)對(duì)措施。

3、事后改善
修復(fù)數(shù)據(jù)質(zhì)量問(wèn)題：發(fā)現(xiàn)質(zhì)量問(wèn)題不是最終的目標(biāo)，我們?nèi)砸⑾嚓P(guān)的流程和工具，通過(guò)手工、工單、自動(dòng)化等等手段將質(zhì)量問(wèn)題修復(fù)掉，從而為業(yè)務(wù)創(chuàng)新提供可靠的數(shù)據(jù)支撐。
收集數(shù)據(jù)質(zhì)量需求：通過(guò)數(shù)據(jù)中心的建設(shè)，質(zhì)量問(wèn)題的修復(fù)，必然能夠促進(jìn)數(shù)據(jù)的應(yīng)用，我們?nèi)砸⑼〞车臄?shù)據(jù)質(zhì)量反饋通道，讓各個(gè)部門(mén)參與到數(shù)據(jù)質(zhì)量的再次完善中來(lái)，從而形成建設(shè)、應(yīng)用和反饋的良性循環(huán)。
完善質(zhì)量管理制度：制度和流程的建設(shè)并不是一蹴而就的，我們要在數(shù)據(jù)建設(shè)和質(zhì)量完善的過(guò)程中，結(jié)合自身組織結(jié)構(gòu)和業(yè)務(wù)特色，不斷完善工作制度。
完善數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)：各行各業(yè)不斷涌現(xiàn)新的業(yè)務(wù)形態(tài)，原有的業(yè)務(wù)也在不斷的變化，我們要緊跟業(yè)務(wù)的變化，不斷完善符合業(yè)務(wù)需求的數(shù)據(jù)標(biāo)準(zhǔn)。
完善質(zhì)量監(jiān)測(cè)模型：如前所述，監(jiān)測(cè)模型代表的業(yè)務(wù)需求，業(yè)務(wù)形態(tài)的變化、數(shù)據(jù)標(biāo)準(zhǔn)的變化和質(zhì)量新需求的出現(xiàn)，同樣要求監(jiān)測(cè)模型能夠做出相應(yīng)的變化。
完善質(zhì)量監(jiān)測(cè)規(guī)則：同樣，如今的信息化技術(shù)發(fā)展日新月異，我們要不斷引入各種新技術(shù)來(lái)更加智能地發(fā)現(xiàn)和修復(fù)數(shù)據(jù)質(zhì)量問(wèn)題。