- 產品
- 產品解決方案
- 行業解決方案
- 案例
- 數據資產入表
- 賦能中心
- 伙伴
- 關于
時間:2022-01-31來源:抓不住你說的夢瀏覽數:494次
民航局于2022年1月21日下午舉行智慧民航建設專題新聞發布會,民航局發展計劃司副司長包毅介紹了《5部智慧民航建設數據治理規范標準》。
民航業是一個沉浸在大數據中的行業,航班數據、旅客數據、貨郵數據、監管數據均具有海量化、異構化、快速化等大數據的特征。
“管好、用好、治理好”行業數據,提升行業數據的共享、質量及安全水平,發揮數據業務價值,是民航業應對發展環境變化、實現新舊動能轉換、推動行業轉型升級的根本之策,也是智慧民航建設基礎中的基礎、關鍵中的關鍵。
為貫徹落實智慧民航建設要求,提升行業數據治理能力,2021年,民航局提出了行業數據治理頂層框架,確定了“7+1”智慧民航數據治理規范體系,分別為民航數據治理《框架與管理機制》、《數據架構》《數據安全》《數據質量》《數據服務》《數據共享》以及《數據治理技術》7部行業標準和典型實踐案例信息通告。
在深入調研民航多家運行保障單位數據治理現狀和需求、行業內外科研機構和信息技術公司數據治理理念和實踐的基礎上,并面向社會公開征求意見,經民航工程建設標準化技術委員會審議通過,先后發布了5部數據治理規范標準。在編制過程中,著重考慮了當前民航數據治理4個方面的需求:1.著力營造民航數據治理法制環境,從數據治理體系、組織、制度等多方面增強數據治理系統性2.堅持多方運營主體共商、共建、共治、共享,打破信息碎片、信息孤島現象;3.面向數據全生命周期進行數據質量與數據安全治理,提升數據可用性和安全性;4.著力構建功能復用、自主高效的數據服務,充分釋放民航數據價值。
第一部??《數據治理規范框架與管理機制》
《數據治理規范框架與管理機制》標準旨在統一民航數據治理框架體系,指導民航數據治理制度、組織建設,為民航數據治理提供管理保障。提出行業數據治理的體系框架、建設目標、實施要點、組織保障以及制度建設的總體要求。
第二部《數據架構》《數據架構》旨在指導和規范民航數據架構建設,搭建民航業務與應用系統建設的數據橋梁,提升民航業務在應用系統的集成效率。
從數據資產目錄、數據標準、數據模型、元數據管理、主數據管理等方面,提出了數據架構建設的基本要求、一般原則和管理流程,指導業務單位實現業務需求向IT軟硬件設施的首次“翻譯”和轉移。
第三部?《數據質量》 《數據質量》旨在規范數據質量要求,指導行業數據質量管理工作,實現數據質量的有效評價、控制和改進。構建了數據全生命周期的質量管控體系和評價策略,提出了數據質量管理流程、指標規則、監測控制、問題分析與改進、組織保障等方面的具體措施。第四部《數據安全》《數據安全》旨在指導行業單位建立科學的數據安全分級與防護機制,強化行業數據安全保護能力。提出了由數據安全原則、數據安全分級管理、數據全生命周期安全防護和數據安全組織保障構成的民航數據安全治理體系框架。
第五部《數據服務》《數據服務》標準旨在構建民航行業高效、可復用的數據服務體系,指導行業單位數據服務建設,提升行業數據應用能力。提出了民航數據服務基本框架,以及民航數據集服務、數據API服務、數據分析服務等能力建設的規范標準。
以上是5部規范標準的概要情況。2022年民航局還將發布《數據共享》《數據治理技術》2部標準和《智慧民航數據治理典型實踐案例》信息通告,希望通過上述規范標準體系促進行業各方形成合力,確保民航數據管起來、用起來、活起來。數據治理規范助力智慧民航建設民航業是一個沉浸在大數據中的行業,航班數據、旅客數據、貨郵數據、行業監管數據均具有海量化、異構化、快速化等大數據的特征。如何管好、用好、治理好行業數據,是加快推進行業治理體系和治理能力現代化的重要課題,也是新時期推動行業發展的一項艱巨考驗。
數據治理成為
智慧民航發展的關鍵路徑與抓手
數據作為民航行業一種新的生產要素和經濟社會資源,既是行業數字化轉型的基礎,也是智慧民航建設的核心元素。而數據治理正是實現民航業務的數據化和數據的業務化,提升行業數據的共享、質量及安全水平,發揮數據業務價值的重要舉措和必經之路。無論是以數據為治理對象,還是利用數據進行行業治理,都需要加強對數據治理的理論研究和實踐探索,充分發掘數據的價值,以盡量降低成本和減少風險。隨著大數據技術和產業的發展,“數據治理”這一概念的內涵和外延在不斷演化。國際數據管理協會給出的數據治理定義為:“數據治理是對數據資產管理行使權力和控制的活動集合。”國際數據治理研究所給出的定義為:“數據治理是一個通過一系列信息相關的過程來實現決策權和職責分工的系統。”結合我國民航發展現狀和行業特點,筆者認為“智慧民航數據治理”應該是指以民航行業數據為主要對象,以最大限度實現數據價值為最終目標,在確保數據安全的前提下,通過多方主體共建、共治、共享的方式,實現面向行業數據全生命周期的優化數據質量、改進數據服務、釋放數據價值的過程。民航業是一個沉浸在大數據中的行業,航班數據、旅客數據、貨郵數據、行業監管數據均具有海量化、異構化、快速化等大數據的特征。如何管好、用好、治理好行業數據,是加快推進行業治理體系和治理能力現代化的重要課題,也是新時期推動行業發展的一項艱巨考驗。從目前行業數據使用和管理現狀來看,尚缺少行業數據管控體系,數據來源多樣,過于分散,可信度低,價值大打折扣。同時缺少行業數據治理標準,口徑不一,數據質量、安全和服務模式難以保證。針對行業數據特征,亟須從理論和框架技術上完善治理方式、治理手段和治理標準,促進各方形成合力,共同管好、用好這些數據,以實現數據的價值創造。智慧民航數據治理規范體系
的初步設想
2020年底,民航局印發《推動新型基礎設施建設促進民航高質量發展實施意見》和《推進新型基礎設施建設五年行動方案》,提出要“建立健全民航數據治理標準,完善符合高質量發展要求的統計指標體系。制定關鍵數據項標準和數據目錄清單,規范數據來源和數據質量要求,確保數據準確性和時效性等。構建數據共享機制,做到數據分級分類開放共享。建立數據治理的評估與監管制度,以保障各單位的數據治理工作順利進行”。筆者通過對國內各行業、各地方政府已發布的數據治理相關法律法規、標準規范和技術文件,以及國外經典數據治理案例的學習、梳理、研究,提出智慧民航數據治理規范體系架構的初步構想,包括《智慧民航數據治理框架與管理機制規范》《數據架構規范》《數據質量規范》《數據安全規范》《數據共享規范》《數據治理技術規范》《數據服務規范》和《數據治理實踐案例》等八個部分。其涵蓋的主要內容如下:一? 數據治理框架與管理機制
數據治理問題的復雜性和難度決定了數據治理工作不但需要建設實體化的數據管理專業組織,而且需要制定大家共同遵循的統一的數據管理政策、流程和規范要求。作為一種戰略資產的管理,需要明確的框架和機制,保障業務管理和IT技術管理的協同;需要明確的管理制度、責任邊界,以及責權利交叉時的判定機制,從數據產生到發揮要素作用的全過程保障治理要求的落實落地。《智慧民航數據治理框架與管理機制規范》的設想主要是立足行業發展現狀,給出數據治理的內涵與目標、體系框架、實施、組織保障以及制度建設的總體要求,對行業單位開展數據治理工作予以指導。比如在組織保障方面,數據治理組織結構設計包括建立單位層面數據管理組織、各業務數據管理組織、信息技術支撐組織以及跨領域數據聯合工作組在內的多層級結構,分別負責單位數據治理工作的統籌和各業務數據治理工作的實施,并通過分層分級原則任命數據責任人,將數據責任落實到業務主體,支撐數據治理工作的實施。二? 數據架構
打通業務和應用系統建設的壁壘是民航業數據治理的關鍵。數據架構作為統一的數據語言和操作手段,在實現應用系統設計開發與業務架構的深度融合上發揮著至關重要的作用,既是疏通業務流、消除信息孤島和提升業務流集成效率的關鍵要素,也是原始業務數據通過治理成為有價值的數據資源,甚至數據要素的決定性環節。《智慧民航數據治理數據架構規范》的設想主要是以識別數據類型和來源為核心,從數據資產目錄、數據標準、數據模型、元數據管理、主數據管理等方面,提出數據架構建設的基本要求、一般原則和管理流程,作為后續應用系統和技術架構設計、開發的依據,將為什么干、誰來干、怎么干、干什么這些實際工作當中的具體業務要求映射到應用系統和技術設施中,指導業務單位順利實現業務需求向IT軟硬件設施的首次“翻譯”和轉移。三? 數據質量
數據質量是數據價值得以發揮的前提,糟糕的數據質量往往意味著糟糕的業務決策。如果數據質量得不到保證,再先進的數據分析工具、再科學的模型和算法,也無法從一堆垃圾數據中得出有意義的數據結論,作出正確的分析判斷。隨著民航業數據量的飛速增長,數據類型和來源的不斷豐富,亟須建立一套行之有效的數據質量管理評價體系和“自愈”“自強”機制,幫助各類用戶管控好數據,做好數據質量的提升工作。《智慧民航數據治理數據質量規范》的設想主要是以持續改進數據質量為目標,構建數據全生命周期的質量管控體系和評價策略,在數據設計、產生、匯聚、應用等各個階段,提出數據質量管理流程、指標規則、監測控制、問題分析與改進、組織保障等方面的具體建議措施,細化各數據項數據質量量化規則,從完整性、及時性、準確性、一致性、有效性及可訪問性等多個維度評估數據質量,落實各級數據責任人的職責,定位問題、分析原因、加以修正,避免問題數據流入后續環節,導致質量問題擴大化。四? 數據安全
今年6月,《中華人民共和國數據安全法》正式頒布,標志著我國數據安全進入了有法可依、依法建設的新發展階段。其中明確“數據安全,是指通過采取必要措施,確保數據處于有效保護和合法利用的狀態,以及具備保障持續安全狀態的能力”“維護數據安全,應當堅持總體國家安全觀,建立健全數據安全治理體系,提高數據安全保障能力”。有別于信息安全防護,數據安全側重面向單位內部用戶,通過安全管理和技術手段,在信息安全防護的基礎上實現對數據使用人員和治理行為的安全管控。《智慧民航數據治理數據安全規范》的設想主要是以數據使用更安全為目標,提出由數據安全原則、數據安全分級管理、數據全生命周期安全防護和數據安全組織保障構成的民航數據安全治理體系框架,根據安全分級原則,確定數據在采集、傳輸、存儲、使用、共享以及銷毀等各個環節應采取的安全防護策略和管控措施,在促進民航數據安全應用和正常流動的同時,提高本單位的數據管理和安全防護水平。五? 數據共享
過去20年,建設IT系統的標準流程往往是業務部門提出業務需求,信息部門采購系統集成商,再經過需求收集、分析、開發、測試、上線等階段,生產出一個滿足業務需求的“煙囪”系統。但是,這種“煙囪”式的信息系統規劃建設模式卻成為互聯網時代業務發展最大的障礙。如何更好地整合內部資源、更好地提升用戶體驗,實現系統間的交互是如今各類信息系統規劃建設的基本要求。《智慧民航數據治理數據共享規范》的設想主要是從民航業數據共享的原則與范圍、共享模式、共享技術、組織保障等方面提出相關規范,解決數據共享中存在的數據標準不一、“煙囪”林立和數據質量、數據安全問題,推動數據的匯聚與主題連接,建立統一的數據資源池,實現數據的打通與復用,并通過技術保障促進行業數據高效共享,營造行業數據開放共享的良好生態。六? 數據治理技術
近年來,數據庫(即數據管理技術)經歷了從SQL到NoSQL,再到NewSQL,以及從面向交易處理(OLTP)到交易處理與分析處理相結合(OLTP與OLAP)的演進,數據的計算處理技術也出現了分布式處理(如MapReduce等)、流計算(如Storm、Flink等)、圖計算(如GraphX等)以及針對特定應用場景的各類融合計算模式等多種類型,數據的分析與挖掘更是涌現出深度學習、知識圖譜、多源多模態處理等突破性的方法。這些技術都將與針對元數據、主數據、數據模型等的自動化、智能化技術一道,成為廣義數據治理成功的重要基石。《智慧民航數據治理技術規范》的設想主要是從主數據管理、元數據管理技術體系、數據管理技術、數據處理技術、數據分析技術、數據資源池與主題連接技術等維度對數據的匯聚、存儲、分析與應用技術提出規范,指導各單位數據平臺與信息系統的建設。七? 數據服務
治理數據的目的是為了更好地使用數據,發揮數據的價值,隨著信息服務建設的野蠻生長,數據與信息平臺數量的快速增加和規模的快速擴大,傳統的數據集成方式不僅財務成本高,數據質量難以保證,而且無法滿足用戶便捷、自主使用數據的實際需要。參考IEEE規范和互聯網領域提出的數據服務概念,希望通過發展新的數據服務形式來改進原有數據集成方式,解決數據交互協作過程中的諸多問題,改善數據集成關系,提升數據獲取效率和數據安全。《智慧民航數據治理數據服務規范》的主要設想是堅持面向用戶、自助服務的原則搭建民航數據服務基本框架,在數據服務內涵與準則、數據服務設計與運營流程、數據服務分類與建設、數據集服務與數據API服務、數據分析能力等方面提出相關規范。指導用戶通過數據集或數據API方式按需獲取公共數據服務,并可基于數據分析組件進行自助性的數據應用;指導服務提供者逐步實現API接口向API服務能力的轉變,更好地對接服務治理工具,提供組件級別的服務治理能力,為用戶提供更加自主、高效、可復用的數據服務。八? 數據治理實踐案例
身處新一代科技革命和建設數字國家的歷史交匯期,在整個社會都在開展數字化轉型的浪潮中,民航業內政府部門、企事業單位、行業各運行主體在數據治理理念和治理架構方面也開展了很多有益的實踐。“他山之石,可以攻玉”。《智慧民航數據治理實踐案例》的主要設想是以行業信息通告的形式,將智慧監管示范項目以及來自航空公司、機場、空管和運行保障單位數據治理的典型案例介紹給行業內外各類用戶,為開展民航業務的數字化轉型工作提供可借鑒與參考的范例。以行業的智慧監管為例,將通過業務中臺和數據中臺的構建,形成行業監管業務功能與數據的細分和高復用,進而實現各類信息系統從分散建設到統籌共用、行業監管從經驗到數據決策的重要轉變。民航“新基建”
是數據治理理論實踐與驗證的主戰場
實踐是認識的源泉,也是認識的目的。面對民航業分散、多樣的管理與運行主體,高安全要求、緊耦合的既有信息系統架構和紛繁復雜的應用場景,行業數據治理工作將是一項長期、艱巨和有的放矢的系統工程,絕不會是一蹴而就的節奏,也很難形成“處處適用”“包治百病”的方法和技術。比如,面向航空公司、機場運行的很多智能化應用場景需要行業人員更豐富的經驗與知識,以及業務邏輯。這和計算機視覺、自然語言理解這類通用性問題是完全不一樣的,不能單一地平移深度學習等技術路線,需要構造適用于高維特征的數據架構和算法模型。這就更需要我們在底層數據與技術方面發揮工匠精神,聚焦行業基礎數據治理,一方面構建面向應用的高質量數據治理體系,另一方面構建規則與數據多重驅動、可以不斷優化的定制化算法。這樣才能打牢基礎,真正有所突破。正如技術理念和體系架構只有給用戶帶來業務價值才有意義,設想只有付諸廣泛實踐才會得以完善,才可能產生價值,希望本文提出的規范架構對智慧民航“新基建”中開展行業數據治理工作有所啟發裨益。(作者包毅系中國民用航空局發展計劃司副司長,作者劉一系中國民航管理干部學院大數據與信息管理研究中心主任)來源:中國民航報智慧民航數據治理系列規范的編制背景是怎樣的?此次發布的5部行業標準分別包含哪些要點?系列規范將為行業帶來哪些積極影響?記者就這些問題采訪了民航局發展計劃司有關負責同志。
記者:智慧民航數據治理系列規范是在什么背景下進行編制的?
答:民航業是一個沉浸在大數據中的行業,航班數據、旅客數據、貨郵數據、行業監管數據均具有海量化、異構化、快速化等大數據的特征。數據作為民航行業新的生產要素和經濟社會資源,是行業數字化轉型的基礎,也是智慧民航建設的支撐元素。如何“管好、用好、治理好”行業數據,是加快推進行業治理體系和治理能力現代化的重要課題,也是新時期推動行業發展的一項艱巨考驗。而“數據治理”正是實現民航業務的數據化和數據的業務化,提升行業數據的共享、質量及安全水平,發揮數據業務價值的重要舉措和必經之路。2020年底,民航局印發了《推動新型基礎設施建設促進民航高質量發展實施意見》《推進新型基礎設施建設五年行動方案》,旨在結合民航“十四五”規劃中以“安全為底線、智慧民航為主線”的有關要求,積極主動推動行業數字化、智能化、智慧化轉型升級。《推動新型基礎設施建設促進民航高質量發展實施意見》指出,要建立健全民航數據治理標準,完善符合高質量發展要求的統計指標體系;制定關鍵數據項標準和數據目錄清單,規范數據來源和數據質量要求,確保數據準確性和時效性等;構建數據共享機制做到數據分級分類開放共享;建立數據治理的評估與監管制度,以保障各單位的數據治理工作順利進行。在此背景下,《智慧民航建設2021年工作計劃》要求,組織編制智慧民航數據治理規范。
記者:系列規范的編制工作具體是怎樣開展的?
答:系列規范由民航局發展計劃司(智慧民航建設領導小組辦公室)提出,民航局發展計劃司和中國民航管理干部學院大數據與信息管理研究中心聯合編制。編制組系統梳理了國內外各行業、各領域已發布的數據治理相關法律法規、標準規范和技術文件,深入調研了行業多家運行保障單位的數據治理需求和實踐方案,學習借鑒了行業內外科研機構和信息技術公司的創新經驗,確定了本系列規范編制的框架原則、技術路線和邊界范圍,經廣泛征集行業意見和多次專家論證審查,最終形成了此次發布的5部行業標準。
記者:請為我們分別介紹一下,此次發布的5部行業標準的主旨和內容要點。
答:此次發布了系列規范中的《框架與管理機制》《數據架構》《數據質量》《數據安全》《數據服務》等5部行業標準,其主旨和內容要點如下:《智慧民航數據治理規范 框架與管理機制》旨在統一民航數據治理框架體系,指導民航數據治理制度、組織建設,為民航數據治理提供管理保障。該標準給出了行業數據治理的體系框架、建設目標、實施要點、組織保障以及制度建設的總體要求。比如在組織保障方面,該標準設計了民航數據治理組織結構,包括單位層面建立的數據管理組織、各業務數據管理組織、信息技術支撐組織以及跨領域數據工作組在內的多層級結構,并通過分層分級原則任命數據責任人,將數據責任落實到業務主體,支撐數據治理工作的實施。《智慧民航數據治理規范 數據架構》旨在指導和規范民航數據架構建設,搭建民航業務與應用系統建設的數據橋梁,提升民航業務在應用系統的集成效率。該標準從數據資產目錄、數據標準、數據模型、元數據管理、主數據管理等方面,提出了數據架構建設的基本要求、一般原則和管理流程,以作為后續應用架構、技術架構設計、開發的依據,并將具體業務要求映射到應用系統技術實施中,指導業務單位實現業務需求向IT軟硬件設施的首次“翻譯”和轉移。《智慧民航數據治理規范 數據質量》旨在規范數據質量要求,指導行業數據質量管理工作,實現數據質量的有效評價、控制和改進。該標準構建了數據全生命周期的質量管控體系和評價策略,提出了數據質量管理流程、指標規則、監測控制、問題分析與改進、組織保障等方面的具體建議措施。比如該標準細化了數據質量評價規則,從完整性、及時性、準確性、一致性、有效性及可訪問性等6個維度、16種評價指標評估數據質量,落實了相關組織和各級數據責任人的職責分工,以確保行業數據質量治理工作有序開展。《智慧民航數據治理規范 數據安全》旨在指導行業單位建立科學的數據安全分級與防護機制,強化行業數據安全保護能力。該標準提出了由數據安全原則、數據安全分級管理、數據全生命周期安全防護和數據安全組織保障構成的民航數據安全治理體系框架。行業各單位應基于數據安全分級,確定在采集、傳輸、存儲、使用、共享以及銷毀等各個環節應采取的安全防護措施,在促進民航數據安全應用和正常流動的同時,提高本單位的數據安全保護水平。《智慧民航數據治理規范 數據服務》旨在構建民航行業高效、可復用的數據服務體系,指導行業單位數據服務建設,提升行業數據應用能力。該標準堅持以功能復用、自主高效的原則搭建民航數據服務基本框架,在數據服務內涵與原則、數據服務建設流程、數據集服務與數據API服務、數據分析能力等方面提出相關規范。
記者:作為聚焦“十四五”時期民航發展主線的行業標準,智慧民航數據治理系列規范預計將為行業帶來哪些積極影響?
答:當前,中國民航正從單一航空運輸強國向多領域民航強國轉段進階,以“智慧民航”為主線,加快行業數字化轉型,提升行業治理能力和治理水平,是行業發展的迫切需求。系列規范從管理機制、數據架構、數據質量、數據安全、數據服務等維度為行業數據治理提供規范,為行業“數據怎么管、數據怎么用”的問題提供了有效解決方案。系列規范將為民航局行業大數據管理提供重要的支撐手段和依據,為民航行業各單位數據治理和數字化轉型工作提供指導。對于行業各單位而言,系列規范的指導將助力實現數據和業務的統一管理,為推動行業主體間的數據互通和安全共享提供技術保障,有利于實現各單位內部及單位間的數據融合與復用,從而降低運行成本、大幅提高數字化轉型效率。
上一篇:大數據治理方案...