如果與你每天打交道的數據都是如下的調性,肯定不出一周你就會崩潰,做個一年可能有頭禿風險。
數據格式不統一
數據冗余、缺少關聯
數據不準確、不可靠
這個時候,你一定在渴望有個工具踏著七彩祥云而來,救你于水深火熱之中。現在就有這樣一款工具擺在你面前,你還不為所動嗎?
他的名字叫做數據工廠(EsDataFactory),是一個集數據建模、數倉管理、數據ETL與一體的數倉工具,用于幫助政府和企業構建
數據倉庫,完成數據融合,提升
數據質量,促進政府和企業由業務驅動到數據驅動的轉型。比其它傳統工具提供了更簡捷、更智能、更多樣的數據服務。
數據工廠解決方案
構建面向全業務領域的數據倉庫
建立數據關系
消除數據冗余
提供數據服務
強化數據質量管理,提供準確可靠數據
基于規則、靈活可配
普及參與、持續推進
應用價值
數據工廠全面支持所有數據類實施項目
數據工廠廣泛適用于所有數據類的實施場合:數據整合、數據遷移、數據同步、數據交換、數據倉庫搭建、
數據清洗等。

完美兼容全業務領域的數據融合
全行業通用,全業務域整合。面向數倉的分層管理模式,全面兼容各行業各業務系統數據,完成各業務域系統的數據融合、數據關聯、數據共享等應用場景。

適應業務系統數據處理
除了支持數據倉庫處理外,數據工廠也能滿足OLTP業務處理系統多用戶高并發場景,無須擔心死鎖問題。
項目案例
借助數據工廠構建國家電網的一體化
數據應用平臺。
項目背景:
2011年1月,國家電網公司提出加快建設“三集五大”管理體系。國家電網辦〔2011〕1號文發布了《關于建設“大規劃、大建設、大運行、大檢修、大營銷”體系的意見》,進一步明確了“五大”體系建設工作要求。“大規劃”是“五大”體系的重要組成部分,大規劃體系中分為兩個應用,規劃計劃管理信息應用和一體化電網規劃設計應用。
其中,一體化電網規劃設計平臺已完成三期的項目建設,隨著國家電網公司發展進入以集團化運作為特征、深化“四化”管理的新時期,電網發展進入以特高壓和智能化為重要特征的新階段,根據“大規劃”體系建設要求,有必要在原有一體化電網規劃設計平臺(三期)建設的基礎上,加快一體化電網規劃設計應用的建設,提升數據維護展示的適應性和實用化水平、深化輸電網計算分析功能、拓展配電網應用功能、加強電網發展診斷分析、優化成果管理,有利于解決各級電網規劃力量分散、協調性不足、規劃標準不統一、輔助設計工具缺乏等問題,有效提高規劃設計工作效率和研究水平,提升電網規劃設計研究水平和技術支撐能力。
項目概況:
一體化電網規劃設計平臺(四期)項目是在一期、二期、三期項目成果之上,根據“大規劃”體系建設需求,依據發展部業務流程及管理變化,結合
i@Report數據采集工具、數據工廠(EsDataFactory)以及
億信BI進行建設實施。一體化電網規劃設計平臺拓展覆蓋電網規劃等全部規劃領域,貫穿各層級,打通各環節,建設涵蓋規劃信息庫、輸電網規劃、配電網規劃、電網發展診斷、輸電網成果管理和配電網成果管理六大塊業務需求的全業務數據中心,全面支撐電網公司規劃設計業務。
過數據工廠完成項目數據中心的建設:
隨著規劃業務數據的不斷完善,不同的
數據存儲于多個業務系統中,數據分散、數據口徑不統一的問題也逐步暴露,導致很難實現全業務系統、全角度的綜合
數據分析。
為了建立統一的數據模型,將來源于不同業務系統中的數據規范化,保證數據一致性、準確性和可用性,平臺按照分析應用主題,依托數據工廠(EsDataFactory)對數據進行ETL處理,將利用i@Report采集完成的數據、以及存儲于各個規劃業務系統的歷史數據進行整合、清洗,設計如下的ETL過程:


ETL過程設計完成后,通過ETL過程流的定義完成多個ETL過程的并行或者串行,最終按照周期進行定時調度。


數據工廠(EsDataFactory)多元化可視化建模、完整的數據處理流程幫助平臺最終完成了面向于分析主題的數據中心的建設。
項目成果:
一體化電網規劃設計平臺(四期)建設借助i@Report快速搭建數據采集補錄平臺,并通過數據工廠(EsDataFactory)完成個業務系統數據的整合清洗,在結合億信BI實現大規劃、大建設成果的集中展示。
利用“i+DF+BI”整體解決方案,完成了數據采集-->數據處理-->數據應用的一整套流程,提升了數據維護展示的適應性和實用化水平、深化了輸電網計算分析功能、拓展了配電網應用功能、加強了電網發展診斷分析、優化了成果管理,提高了數據應用的整體效率,達到了項目建設的預期目標。
(部分內容來源網絡,如有侵權請聯系刪除)