- 產品
- 產品解決方案
- 行業解決方案
- 案例
- 數據資產入表
- 賦能中心
- 伙伴
- 關于
時間:2019-12-13來源:億信華辰瀏覽數:440次
冬天來了,春天還遠著呢!
快凍成老寒腿的你穿秋褲了嗎?
項目即將驗收,表做好了數據還沒出來,
怎么辦,怎么辦…
有了,新get的數據工廠使用技能
正好派上用場。
很多好學的童鞋們,也提出了很多疑問。
數據工廠跟其它ETL工具產品相比有什么區別呢?
數據工廠裝載性能如何?
數據工廠是否能完成設計作業的平滑遷移?
……
那么本期小編就帶著大家走進數據工廠不一樣的世界。
Web化應用服務,開放式架構
數據工廠基于web服務,易部署,同時也能很便捷的與其它工具或系統進行集成整合,單點配置等,相比客戶端類工具,數據工廠在多人協同作業中,省去了大量的資源檢入檢出過程和版本一致性管理工作。
混合計算引擎,智能適配
數據工廠結合各類項目實施環境特征,采用的是sql引擎加內存運算的混合計算執行引擎,充分發揮數據庫性能優勢的同時,也能根據數據處理場景和資源占用情況,智能適配應用服務器,進行內存運算執行。
特色數倉一致性維、行列拆分等組件
除了在傳統組件的基礎之上,數據工廠封裝了大量的數倉特色的組件,如:一致性維轉換、拉鏈表處理、行列拆分、列拆多行等。這些組件都是數據倉庫項目中常用的數據處理技術,而在其它工具中需要大量的組件組合使用或者需要調用外置腳本來完成,在數據工廠中只需要簡單的配置即可。
數據清洗規則合并計算,批量執行
以往我們在用ETL工具做數據清洗時,會發現眾多組件中,挑選不出一個合適的使用,又或者需要手工編寫大量的表達式。數據工廠中,專門提供了基于規則的數據清洗組件,將常用的數據行級和列級清洗進行規則化管理,通過界面配置,很方便的處理數據清洗,與此同時,數據工廠能自動完成規則的合并計算,大大節省了數據清洗性能開銷。
全面支持數據倉庫管理
數據工廠采用數據倉庫分層管理模式,內置標準的ODS、整合層、匯總層、數據集市,同時能根據項目的實施要求,自由組合分層結構。提供了完整的數倉建模管理所需的技術要素定義和業務要素定義,支持模型的創建、維護、字段檢索等功能。
多元化可視化建模
數據工廠提供了多元化的可視化建模和模型關系呈現,除了常規的手工定義方式外,數據工廠支持從現有模型或者數據庫表中挑選已存在的字段,快速完成模型定義的同時,消除歧義,保證了字段定義的一致性,同時還支持批量創建和視圖模型管理。
提供一站式數據處理
數據工廠封裝了大量的向導式快捷方式,在根據源表生成目標主題表結構的同時,完成數據處理流程的自動創建和數據初始化鋪底。
完善的資源監控體系
數據工廠提供了完整的ETL全生命周期流程監控,能清晰的細化到每一個ETL作業中每一個組件的執行情況和耗時情況,與此同時,提供了完整的用戶訪問情況監控、資源操作使用情況監控、數據模型的存儲情況管理等。
數據工廠區別于其它工具的特性可遠遠不止這些,數據工廠也不僅僅只是ETL喲。小編在這里拋磚引玉下,就讓我們一起去發現吧。