數據交換平臺是為校內各部門的管理信息系統提供數據交換,實現數據共享,并建立公共數據庫,實現數據積累,為數據統計、分析、挖掘做準備。數據交換平臺是一個分布式開放型網絡系統,它由一個交換中心,若干個應用軟件的適配器,以及保證數據傳輸可靠、安全,穩定的數據郵局(數據郵局)以及系統運行的輔助單元--管理中心構成,數據交換中的各應用軟件以適配器作為接口,通過與交換中心的消息和數據交互實現信息交換。

數據服務交換和服務工具處于第三個階段,是統一的數據服務平臺。也屬于一體化
數據治理和共享平臺的重要組成部分。
數據服務交換和服務工具發展階段
第一個階段是比較原始的,缺少工具階段。通過寫腳本、針對項目的開發實現,工具化程度差,項目實施和運維成本高。
第二個階段多樣化的工具階段,提供了能解決特定功能的工具產品。如消息中間件、ETL、文件傳輸等。但對于復雜環境下的大型項目有很大的不足,需要多個工具集成,缺少統一的架構、有孤島,集成實施成本高,交換過程中面臨丟包、系統堵塞等問題,安全穩定性差。
第三個階段是統一的數據交換和服務平臺,提供面向服務的插座式架構,基于統一的規則和元數據、統一架構、統一工具能可視化配置出
數據采集、數據交換、數據加工、數據共享等不同的數據服務方案,能滿足客戶不同項目的數據交換和數據管理需要。提供端對端的數據交換和整合服務,保證了交換過程中的可靠傳輸,避免了丟包、系統堵塞等問題。
二挑戰與解決思路
2.1傳統的數據交換工具面臨挑戰
(1)傳統的數據交換解決方案是基于多個模塊/產品集成實現跨網段數據交換,當一個環節出現問題時易造成數據不一致。
(2)當采用異步交換方式時,異步的交換機制造成IO等系統資源占用、文件鎖死、堵塞掛起等現象。
(3)當采用同步的交換方式時,同步交換機制在交換數據量比較大,需要傳輸或者裝載時間比較長時,易造成通訊掛起、堵塞等現象。

2.2跨網段情況下的大數據量的數據交換與服務思路
(1)基于統一的數據交換服務實現了端對端的數據交換。
(2)通過事務處理機制保證跨網段交換的數據一致性。
(3)狀態傳感器技術解決了分布式傳輸過程的狀態感知,避免了需要長時間處理情況下的通訊掛起現象,保證了傳輸的暢通。

基于統一的數據交換服務實現了端對端的數據交換。通過事務處理機制保證交換的數據一致性。狀態傳感器技術解決了分布式傳輸過程的狀態感知,避免了需要長時間處理情況下的通訊掛起現象,保證了傳輸的暢通,跨網段情況下的大數據量的交換能力強。配置、部署、運維簡單。
數據服務交換和服務工具作為一體化數據治理和共享平臺一個組件,提供面向服務的插座式架構,基于統一的規則和元數據、統一架構、統一工具能可視化配置出數據采集、數據交換、數據加工、數據共享等不同的數據服務方案,能滿足客戶不同項目的數據交換和數據管理需要,提供端對端的數據交換和整合服務,保證了交換過程中的可靠傳輸,避免了丟包、系統堵塞等問題。支持跨組織、跨網段的、上下級單位數據交換、基于前置機的數據交換、物理隔絕的數據交換等多種應用場景。
(部分內容來源網絡,如有侵權請聯系刪除)