數(shù)據(jù)服務(wù)交換和服務(wù)工具是數(shù)據(jù)采集服務(wù)、數(shù)據(jù)交換服務(wù)、數(shù)據(jù)加工服務(wù)、數(shù)據(jù)共享服務(wù)的統(tǒng)一支撐工具。數(shù)據(jù)服務(wù)工具采用面向服務(wù)的架構(gòu)，提供數(shù)據(jù)服務(wù)實(shí)現(xiàn)數(shù)據(jù)交換、數(shù)據(jù)整合、數(shù)據(jù)復(fù)制、數(shù)據(jù)的傳輸、數(shù)據(jù)共享等功能。主要包括運(yùn)行支撐、加工組件、服務(wù)組件、數(shù)據(jù)服務(wù)總線等組成。

數(shù)據(jù)交換與服務(wù)工具

1)數(shù)據(jù)采集服務(wù)：主要負(fù)責(zé)異構(gòu)、異地的多源數(shù)據(jù)到貼源緩存區(qū)的采集，實(shí)現(xiàn)內(nèi)外部系統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)等不同類型、不同時(shí)效的數(shù)據(jù)的復(fù)制與整合。結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)的復(fù)制，將異構(gòu)、異地的數(shù)據(jù)庫(kù)數(shù)據(jù)、文件數(shù)據(jù)復(fù)制到緩存庫(kù)中。

2)數(shù)據(jù)交換服務(wù)：支持多用應(yīng)用場(chǎng)景數(shù)據(jù)交換，如：企業(yè)內(nèi)部數(shù)據(jù)交換、企業(yè)上下級(jí)數(shù)據(jù)交換、基于前置機(jī)數(shù)據(jù)交換、物流隔離數(shù)據(jù)交換。支持全量、批量、實(shí)時(shí)的數(shù)據(jù)交換；支持大數(shù)據(jù)量的數(shù)據(jù)交換；支持復(fù)雜網(wǎng)絡(luò)環(huán)境下的可靠數(shù)據(jù)交換；支持跨網(wǎng)段、跨單位的數(shù)據(jù)交換；支持基于通道、文件的加密傳輸；支持多種數(shù)據(jù)接口和傳輸協(xié)議；提供數(shù)據(jù)交換日志；支持?jǐn)帱c(diǎn)續(xù)傳功能。

基于流加工技術(shù)的數(shù)據(jù)交換及整合服務(wù)

3)數(shù)據(jù)加工處理服務(wù)：實(shí)現(xiàn)數(shù)據(jù)的轉(zhuǎn)換、邏輯判斷、數(shù)據(jù)質(zhì)量的檢查、異常處理、數(shù)據(jù)路由、數(shù)據(jù)的規(guī)范化等處理，用于將貼源緩沖區(qū)的數(shù)據(jù)根據(jù)需要加工到數(shù)據(jù)存儲(chǔ)與處理層的結(jié)構(gòu)化區(qū)、非結(jié)構(gòu)化區(qū)，并能給數(shù)據(jù)主題區(qū)、分析服務(wù)區(qū)、數(shù)據(jù)實(shí)驗(yàn)室提供規(guī)范合理的數(shù)據(jù)。支持全量、增量、實(shí)時(shí)的數(shù)據(jù)處理，基于數(shù)據(jù)流處理技術(shù)，處理在數(shù)據(jù)流引擎中進(jìn)行，減輕對(duì)數(shù)據(jù)源和目標(biāo)的影響；提供統(tǒng)一加工服務(wù)實(shí)現(xiàn)數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)、NoSQL、搜索引擎、文件、XML、We b Service、傳輸隊(duì)列、適配器、內(nèi)存表、JSON 等之間的相互交換，通過(guò)工具可視化配置通過(guò)拖拉等操作，可視化配置異構(gòu)數(shù)據(jù)之間的轉(zhuǎn)換、加工、映射規(guī)則。

4)數(shù)據(jù)共享服務(wù)：服務(wù)提供方做服務(wù)資源的編目，注冊(cè)到目錄中心；中心做服務(wù)資源的審核、維護(hù)，并將共享的服務(wù)發(fā)布出去；服務(wù)使用方查詢到服務(wù)后，向中心申請(qǐng)使用該服務(wù)；中心審核審批通過(guò)后給申請(qǐng)用戶授權(quán)該服務(wù)的使用；服務(wù)使用方通過(guò)安全可管理的服務(wù)總線調(diào)用該服務(wù)，實(shí)現(xiàn)提供方和使用方的數(shù)據(jù)交換和共享。

5)運(yùn)行支撐服務(wù): 統(tǒng)一的工具實(shí)現(xiàn)可視化配置、任務(wù)的管理、安全管理、運(yùn)維監(jiān)控及調(diào)度管理功能，如上主要包括可視化配置及監(jiān)控、調(diào)度規(guī)則的管理及運(yùn)行監(jiān)控模塊、調(diào)度策略模塊、流程調(diào)度模塊、數(shù)據(jù)總線調(diào)度、服務(wù)模塊等組成。