秦皇島銀行在建設(shè)數(shù)據(jù)服務(wù)總線之前,存在如下情況或問題。(1)數(shù)據(jù)交換頻次和時(shí)效性差:隨著IT系統(tǒng)不斷建設(shè),系統(tǒng)越來越多,系統(tǒng)之間的數(shù)據(jù)同步和交換越來越頻繁、時(shí)效性要求高。特別是大數(shù)據(jù)平臺(tái)的建設(shè),對(duì)數(shù)據(jù)同步和交換的效率要求更高。(2)難以應(yīng)對(duì)行內(nèi)多樣化的數(shù)據(jù)形態(tài)及傳輸需求:不同的IT系統(tǒng)有著不同的要求,數(shù)據(jù)采集形式、數(shù)據(jù)格式、數(shù)據(jù)傳輸?shù)染兴煌?,?shù)據(jù)交換形式包括聯(lián)機(jī)交換和批量交換。(3)缺乏數(shù)據(jù)交換的統(tǒng)一規(guī)范:主要包括數(shù)據(jù)格式、文件格式、文件命名、加密解密、傳輸協(xié)議、交換工具等等雜亂多樣,同時(shí)也導(dǎo)致系統(tǒng)功能定位不明確現(xiàn)象。(4)缺乏數(shù)據(jù)交換的統(tǒng)一管理:數(shù)據(jù)交換更多成為操作系統(tǒng)及底層技術(shù)實(shí)現(xiàn),無法進(jìn)行可視化監(jiān)控、調(diào)度組織和管理,缺乏數(shù)據(jù)交換的安全性。
立即咨詢助力行業(yè)客戶迅速建立企業(yè)數(shù)據(jù)總線
方便的交換配置讓用戶更加聚焦業(yè)務(wù)價(jià)值實(shí)現(xiàn)
高效的數(shù)據(jù)交換效率更好釋放數(shù)據(jù)資產(chǎn)價(jià)值
提供實(shí)時(shí)/準(zhǔn)實(shí)時(shí)/批量數(shù)據(jù)方式采集方式,對(duì)采集數(shù)據(jù)進(jìn)行加工、集成、共享、分發(fā);具備行內(nèi)數(shù)據(jù)和外部數(shù)據(jù)采集/計(jì)費(fèi)能力??沙蔀槿袛?shù)據(jù)傳輸、交換、共享與服務(wù)中心,實(shí)現(xiàn)統(tǒng)一采集、統(tǒng)一管理、統(tǒng)一服務(wù)。
支持多種關(guān)系型數(shù)據(jù)庫(如MySql、Oracle、DB2或其他RDBMS),支持對(duì)接Hadoop平臺(tái)多種組件(Hive、Hdfs、Hase);支持各種文件傳輸(如SFTP)。采用插件化集成機(jī)制,針對(duì)市面上新出現(xiàn)的各種數(shù)據(jù)源,可迅速開發(fā)Reader端和Writer端程序插件進(jìn)行集成,保證高擴(kuò)展性和快速客戶化開發(fā)、交付能力。
每一種讀插件都有一種或多種切分策略,都能將作業(yè)合理切分成多個(gè)Task并行執(zhí)行,單機(jī)多線程執(zhí)行模型可以讓速度隨并發(fā)成線性增長(zhǎng)。