精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

如何實(shí)現(xiàn)多源異構(gòu)系統(tǒng)數(shù)據(jù)整合?

秒秒說數(shù)據(jù) ? 來源:秒秒說數(shù)據(jù) ? 作者:秒秒說數(shù)據(jù) ? 2022-08-10 14:14 ? 次閱讀

信息化建設(shè)過程中,由于各業(yè)務(wù)系統(tǒng)建設(shè)和實(shí)施數(shù)據(jù)管理系統(tǒng)的階段性、技術(shù)性以及其它經(jīng)濟(jì)和人為因素等因素影響,導(dǎo)致企業(yè)在發(fā)展過程中積累了大量采用不同存儲(chǔ)方式的業(yè)務(wù)數(shù)據(jù),包括采用的數(shù)據(jù)管理系統(tǒng)也大不相同,從簡(jiǎn)單的文件數(shù)據(jù)庫到復(fù)雜的網(wǎng)絡(luò)數(shù)據(jù)庫,它們構(gòu)成了的多源的異構(gòu)數(shù)據(jù),當(dāng)企業(yè)為完成一項(xiàng)工作,可能需要訪問分布在網(wǎng)絡(luò)不同位置上的多個(gè)數(shù)據(jù)管理系統(tǒng)中的數(shù)據(jù),從而對(duì)企業(yè)對(duì)未來規(guī)劃造成困擾。

整合多源異構(gòu)系統(tǒng)數(shù)據(jù)的目標(biāo)

多源異構(gòu)數(shù)據(jù)整合的目標(biāo)就在于實(shí)現(xiàn)不同結(jié)構(gòu)的數(shù)據(jù)之間的數(shù)據(jù)信息資源、硬件設(shè)備資源和人力資源的合并和共享。其中關(guān)鍵的一點(diǎn)就是以分散的局部的數(shù)據(jù)為基礎(chǔ),通過各種工具和處理邏輯建立全局的統(tǒng)一的數(shù)據(jù)或視圖。

傳統(tǒng)技術(shù)路線:

對(duì)于多源異構(gòu)系統(tǒng)數(shù)據(jù)整合的需求是十分多樣的,比如:數(shù)據(jù)的實(shí)時(shí)無縫對(duì)接或批量對(duì)接、數(shù)據(jù)實(shí)時(shí)或T+1同步、單向數(shù)據(jù)傳輸?shù)取@脗鹘y(tǒng)技術(shù)路線。

可以有以下幾種方式解決:

1.跨平臺(tái),SOAP服務(wù)對(duì)接

SOAP是一種輕量的、簡(jiǎn)單的、基于XML的數(shù)據(jù)交換協(xié)議,它被設(shè)計(jì)成交換結(jié)構(gòu)化或相對(duì)固化的信息。

SOAP服務(wù)具有簡(jiǎn)單、可擴(kuò)展的特點(diǎn),其實(shí)現(xiàn)與廠商編程語言和具體廠商都沒有關(guān)系。SOAP客戶端發(fā)送一個(gè)請(qǐng)求,調(diào)用相應(yīng)的對(duì)象,然后服務(wù)器返回結(jié)果。這些消息是XML 格式的,封裝成HTTP 協(xié)議,符合任何路由器、防火墻或代理服務(wù)器的要求。SOAP可以使用任何語言來完成,可以在任何操作系統(tǒng)中無需改動(dòng)正常運(yùn)行。因此,SOAP具有強(qiáng)大的網(wǎng)絡(luò)穿透能力,具有廣泛的適應(yīng)性,比較適合當(dāng)前自然資源部門應(yīng)用系統(tǒng)繁多、技術(shù)體系不一、數(shù)據(jù)多源異構(gòu)這一現(xiàn)實(shí)性的應(yīng)用系統(tǒng)和數(shù)據(jù)集成要求。

2.大文件,F(xiàn)TP文件共享

文件傳輸協(xié)議(FTP)雖然是一種非常傳統(tǒng)的數(shù)據(jù)共享和交換技術(shù),但是,在自然資源領(lǐng)域中,針對(duì)遙感圖像、三維地圖、CAD圖紙(Drawing)、激光點(diǎn)云等大數(shù)據(jù)量文件的交互,采用FTP交互方式是最合適不過的了。

只要在應(yīng)用系統(tǒng)之間約定文件服務(wù)器地址、文件命名規(guī)則、文件內(nèi)容格式等參數(shù),通過文件服務(wù)器的文件上傳和下載,即可完成數(shù)據(jù)交互。該方案簡(jiǎn)單實(shí)用,避免了去理解、實(shí)現(xiàn)復(fù)雜網(wǎng)絡(luò)傳輸和網(wǎng)絡(luò)協(xié)議等相關(guān)概念和技術(shù)。

FTP的主要缺點(diǎn)一是安全性較弱,一般依賴于操作系統(tǒng)層級(jí)的文件安全性;二是對(duì)于需要隨機(jī)存取數(shù)據(jù)文件內(nèi)任意指定部分的要求,無法響應(yīng),不夠靈活。

3.關(guān)系型,數(shù)據(jù)庫數(shù)據(jù)共享

自然資源領(lǐng)域涉及到七大關(guān)鍵業(yè)務(wù)環(huán)節(jié),與每個(gè)業(yè)務(wù)環(huán)節(jié)對(duì)應(yīng)的多個(gè)業(yè)務(wù)應(yīng)用系統(tǒng)之間存在大量的數(shù)據(jù)共享交換要求。對(duì)于應(yīng)用系統(tǒng)之間的數(shù)據(jù)交換來說,可以采用共享數(shù)據(jù)庫作為數(shù)據(jù)交換介質(zhì)。

在兩個(gè)應(yīng)用系統(tǒng)間完全互信的情況下,可以直接讀取對(duì)方數(shù)據(jù)庫里的數(shù)據(jù)。通常情況下,每個(gè)應(yīng)用系統(tǒng)對(duì)于數(shù)據(jù)的保密性、安全性都有一定的要求,不允許隨便開放給其他應(yīng)用系統(tǒng)直接存取。在這種情況下,可以通過建立第三方公共交換庫,通過該庫實(shí)現(xiàn)應(yīng)用系統(tǒng)間的數(shù)據(jù)共享交換。

相比文件傳輸方式(FTP)來說,因?yàn)槭褂玫耐粋€(gè)共享數(shù)據(jù)庫,交互更加簡(jiǎn)單。而且,數(shù)據(jù)庫管理系統(tǒng)可以提供相當(dāng)多的數(shù)據(jù)操作,比如復(fù)雜的條件查詢、更新、回滾等,交互方式比較靈活。通過數(shù)據(jù)庫的事務(wù)機(jī)制,可以保證數(shù)據(jù)交換的可靠性。

4.異步,消息隊(duì)列通訊以及數(shù)據(jù)抽取-轉(zhuǎn)換-加載(ETL)

消息隊(duì)列是更加松耦合、靈活、可靠的應(yīng)用系統(tǒng)集成和數(shù)據(jù)交換共享技術(shù)。通過引入消息中間件,在所有應(yīng)用系統(tǒng)之間建立起可實(shí)現(xiàn)消息傳輸、路由、過濾、增強(qiáng)、錯(cuò)誤捕獲和處理的消息傳輸機(jī)制,由消息隊(duì)列來保證數(shù)據(jù)傳輸?shù)漠惒叫院头€(wěn)定性。消息隊(duì)列跟互聯(lián)網(wǎng)的連接結(jié)構(gòu)類似,所有數(shù)據(jù)都可以通過消息中間件,建立起一條可靠的消息傳輸鏈路,進(jìn)行應(yīng)用系統(tǒng)間的通信

創(chuàng)新技術(shù)路線:

相較于消息隊(duì)列信息通訊以及數(shù)據(jù)抽取-轉(zhuǎn)換-加載(ETL),下秒數(shù)據(jù)Nexadata自成立開始就一直堅(jiān)持研發(fā)創(chuàng)新道路,是國內(nèi)首家打造“ELT+A”智能數(shù)據(jù)管道的軟件廠商。

1.創(chuàng)新性的打造“ELT+A”更加擁有發(fā)展前景,以及更大程度上滿足企業(yè)的需求,幫助企業(yè)低成本快速整合異構(gòu)系統(tǒng)數(shù)據(jù),實(shí)現(xiàn)業(yè)務(wù)數(shù)據(jù)自動(dòng)化流轉(zhuǎn)、互通共享。

2.通過無代碼的數(shù)據(jù)集成與數(shù)據(jù)建模技術(shù),幫助企業(yè)將所有應(yīng)用程序、數(shù)據(jù)庫、事件和文件等數(shù)據(jù)信息提取到數(shù)據(jù)倉庫中,并快速將分散的數(shù)據(jù)轉(zhuǎn)化為數(shù)據(jù)集、API、自動(dòng)化流程等開箱即用的數(shù)據(jù)服務(wù)。

審核編輯 黃昊宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 多源異構(gòu)
    +關(guān)注

    關(guān)注

    0

    文章

    4

    瀏覽量

    6474
  • SOAP
    +關(guān)注

    關(guān)注

    0

    文章

    10

    瀏覽量

    7661
  • 數(shù)據(jù)整合
    +關(guān)注

    關(guān)注

    0

    文章

    6

    瀏覽量

    6279
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    如何實(shí)現(xiàn)智慧交通的模式銜接

    實(shí)現(xiàn)智慧交通的模式銜接是一個(gè)復(fù)雜而系統(tǒng)的工程,它涉及多種交通方式的整合、信息共享、技術(shù)應(yīng)用等多個(gè)方面。以下是一些關(guān)鍵步驟和策略,以實(shí)現(xiàn)智慧
    的頭像 發(fā)表于 11-22 18:11 ?457次閱讀

    工業(yè)數(shù)采網(wǎng)關(guān)+數(shù)據(jù)中臺(tái)的一體化物聯(lián)網(wǎng)解決方案

    實(shí)現(xiàn)其遠(yuǎn)程監(jiān)控、精準(zhǔn)管理、運(yùn)維配置以及共享到MES系統(tǒng)、ERP系統(tǒng)中,從而發(fā)揮更多的效益。 工業(yè)設(shè)備的數(shù)據(jù)采集涉及多種設(shè)備接入、多種通信協(xié)議解析、
    的頭像 發(fā)表于 10-30 16:02 ?144次閱讀
    工業(yè)數(shù)采網(wǎng)關(guān)+<b class='flag-5'>數(shù)據(jù)</b>中臺(tái)的一體化物聯(lián)網(wǎng)解決方案

    【米爾NXP i.MX 93開發(fā)板試用評(píng)測(cè)】1、異構(gòu)核心通信的技術(shù)內(nèi)容

    前言 很多異構(gòu)核心使用的是標(biāo)準(zhǔn)的OpenAMP,OpenAMP(Open Asymmetric Multi-Processing)是一個(gè)開源的軟件框架,用于在異構(gòu)多核處理器系統(tǒng)實(shí)現(xiàn)
    發(fā)表于 09-21 20:24

    實(shí)現(xiàn)軸電機(jī)驅(qū)動(dòng)系統(tǒng)內(nèi)的片C2000 PWM同步

    電子發(fā)燒友網(wǎng)站提供《實(shí)現(xiàn)軸電機(jī)驅(qū)動(dòng)系統(tǒng)內(nèi)的片C2000 PWM同步.pdf》資料免費(fèi)下載
    發(fā)表于 09-03 09:25 ?2次下載
    <b class='flag-5'>實(shí)現(xiàn)</b><b class='flag-5'>多</b>軸電機(jī)驅(qū)動(dòng)<b class='flag-5'>系統(tǒng)</b>內(nèi)的<b class='flag-5'>多</b>片C2000 PWM同步

    AvaotaA1全志T527開發(fā)板AMP異構(gòu)計(jì)算簡(jiǎn)介

    Avaota SBC 的部分平臺(tái)內(nèi)具有小核心 CPU,與大核心一起組成了異構(gòu)計(jì)算的功能。 在異構(gòu)多處理系統(tǒng)中,主核心和輔助核心的存在旨在共同協(xié)作,以實(shí)現(xiàn)更高效的任務(wù)處理。這種協(xié)作需要
    發(fā)表于 07-24 09:54

    異構(gòu)混訓(xùn)整合不同架構(gòu)芯片資源,提高算力利用率

    的解決方案。通過混合使用多種異構(gòu)芯片,可以充分利用不同芯片的優(yōu)勢(shì),提高算力利用率,降低算力成本,并推動(dòng)AI技術(shù)的廣泛應(yīng)用。 ? 異構(gòu)混訓(xùn)能夠整合不同架構(gòu)芯片資源 ? 在2024年世界人工智能大會(huì)AI基礎(chǔ)設(shè)施論壇上,無問芯穹聯(lián)合創(chuàng)
    的頭像 發(fā)表于 07-18 00:11 ?3358次閱讀

    通道數(shù)據(jù)采集系統(tǒng)的設(shè)計(jì)的意義

    通道數(shù)據(jù)采集系統(tǒng)(Multi-channel Data Acquisition System, 簡(jiǎn)稱MDAS)是一種能夠同時(shí)采集、處理和存儲(chǔ)多個(gè)信號(hào)源數(shù)據(jù)的電子設(shè)備。這種
    的頭像 發(fā)表于 07-02 09:00 ?722次閱讀

    通道數(shù)據(jù)采集系統(tǒng)的轉(zhuǎn)換誤差怎么算

    通道數(shù)據(jù)采集系統(tǒng)是一種廣泛應(yīng)用于工業(yè)、科研、醫(yī)療等領(lǐng)域的高精度數(shù)據(jù)采集設(shè)備。它通過多個(gè)通道同時(shí)采集信號(hào),并對(duì)信號(hào)進(jìn)行處理、轉(zhuǎn)換和存儲(chǔ),以實(shí)現(xiàn)
    的頭像 發(fā)表于 07-01 16:36 ?604次閱讀

    通道數(shù)據(jù)采集系統(tǒng)的優(yōu)缺點(diǎn)

    通道數(shù)據(jù)采集系統(tǒng)是一種廣泛應(yīng)用于工業(yè)、科研、醫(yī)療等領(lǐng)域的技術(shù),它能夠同時(shí)采集多個(gè)通道的信號(hào),實(shí)現(xiàn)對(duì)多種物理量的實(shí)時(shí)監(jiān)測(cè)和分析。本文將詳細(xì)介紹
    的頭像 發(fā)表于 07-01 15:58 ?1288次閱讀

    數(shù)據(jù)采集系統(tǒng)分為幾類

    數(shù)據(jù)采集系統(tǒng)是大數(shù)據(jù)生態(tài)系統(tǒng)中的重要組成部分,它負(fù)責(zé)從各種數(shù)據(jù)源收集、整合和存儲(chǔ)
    的頭像 發(fā)表于 07-01 15:44 ?1347次閱讀

    科技界迎來了一款創(chuàng)新的電源測(cè)試解決方案—IT2700通道載模組系統(tǒng)

    IT2700通道載模組系統(tǒng)集成了最先進(jìn)的測(cè)試功能,包括單向、雙向、以及回饋負(fù)載模塊,支持用戶根據(jù)具體測(cè)試需求靈活組合。
    的頭像 發(fā)表于 05-11 10:30 ?606次閱讀
    科技界迎來了一款創(chuàng)新的電源測(cè)試解決方案—IT2700<b class='flag-5'>多</b>通道<b class='flag-5'>源</b>載模組<b class='flag-5'>系統(tǒng)</b>

    鏡頭傳感器圖像視頻處理器應(yīng)用

    鏡頭傳感器系統(tǒng)(MESS,Multi-CameraMulti-SensorSystems)在許多領(lǐng)域和場(chǎng)合都有廣泛的應(yīng)用。這些系統(tǒng)能夠通過整合
    的頭像 發(fā)表于 01-26 08:31 ?647次閱讀
    <b class='flag-5'>多</b>鏡頭<b class='flag-5'>多</b>傳感器圖像視頻處理器應(yīng)用

    基于衛(wèi)星數(shù)據(jù)的海洋溢油監(jiān)測(cè)技術(shù)

    基于光學(xué)衛(wèi)星數(shù)據(jù)(HY-1C/D等)及SAR衛(wèi)星數(shù)據(jù)(GF3、1米C-SAR-01/02星等),結(jié)合熱紅外數(shù)據(jù)及高分辨率高光譜數(shù)據(jù)等,利用
    發(fā)表于 12-29 15:07 ?771次閱讀
    基于<b class='flag-5'>多</b><b class='flag-5'>源</b>衛(wèi)星<b class='flag-5'>數(shù)據(jù)</b>的海洋溢油監(jiān)測(cè)技術(shù)

    SpringBoot實(shí)現(xiàn)動(dòng)態(tài)切換數(shù)據(jù)源

    最近在做業(yè)務(wù)需求時(shí),需要從不同的數(shù)據(jù)庫中獲取數(shù)據(jù)然后寫入到當(dāng)前數(shù)據(jù)庫中,因此涉及到切換數(shù)據(jù)源問題。本來想著使用Mybatis-plus中提供的動(dòng)態(tài)數(shù)
    的頭像 發(fā)表于 12-08 10:53 ?986次閱讀
    SpringBoot<b class='flag-5'>實(shí)現(xiàn)</b>動(dòng)態(tài)切換<b class='flag-5'>數(shù)據(jù)源</b>

    異構(gòu)集成 (HI) 與系統(tǒng)級(jí)芯片 (SoC) 有何區(qū)別?

    異構(gòu)集成 (HI) 與系統(tǒng)級(jí)芯片 (SoC) 有何區(qū)別?
    的頭像 發(fā)表于 11-29 15:39 ?2020次閱讀
    <b class='flag-5'>異構(gòu)</b>集成 (HI) 與<b class='flag-5'>系統(tǒng)</b>級(jí)芯片 (SoC) 有何區(qū)別?