日韩中文字幕不卡伊人日韩中文字幕|91九色精品|亚洲欧美日韩中文高清www777|果冻传媒911制片厂|亚洲中文字幕第一区|亚洲品精乱码久久久久久|亚洲国产精品美女久久久|亚洲人成中文字幕在线观看|国产精品久久久久久久婷婷|91精品国产高清片久久久久久,日韩少妇中文字幕,蜜桃传媒在线播放,公侵犯人妻一区二区三区中文字幕国产传媒精品区

首頁(yè) > 產(chǎn)品社區(qū) > 技術(shù)文檔 > 數(shù)據(jù)集成融合平臺(tái)
數(shù)據(jù)集成融合平臺(tái) 更新時(shí)間:2023-01-11 13:41
產(chǎn)品介紹

數(shù)據(jù)集成融合平臺(tái)是博能數(shù)智自主研發(fā)的一款基于微服務(wù)架構(gòu)的多數(shù)據(jù)源接入、采集、分析處理的中臺(tái)型產(chǎn)品,用于快速采集和集成物理世界各類業(yè)務(wù)數(shù)據(jù)和動(dòng)態(tài)感知數(shù)據(jù),目前已支撐了超過(guò)20個(gè)大型孿生機(jī)場(chǎng)項(xiàng)目。平臺(tái)包含數(shù)據(jù)中臺(tái)、物聯(lián)中臺(tái)、位置中臺(tái)和分布式存儲(chǔ)計(jì)算平臺(tái)四個(gè)模塊。

【1】數(shù)據(jù)中臺(tái)是數(shù)據(jù)融合集成平臺(tái)的中樞模塊,為用戶提供多種數(shù)據(jù)源快速接入和融合處理的一站式解決方案,提供數(shù)據(jù)接入、采集、融合、分析、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)共享以及實(shí)時(shí)消息總線等服務(wù)。數(shù)據(jù)中臺(tái)由數(shù)據(jù)資產(chǎn)、數(shù)據(jù)元資產(chǎn)、規(guī)則引擎、任務(wù)調(diào)度和共享服務(wù)五大功能組成。

數(shù)據(jù)資產(chǎn)是數(shù)據(jù)處理流程的基礎(chǔ)設(shè)置,實(shí)現(xiàn)將結(jié)構(gòu)化、半結(jié)構(gòu)化、實(shí)時(shí)數(shù)據(jù)源采集到數(shù)據(jù)平臺(tái)中,對(duì)所有數(shù)據(jù)源連接參數(shù)及連接狀態(tài)進(jìn)行管理。支持超過(guò)20種數(shù)據(jù)庫(kù)及數(shù)據(jù)引擎,包括:Mysql、Oracle、Hive、PostgreSQL、SQLServer、Elasticsearch、Neo4j、Redis、Hbase等數(shù)據(jù)庫(kù)以及kafka、tcp、udp、websocket、http、Rabbitmq等實(shí)時(shí)數(shù)據(jù)源,最新版本還新增了SFTP、本地文件服務(wù)。

數(shù)據(jù)元資產(chǎn)是為了描述數(shù)據(jù)的相關(guān)信息而定義的數(shù)據(jù)概念,例如記錄數(shù)據(jù)的存儲(chǔ)位置、模型定義、生命周期、血緣關(guān)系等信息,包括技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)和操作元數(shù)據(jù)。

規(guī)則引擎模塊是對(duì)采集的數(shù)據(jù)進(jìn)行深層次計(jì)算和分析,通過(guò)可視化的拖拉拽方式實(shí)現(xiàn)數(shù)據(jù)采集、清洗、分析、存儲(chǔ)和共享的流程設(shè)置。支持超過(guò)40種數(shù)據(jù)資產(chǎn)處理節(jié)點(diǎn),包括過(guò)濾、排序、去重、關(guān)系函數(shù)、數(shù)據(jù)函數(shù)、類型轉(zhuǎn)換、日期函數(shù)、字符串函數(shù)、自定義函數(shù)等,最新版本還增加了數(shù)據(jù)聚合節(jié)點(diǎn)、數(shù)據(jù)關(guān)聯(lián)節(jié)點(diǎn)、接口清洗節(jié)點(diǎn)、文件清洗節(jié)點(diǎn)、Mybaits清洗節(jié)點(diǎn)以及自定義javascript節(jié)點(diǎn),用戶還可以根據(jù)需求自定義任意處理節(jié)點(diǎn)。

任務(wù)調(diào)度模塊為用戶提供了一個(gè)清晰和直觀的方式查看規(guī)則引擎正在運(yùn)行的各項(xiàng)任務(wù),包括執(zhí)行記錄、操作詳情、狀態(tài)及操作時(shí)間、調(diào)度周期等。

服務(wù)共享模塊可根據(jù)用戶不同的應(yīng)用場(chǎng)景、業(yè)務(wù)主題對(duì)數(shù)據(jù)資產(chǎn)進(jìn)行快捷的共享設(shè)置,以API服務(wù)的形式對(duì)外提供,實(shí)現(xiàn)多維度的數(shù)據(jù)增值服務(wù)。

數(shù)據(jù)中臺(tái)提供多源數(shù)據(jù)集成的任務(wù)編排和調(diào)度的統(tǒng)一框架,實(shí)現(xiàn)對(duì)數(shù)據(jù)基于自定義規(guī)則的分析處理,有效解決了企業(yè)多信息系統(tǒng)之間的數(shù)據(jù)孤島問(wèn)題和與數(shù)字孿生可視化應(yīng)用之間的連接問(wèn)題。

【2】物聯(lián)中臺(tái)是數(shù)據(jù)融合集成平臺(tái)在物聯(lián)設(shè)備接入方面的拓展。基于先進(jìn)的云計(jì)算和大數(shù)據(jù)處理技術(shù),采用分布式系統(tǒng)架構(gòu),以設(shè)備管理為核心,通過(guò)設(shè)置不同規(guī)則實(shí)現(xiàn)三分物聯(lián)設(shè)備的數(shù)據(jù)接入、設(shè)備聯(lián)動(dòng)和數(shù)據(jù)轉(zhuǎn)發(fā)的一體化功能。

用戶通過(guò)創(chuàng)建產(chǎn)品、添加設(shè)備、創(chuàng)建設(shè)備接入規(guī)則等操作,實(shí)現(xiàn)外部物聯(lián)設(shè)備的接入,并支持查看設(shè)備的實(shí)時(shí)接入情況及歷史數(shù)據(jù)。同類型設(shè)備使用產(chǎn)品的概念進(jìn)行統(tǒng)一管理,包括產(chǎn)品的基本信息、模型定義、主題管理等。支持10種以上常見(jiàn)的物聯(lián)、網(wǎng)絡(luò)協(xié)議,如:TCP、UDP、CoAP、MQTT、MODBUS、OPC-UA/DA、RS232/485、SNMP、SOAP等。

邊緣節(jié)點(diǎn)模塊用于設(shè)備的邊緣端管理,包含HOST、PORT、邊緣ID、邊緣名稱、狀態(tài)、創(chuàng)建時(shí)間、更新時(shí)間上線時(shí)間、離線時(shí)間屬性等信息的展示,支持HOST、邊緣ID、邊緣名稱、狀態(tài)、時(shí)間段等條件進(jìn)行查詢以及應(yīng)用列表、詳情、解綁等操作。

規(guī)則管理模塊則支持接入綁定好的設(shè)備,實(shí)現(xiàn)設(shè)備聯(lián)動(dòng)和數(shù)據(jù)轉(zhuǎn)發(fā)功能。可通過(guò)創(chuàng)建數(shù)據(jù)轉(zhuǎn)發(fā)規(guī)則,將接入的設(shè)備數(shù)據(jù)按照一定的轉(zhuǎn)發(fā)條件,轉(zhuǎn)發(fā)至指定目的地,便于第三方系統(tǒng)對(duì)數(shù)據(jù)的訪問(wèn)引用,實(shí)現(xiàn)數(shù)據(jù)共享,有效減少數(shù)據(jù)采集中的重復(fù)性工作。

最新版本還拓展了物聯(lián)感知的相關(guān)能力,支持手動(dòng)添加視頻數(shù)據(jù),支持自定義標(biāo)識(shí)、名稱、級(jí)別、上行參數(shù)、描述等屬性,也新增了設(shè)備地圖和視頻分析功能。在數(shù)據(jù)存儲(chǔ)模塊方面,對(duì)時(shí)序數(shù)據(jù)進(jìn)行了分布式存儲(chǔ)的升級(jí),IOTDB存儲(chǔ)目前已支持100TB以上的數(shù)據(jù)存儲(chǔ)能力。

物聯(lián)中臺(tái)作為數(shù)據(jù)中臺(tái)在物聯(lián)網(wǎng)方面的拓展,具有大容量、伸縮性、高性能、高并發(fā)特點(diǎn),較好的解決了不同廠家物聯(lián)設(shè)備的接入以及互聯(lián)互通困難帶來(lái)的信息孤島問(wèn)題。

【3】位置中臺(tái)是數(shù)據(jù)中臺(tái)在位置數(shù)據(jù)處理方面的拓展,為用戶提供位置大數(shù)據(jù)的一站式解決方案。位置中臺(tái)具有強(qiáng)大的位置數(shù)據(jù)采集能力、可視位置數(shù)據(jù)優(yōu)化能力和支持復(fù)雜位置數(shù)據(jù)共享的能力。位置中臺(tái)服務(wù)集成了設(shè)備位置數(shù)據(jù)極其協(xié)議采集能力的同時(shí),還提供對(duì)位置數(shù)據(jù)在線解析的能力。

位置中臺(tái)在數(shù)據(jù)的復(fù)雜度和數(shù)據(jù)源的多樣性方面相較于數(shù)據(jù)中臺(tái)都有專業(yè)性的優(yōu)化,支持多種資產(chǎn)數(shù)據(jù)源的訪問(wèn),包含主流關(guān)系型數(shù)據(jù)庫(kù)、網(wǎng)絡(luò)協(xié)議、工業(yè)協(xié)議以及其他多種類數(shù)據(jù)源,并提供高并發(fā)、分布式的數(shù)據(jù)采集。

位置事件引擎是位置中臺(tái)針對(duì)位置數(shù)據(jù)優(yōu)化處理研發(fā)的核心功能,通過(guò)圖形化界面的可視操作,實(shí)現(xiàn)了位置數(shù)據(jù)的采集、流轉(zhuǎn)、清洗、優(yōu)化、分析,并支持把優(yōu)化過(guò)后的數(shù)據(jù)提供給平臺(tái)上層端進(jìn)行位置展示、軌跡查詢。平臺(tái)同時(shí)提供自助數(shù)據(jù)清洗、可視化數(shù)據(jù)監(jiān)控、任務(wù)調(diào)度等豐富的位置任務(wù)管理功能,協(xié)助企業(yè)用戶高效實(shí)現(xiàn)異構(gòu)位置數(shù)據(jù)源和復(fù)雜的位置算法優(yōu)化目的間的平衡兼顧。位置中臺(tái)在數(shù)據(jù)處理的基礎(chǔ)之上,還支持?jǐn)?shù)據(jù)對(duì)外共享,以無(wú)需編碼開(kāi)發(fā)API的形式實(shí)現(xiàn)了位置數(shù)據(jù)的增值服務(wù)。

【4】分布式存儲(chǔ)計(jì)算平臺(tái)作為整體基底,滿足了海量時(shí)空大數(shù)據(jù)存儲(chǔ)和計(jì)算的需求。提供高效的分布式存儲(chǔ)架構(gòu),能存儲(chǔ)任意容量、任意類型的結(jié)構(gòu)化、非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)。提供了包含位置數(shù)據(jù)分析的YARN、TB級(jí)時(shí)序數(shù)據(jù)存儲(chǔ)的HIVE、位置數(shù)據(jù)實(shí)時(shí)分析的FLINK、歷史數(shù)據(jù)分析處理的SPARK、臨時(shí)消息隊(duì)列處理的KAFKA以及非結(jié)構(gòu)化數(shù)據(jù)處理的FASTDFS等30余種大數(shù)據(jù)組件以及一鍵式安裝部署簡(jiǎn)化安裝流程,為數(shù)據(jù)中臺(tái)和物聯(lián)中臺(tái)提供了底層能力的支持,滿足快速運(yùn)維集群存儲(chǔ)和計(jì)算資源的要求。

數(shù)據(jù)集成融合平臺(tái)解決了企業(yè)在孿生項(xiàng)目開(kāi)發(fā)中時(shí)空數(shù)據(jù)孤島、數(shù)據(jù)質(zhì)量差、三方物聯(lián)設(shè)備統(tǒng)一管理和互聯(lián)互通等問(wèn)題,消除了孿生應(yīng)用和業(yè)務(wù)系統(tǒng)的數(shù)字鴻溝,提高業(yè)務(wù)敏捷性,全面助力企業(yè)的數(shù)字化轉(zhuǎn)型。

用戶手冊(cè)
參考在線文檔:https://www.yuque.com/bonengshuzhi/dn1vhv/tvmwp206geiedxmk?singleDoc# 《6 數(shù)據(jù)集成融合平臺(tái)》