1. 產(chǎn)品介紹
2. 用戶手冊(cè)
1. 產(chǎn)品介紹
2. 用戶手冊(cè)
1. 產(chǎn)品介紹
2. 用戶手冊(cè)
1. 產(chǎn)品介紹
2. 用戶手冊(cè)
1. 產(chǎn)品介紹
2. 用戶手冊(cè)
1. 產(chǎn)品介紹
2. 用戶手冊(cè)
數(shù)據(jù)集成融合平臺(tái)是博能數(shù)智自主研發(fā)的一款基于微服務(wù)架構(gòu)的多數(shù)據(jù)源接入,、采集,、分析處理的中臺(tái)型產(chǎn)品,用于快速采集和集成物理世界各類業(yè)務(wù)數(shù)據(jù)和動(dòng)態(tài)感知數(shù)據(jù),目前已支撐了超過(guò)20個(gè)大型孿生機(jī)場(chǎng)項(xiàng)目,。平臺(tái)包含數(shù)據(jù)中臺(tái),、物聯(lián)中臺(tái),、位置中臺(tái)和分布式存儲(chǔ)計(jì)算平臺(tái)四個(gè)模塊,。
【1】數(shù)據(jù)中臺(tái)是數(shù)據(jù)融合集成平臺(tái)的中樞模塊,為用戶提供多種數(shù)據(jù)源快速接入和融合處理的一站式解決方案,,提供數(shù)據(jù)接入,、采集、融合,、分析,、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)共享以及實(shí)時(shí)消息總線等服務(wù),。數(shù)據(jù)中臺(tái)由數(shù)據(jù)資產(chǎn),、數(shù)據(jù)元資產(chǎn)、規(guī)則引擎、任務(wù)調(diào)度和共享服務(wù)五大功能組成,。
數(shù)據(jù)資產(chǎn)是數(shù)據(jù)處理流程的基礎(chǔ)設(shè)置,,實(shí)現(xiàn)將結(jié)構(gòu)化、半結(jié)構(gòu)化,、實(shí)時(shí)數(shù)據(jù)源采集到數(shù)據(jù)平臺(tái)中,,對(duì)所有數(shù)據(jù)源連接參數(shù)及連接狀態(tài)進(jìn)行管理。支持超過(guò)20種數(shù)據(jù)庫(kù)及數(shù)據(jù)引擎,,包括:Mysql、Oracle,、Hive,、PostgreSQL、SQLServer,、Elasticsearch,、Neo4j、Redis,、Hbase等數(shù)據(jù)庫(kù)以及kafka,、tcp、udp,、websocket,、http、Rabbitmq等實(shí)時(shí)數(shù)據(jù)源,,最新版本還新增了SFTP,、本地文件服務(wù)。
數(shù)據(jù)元資產(chǎn)是為了描述數(shù)據(jù)的相關(guān)信息而定義的數(shù)據(jù)概念,,例如記錄數(shù)據(jù)的存儲(chǔ)位置,、模型定義、生命周期,、血緣關(guān)系等信息,,包括技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)和操作元數(shù)據(jù),。
規(guī)則引擎模塊是對(duì)采集的數(shù)據(jù)進(jìn)行深層次計(jì)算和分析,,通過(guò)可視化的拖拉拽方式實(shí)現(xiàn)數(shù)據(jù)采集、清洗,、分析,、存儲(chǔ)和共享的流程設(shè)置。支持超過(guò)40種數(shù)據(jù)資產(chǎn)處理節(jié)點(diǎn),,包括過(guò)濾,、排序、去重、關(guān)系函數(shù),、數(shù)據(jù)函數(shù),、類型轉(zhuǎn)換、日期函數(shù),、字符串函數(shù),、自定義函數(shù)等,最新版本還增加了數(shù)據(jù)聚合節(jié)點(diǎn),、數(shù)據(jù)關(guān)聯(lián)節(jié)點(diǎn),、接口清洗節(jié)點(diǎn)、文件清洗節(jié)點(diǎn),、Mybaits清洗節(jié)點(diǎn)以及自定義javascript節(jié)點(diǎn),,用戶還可以根據(jù)需求自定義任意處理節(jié)點(diǎn)。
任務(wù)調(diào)度模塊為用戶提供了一個(gè)清晰和直觀的方式查看規(guī)則引擎正在運(yùn)行的各項(xiàng)任務(wù),,包括執(zhí)行記錄,、操作詳情、狀態(tài)及操作時(shí)間,、調(diào)度周期等,。
服務(wù)共享模塊可根據(jù)用戶不同的應(yīng)用場(chǎng)景、業(yè)務(wù)主題對(duì)數(shù)據(jù)資產(chǎn)進(jìn)行快捷的共享設(shè)置,,以API服務(wù)的形式對(duì)外提供,,實(shí)現(xiàn)多維度的數(shù)據(jù)增值服務(wù)。
數(shù)據(jù)中臺(tái)提供多源數(shù)據(jù)集成的任務(wù)編排和調(diào)度的統(tǒng)一框架,,實(shí)現(xiàn)對(duì)數(shù)據(jù)基于自定義規(guī)則的分析處理,,有效解決了企業(yè)多信息系統(tǒng)之間的數(shù)據(jù)孤島問(wèn)題和與數(shù)字孿生可視化應(yīng)用之間的連接問(wèn)題。
【2】物聯(lián)中臺(tái)是數(shù)據(jù)融合集成平臺(tái)在物聯(lián)設(shè)備接入方面的拓展,?;谙冗M(jìn)的云計(jì)算和大數(shù)據(jù)處理技術(shù),采用分布式系統(tǒng)架構(gòu),,以設(shè)備管理為核心,,通過(guò)設(shè)置不同規(guī)則實(shí)現(xiàn)三分物聯(lián)設(shè)備的數(shù)據(jù)接入、設(shè)備聯(lián)動(dòng)和數(shù)據(jù)轉(zhuǎn)發(fā)的一體化功能,。
用戶通過(guò)創(chuàng)建產(chǎn)品,、添加設(shè)備、創(chuàng)建設(shè)備接入規(guī)則等操作,,實(shí)現(xiàn)外部物聯(lián)設(shè)備的接入,,并支持查看設(shè)備的實(shí)時(shí)接入情況及歷史數(shù)據(jù)。同類型設(shè)備使用產(chǎn)品的概念進(jìn)行統(tǒng)一管理,,包括產(chǎn)品的基本信息,、模型定義、主題管理等。支持10種以上常見(jiàn)的物聯(lián),、網(wǎng)絡(luò)協(xié)議,,如:TCP、UDP,、CoAP,、MQTT、MODBUS,、OPC-UA/DA,、RS232/485、SNMP,、SOAP等,。
邊緣節(jié)點(diǎn)模塊用于設(shè)備的邊緣端管理,包含HOST,、PORT、邊緣ID,、邊緣名稱,、狀態(tài)、創(chuàng)建時(shí)間,、更新時(shí)間上線時(shí)間,、離線時(shí)間屬性等信息的展示,支持HOST,、邊緣ID,、邊緣名稱、狀態(tài),、時(shí)間段等條件進(jìn)行查詢以及應(yīng)用列表,、詳情、解綁等操作,。
規(guī)則管理模塊則支持接入綁定好的設(shè)備,,實(shí)現(xiàn)設(shè)備聯(lián)動(dòng)和數(shù)據(jù)轉(zhuǎn)發(fā)功能??赏ㄟ^(guò)創(chuàng)建數(shù)據(jù)轉(zhuǎn)發(fā)規(guī)則,,將接入的設(shè)備數(shù)據(jù)按照一定的轉(zhuǎn)發(fā)條件,轉(zhuǎn)發(fā)至指定目的地,,便于第三方系統(tǒng)對(duì)數(shù)據(jù)的訪問(wèn)引用,,實(shí)現(xiàn)數(shù)據(jù)共享,有效減少數(shù)據(jù)采集中的重復(fù)性工作,。
最新版本還拓展了物聯(lián)感知的相關(guān)能力,,支持手動(dòng)添加視頻數(shù)據(jù),支持自定義標(biāo)識(shí)、名稱,、級(jí)別,、上行參數(shù)、描述等屬性,,也新增了設(shè)備地圖和視頻分析功能,。在數(shù)據(jù)存儲(chǔ)模塊方面,對(duì)時(shí)序數(shù)據(jù)進(jìn)行了分布式存儲(chǔ)的升級(jí),,IOTDB存儲(chǔ)目前已支持100TB以上的數(shù)據(jù)存儲(chǔ)能力,。
物聯(lián)中臺(tái)作為數(shù)據(jù)中臺(tái)在物聯(lián)網(wǎng)方面的拓展,具有大容量,、伸縮性,、高性能、高并發(fā)特點(diǎn),,較好的解決了不同廠家物聯(lián)設(shè)備的接入以及互聯(lián)互通困難帶來(lái)的信息孤島問(wèn)題,。
【3】位置中臺(tái)是數(shù)據(jù)中臺(tái)在位置數(shù)據(jù)處理方面的拓展,為用戶提供位置大數(shù)據(jù)的一站式解決方案,。位置中臺(tái)具有強(qiáng)大的位置數(shù)據(jù)采集能力,、可視位置數(shù)據(jù)優(yōu)化能力和支持復(fù)雜位置數(shù)據(jù)共享的能力。位置中臺(tái)服務(wù)集成了設(shè)備位置數(shù)據(jù)極其協(xié)議采集能力的同時(shí),,還提供對(duì)位置數(shù)據(jù)在線解析的能力,。
位置中臺(tái)在數(shù)據(jù)的復(fù)雜度和數(shù)據(jù)源的多樣性方面相較于數(shù)據(jù)中臺(tái)都有專業(yè)性的優(yōu)化,支持多種資產(chǎn)數(shù)據(jù)源的訪問(wèn),,包含主流關(guān)系型數(shù)據(jù)庫(kù),、網(wǎng)絡(luò)協(xié)議、工業(yè)協(xié)議以及其他多種類數(shù)據(jù)源,,并提供高并發(fā),、分布式的數(shù)據(jù)采集。
位置事件引擎是位置中臺(tái)針對(duì)位置數(shù)據(jù)優(yōu)化處理研發(fā)的核心功能,,通過(guò)圖形化界面的可視操作,,實(shí)現(xiàn)了位置數(shù)據(jù)的采集、流轉(zhuǎn),、清洗,、優(yōu)化、分析,,并支持把優(yōu)化過(guò)后的數(shù)據(jù)提供給平臺(tái)上層端進(jìn)行位置展示,、軌跡查詢。平臺(tái)同時(shí)提供自助數(shù)據(jù)清洗,、可視化數(shù)據(jù)監(jiān)控,、任務(wù)調(diào)度等豐富的位置任務(wù)管理功能,,協(xié)助企業(yè)用戶高效實(shí)現(xiàn)異構(gòu)位置數(shù)據(jù)源和復(fù)雜的位置算法優(yōu)化目的間的平衡兼顧。位置中臺(tái)在數(shù)據(jù)處理的基礎(chǔ)之上,,還支持?jǐn)?shù)據(jù)對(duì)外共享,,以無(wú)需編碼開(kāi)發(fā)API的形式實(shí)現(xiàn)了位置數(shù)據(jù)的增值服務(wù)。
【4】分布式存儲(chǔ)計(jì)算平臺(tái)作為整體基底,,滿足了海量時(shí)空大數(shù)據(jù)存儲(chǔ)和計(jì)算的需求,。提供高效的分布式存儲(chǔ)架構(gòu),能存儲(chǔ)任意容量,、任意類型的結(jié)構(gòu)化,、非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)。提供了包含位置數(shù)據(jù)分析的YARN,、TB級(jí)時(shí)序數(shù)據(jù)存儲(chǔ)的HIVE,、位置數(shù)據(jù)實(shí)時(shí)分析的FLINK、歷史數(shù)據(jù)分析處理的SPARK,、臨時(shí)消息隊(duì)列處理的KAFKA以及非結(jié)構(gòu)化數(shù)據(jù)處理的FASTDFS等30余種大數(shù)據(jù)組件以及一鍵式安裝部署簡(jiǎn)化安裝流程,,為數(shù)據(jù)中臺(tái)和物聯(lián)中臺(tái)提供了底層能力的支持,滿足快速運(yùn)維集群存儲(chǔ)和計(jì)算資源的要求,。
數(shù)據(jù)集成融合平臺(tái)解決了企業(yè)在孿生項(xiàng)目開(kāi)發(fā)中時(shí)空數(shù)據(jù)孤島,、數(shù)據(jù)質(zhì)量差、三方物聯(lián)設(shè)備統(tǒng)一管理和互聯(lián)互通等問(wèn)題,,消除了孿生應(yīng)用和業(yè)務(wù)系統(tǒng)的數(shù)字鴻溝,,提高業(yè)務(wù)敏捷性,,全面助力企業(yè)的數(shù)字化轉(zhuǎn)型,。