1. 產(chǎn)品介紹
2. 用戶手冊
1. 產(chǎn)品介紹
2. 用戶手冊
1. 產(chǎn)品介紹
2. 用戶手冊
1. 產(chǎn)品介紹
2. 用戶手冊
1. 產(chǎn)品介紹
2. 用戶手冊
1. 產(chǎn)品介紹
2. 用戶手冊
數(shù)據(jù)集成融合平臺是博能數(shù)智自主研發(fā)的一款基于微服務(wù)架構(gòu)的多數(shù)據(jù)源接入、采集、分析處理的中臺型產(chǎn)品,,用于快速采集和集成物理世界各類業(yè)務(wù)數(shù)據(jù)和動態(tài)感知數(shù)據(jù),,目前已支撐了超過20個大型孿生機場項目。平臺包含數(shù)據(jù)中臺、物聯(lián)中臺、位置中臺和分布式存儲計算平臺四個模塊。
【1】數(shù)據(jù)中臺是數(shù)據(jù)融合集成平臺的中樞模塊,,為用戶提供多種數(shù)據(jù)源快速接入和融合處理的一站式解決方案,提供數(shù)據(jù)接入,、采集,、融合、分析,、數(shù)據(jù)倉庫,、數(shù)據(jù)共享以及實時消息總線等服務(wù)。數(shù)據(jù)中臺由數(shù)據(jù)資產(chǎn),、數(shù)據(jù)元資產(chǎn),、規(guī)則引擎、任務(wù)調(diào)度和共享服務(wù)五大功能組成,。
數(shù)據(jù)資產(chǎn)是數(shù)據(jù)處理流程的基礎(chǔ)設(shè)置,,實現(xiàn)將結(jié)構(gòu)化、半結(jié)構(gòu)化,、實時數(shù)據(jù)源采集到數(shù)據(jù)平臺中,,對所有數(shù)據(jù)源連接參數(shù)及連接狀態(tài)進(jìn)行管理。支持超過20種數(shù)據(jù)庫及數(shù)據(jù)引擎,,包括:Mysql,、Oracle、Hive,、PostgreSQL、SQLServer,、Elasticsearch,、Neo4j,、Redis、Hbase等數(shù)據(jù)庫以及kafka,、tcp,、udp、websocket,、http,、Rabbitmq等實時數(shù)據(jù)源,最新版本還新增了SFTP,、本地文件服務(wù),。
數(shù)據(jù)元資產(chǎn)是為了描述數(shù)據(jù)的相關(guān)信息而定義的數(shù)據(jù)概念,例如記錄數(shù)據(jù)的存儲位置,、模型定義,、生命周期、血緣關(guān)系等信息,,包括技術(shù)元數(shù)據(jù),、業(yè)務(wù)元數(shù)據(jù)和操作元數(shù)據(jù)。
規(guī)則引擎模塊是對采集的數(shù)據(jù)進(jìn)行深層次計算和分析,,通過可視化的拖拉拽方式實現(xiàn)數(shù)據(jù)采集,、清洗、分析,、存儲和共享的流程設(shè)置,。支持超過40種數(shù)據(jù)資產(chǎn)處理節(jié)點,包括過濾,、排序,、去重、關(guān)系函數(shù),、數(shù)據(jù)函數(shù),、類型轉(zhuǎn)換、日期函數(shù),、字符串函數(shù),、自定義函數(shù)等,最新版本還增加了數(shù)據(jù)聚合節(jié)點,、數(shù)據(jù)關(guān)聯(lián)節(jié)點,、接口清洗節(jié)點、文件清洗節(jié)點,、Mybaits清洗節(jié)點以及自定義javascript節(jié)點,,用戶還可以根據(jù)需求自定義任意處理節(jié)點。
任務(wù)調(diào)度模塊為用戶提供了一個清晰和直觀的方式查看規(guī)則引擎正在運行的各項任務(wù),,包括執(zhí)行記錄,、操作詳情,、狀態(tài)及操作時間、調(diào)度周期等,。
服務(wù)共享模塊可根據(jù)用戶不同的應(yīng)用場景,、業(yè)務(wù)主題對數(shù)據(jù)資產(chǎn)進(jìn)行快捷的共享設(shè)置,以API服務(wù)的形式對外提供,,實現(xiàn)多維度的數(shù)據(jù)增值服務(wù),。
數(shù)據(jù)中臺提供多源數(shù)據(jù)集成的任務(wù)編排和調(diào)度的統(tǒng)一框架,實現(xiàn)對數(shù)據(jù)基于自定義規(guī)則的分析處理,,有效解決了企業(yè)多信息系統(tǒng)之間的數(shù)據(jù)孤島問題和與數(shù)字孿生可視化應(yīng)用之間的連接問題,。
【2】物聯(lián)中臺是數(shù)據(jù)融合集成平臺在物聯(lián)設(shè)備接入方面的拓展?;谙冗M(jìn)的云計算和大數(shù)據(jù)處理技術(shù),,采用分布式系統(tǒng)架構(gòu),以設(shè)備管理為核心,,通過設(shè)置不同規(guī)則實現(xiàn)三分物聯(lián)設(shè)備的數(shù)據(jù)接入,、設(shè)備聯(lián)動和數(shù)據(jù)轉(zhuǎn)發(fā)的一體化功能。
用戶通過創(chuàng)建產(chǎn)品,、添加設(shè)備,、創(chuàng)建設(shè)備接入規(guī)則等操作,實現(xiàn)外部物聯(lián)設(shè)備的接入,,并支持查看設(shè)備的實時接入情況及歷史數(shù)據(jù),。同類型設(shè)備使用產(chǎn)品的概念進(jìn)行統(tǒng)一管理,包括產(chǎn)品的基本信息,、模型定義,、主題管理等。支持10種以上常見的物聯(lián),、網(wǎng)絡(luò)協(xié)議,,如:TCP、UDP,、CoAP,、MQTT、MODBUS,、OPC-UA/DA,、RS232/485、SNMP,、SOAP等,。
邊緣節(jié)點模塊用于設(shè)備的邊緣端管理,包含HOST、PORT,、邊緣ID,、邊緣名稱、狀態(tài),、創(chuàng)建時間、更新時間上線時間,、離線時間屬性等信息的展示,,支持HOST、邊緣ID,、邊緣名稱,、狀態(tài)、時間段等條件進(jìn)行查詢以及應(yīng)用列表,、詳情,、解綁等操作。
規(guī)則管理模塊則支持接入綁定好的設(shè)備,,實現(xiàn)設(shè)備聯(lián)動和數(shù)據(jù)轉(zhuǎn)發(fā)功能,。可通過創(chuàng)建數(shù)據(jù)轉(zhuǎn)發(fā)規(guī)則,,將接入的設(shè)備數(shù)據(jù)按照一定的轉(zhuǎn)發(fā)條件,,轉(zhuǎn)發(fā)至指定目的地,便于第三方系統(tǒng)對數(shù)據(jù)的訪問引用,,實現(xiàn)數(shù)據(jù)共享,,有效減少數(shù)據(jù)采集中的重復(fù)性工作。
最新版本還拓展了物聯(lián)感知的相關(guān)能力,,支持手動添加視頻數(shù)據(jù),,支持自定義標(biāo)識、名稱,、級別,、上行參數(shù)、描述等屬性,,也新增了設(shè)備地圖和視頻分析功能,。在數(shù)據(jù)存儲模塊方面,對時序數(shù)據(jù)進(jìn)行了分布式存儲的升級,,IOTDB存儲目前已支持100TB以上的數(shù)據(jù)存儲能力,。
物聯(lián)中臺作為數(shù)據(jù)中臺在物聯(lián)網(wǎng)方面的拓展,具有大容量,、伸縮性,、高性能、高并發(fā)特點,較好的解決了不同廠家物聯(lián)設(shè)備的接入以及互聯(lián)互通困難帶來的信息孤島問題,。
【3】位置中臺是數(shù)據(jù)中臺在位置數(shù)據(jù)處理方面的拓展,,為用戶提供位置大數(shù)據(jù)的一站式解決方案。位置中臺具有強大的位置數(shù)據(jù)采集能力,、可視位置數(shù)據(jù)優(yōu)化能力和支持復(fù)雜位置數(shù)據(jù)共享的能力,。位置中臺服務(wù)集成了設(shè)備位置數(shù)據(jù)極其協(xié)議采集能力的同時,還提供對位置數(shù)據(jù)在線解析的能力,。
位置中臺在數(shù)據(jù)的復(fù)雜度和數(shù)據(jù)源的多樣性方面相較于數(shù)據(jù)中臺都有專業(yè)性的優(yōu)化,,支持多種資產(chǎn)數(shù)據(jù)源的訪問,包含主流關(guān)系型數(shù)據(jù)庫,、網(wǎng)絡(luò)協(xié)議,、工業(yè)協(xié)議以及其他多種類數(shù)據(jù)源,并提供高并發(fā),、分布式的數(shù)據(jù)采集,。
位置事件引擎是位置中臺針對位置數(shù)據(jù)優(yōu)化處理研發(fā)的核心功能,通過圖形化界面的可視操作,,實現(xiàn)了位置數(shù)據(jù)的采集,、流轉(zhuǎn)、清洗,、優(yōu)化,、分析,并支持把優(yōu)化過后的數(shù)據(jù)提供給平臺上層端進(jìn)行位置展示,、軌跡查詢,。平臺同時提供自助數(shù)據(jù)清洗、可視化數(shù)據(jù)監(jiān)控,、任務(wù)調(diào)度等豐富的位置任務(wù)管理功能,,協(xié)助企業(yè)用戶高效實現(xiàn)異構(gòu)位置數(shù)據(jù)源和復(fù)雜的位置算法優(yōu)化目的間的平衡兼顧。位置中臺在數(shù)據(jù)處理的基礎(chǔ)之上,,還支持?jǐn)?shù)據(jù)對外共享,,以無需編碼開發(fā)API的形式實現(xiàn)了位置數(shù)據(jù)的增值服務(wù)。
【4】分布式存儲計算平臺作為整體基底,,滿足了海量時空大數(shù)據(jù)存儲和計算的需求,。提供高效的分布式存儲架構(gòu),能存儲任意容量,、任意類型的結(jié)構(gòu)化,、非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)。提供了包含位置數(shù)據(jù)分析的YARN,、TB級時序數(shù)據(jù)存儲的HIVE,、位置數(shù)據(jù)實時分析的FLINK、歷史數(shù)據(jù)分析處理的SPARK、臨時消息隊列處理的KAFKA以及非結(jié)構(gòu)化數(shù)據(jù)處理的FASTDFS等30余種大數(shù)據(jù)組件以及一鍵式安裝部署簡化安裝流程,,為數(shù)據(jù)中臺和物聯(lián)中臺提供了底層能力的支持,,滿足快速運維集群存儲和計算資源的要求。
數(shù)據(jù)集成融合平臺解決了企業(yè)在孿生項目開發(fā)中時空數(shù)據(jù)孤島,、數(shù)據(jù)質(zhì)量差,、三方物聯(lián)設(shè)備統(tǒng)一管理和互聯(lián)互通等問題,消除了孿生應(yīng)用和業(yè)務(wù)系統(tǒng)的數(shù)字鴻溝,,提高業(yè)務(wù)敏捷性,,全面助力企業(yè)的數(shù)字化轉(zhuǎn)型。