南通工程物聯(lián)網(wǎng)大數(shù)據(jù)平臺綜合服務(wù)

離線數(shù)據(jù)還有一些數(shù)據(jù)，對于實(shí)時(shí)性和有序性的要求都沒那么強(qiáng)，分析時(shí)數(shù)據(jù)已經(jīng)固化，我們稱之為離線數(shù)據(jù)。典型的離線數(shù)據(jù)包括產(chǎn)品銷量數(shù)據(jù)、景點(diǎn)游客數(shù)據(jù)等，應(yīng)用于統(tǒng)計(jì)分析，總結(jié)盤點(diǎn)等場景，例如，物聯(lián)網(wǎng)平臺將自動售貨機(jī)上報(bào)的**匯總后保存，然后定期使用大數(shù)據(jù)分析平臺分析**，以報(bào)表形式呈現(xiàn)給廠家，協(xié)助廠家進(jìn)行銷售策略的調(diào)整。離線分析的挑戰(zhàn)主要在于龐大的數(shù)據(jù)量，一般會采用分布式處理的方案來提升海量數(shù)據(jù)分析的效率。設(shè)備接入服務(wù)：設(shè)備接入是華為OceanConnect物聯(lián)網(wǎng)平臺對海量設(shè)備進(jìn)行聯(lián)接、數(shù)據(jù)采集/轉(zhuǎn)發(fā)、遠(yuǎn)程控制的云服務(wù)?？蓪?shí)現(xiàn)海量設(shè)備與云端之間雙向通信連接、設(shè)備數(shù)據(jù)采集上云，支持上層應(yīng)用通過調(diào)用API遠(yuǎn)程控制設(shè)備，還提供了與華為云其他云服務(wù)無縫對接的規(guī)則引擎，可應(yīng)用于各種物聯(lián)網(wǎng)場景。設(shè)備接入服務(wù)還可以搭配設(shè)備管理服務(wù)使用，可實(shí)現(xiàn)產(chǎn)品模型定義、設(shè)備生命周期可視化管理，提供強(qiáng)大的面向行業(yè)應(yīng)用開放能力，幫助企業(yè)快速構(gòu)建創(chuàng)新的物聯(lián)網(wǎng)業(yè)務(wù)。一個(gè)大的系統(tǒng)，采集的數(shù)據(jù)種類繁多，而且除采集的原始數(shù)據(jù)外，還有大量的衍生數(shù)據(jù)。南通工程物聯(lián)網(wǎng)大數(shù)據(jù)平臺綜合服務(wù)

需要支持邊云協(xié)同。要有一套靈活的機(jī)制將邊緣計(jì)算節(jié)點(diǎn)的數(shù)據(jù)上傳到云端，根據(jù)具體需要，可以將原始數(shù)據(jù)，或加工計(jì)算后的數(shù)據(jù)，或**符合過濾條件的數(shù)據(jù)同步到云端，而且隨時(shí)可以取消，更改策略。16.需要單一的后臺管理系統(tǒng)。便于查看系統(tǒng)運(yùn)行狀態(tài)、管理集群、管理用戶、管理各種系統(tǒng)資源等，而且系統(tǒng)能夠與第三方IT運(yùn)維監(jiān)測平臺無縫集成，便于管理。17.便于私有化部署。因?yàn)楹芏嗥髽I(yè)出于安全以及各種因素的考慮，希望采用私有化部署。而傳統(tǒng)的企業(yè)往往沒有很強(qiáng)的IT運(yùn)維團(tuán)隊(duì)，因此在安裝、部署上需要做到簡單、快捷，可維護(hù)性強(qiáng)。以上總結(jié)了物聯(lián)網(wǎng)大數(shù)據(jù)平臺的主要功能和特點(diǎn)，而物聯(lián)網(wǎng)大數(shù)據(jù)平臺本身也在演變之中，但總的目標(biāo)不會改變，那就是高效、可伸縮、實(shí)時(shí)、可靠、靈活、開放、簡單、易維護(hù)?；窗哺咝锫?lián)網(wǎng)大數(shù)據(jù)平臺提供商比如智能電表，如果系統(tǒng)出問題，直接導(dǎo)致的是千家萬戶無法正常用電。

實(shí)時(shí)處理必須是實(shí)時(shí)處理的系統(tǒng)?；ヂ?lián)網(wǎng)大數(shù)據(jù)處理，大家所熟悉的場景是用戶畫像、推薦系統(tǒng)、輿情分析等等，這些場景并不需要什么實(shí)時(shí)性，批處理即可。但是對于物聯(lián)網(wǎng)場景，需要基于采集的數(shù)據(jù)做實(shí)時(shí)預(yù)警、決策，延時(shí)要控制在秒級以內(nèi)。如果計(jì)算沒有實(shí)時(shí)性，物聯(lián)網(wǎng)的商業(yè)價(jià)值就大打折扣。3.高可靠性需要運(yùn)營商級別的高可靠服務(wù)。物聯(lián)網(wǎng)系統(tǒng)對接的往往是生產(chǎn)、經(jīng)營系統(tǒng)，如果數(shù)據(jù)處理系統(tǒng)宕機(jī)，直接導(dǎo)致停產(chǎn)，產(chǎn)生經(jīng)濟(jì)有損失、導(dǎo)致對終端消費(fèi)者的服務(wù)無法正常提供。比如智能電表，如果系統(tǒng)出問題，直接導(dǎo)致的是千家萬戶無法正常用電。因此物聯(lián)網(wǎng)大數(shù)據(jù)系統(tǒng)必須是高可靠的，必須支持?jǐn)?shù)據(jù)實(shí)時(shí)備份，必須支持異地容災(zāi)，必須支持軟件、硬件在線升級，必須支持在線IDC機(jī)房遷移，否則服務(wù)一定有被中斷的可能。

趨勢七：數(shù)據(jù)生態(tài)系統(tǒng)復(fù)合化程度加強(qiáng)大數(shù)據(jù)的世界不只是一個(gè)單一的、巨大的計(jì)算機(jī)網(wǎng)絡(luò)，而是一個(gè)由大量活動構(gòu)件與多元參與者元素所構(gòu)成的生態(tài)系統(tǒng)，終端設(shè)備提供商、基礎(chǔ)設(shè)施提供商、網(wǎng)絡(luò)服務(wù)提供商、網(wǎng)絡(luò)接入服務(wù)提供商、數(shù)據(jù)服務(wù)使能者、數(shù)據(jù)服務(wù)提供商、觸點(diǎn)服務(wù)、數(shù)據(jù)服務(wù)零售商等等一系列的參與者共同構(gòu)建的生態(tài)系統(tǒng)。而今，這樣一套數(shù)據(jù)生態(tài)系統(tǒng)的基本雛形已然形成，接下來的發(fā)展將趨向于系統(tǒng)內(nèi)部角色的細(xì)分，也就是市場的細(xì)分;系統(tǒng)機(jī)制的調(diào)整，也就是商業(yè)模式的創(chuàng)新;系統(tǒng)結(jié)構(gòu)的調(diào)整，也就是競爭環(huán)境的調(diào)整等等，從而使得數(shù)據(jù)生態(tài)系統(tǒng)復(fù)合化程度逐漸增強(qiáng)。需要單一的后臺管理系統(tǒng)。

實(shí)時(shí)數(shù)據(jù)和歷史數(shù)據(jù)的處理要合二為一。實(shí)時(shí)數(shù)據(jù)在緩存里，歷史數(shù)據(jù)在持久化存儲介質(zhì)里，而且可能依據(jù)時(shí)長，保留在不同存儲介質(zhì)里。系統(tǒng)應(yīng)該隱藏背后的存儲，給用戶和應(yīng)用呈現(xiàn)的是同一個(gè)接口和界面。無論是訪問新采集的數(shù)據(jù)還是十年前的老數(shù)據(jù)，除輸入的時(shí)間參數(shù)不同之外，其余應(yīng)該是一樣的。8.需要保證數(shù)據(jù)能持續(xù)穩(wěn)定寫入。對于物聯(lián)網(wǎng)系統(tǒng)，數(shù)據(jù)流量往往是平穩(wěn)的，因此數(shù)據(jù)寫入所需要的資源往往是可以估算的。但是變化的是查詢、分析，特別是即席查詢，有可能耗費(fèi)很大的系統(tǒng)資源，不可控。因此系統(tǒng)必須保證分配足夠的資源以確保數(shù)據(jù)能夠?qū)懭胂到y(tǒng)而不被丟失。準(zhǔn)確的說，系統(tǒng)必須是一個(gè)寫優(yōu)先系統(tǒng)。9.需要對數(shù)據(jù)支持靈活的多維度分析。對于聯(lián)網(wǎng)設(shè)備產(chǎn)生的數(shù)據(jù)，需要進(jìn)行各種維度的統(tǒng)計(jì)分析，比如從設(shè)備所處的地域進(jìn)行分析，從設(shè)備的型號、供應(yīng)商進(jìn)行分析，從設(shè)備所使用的人員進(jìn)行分析等等。而且這些維度的分析是無法事先想好的，而是在實(shí)際運(yùn)營過程中，根據(jù)業(yè)務(wù)發(fā)展的需求定下來的。因此物聯(lián)網(wǎng)大數(shù)據(jù)系統(tǒng)需要一個(gè)靈活的機(jī)制增加某個(gè)維度的分析。不僅如此，計(jì)算的需求也相當(dāng)復(fù)雜，因場景而異，應(yīng)容許用戶自定義函數(shù)進(jìn)行計(jì)算。淮安高效物聯(lián)網(wǎng)大數(shù)據(jù)平臺提供商

對于物聯(lián)網(wǎng)系統(tǒng)，數(shù)據(jù)流量往往是平穩(wěn)的，因此數(shù)據(jù)寫入所需要的資源往往是可以估算的。南通工程物聯(lián)網(wǎng)大數(shù)據(jù)平臺綜合服務(wù)

5.實(shí)時(shí)流式計(jì)算需要實(shí)時(shí)流式計(jì)算。各種實(shí)時(shí)預(yù)警或預(yù)測已經(jīng)不是簡單的基于某一個(gè)閾值進(jìn)行，而是需要通過將一個(gè)或多個(gè)設(shè)備產(chǎn)生的數(shù)據(jù)流進(jìn)行實(shí)時(shí)聚合計(jì)算，不只是基于一個(gè)時(shí)間點(diǎn)、而是基于一個(gè)時(shí)間窗口進(jìn)行計(jì)算。不僅如此，計(jì)算的需求也相當(dāng)復(fù)雜，因場景而異，應(yīng)容許用戶自定義函數(shù)進(jìn)行計(jì)算。6.數(shù)據(jù)訂閱需要支持?jǐn)?shù)據(jù)訂閱。與通用大數(shù)據(jù)平臺比較一致，同一組數(shù)據(jù)往往有很多應(yīng)用都需要，因此系統(tǒng)應(yīng)該提供訂閱功能，只要有新的數(shù)據(jù)更新，就應(yīng)該實(shí)時(shí)提醒應(yīng)用。而且這個(gè)訂閱也應(yīng)該是個(gè)性化的，容許應(yīng)用設(shè)置過濾條件，比如只訂閱某個(gè)物理量五分鐘的平均值。南通工程物聯(lián)網(wǎng)大數(shù)據(jù)平臺綜合服務(wù)