數(shù)據(jù)采集系統(tǒng)是現(xiàn)場(chǎng)自動(dòng)化控制設(shè)備與管理層之間的信息紐帶,工廠中設(shè)備眾多、接口各異,如何實(shí)現(xiàn)設(shè)備和儀表通訊就成為實(shí)施難點(diǎn)。實(shí)施MES的一個(gè)技術(shù)基礎(chǔ)就是與現(xiàn)場(chǎng)設(shè)備進(jìn)行通訊,實(shí)現(xiàn)數(shù)據(jù)的自動(dòng)化采集。本文從工廠的一般性設(shè)備通訊入手,給大家介紹下工廠的數(shù)采通訊方案。我們從前處理控制系統(tǒng)、包裝設(shè)備控制系統(tǒng)、質(zhì)量檢測(cè)儀器設(shè)備做一個(gè)簡(jiǎn)單發(fā)分析,基本的設(shè)備狀況如下:1、前處理控制系統(tǒng)屬于過(guò)程控制系統(tǒng),前處理設(shè)備的控制系統(tǒng)普遍采用了現(xiàn)場(chǎng)總線技術(shù),形成分散控制、集中管理和監(jiān)控的管控一體化模式,數(shù)據(jù)采集難度較低。2、包裝設(shè)備控制系統(tǒng)屬于運(yùn)動(dòng)控制系統(tǒng),包裝設(shè)備供應(yīng)廠商較多,很多設(shè)備采用**控制器,技術(shù)不開(kāi)放,數(shù)據(jù)采集接口復(fù)雜,是數(shù)據(jù)采集的難點(diǎn)。 數(shù)據(jù)采集可以幫助企業(yè)分析市場(chǎng)趨勢(shì)和競(jìng)爭(zhēng)對(duì)手的行為,為制定戰(zhàn)略決策提供可靠的依據(jù)。南京數(shù)據(jù)數(shù)據(jù)采集價(jià)格
對(duì)事件里的屬性內(nèi)容進(jìn)行二次加工,甚至是修正。一方面保證數(shù)據(jù)采集的準(zhǔn)確性,另一方面保證數(shù)據(jù)的完整性。因?yàn)樯癫呖蛻舸蠖鄶?shù)采用私有化部署,神策難以統(tǒng)計(jì)用戶數(shù)據(jù)丟失率,但是在業(yè)界普遍標(biāo)準(zhǔn)是“App的數(shù)據(jù)丟失率在1%左右,H5和Web的數(shù)據(jù)丟失率在5%左右”,之所以有5倍差異,是因?yàn)镠5的本地緩存是有限的,數(shù)據(jù)上傳失敗就意味著丟失;另外,大多情況下H5在App中以單頁(yè)面形式存在,H5發(fā)送網(wǎng)絡(luò)請(qǐng)求之后,如果用戶退出頁(yè)面,其網(wǎng)絡(luò)請(qǐng)求隨之被取消,沒(méi)有辦法實(shí)現(xiàn)完全同步,這種情況下數(shù)據(jù)“打通”便朝著更高要求、高標(biāo)準(zhǔn)邁進(jìn)——如何“打通”App與H5降低數(shù)據(jù)丟失率?App采集的事件并非實(shí)時(shí)同步,因?yàn)锳pp內(nèi)事件多、頻率高,每次采集后立即同步會(huì)給服務(wù)器帶來(lái)很大的壓力,所以一般情況下,App內(nèi)會(huì)增加本地緩存,所有采集到的事件先存入本地緩存,達(dá)到一定條件后再進(jìn)行同步。也就是說(shuō),根據(jù)緩存制定相應(yīng)的數(shù)據(jù)同步策略。如果按照以上方案,將H5的事件傳給App進(jìn)行二次加工,進(jìn)入App端的本地緩存,走App端事件同步策略,就能**降低H5事件丟失的概率。這是我們?cè)贏pp與H5打通的第二版中著重處理的內(nèi)容,在該解決方案中,不管是用戶標(biāo)識(shí)、數(shù)據(jù)準(zhǔn)確性,還是數(shù)據(jù)完整性,都能得到解決?;窗矓?shù)據(jù)數(shù)據(jù)采集訂制價(jià)格數(shù)據(jù)采集通常涉及數(shù)據(jù)存儲(chǔ)、傳輸和處理等多個(gè)環(huán)節(jié)。
是構(gòu)建數(shù)據(jù)孿生的關(guān)鍵,而已經(jīng)存在于數(shù)字世界中的那些分散、異構(gòu)信息,可通過(guò)“軟感知”能力來(lái)利用。目前“軟感知”比較成熟,并隨著數(shù)字原生企業(yè)的崛起而得到了***的應(yīng)用。(1)埋點(diǎn)埋點(diǎn)是數(shù)據(jù)采集領(lǐng)域,尤其是用戶行為數(shù)據(jù)采集領(lǐng)域的術(shù)語(yǔ),指的是針對(duì)特定用戶行為或事件進(jìn)行捕獲的相關(guān)技術(shù)。埋點(diǎn)的技術(shù)實(shí)質(zhì),是**應(yīng)用運(yùn)行過(guò)程中的事件,當(dāng)需要關(guān)注的事件發(fā)生時(shí)進(jìn)行判斷和捕獲。埋點(diǎn)的主要作用是能夠幫助業(yè)務(wù)和數(shù)據(jù)分析人員打通固有信息墻,為了解用戶交互行為、擴(kuò)寬用戶信息和前移運(yùn)營(yíng)機(jī)會(huì)提供數(shù)據(jù)支撐。在產(chǎn)品數(shù)據(jù)分析的初級(jí)階段,業(yè)務(wù)人員通過(guò)自有或第三方的數(shù)據(jù)統(tǒng)計(jì)平臺(tái)了解App用戶訪問(wèn)的數(shù)據(jù)指標(biāo),包括新增用戶數(shù)、活躍用戶數(shù)等。這些指標(biāo)能幫助企業(yè)宏觀地了解用戶訪問(wèn)的整體情況和趨勢(shì),從總體上把握產(chǎn)品的運(yùn)營(yíng)狀況,通過(guò)分析埋點(diǎn)獲取的數(shù)據(jù),制定產(chǎn)品改進(jìn)策略。埋點(diǎn)技術(shù)在當(dāng)前主要有以下幾類,每一類都有自己獨(dú)特的優(yōu)缺點(diǎn),可以基于業(yè)務(wù)的需求,匹配使用。代碼埋點(diǎn)是目前比較主流的埋點(diǎn)方式,業(yè)務(wù)人員根據(jù)自己的統(tǒng)計(jì)需求選擇需要埋點(diǎn)的區(qū)域及埋點(diǎn)方式,形成詳細(xì)的埋點(diǎn)方案,由技術(shù)人員手工將這些統(tǒng)計(jì)代碼添加在想要獲取數(shù)據(jù)的統(tǒng)計(jì)點(diǎn)上。
因此對(duì)數(shù)據(jù)的實(shí)時(shí)處理有著較高的要求。如果將數(shù)據(jù)上傳到云端,云端分析后再繞一圈回來(lái),指導(dǎo)下一步動(dòng)作,一來(lái)一回產(chǎn)生的時(shí)延,很多時(shí)候?qū)⒆兊貌豢山邮堋I鲜鰳I(yè)務(wù)場(chǎng)景將在靠近數(shù)據(jù)源頭的現(xiàn)場(chǎng)對(duì)數(shù)據(jù)進(jìn)行即時(shí)處理,實(shí)時(shí)分析,提取特征量,然后基于分析的結(jié)果進(jìn)行本地決策,指導(dǎo)下一步動(dòng)作,同時(shí)將分析結(jié)果上傳到云端,數(shù)據(jù)量經(jīng)過(guò)本地處理后**減小了。圖3-2所示是實(shí)時(shí)振動(dòng)信號(hào)狀態(tài)監(jiān)測(cè)和數(shù)據(jù)分析。▲圖3-2實(shí)時(shí)振動(dòng)信號(hào)狀態(tài)監(jiān)測(cè)和數(shù)據(jù)分析03工業(yè)數(shù)據(jù)采集的體系結(jié)構(gòu)工業(yè)數(shù)據(jù)采集體系包括設(shè)備接入、協(xié)議轉(zhuǎn)換、邊緣計(jì)算。設(shè)備接入是工業(yè)數(shù)據(jù)采集建立物理世界和數(shù)字世界連接的起點(diǎn)。設(shè)備接入利用有線或無(wú)線通信方式,實(shí)現(xiàn)工業(yè)現(xiàn)場(chǎng)和工廠外智能產(chǎn)品/移動(dòng)裝備的泛在連接,將數(shù)據(jù)上報(bào)到云端。工業(yè)數(shù)據(jù)采集發(fā)展了這么多年,存在設(shè)備接入的復(fù)雜性和多樣性。數(shù)據(jù)接入后,將對(duì)數(shù)據(jù)進(jìn)行解析、轉(zhuǎn)換,并通過(guò)標(biāo)準(zhǔn)應(yīng)用層協(xié)議如MQTT、HTTP上傳到物聯(lián)網(wǎng)平臺(tái)。部分工業(yè)物聯(lián)網(wǎng)應(yīng)用場(chǎng)景,在協(xié)議轉(zhuǎn)換后,可能在本地做即時(shí)數(shù)據(jù)分析和預(yù)處理,再上傳到云端,提升即時(shí)性并降低網(wǎng)絡(luò)帶寬壓力。邊緣計(jì)算近幾年發(fā)展迅速,大家越來(lái)越意識(shí)到數(shù)據(jù)就近處理的優(yōu)勢(shì),無(wú)論是實(shí)效性還是出于數(shù)據(jù)安全性考慮。數(shù)據(jù)采集可以通過(guò)智能石油系統(tǒng)實(shí)現(xiàn)對(duì)石油產(chǎn)量和儲(chǔ)備的實(shí)時(shí)監(jiān)測(cè)。
但是盤(pán)點(diǎn)了業(yè)務(wù)的需求以及對(duì)比了那時(shí)候團(tuán)隊(duì)能力和所能調(diào)配的人力之后,我們發(fā)現(xiàn)實(shí)現(xiàn)這么一套系統(tǒng),無(wú)異于登天。完全自主研發(fā)新一代的數(shù)據(jù)倉(cāng)庫(kù)是難以攀爬的珠峰。此路不通,只能改走開(kāi)源路線。其實(shí)開(kāi)源有很多好處,它有著豐富的社區(qū)資源和社區(qū)生態(tài),有著龐大的各路代碼貢獻(xiàn)者,使用開(kāi)源的系統(tǒng),相當(dāng)于利用了全世界的資源,利用了全世界的程序員的智慧。使用開(kāi)源項(xiàng)目,能快速搭建適應(yīng)業(yè)務(wù)需求的平臺(tái)。但開(kāi)源對(duì)于我們來(lái)說(shuō)也并不容易。首先,技術(shù)棧不一樣,我們?cè)瓉?lái)是C/C++技術(shù)棧,是做計(jì)費(fèi)系統(tǒng)的,而大數(shù)據(jù)開(kāi)源基本以Java為主,需要從頭去學(xué),幸好語(yǔ)言的差異并不是很難克服,我們邊學(xué)習(xí)邊招聘有大數(shù)據(jù)經(jīng)驗(yàn)的開(kāi)發(fā)者,慢慢地做了起來(lái);另外,大數(shù)據(jù)生態(tài)是很龐大的,每一個(gè)項(xiàng)目都不足以達(dá)到企業(yè)級(jí)的需求,每一個(gè)項(xiàng)目都要進(jìn)行大量的優(yōu)化,才能符合我們可用性方面的需求。從**初的蹣跚學(xué)步到現(xiàn)在,騰訊大數(shù)據(jù)走過(guò)了十余年,歷經(jīng)三代技術(shù)演進(jìn)。***代是“拿來(lái)主義”,拿來(lái)就用,但部分系統(tǒng)比如HDFS(HadoopDistributedFileSystem,Hadoop分布式文件系統(tǒng))、Hive等因?yàn)樾阅?、功能不能滿足需求,我們對(duì)**模塊進(jìn)行了定制化的優(yōu)化;第二代是有限自主研發(fā)的階段。數(shù)據(jù)采集可以通過(guò)移動(dòng)應(yīng)用獲取用戶位置和使用習(xí)慣。徐州定做數(shù)據(jù)采集系統(tǒng)
數(shù)據(jù)采集可以通過(guò)智能交通系統(tǒng)實(shí)現(xiàn)對(duì)交通事故和違章的實(shí)時(shí)監(jiān)控。南京數(shù)據(jù)數(shù)據(jù)采集價(jià)格
(2)磁卡磁卡是一種卡片狀的磁性記錄介質(zhì),利用磁性載體記錄字符與數(shù)字信息,用來(lái)保存身份信息。視使用基材的不同。可分為PET卡、PVC卡和紙卡三種;視磁層構(gòu)造的不同,又可分為磁條卡和全涂磁卡兩種。磁卡的優(yōu)點(diǎn)是成本低,這是它容易推廣的原因,但缺點(diǎn)也比較明顯,例如卡的保密性和安全性較差,使用磁卡的應(yīng)用系統(tǒng)需要有可靠的計(jì)算機(jī)系統(tǒng)和中心數(shù)據(jù)庫(kù)的支持。(3)RFIDRFID(RadioFrequencyIdentification,無(wú)線射頻識(shí)別)是一種非接觸式的自動(dòng)識(shí)別技術(shù),通過(guò)無(wú)線射頻方式進(jìn)行非接觸雙向數(shù)據(jù)通信,利用無(wú)線射頻方式對(duì)記錄媒體(電子標(biāo)簽或射頻卡)進(jìn)行讀寫(xiě),從而達(dá)到識(shí)別目標(biāo)和數(shù)據(jù)交換的目的?;谔貏e業(yè)務(wù)場(chǎng)景的需求,在RFID的基礎(chǔ)上發(fā)展出了NFC(NearFieldCommunication,近場(chǎng)通信)。南京數(shù)據(jù)數(shù)據(jù)采集價(jià)格