99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

物聯(lián)網(wǎng)標(biāo)準(zhǔn)實(shí)戰(zhàn):從設(shè)備接入、數(shù)據(jù)模型到OTA的安全升級(jí)

物聯(lián)網(wǎng)標(biāo)準(zhǔn)實(shí)戰(zhàn):從設(shè)備接入、數(shù)據(jù)模型到OTA的安全升級(jí) 聊到IoT標(biāo)準(zhǔn)很多人第一反應(yīng)就是MQTT和CoAP之爭(zhēng)或者是Matter發(fā)布時(shí)的那陣熱鬧。但真正在一線(xiàn)做過(guò)大規(guī)模物聯(lián)網(wǎng)項(xiàng)目的人都清楚標(biāo)準(zhǔn)這個(gè)話(huà)題不像協(xié)議文檔里寫(xiě)得那么干凈它往往是從一次P0級(jí)事故開(kāi)始的——設(shè)備接入突然全量失敗、影子數(shù)據(jù)錯(cuò)亂、OTA升級(jí)包推下去把一批設(shè)備搞到離線(xiàn)事后復(fù)盤(pán)才發(fā)現(xiàn)根子都出在“標(biāo)準(zhǔn)”上。這篇文章不打算跟你背一遍IEEE、ISO、IETF的體系結(jié)構(gòu)而是想站在做項(xiàng)目的角度聊聊標(biāo)準(zhǔn)在IoT里到底是怎么影響我們每天的工作。我們會(huì)從設(shè)備接入、數(shù)據(jù)模型、OTA、安全策略這些實(shí)際場(chǎng)景出發(fā)看看標(biāo)準(zhǔn)碎片化帶來(lái)了哪些坑以及未來(lái)幾年IoT標(biāo)準(zhǔn)會(huì)往哪個(gè)方向走。不管你是做硬件、做嵌入式、做平臺(tái)開(kāi)發(fā)還是做解決方案架構(gòu)這篇文章應(yīng)該都能給你一些值得帶進(jìn)項(xiàng)目里的參考。1. IoT標(biāo)準(zhǔn)為什么總是“老生常談”卻又“繞不開(kāi)”1.1 標(biāo)準(zhǔn)碎片化的真實(shí)代價(jià)先說(shuō)一個(gè)我印象特別深的場(chǎng)景。某個(gè)智慧工廠(chǎng)項(xiàng)目里一條產(chǎn)線(xiàn)上同時(shí)有PLC走M(jìn)odbus RTU傳感器通過(guò)MQTT上報(bào)視覺(jué)檢測(cè)設(shè)備用OPC UA對(duì)外輸出邊緣網(wǎng)關(guān)把這些數(shù)據(jù)匯總后統(tǒng)一推到云端。設(shè)備全部接完后光是把溫度、濕度、振動(dòng)、檢測(cè)結(jié)果這些字段對(duì)齊就花掉了整整三天。問(wèn)題出在哪每一家設(shè)備都有自己的數(shù)據(jù)命名習(xí)慣。有的溫度字段叫temperature有的叫temp還有的叫Temp_C有的單位是攝氏度有的直接給華氏度時(shí)間戳更是五花八門(mén)有的用本地時(shí)間有的用UTC但沒(méi)標(biāo)時(shí)區(qū)還有的年份只有兩位。到了平臺(tái)側(cè)這些數(shù)據(jù)全混在一起大屏上顯示的溫度曲線(xiàn)跳來(lái)跳去數(shù)據(jù)分析任務(wù)跑出來(lái)的結(jié)果根本沒(méi)法看。這種“能連上、但數(shù)據(jù)沒(méi)法用”的狀態(tài)就是IoT標(biāo)準(zhǔn)碎片化的最典型代價(jià)。網(wǎng)上有個(gè)說(shuō)法物聯(lián)網(wǎng)項(xiàng)目里超過(guò)一半的數(shù)據(jù)是“臟數(shù)據(jù)”很多就是因?yàn)樵O(shè)備接入階段沒(méi)有做標(biāo)準(zhǔn)約束。你設(shè)備連得再多協(xié)議適配做再全數(shù)據(jù)模型不統(tǒng)一后面的大數(shù)據(jù)、AI、數(shù)字孿生全都是在垃圾數(shù)據(jù)上蓋樓。再說(shuō)一個(gè)更嚴(yán)重的例子。有一次生產(chǎn)環(huán)境在凌晨出現(xiàn)告警風(fēng)暴幾百臺(tái)設(shè)備上報(bào)的數(shù)據(jù)時(shí)間戳比真實(shí)時(shí)間晚了8個(gè)小時(shí)。排查到天亮才發(fā)現(xiàn)是某廠(chǎng)商的固件更新后把時(shí)間戳從UTC改成了北京時(shí)間但平臺(tái)側(cè)的解析邏輯還按UTC處理。如果當(dāng)時(shí)設(shè)備側(cè)和平臺(tái)側(cè)對(duì)時(shí)間戳格式有一個(gè)明確的標(biāo)準(zhǔn)約定這種P0事故根本不可能發(fā)生。所以聊IoT標(biāo)準(zhǔn)不是聊技術(shù)選型而是聊一套從物理世界到業(yè)務(wù)系統(tǒng)之間的“翻譯約束”。物理世界本身什么標(biāo)準(zhǔn)都沒(méi)有溫度就是溫度壓力就是壓力設(shè)備不會(huì)自己說(shuō)“我是攝氏度”全靠接入層來(lái)定義。這個(gè)定義如果不統(tǒng)一后面每一步都會(huì)走樣。1.2 標(biāo)準(zhǔn)的三層結(jié)構(gòu)終端、連接、平臺(tái)聊標(biāo)準(zhǔn)之前先把IoT的技術(shù)棧拆開(kāi)。一個(gè)典型的物聯(lián)網(wǎng)系統(tǒng)大致可以分成三層。終端層是設(shè)備本身包括傳感器、控制器、芯片、固件。這一層的標(biāo)準(zhǔn)決定了設(shè)備怎么描述自己、怎么上報(bào)數(shù)據(jù)、怎么響應(yīng)命令。最典型的例子是Matter它定義了智能家居設(shè)備的各種集群Cluster和屬性Attribute設(shè)備說(shuō)“我是燈”平臺(tái)一看就知道它有什么能力、能執(zhí)行哪些操作。連接層是數(shù)據(jù)傳輸管道解決“怎么把數(shù)據(jù)送出去”的問(wèn)題。Wi-Fi、藍(lán)牙、Zigbee、LoRaWAN、蜂窩網(wǎng)絡(luò)這些屬于物理連接標(biāo)準(zhǔn)MQTT、CoAP、HTTP這些屬于應(yīng)用層協(xié)議標(biāo)準(zhǔn)。這一層最大的特點(diǎn)是百花齊放因?yàn)椴煌瑘?chǎng)景對(duì)功耗、帶寬、延遲的要求差異實(shí)在太大很難用一個(gè)協(xié)議通吃所有場(chǎng)景。平臺(tái)層是數(shù)據(jù)匯聚、處理和業(yè)務(wù)應(yīng)用的地方包括設(shè)備管理、規(guī)則引擎、數(shù)據(jù)存儲(chǔ)、API接口。這一層主要涉及數(shù)據(jù)格式、接口規(guī)范、安全策略的標(biāo)準(zhǔn)比如設(shè)備上報(bào)的JSON結(jié)構(gòu)、RESTful API的設(shè)計(jì)規(guī)范、設(shè)備證書(shū)的管理流程。理解了這個(gè)三層結(jié)構(gòu)就明白了為什么IoT標(biāo)準(zhǔn)這么難統(tǒng)一。它不是某一個(gè)組織發(fā)一個(gè)標(biāo)準(zhǔn)然后大家照做就完了而是每一層都有各自的玩家每一層都有各自的利益和存量生態(tài)。連接層已經(jīng)有幾十種協(xié)議在跑終端層的芯片方案幾百上千種平臺(tái)層更是各家都有自己的產(chǎn)品和數(shù)據(jù)格式想讓它們?nèi)繉?duì)齊幾乎是不可能的事情。但換個(gè)角度想標(biāo)準(zhǔn)化的目標(biāo)并不是“讓所有層都統(tǒng)一”而是“層與層之間的接口要清晰”。就像USB標(biāo)準(zhǔn)只管接口的形狀和協(xié)議不管里面是U盤(pán)、鍵盤(pán)還是散熱風(fēng)扇。IoT真正需要的是終端、連接、平臺(tái)三層之間各自的“USB接口”——設(shè)備描述有規(guī)范消息格式有規(guī)范API有規(guī)范。這樣不同層內(nèi)部無(wú)論怎么演進(jìn)相互之間都能對(duì)接。2. 實(shí)戰(zhàn)視角設(shè)備接入時(shí)“標(biāo)準(zhǔn)”到底卡在哪2.1 協(xié)議選型不是選“最好”而是選“最不差”每個(gè)做IoT平臺(tái)的人都會(huì)被問(wèn)到同一個(gè)問(wèn)題什么協(xié)議最高標(biāo)準(zhǔn)、最好用說(shuō)實(shí)話(huà)這個(gè)問(wèn)題本身就不太對(duì)。協(xié)議選型首先要看場(chǎng)景而且絕大多數(shù)時(shí)候我們要在功耗、帶寬、延遲、實(shí)時(shí)性、開(kāi)發(fā)成本之間做取舍選一個(gè)“當(dāng)前場(chǎng)景下最不差”的方案。我自己的經(jīng)驗(yàn)可以參考下面這個(gè)對(duì)比協(xié)議典型場(chǎng)景優(yōu)勢(shì)劣勢(shì)MQTT海量傳感數(shù)據(jù)上報(bào)、遠(yuǎn)程控制輕量、支持QoS、發(fā)布訂閱模型、生態(tài)成熟實(shí)時(shí)性一般不適合硬實(shí)時(shí)控制CoAP資源受限的低功耗節(jié)點(diǎn)基于UDP、開(kāi)銷(xiāo)小、適合NB-IoT可靠傳輸需要額外機(jī)制生態(tài)相對(duì)小HTTP/HTTPS設(shè)備管理、平臺(tái)間API、非實(shí)時(shí)接入通用性強(qiáng)、調(diào)試方便頭部開(kāi)銷(xiāo)大長(zhǎng)連接場(chǎng)景不友好DDS機(jī)器人、自動(dòng)駕駛、工業(yè)實(shí)時(shí)控制實(shí)時(shí)性高、去中心化、QoS可配置學(xué)習(xí)成本高資源占用大OPC UA工業(yè)制造、PLC、SCADA語(yǔ)義建模強(qiáng)、安全性好、工業(yè)認(rèn)可度高較重邊緣網(wǎng)關(guān)性能要求高M(jìn)odbus工業(yè)現(xiàn)場(chǎng)設(shè)備采集簡(jiǎn)單可靠、存量設(shè)備極多功能有限、安全性弱、字段語(yǔ)義靠人工定義從這個(gè)表能看出來(lái)沒(méi)有任何一個(gè)協(xié)議能包打天下。MQTT在海量上報(bào)場(chǎng)景很好用但你要拿它做毫秒級(jí)的電機(jī)控制那基本是找罪受。DDS在機(jī)器人領(lǐng)域很強(qiáng)但讓一個(gè)低功耗溫濕度傳感器跑DDS光協(xié)議棧就吃掉大半內(nèi)存。所以標(biāo)準(zhǔn)化的重點(diǎn)是“協(xié)議適配層”而不是“協(xié)議統(tǒng)一層”。平臺(tái)側(cè)應(yīng)該預(yù)先抽象出標(biāo)準(zhǔn)的消息模型和設(shè)備模型然后在邊緣網(wǎng)關(guān)或接入層做協(xié)議轉(zhuǎn)換讓所有設(shè)備無(wú)論用什么協(xié)議上來(lái)最終都轉(zhuǎn)換成一個(gè)統(tǒng)一的內(nèi)部標(biāo)準(zhǔn)。這個(gè)思路比硬性要求所有設(shè)備必須用MQTT或者必須用OPC UA要實(shí)際得多。2.2 數(shù)據(jù)模型不統(tǒng)一上云就是噩夢(mèng)如果說(shuō)協(xié)議是“怎么傳”那數(shù)據(jù)模型就是“傳什么”。這個(gè)卡點(diǎn)比協(xié)議選型更容易被忽略但對(duì)項(xiàng)目的影響反而更大。之前我們有個(gè)樓宇自控項(xiàng)目接了一批不同品牌的傳感器。A家的溫濕度計(jì)上報(bào)的是{temp:25.3,humi:60}B家的上報(bào)的是{temperature:26.1,humidity:58}C家的更離譜上報(bào)的是{t:25.8,h:59,unit:C}。接入層如果不做映射數(shù)據(jù)存進(jìn)去之后同一個(gè)測(cè)溫點(diǎn)在數(shù)據(jù)庫(kù)里有三套字段查詢(xún)的時(shí)候要么寫(xiě)一堆條件分支要么干脆就只能對(duì)某一家的數(shù)據(jù)做分析。后來(lái)我們把規(guī)則定死了設(shè)備端上報(bào)什么格式不管但網(wǎng)關(guān)和接入層必須把數(shù)據(jù)轉(zhuǎn)換成統(tǒng)一的模型再入庫(kù)。統(tǒng)一模型的字段名、單位、類(lèi)型、取值范圍、時(shí)間戳格式全部有Schema定義字段名規(guī)范用下劃線(xiàn)風(fēng)格比如temperature、humidity、device_id、report_time時(shí)間戳統(tǒng)一為UTC毫秒單位統(tǒng)一為國(guó)際單位制。這里有個(gè)很容易被忽視的細(xì)節(jié)數(shù)值類(lèi)型。很多設(shè)備上報(bào)溫度時(shí)默認(rèn)是浮點(diǎn)數(shù)但有些PLC會(huì)把溫度放大10倍存成整數(shù)到了平臺(tái)顯示65而不是26這就是字段定義不嚴(yán)謹(jǐn)造成的。所以標(biāo)準(zhǔn)模型里必須明確數(shù)值類(lèi)型、分辨率、量綱、上下限。海量數(shù)據(jù)采集場(chǎng)景下很多團(tuán)隊(duì)把精力都放在了接入并發(fā)、消息隊(duì)列吞吐這些性能問(wèn)題上結(jié)果數(shù)據(jù)存進(jìn)去了業(yè)務(wù)方一看分析結(jié)果說(shuō)“你這數(shù)據(jù)不對(duì)”。原因就是沒(méi)有在源頭做數(shù)據(jù)標(biāo)準(zhǔn)化。給的數(shù)據(jù)再快再全字段亂、單位亂、含義不清那也就是海量垃圾治理成本遠(yuǎn)超你的想象。2.3 安全與OTA標(biāo)準(zhǔn)里最容易被忽略的硬指標(biāo)設(shè)備接入還有一個(gè)繞不開(kāi)的環(huán)節(jié)是安全和OTA這兩塊恰恰是最容易被“能跑就行”思維帶過(guò)去的。先說(shuō)證書(shū)。很多平臺(tái)都支持設(shè)備證書(shū)認(rèn)證比如AWS IoT里的X.509證書(shū)機(jī)制。設(shè)備在工廠(chǎng)上線(xiàn)前會(huì)燒錄證書(shū)連云端時(shí)通過(guò)TLS雙向認(rèn)證完成身份校驗(yàn)。這個(gè)機(jī)制本身很完善但是項(xiàng)目里經(jīng)常出現(xiàn)的問(wèn)題是什么證書(shū)有效期到了沒(méi)人管設(shè)備全部掉線(xiàn)或者一個(gè)產(chǎn)品線(xiàn)幾千臺(tái)設(shè)備共用一個(gè)證書(shū)云端想踢掉某一臺(tái)設(shè)備都做不到。更隱蔽的問(wèn)題是權(quán)限策略。AWS IoT里設(shè)備權(quán)限通過(guò)Policy控制你定了iot:Connect、iot:Publish、iot:Subscribe這些操作但到底允許設(shè)備發(fā)布到哪個(gè)Topic、訂閱哪個(gè)Topic策略里要寫(xiě)清楚。很多項(xiàng)目圖省事直接給設(shè)備配一個(gè)通配符權(quán)限所有的Topic都能收發(fā)結(jié)果一個(gè)設(shè)備被入侵之后整個(gè)項(xiàng)目的數(shù)據(jù)都被拖走。這就是“最小權(quán)限”標(biāo)準(zhǔn)沒(méi)有落地。OTA這塊標(biāo)準(zhǔn)化的價(jià)值更明顯。做過(guò)大規(guī)模OTA的人都知道推送固件最怕的不是網(wǎng)絡(luò)慢而是設(shè)備升級(jí)后起不來(lái)一批接一批地變磚。所以O(shè)TA任務(wù)一定不能是簡(jiǎn)單粗暴地全量推送至少要有灰度分批、版本校驗(yàn)、失敗回滾這幾個(gè)環(huán)節(jié)。具體到策略上我通常建議這么排先推1%的設(shè)備做小批量驗(yàn)證觀(guān)察24小時(shí)一切正常再擴(kuò)大到10%最后全量。同時(shí)設(shè)備端要內(nèi)置雙分區(qū)機(jī)制固件包下載完先寫(xiě)到備用分區(qū)校驗(yàn)簽名和哈希通過(guò)后再切換啟動(dòng)分區(qū)。如果新固件啟動(dòng)失敗自動(dòng)回滾到舊分區(qū)避免設(shè)備變磚。這些機(jī)制看起來(lái)像是產(chǎn)品功能設(shè)計(jì)但本質(zhì)上就是OTA安全標(biāo)準(zhǔn)化的落地。3. 實(shí)操過(guò)程搭一個(gè)“標(biāo)準(zhǔn)意識(shí)”的接入框架3.1 設(shè)備影子與統(tǒng)一狀態(tài)模型光講理念不夠下面用一個(gè)實(shí)際項(xiàng)目的接入框架來(lái)說(shuō)明“標(biāo)準(zhǔn)意識(shí)”怎么落地。我拿一個(gè)典型的智能設(shè)備接入云端場(chǎng)景為例。很多平臺(tái)都引入了“設(shè)備影子”Device Shadow的概念云端保存設(shè)備最近一次上報(bào)的狀態(tài)即使設(shè)備離線(xiàn)業(yè)務(wù)側(cè)也能通過(guò)API讀取到設(shè)備的最新?tīng)顟B(tài)設(shè)備重新上線(xiàn)后可以主動(dòng)拉取影子實(shí)現(xiàn)狀態(tài)同步。我們?cè)谧鲞@個(gè)設(shè)計(jì)時(shí)第一件事就是定義“統(tǒng)一狀態(tài)模型”。所有設(shè)備不管類(lèi)型是什么上報(bào)數(shù)據(jù)都必須包含以下基礎(chǔ)字段{ message_type: property_post, device_id: sn_20250101_0001, product_key: pk_standard_demo, timestamp: 1735718400000, seq: 1001, payload: { properties: { temperature: 26.5, humidity: 58.2, switch_status: on } } }上面這個(gè)模型有幾個(gè)關(guān)鍵約定device_id是設(shè)備唯一標(biāo)識(shí)對(duì)應(yīng)我們內(nèi)部的設(shè)備三元組不能跟產(chǎn)品型號(hào)混在一起。timestamp統(tǒng)一為UTC毫秒時(shí)間戳每臺(tái)設(shè)備上線(xiàn)前必須校準(zhǔn)時(shí)鐘歷史遺留設(shè)備也要在網(wǎng)關(guān)上做時(shí)間戳轉(zhuǎn)換。seq是設(shè)備側(cè)自增的消息序號(hào)平臺(tái)側(cè)可以用它做冪等判斷防止網(wǎng)絡(luò)重傳導(dǎo)致數(shù)據(jù)重復(fù)。payload.properties里的字段名和單位必須遵循設(shè)備模型規(guī)范網(wǎng)關(guān)在接入時(shí)負(fù)責(zé)把廠(chǎng)商私有格式映射成規(guī)范格式。項(xiàng)目里我見(jiàn)過(guò)太多團(tuán)隊(duì)直接讓設(shè)備上報(bào)什么就存什么結(jié)果到了做告警規(guī)則時(shí)才發(fā)現(xiàn)有的設(shè)備上報(bào)的開(kāi)關(guān)狀態(tài)是on/off有的是1/0有的是true/false規(guī)則引擎寫(xiě)起來(lái)非常痛苦。定義了這個(gè)統(tǒng)一模型之后告警引擎、數(shù)據(jù)清洗、大屏展示都只需要對(duì)著這一套模型做適配。3.2 報(bào)文模板與解析層的雙向約束有了統(tǒng)一模型還需要一套機(jī)制保證設(shè)備側(cè)和平臺(tái)側(cè)都在按這個(gè)模型工作這就需要一個(gè)“解析層”來(lái)做雙向約束。先說(shuō)Topic規(guī)范。MQTT場(chǎng)景下Topic設(shè)計(jì)不能隨手起名我們內(nèi)部約定了一套標(biāo)準(zhǔn)格式/{product_key}/{device_name}/properties/post /{product_key}/{device_name}/properties/get /{product_key}/{device_name}/command/reply為什么用這種層級(jí)結(jié)構(gòu)主要有三個(gè)好處產(chǎn)品維度隔離在云端做Policy授權(quán)時(shí)可以直接按product_key過(guò)濾不同產(chǎn)品之間天然隔離。設(shè)備維度可以精確控制想給某臺(tái)設(shè)備單獨(dú)授權(quán)時(shí)直接指向device_name即可。訂閱關(guān)系清晰業(yè)務(wù)側(cè)用通配符訂閱時(shí)不會(huì)誤收到其他設(shè)備的消息。解析層做的第二件事是Schema校驗(yàn)。設(shè)備上報(bào)的消息進(jìn)入平臺(tái)后會(huì)先經(jīng)過(guò)一個(gè)校驗(yàn)器檢查必填字段是否齊全、字段類(lèi)型是否正確、數(shù)值是否在合法范圍內(nèi)。比如溫度傳感器的合理范圍是-40到85如果上報(bào)一個(gè)500直接判為非法數(shù)據(jù)走異常流程。我當(dāng)時(shí)寫(xiě)過(guò)一個(gè)簡(jiǎn)單的Python演示用于模擬設(shè)備上報(bào)和校驗(yàn)的過(guò)程import json import time import uuid def build_telemetry_payload(device_id, product_key, properties): payload { message_id: str(uuid.uuid4()), device_id: device_id, product_key: product_key, timestamp: int(time.time() * 1000), message_type: property_post, payload: { properties: properties } } return json.dumps(payload, ensure_asciiFalse) def validate_schema(message): required_fields [message_id, device_id, product_key, timestamp, message_type, payload] for field in required_fields: if field not in message: return False, fmissing field: {field} if not isinstance(message.get(timestamp), int): return False, timestamp must be int ms if properties not in message.get(payload, {}): return False, missing payload.properties return True, ok # 模擬一個(gè)溫濕度傳感器 msg build_telemetry_payload(sn_20250101_0001, pk_standard_demo, { temperature: 26.5, humidity: 58.2 }) print(msg) print(validate_schema(json.loads(msg)))這段代碼雖然簡(jiǎn)單但它體現(xiàn)了一個(gè)很重要的思路解析層不只是“把MQTT消息讀出來(lái)”還要承擔(dān)字段校驗(yàn)、格式校驗(yàn)的職責(zé)。這樣數(shù)據(jù)到了存儲(chǔ)和業(yè)務(wù)層永遠(yuǎn)都是干凈、統(tǒng)一、符合預(yù)期的。類(lèi)似的思路可以推廣到設(shè)備模型定義用JSON Schema或ProtoBuf來(lái)描述設(shè)備屬性后面開(kāi)發(fā)文檔自動(dòng)生成、調(diào)試工具模擬、規(guī)則引擎配置都可以基于這份模型來(lái)做。3.3 OTA升級(jí)任務(wù)的策略設(shè)計(jì)再接上OTA這個(gè)話(huà)題因?yàn)闊嵩~里提到了AWS IoT OTA我們也用過(guò)這個(gè)服務(wù)確實(shí)能幫你省掉不少重復(fù)造輪子的工作。但就算平臺(tái)幫你管了很多東西方案本身還是要設(shè)計(jì)好。一個(gè)標(biāo)準(zhǔn)的OTA任務(wù)至少包含幾個(gè)關(guān)鍵階段版本發(fā)布準(zhǔn)備固件包上傳到云端記錄版本號(hào)、校驗(yàn)哈希、發(fā)布范圍。版本號(hào)建議用三段式例如2.1.02.1是功能版本0是補(bǔ)丁號(hào)方便管理增量更新。灰度發(fā)布策略先選一個(gè)小批次設(shè)備比如設(shè)備總量的1%這個(gè)批次要覆蓋不同硬件版本和網(wǎng)絡(luò)環(huán)境不能只挑信號(hào)好的設(shè)備。觀(guān)察指標(biāo)包括在線(xiàn)率、上報(bào)頻率、錯(cuò)誤日志、設(shè)備崩潰率。任務(wù)監(jiān)控云端標(biāo)記每臺(tái)設(shè)備的升級(jí)狀態(tài)等待中、下載中、升級(jí)中、成功、失敗。這個(gè)過(guò)程中要特別關(guān)注“失敗后重試”的次數(shù)防止設(shè)備陷入“下載-失敗-重啟-再下載”的死循環(huán)。回滾機(jī)制設(shè)備側(cè)在啟動(dòng)新固件后要有一個(gè)自檢邏輯如果在規(guī)定時(shí)間內(nèi)無(wú)法完成初始化或者上報(bào)心跳自動(dòng)回滾到舊版本。我當(dāng)時(shí)最深刻的教訓(xùn)是OTA不僅是“推包”還要管好一批設(shè)備同時(shí)在線(xiàn)下載帶來(lái)的帶寬沖擊。有一次我們給一批4G設(shè)備推一個(gè)有30MB的升級(jí)包沒(méi)做并發(fā)限制結(jié)果一下子幾百臺(tái)設(shè)備同時(shí)下載邊緣站點(diǎn)的帶寬被打滿(mǎn)正常業(yè)務(wù)數(shù)據(jù)全被堵住了。后來(lái)學(xué)乖了每次OTA任務(wù)都設(shè)置最大并發(fā)下載數(shù)比如一個(gè)站點(diǎn)同一時(shí)間最多20臺(tái)設(shè)備在下其他設(shè)備排隊(duì)等待。除了這些AWS IoT的OTA還涉及用戶(hù)策略配置。Job執(zhí)行階段的權(quán)限要單獨(dú)配比如iot:StartNextPendingJobExecution、iot:DescribeJobExecution、iot:GetPendingJobExecutions這些權(quán)限少配一個(gè)設(shè)備都可能收不到升級(jí)指令。這類(lèi)問(wèn)題是典型的“看起來(lái)連上了但什么都沒(méi)發(fā)生”的坑排查起來(lái)很費(fèi)時(shí)間。4. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄4.1 多協(xié)議網(wǎng)關(guān)導(dǎo)致字段丟失有一個(gè)項(xiàng)目邊緣網(wǎng)關(guān)同時(shí)接了Modbus設(shè)備和新款MQTT傳感器我發(fā)現(xiàn)上位機(jī)讀到的溫度偶爾會(huì)跳變比如從26.4突然跳到6.4然后又恢復(fù)正常。查了很久最后定位到問(wèn)題是Modbus寄存器默認(rèn)按16位讀取而設(shè)備側(cè)實(shí)際上是把溫度按32位浮點(diǎn)數(shù)存儲(chǔ)的網(wǎng)關(guān)在做協(xié)議轉(zhuǎn)換時(shí)只讀了低16位導(dǎo)致數(shù)據(jù)被截?cái)?。后面我讓網(wǎng)關(guān)層把Modbus寄存器配置改成了“32位浮點(diǎn)、按兩個(gè)寄存器組合讀取”跳變消失。這事的教訓(xùn)是多協(xié)議轉(zhuǎn)換場(chǎng)景下千萬(wàn)不要默認(rèn)所有廠(chǎng)家的寄存器配置都一樣。對(duì)接Modbus設(shè)備時(shí)寄存器地址、長(zhǎng)度、數(shù)據(jù)類(lèi)型、字節(jié)序、縮放因子這些必須逐項(xiàng)核對(duì)并記錄成一份映射表后續(xù)排查才好對(duì)照。4.2 時(shí)間不同步引發(fā)數(shù)據(jù)錯(cuò)亂前面提到過(guò)時(shí)間戳問(wèn)題我再展開(kāi)講講。有一次項(xiàng)目上線(xiàn)后數(shù)據(jù)分析團(tuán)隊(duì)反饋某條產(chǎn)線(xiàn)的溫度曲線(xiàn)和壓力曲線(xiàn)對(duì)不上看起來(lái)像是兩套數(shù)據(jù)有時(shí)間偏移。查了設(shè)備端發(fā)現(xiàn)PLC時(shí)間是通過(guò)NTP從工廠(chǎng)內(nèi)網(wǎng)同步的但傳感器用的還是出廠(chǎng)時(shí)間而且傳感器的產(chǎn)品固件對(duì)時(shí)區(qū)處理得很糙直接用了本地時(shí)間。解決方案分三步所有設(shè)備統(tǒng)一使用NTP或平臺(tái)下發(fā)的校時(shí)指令確保設(shè)備本地時(shí)間偏移控制在秒級(jí)以?xún)?nèi)。網(wǎng)關(guān)側(cè)對(duì)設(shè)備上報(bào)的時(shí)間戳做合法性校驗(yàn)如果與網(wǎng)關(guān)當(dāng)前時(shí)間偏差超過(guò)5分鐘打上異常標(biāo)記并告警。平臺(tái)側(cè)在處理數(shù)據(jù)時(shí)統(tǒng)一轉(zhuǎn)成UTC時(shí)間存儲(chǔ)展示層再按業(yè)務(wù)時(shí)區(qū)轉(zhuǎn)換。時(shí)間戳這個(gè)問(wèn)題看起來(lái)小但在數(shù)據(jù)分析、告警編排、審計(jì)追蹤里都是底層依賴(lài)。時(shí)間不一致后面所有環(huán)節(jié)都會(huì)跟著亂。4.3 批量OTA失敗如何快速定位還有一次我們對(duì)一批設(shè)備推送新固件發(fā)布后當(dāng)天夜里就有運(yùn)維反饋說(shuō)設(shè)備在批量掉線(xiàn)。一開(kāi)始懷疑是網(wǎng)絡(luò)問(wèn)題檢查了云端流日志發(fā)現(xiàn)設(shè)備是在OTA任務(wù)啟動(dòng)后才斷開(kāi)的而且斷開(kāi)前有大量固件包下載請(qǐng)求。進(jìn)一步排查發(fā)現(xiàn)這批設(shè)備的硬件版本是V1.2但固件包里包含了V1.3才支持的配置項(xiàng)設(shè)備解析配置時(shí)直接報(bào)錯(cuò)退出進(jìn)入重啟循環(huán)。因?yàn)樯弦话婀碳](méi)有做好版本兼容所以問(wèn)題一直被藏到OTA發(fā)布時(shí)才集中爆發(fā)。那之后我們強(qiáng)制要求OTA灰度范圍除了按設(shè)備ID或批次篩選還必須按硬件版本、當(dāng)前固件版本、地域、網(wǎng)絡(luò)類(lèi)型做組合篩選。每次發(fā)布前要在測(cè)試環(huán)境跑一遍版本清單校驗(yàn)確保目標(biāo)設(shè)備的硬件和當(dāng)前版本都符合升級(jí)條件。4.4 證書(shū)過(guò)期和權(quán)限策略問(wèn)題AWS IoT里設(shè)備突然大批量離線(xiàn)查下來(lái)發(fā)現(xiàn)根因是設(shè)備證書(shū)過(guò)期。更麻煩的是有些設(shè)備沒(méi)有內(nèi)置證書(shū)輪換流程只能靠人工重新燒錄現(xiàn)場(chǎng)幾百臺(tái)設(shè)備一臺(tái)臺(tái)處理非常痛苦。后來(lái)我們做了三件事證書(shū)有效期統(tǒng)一設(shè)為3年并在證書(shū)到期前90天啟動(dòng)自動(dòng)續(xù)期流程設(shè)備端實(shí)現(xiàn)證書(shū)自動(dòng)下載和更換。平臺(tái)側(cè)做證書(shū)到期檢測(cè)提前一個(gè)季度輸出到期設(shè)備清單而不是等設(shè)備掉了再救火。權(quán)限策略全部從“寬泛授權(quán)”改成“最小授權(quán)”每個(gè)產(chǎn)品線(xiàn)一套專(zhuān)用策略模板不隨便給設(shè)備開(kāi)通配符權(quán)限。權(quán)限策略還有一個(gè)隱蔽問(wèn)題設(shè)備明明在線(xiàn)但OTA任務(wù)一直不執(zhí)行。一查策略少了iot:StartNextPendingJobExecution權(quán)限。這種問(wèn)題用AWS的Policy模擬器可以快速定位模擬設(shè)備身份執(zhí)行指定操作它會(huì)直接告訴你哪個(gè)Action被Denied了。5. 未來(lái)幾年IoT標(biāo)準(zhǔn)演進(jìn)值得關(guān)注的方向5.1 Matter不是終點(diǎn)而是“互聯(lián)范式”的開(kāi)始前兩年Matter發(fā)布時(shí)很多人以為智能家居的標(biāo)準(zhǔn)之爭(zhēng)到此終結(jié)。實(shí)際用下來(lái)Matter確實(shí)在設(shè)備描述、協(xié)議轉(zhuǎn)換、本地互聯(lián)上做了大量工作但它真正有價(jià)值的不是那一套規(guī)范本身而是確立了“基于IP、本地通信、多生態(tài)兼容”的互聯(lián)范式。這個(gè)范式可能會(huì)延伸到更多領(lǐng)域。未來(lái)的設(shè)備出廠(chǎng)時(shí)自帶一套標(biāo)準(zhǔn)描述文件網(wǎng)關(guān)或者平臺(tái)接入后自動(dòng)發(fā)現(xiàn)設(shè)備能力自動(dòng)生成控制界面不再需要人工在后臺(tái)一件一件配置設(shè)備類(lèi)型和屬性映射。也就是說(shuō)標(biāo)準(zhǔn)化會(huì)從“協(xié)議能接通”升級(jí)為“語(yǔ)義能看懂”。具體到落地企業(yè)現(xiàn)在就可以開(kāi)始做一件事把設(shè)備描述文件、通信協(xié)議、數(shù)據(jù)模型抽象成獨(dú)立于業(yè)務(wù)代碼的資產(chǎn)。以后每接一個(gè)新設(shè)備先看它能不能映射到已有的標(biāo)準(zhǔn)模型實(shí)在對(duì)不上再擴(kuò)展模型而不是每次新設(shè)備進(jìn)來(lái)都臨時(shí)造一套新字段。5.2 大模型讓“協(xié)議自動(dòng)翻譯”成為可能這兩年大模型火熱它對(duì)IoT標(biāo)準(zhǔn)的影響也開(kāi)始顯現(xiàn)。最直接的一個(gè)應(yīng)用方向就是“協(xié)議文檔解析和映射生成”。以前我們接一個(gè)私有協(xié)議要把廠(chǎng)家提供的幾百頁(yè)協(xié)議文檔翻完然后手動(dòng)寫(xiě)解析規(guī)則和字段映射一個(gè)設(shè)備類(lèi)型少說(shuō)也要一周。有了大模型以后可以把協(xié)議文檔導(dǎo)入讓它生成JSON Schema、解析模板、字段映射初稿工程師再做人工審核修正效率能提高不少。但這里一定要提醒AI生成的東西只能當(dāng)草稿不能直接進(jìn)生產(chǎn)。關(guān)鍵設(shè)備尤其如此一個(gè)字段解析錯(cuò)誤輕則數(shù)據(jù)不對(duì)重則控制指令發(fā)錯(cuò)出事就是生產(chǎn)事故。所以我的建議是讓大模型做“翻譯草稿”人做“最終裁判”把人工審核流程做成標(biāo)準(zhǔn)環(huán)節(jié)目前階段這是最穩(wěn)妥的做法。5.3 標(biāo)準(zhǔn)將更多與合規(guī)綁定接下來(lái)幾年IoT標(biāo)準(zhǔn)不再只是技術(shù)團(tuán)隊(duì)內(nèi)部的事它會(huì)越來(lái)越頻繁地與安全合規(guī)綁定在一起。你出口的設(shè)備、上線(xiàn)的平臺(tái)需要滿(mǎn)足越來(lái)越多的安全基線(xiàn)要求比如設(shè)備必須具備安全啟動(dòng)、數(shù)據(jù)加密傳輸、固件簽名校驗(yàn)、可追溯日志等能力。這些正在從“用戶(hù)要求”變成“準(zhǔn)入門(mén)檻”。對(duì)企業(yè)來(lái)說(shuō)現(xiàn)在就要把自己的產(chǎn)品線(xiàn)按“標(biāo)準(zhǔn)合規(guī)框架”重新過(guò)一遍看看哪些設(shè)備還不支持安全啟動(dòng)哪些設(shè)備的數(shù)據(jù)鏈路還是明文傳輸哪些設(shè)備的固件沒(méi)有簽名校驗(yàn)。這些事越早做后面的整改成本越低。我個(gè)人的看法是標(biāo)準(zhǔn)會(huì)從過(guò)去的“建議參考”變成“事實(shí)準(zhǔn)入門(mén)檻”。技術(shù)團(tuán)隊(duì)如果能在項(xiàng)目層面提前把標(biāo)準(zhǔn)能力沉淀為平臺(tái)能力后續(xù)就不會(huì)被合規(guī)問(wèn)題拖住交付節(jié)奏。做過(guò)越多的IoT項(xiàng)目我越覺(jué)得標(biāo)準(zhǔn)不是一個(gè)純技術(shù)概念而是工程問(wèn)題。它要求你在設(shè)備接入的第一天就想清楚數(shù)據(jù)模型是什么字段怎么命名時(shí)間戳用什么格式升級(jí)策略怎么定安全最小權(quán)限怎么配這些看起來(lái)瑣碎的約定決定了系統(tǒng)跑起來(lái)之后是健康還是每天救火。如果現(xiàn)在有人問(wèn)我面對(duì)碎片化的IoT標(biāo)準(zhǔn)最先該做什么我的建議是先定一個(gè)“最小標(biāo)準(zhǔn)集”。不用一開(kāi)始就追求包羅萬(wàn)象的國(guó)際標(biāo)準(zhǔn)先把設(shè)備ID、消息格式、時(shí)間戳、單位、錯(cuò)誤碼這五件事定死然后讓所有接入流程都遵守這套約束。這套最小約束會(huì)隨著項(xiàng)目迭代慢慢完善但它能保證你從第一天起數(shù)據(jù)就是干凈的接入就是有序的。標(biāo)準(zhǔn)永遠(yuǎn)在演進(jìn)但工程上“先立規(guī)矩再干活”這個(gè)原則不會(huì)變。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
美女天天久久| 婷婷噜噜| 亚洲婷婷激情综合激情999精品| 天天天在线观看| 第四色网婷婷| 激情综合五| 日逼免费视频| 这里只有精品,日韩视频| 影音先锋男人女人| 99免费视频| 婷婷精品性视频| 狠狠看狠狠| 六月婷婷操逼| 欧美特大片黄| 国产午夜精品一区二区三区嫩草| 九九碰九九爱97超碰| 精品九九视频| 丁香五月自拍| www激情| 亚洲宗合激情| 国产精品99久久久久久久女警| 五月天成人网在线观看| 五月婷婷丁香狠狠撸久久| 五月丁香| 五月天婷婷丁香花| 大香蕉福利导航| 色婷婷丁香五月| 丁香5月婷婷| 日韩成人综合网| 国产午夜成人AV在线播放| 婷婷亚洲综合| 思思热在线精品视频| 五月情婷婷五月| 欧洲亚洲免费视频9| 99热草草| 五月婷婷丁香综合,亚洲天堂| 丁香六月婷婷| 国产精品久久欧美久久一区| 大香蕉五月天| 丁香五月天电影| 神马欧美精| 天天摸天天日天天舔| 色久播播| 天堂婷婷五月在线| 天天操夜夜夜夜爽| 99这里只有精品国产| www.97碰碰com| 1囯产午夜仑鲁鲁| 极品精品一区二区三区在线| 97碰碰草| 五月天婷婷涩涩| 亚洲性爱AV| 欧美情色电影一区二区| 人五月天婷婷喷水| 综合99在线| 亚洲AV成人在线观看| 免费看成人AA片无码视频吃奶| 99精品网| 国产69久久久欧美黑人A片| 视频一二区| 色婷婷六月天| 久久9视频| 五月天婷婷成人| 人人人人人人人草| 99色网站| 日本片日本片祼观看网站在线看中文版网页在线看| 91大神操美女| 色五月播五月| 婷色五月| 99国产精品久久久久久久久久久 | 丁香六月高清视频| 五月天激情婷婷小说| 99色区| 97视频.干com| 久er7久热| 丁香五月天婷婷久久综合| 91精品电影18T| 综合久色五月| 五月天天天色| 色婷婷丁香五月| 性爱久久| 婷婷五月综合在线| 五月天丁香花婷婷| 欧美久久婷婷| 久久午夜理论| 超碰国产在线观看| 熟女人妻一区二区三区免费看| 中文字幕人妻熟女在线| 综合网色综合| 天天操天天爱天天日| 精品久久婷婷五月天| 午夜丁香六月婷| 天天日夜夜草进麻麻的子宫| 丁香五月婷婷动漫视频| 婷婷五月天开心网| 老司机伊人| 五月激情影院| 色碰97| 七七色色综合| 另类婷婷丁香| 天天摸色吧天天摸色吧| 丁香五月婷婷AV在线| 99色网站| 日韩啊啊啊| 青青久在线视频免费观看| 久久丁香婷婷色情综合| 五月丁香久久精品在线观看| 99热这里只有精品国产首页| 五月天伊人| 老美AA片| 日韩九九视频| 色综合色色| 超碰免费在线| 丁香五月大香蕉AV| 人人干AV| 亚洲综合网 665566| 九九热最新| 婷婷五月天免费99| 深爱 五月天| 拳交大逼| 一本大道伊人AV久久综合| 国产操逼网站| 开心五月色婷| 99热精品在线| 99色.com| 亚洲日韩26uuu| 99久久精品国产色欲| 一月婷婷色色| 丁香九色不卡aaa| 日韩婷婷五月| 五月婷婷丁香六月| 99视频热99| 丁香六月综合激情| 九九大香蕉黄色影院| 99ER热精品视频| 超级碰碰视频无码| av免费人人| 色婷婷亚洲婷婷| 日本VA视频| 黄色AV日韩| AV在线免费观看不卡| 五月丁香激情四射综合| 九九热在这里只有精品| 日本综合色图| 噜噜噜噜婷婷五月天| 婷婷基地爱| 99色热| 99ri视频在线播放| 久久这里有精品视频| 这里只有精品免费 | 97香蕉碰碰人妻国产欧美| 天天爽天天操| 97人人操com| 欧美色播综合在线观看| 亚洲热热视频| 99操无码视频观看| 婷婷丁香色性爱| 久草五月| 激情色色色| 三级毛片7979| 97欧美在线| 久久九九99.www| 五月激激网w'w'w| 丁香五月天啪啪| 99热高清在线| 久久九九国产精品怡红院| 亚洲性爱AV在线| 婷婷五月激情四月综合| 久久久久人妻精品| 五月婷婷五月丁香综合| 久久综合五月天| 丁香五月91| 99在线热视频| 91色五月| 色丁香五月| 五月婷婷六月丁香在线| 无语停婷丁香网| 天天操夜夜玩!| 激情四射五月天| 成人 在线 日韩| 婷婷色情六月| 在线观看亚洲AV| 最新丁香六月婷婷| 天堂在线婷婷| 另类 在线| 99热全是精品| 99色天堂| 久久综合激情五月天| se99视频| 五月激情偷拍婷婷| 丁香五月婷婷www..com| 成人免费在线电影| 五月开心婷婷极品激情| 男女啪啪做爰高潮无遮挡| 丁香五月色色| 91男同| 91岛国片| 欧美99| 大香蕉网站,大香蕉综合| 97人妻碰碰碰久久香蕉| 久久婷婷五月天激情新地址| 嫩草AV久久伊人妇女超级A| 亚州激情在线视频| 激情文学 综合 九月| 狠狠搞狠狠操| 99re热精品在线视频| 五月婷婷激情五月| 互月天综合| 五月婷无码| 天天爽免费视频| 激情五月份婷婷| 九九色综合网| 色婷婷深爱五月| 天堂久久久久天堂网| 这里有精品2| 色一情一乱一乱一区9| 精品色色| 欧美综合激情五月丁香| av电影在线播放| 日韩精品一品二区三区的使用体验| 婷婷色在线视频| WWW,婷婷,COM| 久久女婷| 九九99九九精品视频| 97色色在线视频| 五月天婷婷激情网| 欧美精品XXXXBBBB| 在线视频激情网站| 99精品在| 久久人人九九| 一片AV片免费播放| 色色无码| 色五月综合资源推荐| 97色色婷婷| 无码激情AAAAA片-区区| 丁香九月综合| 婷婷五月图片小说视频| 1024日韩| 久热伊人在91| 中文字幕在线不卡| 呦呦v线| 99caobi| www.五月天婷婷| 婷婷丁香五月欧美人| 色欧美日| 五月天丁香婷婷网| 大香蕉久久| 久久这里都是精品| 先锋资源 996| 玖玖在线视频福利| 色狠狠综合入口| 亚洲精品成人| 996er热| 婷婷伊人无码| 激情综合在线观看| 另类图片五月天激情| 婷婷伊人五月天| 伊人五月丁香| 激情五月天啪啪| 久久精品婷婷五月丁香| 欧美偷偷操| 五月天精品视频| 久久视频婷婷视频| 99热99在线| 99热日本精品| 久久44| 色色色成人网| 五月丁香婷婷色色| 99精品久久久久| 激情综合六月| 久久这里只有精品网| 超碰在线免费| 七月婷婷色香综合网| 婷婷精品| 激情综合五月| 五月婷婷色色色| 日日天天干| 色情五月天小说| 色99久草在线| 北京熟妇搡BBBB搡BBBB| 久热婷婷| 五月天婷婷久久| 99超碰人人| 亚洲综合视频网| 日韩啪啪网| 丁香六月欧美| 日本五月天网站| 午夜丁香五月天综合| 日韩性视频| 思思99热| 思思久ren热| 日本www免费九九| 自拍盗摄 另类| 五月伊人网| 第四色婷婷丁香五月| 日本天天综合| 亚洲激情无码久久| 激情久久天天| 五月婷网站| 天天成人综合视频| 天天综合网亚洲网站| 热久久精品视频网站| 婷婷激情综合无月| 色色日韩无码| 深爱激情AV| 五月开心婷婷网| 五月天色色色| 99精品这里只有免费视频| 99热婷婷| 91精品熟女| 婷婷久久免费看| 超碰在线91| 乱码操操| 97久久久久| 亚洲成人AV在线播放| 综合一区二区三区| 日韩色色色色色| 大香网伊人久久综合| 99久久综合网| 婷婷五六日| 亚洲第精品| 婷婷五月天亚洲综合网| 99视频久久| 五月天婷婷小说| 色色五月天婷婷丁香| 色综合久久中文| 深夜男女福利刺激影院一区| 丁香五月成人| AⅤ网站在线看| 99热草草| 九九精品自拍| 襙比视频| 亚洲欧美婷婷五月色综合| 97人妻碰碰碰久久香蕉| 97超碰综合| 欧美日韩123| 婷婷啪啪| 67194中文在线| 丁香熟女乱| 无码人妻一区二区一牛影视| 久久激情网| 99热这里只有精品国产免费| 亚洲成人黄色网| 开心五月激情五月丁香五月婷婷| 在线只有精品| 婷婷伊人| www.精品久9| 狠狠干狠狠色| 色婷婷激情五月天在线观看| 色婷婷免费观看| 91丨九色丨大屁股| 久久区区一二三av| 五月丁香网av| 五月天俺去也| 婷婷九月色| 97碰碰视频在线观看| 婷婷五月丁香综合| 免费视频WWW在线观看网站| 91精品综合久久久久久五月丁香| 婷婷综合九月| 无码G高清天| 丁香婷婷月| 五月丁香五月综合欧美| 开心五月婷婷综合在线精品素人| 日日色五月天| 激情综合网址| 色综合久久8| AV电影在线播放| 五月丁香婷在线| 婷香五月| 国产小网站| 99热精品在线播放| 色五月婷婷五月| 日韩成人综合网| 天天日夜夜爽| 亚洲成人网站在线| 免费在线观看av网站| 久久99激情| 色五月丁香一区在线| 亚洲欧州色情在线观看| 婷婷久久网| 国产性爱一级| 天天综合网网欲色| BBWCUCKOLD精品熟妇| 五月天综合久久丁香91| 大陆肏屄视频| 思思99热| 丁香六月婷婷久久综合| 男人的天堂五月丁香| 97干干干丁香| 开心深爱五月天| 韩国天天婷婷| ztEJj| ww亚洲ww在线观看| 日本三级中国三级99| 播丁香五月婷婷欧美| 99re这里只有精品99| 婷婷色丁香五月| 五月丁香六月婷婷亚洲综合| 婷婷色色欧美综合网| 日本色色网站| 很很干天天干| 婷色综合| a色色色色色| 六月丁香激情婷婷| 大香蕉久操| 九九九午夜视频| 天天日日人| 91九色丨国产丨爆乳| 国产成人亚洲综合亚洲| 婷婷六月五月天综合| 婷婷五月丁香六月| 五月五婷婷网| 婷婷欧美| 色五月激情综合| 国产高清RV综合aVa| 青草青草视频2免费观看 | 超碰91在线| 欧美性爱中文字幕| 婷婷狠狠操| 五月天丁香婷婷社区| 一起草av在线观看| 天天搞天天色综合| 无码人妻电影| 九九九九这里只有精品| 免费成人网在线观看| 激情四射五月天偷偷看婷婷| 69精品人人人人| 六月激情网| 婷婷五月六| 国产综合81p| 激情六月色| 色综合久网| 丁香婷婷深情五月亚洲| 久久五月天色婷婷| 99热这里精品| 狠狠擼综合| 99精品视频在线观看| 欧爱综合视频| 国产在线网| 五月激情丁香久久综合网| 激情五月婷婷五月| 六月丁香婷婷天堂| 99re在线免费视频| 久久伦乱| 黄网网站在线播放| 99只有精品| 99热日本| 91视频免费后入强操| 婷婷欧美综合| 日本的α片xxxwww| 亚洲岛国电影| 99激情网| 色婷婷在线影院| WWW99热| 色婷婷WWW| 俺去也五月天婷婷| 色五月色五天色情网| 大香人妻| 可以直接看的AV| 婷婷99狠狠躁天天躁| 婷婷成人五月天| 蜜臀嫩草| 中文精品在| 精品乱码久久久久| hd五月婷婷在线| 色吊操色妞| 天天日本夜夜谢| 中文网婷婷字幕婷| 天天爽夜夜操| 99久久大片| 9福利性视频欧美| 婷婷五月天丁香社区| 99久热在线精品| 91无码色色| 欧美激情综合色综合啪啪五月| 99热久| 久久全意婷婷| 色五月综合激情| 九九色人| 国产激情久久| 99在线热视频| 激情丁香五月激情婷婷| 久久刺激网| AA片在线观看视频在线播放| 久9无码视频| 五月激情另类| 五月天综合久久| 91色呦哟| 婷婷五月天伊人| 日本操B视频| 蜜臀A∨在线水帘洞| 色九九一二| 色婷视频| 婷婷五月综合色拍| 99热在线99| 中文字幕性爱视频| 这里只有精品96| 久久五月天综合| 婷婷激情六月综合| 超碰久热| 欧美激情中文字幕| 丁香婷婷久久五月天| 激情综合网五月激情| 九六五月天婷婷| 激情另类综合| 九色无码| 九九九九中文字幕| 中日韩美欧成人一区二区精品在线| 中文成人在线| 婷婷五月丁香综合人妻| 欧美色色色色色色色色色色影视| 99热在线精品播放| 久久狠婷婷| 一本色综合色| 亚洲精品婷婷| 五月婷婷自拍视频| 亚州视频九九99| 国产免费一区二区在线A片视频| 激情国产五月| 亚洲国产精品VA在线看黑人| 亚洲色啪| 噜噜在线| 婷婷五月天综合AV| 严洲天天插| 久久九九经典| 中文字幕婷婷在线| 久久玖玖99| 久久99网站| 六月丁香婷| 91人操| 婷婷五月天激情电影小说| 成人狠狠成人狠狠成人狠狠成人狠狠| 婷婷色五月综合丁香| 91婷婷在线| 14色综合婷婷| 久热天堂| 五月丁香亭亭| 久 久9 9 热 视 频| 久去色色| 五月丁香六月婷婷,婷| 国产人人操| 超91热| 久久全意婷婷| 九月色婷婷综合亚洲| 亚洲欧美综合7777色亭亭| 亚洲国产精品二二三三区| 国产日韩欧美性爱| 激情五月综合婷婷| 五月丁香六月婷婷操操操| 日日插日日干| 精品一区二区三区四区五区六区介绍| 婷婷的五月天另类视频| 久热这里只有精品99re,久热这里只有精品7| 啪啪综合| 九九人妻福利| 婷婷色系婷色| 婷婷五月天亚洲丁香| 色婷婷五月天在线| 婷婷五月天另类网站| 亚洲婷婷丁香五月亚洲| 欧美久久婷婷| 天天插天天插天天操| 99热只有精品在线播放| 激情婷婷人妻| 久久思思精品| 五月久久婷婷天堂视频| 亚洲五月花| 夜色综合网| www色色色com| 天天天天天天操| 99热综合| 亚州美女| 中文字幕高清av| 五月激情射| 色狠狠综合| 色月视频| 天天狠狠色噜噜| 丁香五月婷婷在线观看| 丁香婷婷五月色成人网站| 婷婷久久综合| 伊人五月天在线| 成人丁香五月天| 亚洲色色香蕉| 操一区| 婷婷五月激情小说| 123日本不卡在线| 日本操片| 久久色五月| 欧美激情五月| 操久久网| 婷婷综合中文字幕| 天天肏夜夜肏| 97人妻碰碰碰久久香蕉| 亚洲激情 久久| 啪啪啪啪五月天| 六月丁香五月激情婷婷| 99免费| 久热免费| 日韩有码一区| 全高清无码视頻| 五月天自拍网| 日日爽日日| 婷婷激情六月综合| 无码视频国内精品久久久| 婷婷丁香成人五月天| 色月九九| 色婷婷五月天不卡| 夜夜干 夜夜操| 五月天丁香啪啪网| 超碰9在| 开心五月激情| 久久综合五月天| 久久香蕉网| 日韩一级网站| 伊人大香五月天| 丁香婷婷六月激情| 99热只有| 五月桃花网综合| 婷婷五月丁香欧洲| 激情五月五月五月婷婷| 激情五月黄色小说| 五月丁香在线| 中文字幕丰满乱孑伦无码专区| 二级黄色毛片| 日日狠夜夜狠| 91狠狠色丁香婷婷综合久久| 狠狠色五月| 久久人妻在线| 天天精品视频免费观看| 天天插操| 亚洲色9| 天天天天天天操| 少妇人妻丰满做爰XXX| 精品99在线| 激情婷婷五月天日本系列| 91日本在线观看| 五月婷免费视频| 天天日天天插天天操| 91成人电影| 天天久久婷婷| 亚洲va在线| 色色色色热| 成人小说色图婷婷五月| 亚洲五月综合色播| 婷婷五月天成人| 色婷五月| 性高潮久久久久久-九九九九九九九九九九热-成人AV | 色偷偷色婷婷| 欧美丁香五月| 99色久| 99久久免费性爱视频`| 婷婷在线视频| AVV黄| 婷婷五月天激情基地| 艳妇野外情欲放荡HD| 久热这里只有国产| 五月叮香啪| 超碰人妻公开在线| 日韩AV片| 深夜激情网| 99综合视频一体| 亚洲中文字幕网| VfJxEwPH| 开心婷婷五月综合| 亚洲国产精品成人免费一区久久久在线观看AAAA | 这里只有精彩视频| 综合久久六月| 婷婷丁香五月天激情| 久久九九经典| 99re这里只有| 婷婷狠狠操| 丁香五月婷婷激情尤物| 五月综合激情啪啪啪啪啪| 婷婷五月激情热播| 99热亚洲| 色五月婷婷、老熟女| 婷婷在线综合| 五月丁香| 99视频只有精品| 亚洲综合网激情小说| 国产高潮A片羞羞视频涩涩| 干亚洲天堂| 亚洲亚洲人成综合网络| 开心激情站婷婷五月天| 日本偷拍九九九| 五月丁香婷婷综合| 亚洲字幕AV一区二区三区四区| renre人人操国产超碰在线| 婷婷五月综合网| 天天日综合网射| 四LLL少妇BBBB槡BBBB| 高清无码中文字幕aVDV| 欧美激情-区二区三区| 九九热精品视频| 91色噜噜狠狠狠狠色综合| 午夜丁香婷婷| 天天草天天舔| 丁香五月之久操视频| 国产色色网址网站| 五月天色色色网| www夜夜| 开心五月婷婷激情| 久久久婷| 激情www.98com| 六月婷婷AV| 五月天成人小说| 激情五月综合网最新| 91丨九色丨丰满人妖| 激情五月天婷婷直播| 丰满老熟妇BBBBB搡BBB| 天天干狠狠| 在线中文字幕视频| 九九热精品| 思思久日精品视频| 伊人网大香| 国自产拍偷拍精品啪啪一区二区| 久久久久久性爱视频| 丁香五月黄色| 99热这里只有精品8| 天天干天天干天天干天天干天天干天天干天天 | 欧美日韩成人免费在线| 思思久久99热| 啪啪五月婷婷| 五月婷婷六月丁香在线视频免费在线观看| 五月丁香啪啪| 香蕉五月婷婷| 五月丁香六月婷| 婷婷丁香成人五月天| 丁香六月婷婷| 伊人九热| 色婷久九| 久久久久98| 日本天天色| 六月婷婷在线视频| 丁香五月婷婷婷婷欧美综合| 操操日韩| 中文字幕成人网站| 在线播放成人网站| 婷婷伊人五月天| 久久色9| 久久精品99久久久久久| 深爱丁香激情| 大香蕉精品视频| 大香蕉视频婷婷| 深爱激情五月网| 99九九精品视频| 狠狠干五月天婷婷网| 极品人妻VIDEOSSS人妻| 久久小片| 亚洲五月天伊人| 久久久.www| 99国产精品久久久久久久久久久| 久久与婷婷| 亚洲最大五月六月丁香婷婷| 亚洲超碰在线| 99精品高潮| 日操夜操天天操不卡| 婷婷另类小说| 99热这里只有的精品视| 99这里精品| 国産精品| 成人中文字幕在线| 久久99免费视频| 97人妻碰碰中文无码久热丝袜| 亚洲欧美婷婷五月色综合| 五月丁香六月婷婷亚洲| 亚洲成人av在线观看 | 97久久人人操| 五月婷丁香在线视频在线| 五月婷久久| 五月天婷婷色综合| 久久9久| 这里只有精彩视频| wwccc久久久| 金品在线视频99| 99免费在线| 九九这里有精品| 79色色| 五月丁香六月婷婷亚洲| 婷婷五月深情丁香深爱日韩| 综合大香蕉| www.91在线观看| 激情图片婷婷丁香五月| 丁香五月婷婷在线| 日本在线视频播放91| 六月丁香五月激情婷婷| 9999热这里只有精品| 蜜臀丁香黄色婷婷五月天| 婷婷欧美综合| 综合久久影院| 91操熟女| 另类在线| 久热黄色| 久久婷青青草原| 久久婷综| 91九九热| 欧美经典片免费观看大全| 婷婷九月色| 九九色色| 日本狠狠干| 久久久网站| 久久丁香五月天| 97色婷婷| 五月丁香综合激情| 99久在线| 99色色视频| 欧美大肥婆大肥BBBBB| 精品一二三区久久AAA片| 婷婷在线视频| 老妇六区| 99网址在线观看| 久久综合人妻| 9l视频自拍9l九色9l成人| av久热| 这里只有精品视频在线| 激情综合网激情五月天| 天天综合网站| 日本精品人妻无码77777| 亚洲五月六月婷婷| 婷婷综合激情| 99热亚洲精品| 六月婷婷综合| 国产高清av黄色看片| 色五月在线综合| 五月丁香啪。| 91男同| 九九自拍网| 精品牛仔裤超碰| 婷婷综合色网| 婷婷久久丁香五月| 人人澡天天色天天做| anquye五月| 最新五月天婷婷影| 色婷婷五月综合| 婷香五月| 91久久精品国产91性色TV| 国产AV成人精品| 日本色五月婷婷| 色婷婷五月综合| 天色综合网站| 婷婷五月综合激情免费| 婷婷五月香蕉| 婷婷五月天久久| 五月色综合| 亚洲性视频| 四月丁香五月婷婷久久| 99色色视频| 日本五月婷婷| 五月婷久久在线| 五月天婷婷色综合| 激情久久久久久久久久久| 激情五月天啪啪| 99rewww| 色丁香久久久| 91人操| 国产欧美精品AAAAAA片| 五月婷婷六月色| www.五月天色色.com| 我去色色网五雨天| 免费无码毛片一区二区A片| 伊人大香蕉综合在线| 青草青草久热这里只有精品| 狠爱婷色| ...婷婷国产成人亚洲日韩| 五月天婷婷激情在线色图| 婷婷激情六月| 九九99在线| 婷婷久草| 日韩色五月| 99色热视频| 91色五月在线观看| 狼人婷婷综合| 夜夜骑日日操| 久久婷婷五月天激情| 4399在线日本A片| 艹B高清无码| 成人短视频免费观看| 这里只有精品视频在线观看免费| 婷婷另类小说| 久久婷婷视频| 99久久新视频| 人人干Av| 日日夜夜干| 99人人操人人爱久久久| 六月婷婷无码观看| 激情五月天色婷婷综合| 99热这里只有精品3| 色99www.| 五月丁香好婷婷姑娘综合网| 五月婷婷色影院| 99精品免费视频| 青青操成人福利| 欧美黑人巨大猛烈cuckold| 亚洲国产成人综合| 91在线看免费 九九九九| 婷婷五月色网| 大香蕉啪啪啪| 伊人久久婷婷五月综合97色| 91操人| 99re思思热久久| 丰满老熟妇BBBBB搡BBB| 婷婷五月激情的图片| 激情亚洲婷婷| 97在线/日本| 69色色视频| AA片在线观看视频在线播放| site:hcxsz888.com| 91ncm视频| 婷婷欧美| 六月激情丁香一道本7777| 激情五月天www| 国产精产国品一二三在观看| 日日夜夜狠狠婷婷色| 欧美内射AA| 四季AV综合网| 婷婷激情图片| 九九亚洲天堂| 狠狠擼综合| 色五月丁香婷婷| 国产成人AV在线| 久久久无码精品成人A片小说| 亚洲第二AV| 99免费热视频在线| 婷婷五月综合社区| 久久总和99| 91成人视频| 久久婷婷五月综合网| 激情五月婷婷网在线观看| 色综合色| 国产综合色婷婷精品久久| 色丁香五月综合网| 伊人婷婷大香蕉在线| 丁香五月第四色88| 天天操夜夜操| 婷婷五月色花丁香社区| 色情综合网| 99噜噜| 婷婷五月丁香基| 成人AV在线中文版| 色操b| 丁香五月香蕉| 五月天综合久久| 日本色色网| 婷婷五月天天天日日夜夜| 婷婷五月天激情四射| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 婷婷五月天熟妇| 天天色天天操天天射| 成人va在线观看视频| 狠狠操狠狠爱| 丁香五月婷婷啪| 99在线精品视频在线观看| 激情五月天啪啪视频| 成人国产欧美大片一区| 中文精品在| 伊人啪啪网| 天天在线天天综合网色| 99久久超级| 综合网天天| 婷婷天堂综合| 欧美搡BBBBB摔BBBBB| 国产成人av在线播放| 天天干,夜夜爽| 五月丁激情| 久久久国产精品黄毛片| 欧美爆乳一区二区三区| 8050一级网| 激情综合色婷婷啪啪六月天| 99综合免费视频| 五月天婷婷色小说| 国产婷婷久久| 日本三级日本三级99| jiujiuxiangjiaowang| 丁香五月婷在线观看| 综合久久综合五月天婷婷| 翔田千里无码| 91人人操人人看| 色五月激情综合网| 99国产er热视频| 665566 无码| 五月婷久久在线| 伊人网色婷婷五月天| 啪啪操超碰| 色五月婷婷婷婷婷婷婷婷婷婷| 久久久久亚洲AV综合| 丁香五月六月| 色九区| 人五月天婷婷喷水| 久久久大香蕉| 丁香九九九九| 亚洲日韩一页精品发布| 天天色综合网吨吧| 成人网站在线观看视频| 超碰婷婷色| 内射综合网| 第四色婷婷五月| 婷婷五月综合中文字幕| 精品99在线| 黄网免费观看| 美国十月色婷婷在线观看| 日本3级片偷拍网站| 伊人久久婷婷| 久久九九视频网站| 国产精产国品一二三在观看| 欧美成人网99网| 色五月欧美| 欧美五月婷婷| av性爱网站| 91人人爽狠狠狠| 69天堂99| 激情婷婷| 五月天激情网开心网| 9热视频在线观看| www.久99| 日韩无码专区| 99热亚洲精品| 婷婷丁香综合成人| 99九九免费精品| 五月婷婷色情| 日韩99视频| 任你搞免费视频观看| 丁香五月天堂网| 天天搞天天色综合| 99爱在线| 日本69日人视频| 日本色超碰| 狠狠精品干练久久久无码中文字幕 | 国产精产国品一二三在观看| 麻豆雪千夏| 天天爽日日爽夜夜爽| 久xxxx| 五月激情六月婷婷| 无码人妻一区二区三区四区| 九九黄色网| 色五月婷婷91| 综合久久综合五月天婷婷| 99精在线| 丁香六月亚洲综合| 丁香五月天在线直播观看| 婷婷五月丁香色播| 青柠影视免费高清电视剧| 99热精这里只有精品| 亚洲五月丁香综合网| 黄色片区子| 日本久久精品18| 9精品久久999| 日韩1区2区| 777精品成人a v久久| 色综合丁香| 久久网址99热| 99综合视频| 婷婷五月天综合网| 色欲天天综合| 99热免费精品| 操操自拍| 日本玖玖在线| 牛牛热这里只有jingpin| 玖玖婷婷五月天| 丁香午夜天| 五月丁香久久激情网| 激情五月天噢美| 99精品视频在线观看免费| 日韩综合网络男女香蕉a片| 超碰在线观看9| 99人妻碰碰碰久久久久视| 五月婷婷色白丝| 97人妻人人| 第1影院之五月婷婷| 99国产97在线,| 色婷婷人人| 九九丁香社区欧美激情| 天久综合91综合首页| 夫妇交换刺激做爰| 曰韩五月丁香色婷婷无码| 两性婷婷丁香五月| 在线视频九色97| 色激情网| 国产午夜成人免费看片无遮挡| www色婷婷| 噼里啪啦完整版中文在线观看| 亚洲免费婷婷| 五月天激情久久| 久久久久久欧美精品se一二三四| 激情综合区| 婷婷天堂站| 网站免费一站二站| 国产精品涩涩涩视频网站| 日本精品人妻无码77777| 婷婷六月天国产综合| aa久久| www.夜夜操.com| 成人无码精品1区2区3区免费看| 亚洲亚洲人成综合网络| 五月天婷婷婷| 操婷婷基地| 超碰电影在线播放| 六月丁花香啪啪激情欧美| 九热视频在线伦| 婷婷久久精品| 激情综合五月婷| 五月天色综合服务平台| 国色天香伊人狠狠色| 日婷婷| av网址在线| 五月丁香啪啪激情| 级情九色| 国产熟妇的荡欲午夜视频| 大香蕉伊人丁香五月| 久在线综合69| 久久精品五月天| 操精品9| 激情av在线| 99热这里只有99| 99热这里只有精品2024| 可以直接看的av| 深爱激情六月天| 激情AV| 亚洲av成人一区二区电影在线| 永久免费视频| 五月天开心婷婷久久| 激情五月丁香五月| 先锋资源 996| 99re这里有精品手机在线| 五月婷婷激情五月| 五月天色五月| 99精品手机在线视频| 伊人久久大香网| WWW丁香五月| 五月天另类小说| 91狠狠色丁香婷婷综合久久| AV在线不卡播放| 精品99视频| 激情久久网 | 天天综合亚洲综合| 久久婷婷亚洲| 最近中文字幕在线中文视频| 99无码| 九日日夜夜69| 99精品偷拍视频| 任你草| 婷婷噜噜| 丁香婷婷九月| 国产精产国品一二三在观看 | 激情五月丁香五月| 思思久久久婷婷| 无码激情| 婷婷五月天激情网站| 五月色影院| 五月丁香久久久| 日本三级黄色大片| 婷婷六月激情丁香| 丁香五月五月婷婷五月天激情四射| 成年人最刺激的综合网| 色五月av| 99久久婷婷五月综合| 爱婷婷五月| 亚洲综合在线播放| 久777| 久久66er久久| AV国产有码| 一本色道久久综合狠狠躁小说| 久久人妻人人槡| www激情| 色九九九九| 亚洲麻豆乱码国产2028| 99热资源在线| 色激情网| 五月丁香亚洲校园欧美| 天天干天天干天天操| 高潮毛片又色又爽免费| 日韩人妻无码专区| 五月婷婷啪啪综合网| 天堂久久丁香| 99热思思在线观看| 类似婷婷激情综合网站| 2050人人操免费工开爱 | 激情图片婷婷| 婷婷的五月天另类视频| 久热大香蕉| 五月婷婷综合影院| 丁香五月综合在线视频| 亚洲精品一区中文字幕乱码| 亚洲色久| 日韩在线五月天婷婷| 狠狠精品干练久久久无码中文字幕 | 九九草热在线观看| 五月婷在线观看| 婷婷丁香综合在线| 色五月天激情| 国产又爽又猛又粗的视频A片| α久久| 久久人妻久久久久| 这里只精品热在线18| 国产伦亲子伦亲子视频观看| 丁香六月婷婷久久综合八月| 激情五月天婷婷在线网址发给我| 久久人人添人人爽添人人片αV| 久久96热| 97热在线精品| 亚洲热久| 五月婷婷综合在线视频小说| 99精品无码| 久久久久久草黄色片AV在线观看| 色五月综合网| 久久停停超碰| 亚州色婷婷| 久操大| 色色色婷婷五月| 久久这里只有精品视频15| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 九九综合九| 色波激情五月天| 在线观看欧美| 日韩在线成人电影| 婷婷5月开心6月| 亚洲aV写真天天综合网久久| caop视频| 五月综合影院| 成人久碰| 久久免片| 欧美日韩成人在线免费| 成人综合伍月天| 婷婷激情综合色五月久久91| 99无吗| ady狠狠入| 五月天六月婷婷| 996精品热视频| 九九热中文| 色玖玖导航| 午夜丁香婷婷| 少妇久久诱惑视频| 九九黄色网| 色婷婷成人丁香| 嫩草AV久久伊人妇女超级A| 色五月成人在线| 无码AV久久久久久久久| 色综合久久天天综合网| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 97资源碰碰在线| 夜夜撸日日操| 亚洲综合色色| 99热综合在线| 色综合夜夜| 青草视频在线观看视频| 精品人妻伦| 在线视频你懂得| 美臀自射自家人妻| 婷婷丁香红五月91C| 六月丁香啪| 中文字幕在线视频播放| 九九热在线精品视频| 欧美va视频| 日本三级中文字幕| 激情深爱婷婷网| 4399无码视频二区| 久久久久人妻中文| 久久久jd| 热九九精品| 天天干天天爽天天操| 99综合熟女| 色五月激情五月开心五月| 久久久月丁香| 丁香五月性爱爱五月| 婷婷丁香18| 思思久久青草热|