99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

物聯(lián)網(wǎng)標(biāo)準(zhǔn)實(shí)戰(zhàn):從設(shè)備接入、數(shù)據(jù)模型到OTA的安全升級(jí)

物聯(lián)網(wǎng)標(biāo)準(zhǔn)實(shí)戰(zhàn):從設(shè)備接入、數(shù)據(jù)模型到OTA的安全升級(jí) 聊到IoT標(biāo)準(zhǔn)很多人第一反應(yīng)就是MQTT和CoAP之爭(zhēng)或者是Matter發(fā)布時(shí)的那陣熱鬧。但真正在一線(xiàn)做過(guò)大規(guī)模物聯(lián)網(wǎng)項(xiàng)目的人都清楚標(biāo)準(zhǔn)這個(gè)話(huà)題不像協(xié)議文檔里寫(xiě)得那么干凈它往往是從一次P0級(jí)事故開(kāi)始的——設(shè)備接入突然全量失敗、影子數(shù)據(jù)錯(cuò)亂、OTA升級(jí)包推下去把一批設(shè)備搞到離線(xiàn)事后復(fù)盤(pán)才發(fā)現(xiàn)根子都出在“標(biāo)準(zhǔn)”上。這篇文章不打算跟你背一遍IEEE、ISO、IETF的體系結(jié)構(gòu)而是想站在做項(xiàng)目的角度聊聊標(biāo)準(zhǔn)在IoT里到底是怎么影響我們每天的工作。我們會(huì)從設(shè)備接入、數(shù)據(jù)模型、OTA、安全策略這些實(shí)際場(chǎng)景出發(fā)看看標(biāo)準(zhǔn)碎片化帶來(lái)了哪些坑以及未來(lái)幾年IoT標(biāo)準(zhǔn)會(huì)往哪個(gè)方向走。不管你是做硬件、做嵌入式、做平臺(tái)開(kāi)發(fā)還是做解決方案架構(gòu)這篇文章應(yīng)該都能給你一些值得帶進(jìn)項(xiàng)目里的參考。1. IoT標(biāo)準(zhǔn)為什么總是“老生常談”卻又“繞不開(kāi)”1.1 標(biāo)準(zhǔn)碎片化的真實(shí)代價(jià)先說(shuō)一個(gè)我印象特別深的場(chǎng)景。某個(gè)智慧工廠(chǎng)項(xiàng)目里一條產(chǎn)線(xiàn)上同時(shí)有PLC走M(jìn)odbus RTU傳感器通過(guò)MQTT上報(bào)視覺(jué)檢測(cè)設(shè)備用OPC UA對(duì)外輸出邊緣網(wǎng)關(guān)把這些數(shù)據(jù)匯總后統(tǒng)一推到云端。設(shè)備全部接完后光是把溫度、濕度、振動(dòng)、檢測(cè)結(jié)果這些字段對(duì)齊就花掉了整整三天。問(wèn)題出在哪每一家設(shè)備都有自己的數(shù)據(jù)命名習(xí)慣。有的溫度字段叫temperature有的叫temp還有的叫Temp_C有的單位是攝氏度有的直接給華氏度時(shí)間戳更是五花八門(mén)有的用本地時(shí)間有的用UTC但沒(méi)標(biāo)時(shí)區(qū)還有的年份只有兩位。到了平臺(tái)側(cè)這些數(shù)據(jù)全混在一起大屏上顯示的溫度曲線(xiàn)跳來(lái)跳去數(shù)據(jù)分析任務(wù)跑出來(lái)的結(jié)果根本沒(méi)法看。這種“能連上、但數(shù)據(jù)沒(méi)法用”的狀態(tài)就是IoT標(biāo)準(zhǔn)碎片化的最典型代價(jià)。網(wǎng)上有個(gè)說(shuō)法物聯(lián)網(wǎng)項(xiàng)目里超過(guò)一半的數(shù)據(jù)是“臟數(shù)據(jù)”很多就是因?yàn)樵O(shè)備接入階段沒(méi)有做標(biāo)準(zhǔn)約束。你設(shè)備連得再多協(xié)議適配做再全數(shù)據(jù)模型不統(tǒng)一后面的大數(shù)據(jù)、AI、數(shù)字孿生全都是在垃圾數(shù)據(jù)上蓋樓。再說(shuō)一個(gè)更嚴(yán)重的例子。有一次生產(chǎn)環(huán)境在凌晨出現(xiàn)告警風(fēng)暴幾百臺(tái)設(shè)備上報(bào)的數(shù)據(jù)時(shí)間戳比真實(shí)時(shí)間晚了8個(gè)小時(shí)。排查到天亮才發(fā)現(xiàn)是某廠(chǎng)商的固件更新后把時(shí)間戳從UTC改成了北京時(shí)間但平臺(tái)側(cè)的解析邏輯還按UTC處理。如果當(dāng)時(shí)設(shè)備側(cè)和平臺(tái)側(cè)對(duì)時(shí)間戳格式有一個(gè)明確的標(biāo)準(zhǔn)約定這種P0事故根本不可能發(fā)生。所以聊IoT標(biāo)準(zhǔn)不是聊技術(shù)選型而是聊一套從物理世界到業(yè)務(wù)系統(tǒng)之間的“翻譯約束”。物理世界本身什么標(biāo)準(zhǔn)都沒(méi)有溫度就是溫度壓力就是壓力設(shè)備不會(huì)自己說(shuō)“我是攝氏度”全靠接入層來(lái)定義。這個(gè)定義如果不統(tǒng)一后面每一步都會(huì)走樣。1.2 標(biāo)準(zhǔn)的三層結(jié)構(gòu)終端、連接、平臺(tái)聊標(biāo)準(zhǔn)之前先把IoT的技術(shù)棧拆開(kāi)。一個(gè)典型的物聯(lián)網(wǎng)系統(tǒng)大致可以分成三層。終端層是設(shè)備本身包括傳感器、控制器、芯片、固件。這一層的標(biāo)準(zhǔn)決定了設(shè)備怎么描述自己、怎么上報(bào)數(shù)據(jù)、怎么響應(yīng)命令。最典型的例子是Matter它定義了智能家居設(shè)備的各種集群Cluster和屬性Attribute設(shè)備說(shuō)“我是燈”平臺(tái)一看就知道它有什么能力、能執(zhí)行哪些操作。連接層是數(shù)據(jù)傳輸管道解決“怎么把數(shù)據(jù)送出去”的問(wèn)題。Wi-Fi、藍(lán)牙、Zigbee、LoRaWAN、蜂窩網(wǎng)絡(luò)這些屬于物理連接標(biāo)準(zhǔn)MQTT、CoAP、HTTP這些屬于應(yīng)用層協(xié)議標(biāo)準(zhǔn)。這一層最大的特點(diǎn)是百花齊放因?yàn)椴煌瑘?chǎng)景對(duì)功耗、帶寬、延遲的要求差異實(shí)在太大很難用一個(gè)協(xié)議通吃所有場(chǎng)景。平臺(tái)層是數(shù)據(jù)匯聚、處理和業(yè)務(wù)應(yīng)用的地方包括設(shè)備管理、規(guī)則引擎、數(shù)據(jù)存儲(chǔ)、API接口。這一層主要涉及數(shù)據(jù)格式、接口規(guī)范、安全策略的標(biāo)準(zhǔn)比如設(shè)備上報(bào)的JSON結(jié)構(gòu)、RESTful API的設(shè)計(jì)規(guī)范、設(shè)備證書(shū)的管理流程。理解了這個(gè)三層結(jié)構(gòu)就明白了為什么IoT標(biāo)準(zhǔn)這么難統(tǒng)一。它不是某一個(gè)組織發(fā)一個(gè)標(biāo)準(zhǔn)然后大家照做就完了而是每一層都有各自的玩家每一層都有各自的利益和存量生態(tài)。連接層已經(jīng)有幾十種協(xié)議在跑終端層的芯片方案幾百上千種平臺(tái)層更是各家都有自己的產(chǎn)品和數(shù)據(jù)格式想讓它們?nèi)繉?duì)齊幾乎是不可能的事情。但換個(gè)角度想標(biāo)準(zhǔn)化的目標(biāo)并不是“讓所有層都統(tǒng)一”而是“層與層之間的接口要清晰”。就像USB標(biāo)準(zhǔn)只管接口的形狀和協(xié)議不管里面是U盤(pán)、鍵盤(pán)還是散熱風(fēng)扇。IoT真正需要的是終端、連接、平臺(tái)三層之間各自的“USB接口”——設(shè)備描述有規(guī)范消息格式有規(guī)范API有規(guī)范。這樣不同層內(nèi)部無(wú)論怎么演進(jìn)相互之間都能對(duì)接。2. 實(shí)戰(zhàn)視角設(shè)備接入時(shí)“標(biāo)準(zhǔn)”到底卡在哪2.1 協(xié)議選型不是選“最好”而是選“最不差”每個(gè)做IoT平臺(tái)的人都會(huì)被問(wèn)到同一個(gè)問(wèn)題什么協(xié)議最高標(biāo)準(zhǔn)、最好用說(shuō)實(shí)話(huà)這個(gè)問(wèn)題本身就不太對(duì)。協(xié)議選型首先要看場(chǎng)景而且絕大多數(shù)時(shí)候我們要在功耗、帶寬、延遲、實(shí)時(shí)性、開(kāi)發(fā)成本之間做取舍選一個(gè)“當(dāng)前場(chǎng)景下最不差”的方案。我自己的經(jīng)驗(yàn)可以參考下面這個(gè)對(duì)比協(xié)議典型場(chǎng)景優(yōu)勢(shì)劣勢(shì)MQTT海量傳感數(shù)據(jù)上報(bào)、遠(yuǎn)程控制輕量、支持QoS、發(fā)布訂閱模型、生態(tài)成熟實(shí)時(shí)性一般不適合硬實(shí)時(shí)控制CoAP資源受限的低功耗節(jié)點(diǎn)基于UDP、開(kāi)銷(xiāo)小、適合NB-IoT可靠傳輸需要額外機(jī)制生態(tài)相對(duì)小HTTP/HTTPS設(shè)備管理、平臺(tái)間API、非實(shí)時(shí)接入通用性強(qiáng)、調(diào)試方便頭部開(kāi)銷(xiāo)大長(zhǎng)連接場(chǎng)景不友好DDS機(jī)器人、自動(dòng)駕駛、工業(yè)實(shí)時(shí)控制實(shí)時(shí)性高、去中心化、QoS可配置學(xué)習(xí)成本高資源占用大OPC UA工業(yè)制造、PLC、SCADA語(yǔ)義建模強(qiáng)、安全性好、工業(yè)認(rèn)可度高較重邊緣網(wǎng)關(guān)性能要求高M(jìn)odbus工業(yè)現(xiàn)場(chǎng)設(shè)備采集簡(jiǎn)單可靠、存量設(shè)備極多功能有限、安全性弱、字段語(yǔ)義靠人工定義從這個(gè)表能看出來(lái)沒(méi)有任何一個(gè)協(xié)議能包打天下。MQTT在海量上報(bào)場(chǎng)景很好用但你要拿它做毫秒級(jí)的電機(jī)控制那基本是找罪受。DDS在機(jī)器人領(lǐng)域很強(qiáng)但讓一個(gè)低功耗溫濕度傳感器跑DDS光協(xié)議棧就吃掉大半內(nèi)存。所以標(biāo)準(zhǔn)化的重點(diǎn)是“協(xié)議適配層”而不是“協(xié)議統(tǒng)一層”。平臺(tái)側(cè)應(yīng)該預(yù)先抽象出標(biāo)準(zhǔn)的消息模型和設(shè)備模型然后在邊緣網(wǎng)關(guān)或接入層做協(xié)議轉(zhuǎn)換讓所有設(shè)備無(wú)論用什么協(xié)議上來(lái)最終都轉(zhuǎn)換成一個(gè)統(tǒng)一的內(nèi)部標(biāo)準(zhǔn)。這個(gè)思路比硬性要求所有設(shè)備必須用MQTT或者必須用OPC UA要實(shí)際得多。2.2 數(shù)據(jù)模型不統(tǒng)一上云就是噩夢(mèng)如果說(shuō)協(xié)議是“怎么傳”那數(shù)據(jù)模型就是“傳什么”。這個(gè)卡點(diǎn)比協(xié)議選型更容易被忽略但對(duì)項(xiàng)目的影響反而更大。之前我們有個(gè)樓宇自控項(xiàng)目接了一批不同品牌的傳感器。A家的溫濕度計(jì)上報(bào)的是{temp:25.3,humi:60}B家的上報(bào)的是{temperature:26.1,humidity:58}C家的更離譜上報(bào)的是{t:25.8,h:59,unit:C}。接入層如果不做映射數(shù)據(jù)存進(jìn)去之后同一個(gè)測(cè)溫點(diǎn)在數(shù)據(jù)庫(kù)里有三套字段查詢(xún)的時(shí)候要么寫(xiě)一堆條件分支要么干脆就只能對(duì)某一家的數(shù)據(jù)做分析。后來(lái)我們把規(guī)則定死了設(shè)備端上報(bào)什么格式不管但網(wǎng)關(guān)和接入層必須把數(shù)據(jù)轉(zhuǎn)換成統(tǒng)一的模型再入庫(kù)。統(tǒng)一模型的字段名、單位、類(lèi)型、取值范圍、時(shí)間戳格式全部有Schema定義字段名規(guī)范用下劃線(xiàn)風(fēng)格比如temperature、humidity、device_id、report_time時(shí)間戳統(tǒng)一為UTC毫秒單位統(tǒng)一為國(guó)際單位制。這里有個(gè)很容易被忽視的細(xì)節(jié)數(shù)值類(lèi)型。很多設(shè)備上報(bào)溫度時(shí)默認(rèn)是浮點(diǎn)數(shù)但有些PLC會(huì)把溫度放大10倍存成整數(shù)到了平臺(tái)顯示65而不是26這就是字段定義不嚴(yán)謹(jǐn)造成的。所以標(biāo)準(zhǔn)模型里必須明確數(shù)值類(lèi)型、分辨率、量綱、上下限。海量數(shù)據(jù)采集場(chǎng)景下很多團(tuán)隊(duì)把精力都放在了接入并發(fā)、消息隊(duì)列吞吐這些性能問(wèn)題上結(jié)果數(shù)據(jù)存進(jìn)去了業(yè)務(wù)方一看分析結(jié)果說(shuō)“你這數(shù)據(jù)不對(duì)”。原因就是沒(méi)有在源頭做數(shù)據(jù)標(biāo)準(zhǔn)化。給的數(shù)據(jù)再快再全字段亂、單位亂、含義不清那也就是海量垃圾治理成本遠(yuǎn)超你的想象。2.3 安全與OTA標(biāo)準(zhǔn)里最容易被忽略的硬指標(biāo)設(shè)備接入還有一個(gè)繞不開(kāi)的環(huán)節(jié)是安全和OTA這兩塊恰恰是最容易被“能跑就行”思維帶過(guò)去的。先說(shuō)證書(shū)。很多平臺(tái)都支持設(shè)備證書(shū)認(rèn)證比如AWS IoT里的X.509證書(shū)機(jī)制。設(shè)備在工廠(chǎng)上線(xiàn)前會(huì)燒錄證書(shū)連云端時(shí)通過(guò)TLS雙向認(rèn)證完成身份校驗(yàn)。這個(gè)機(jī)制本身很完善但是項(xiàng)目里經(jīng)常出現(xiàn)的問(wèn)題是什么證書(shū)有效期到了沒(méi)人管設(shè)備全部掉線(xiàn)或者一個(gè)產(chǎn)品線(xiàn)幾千臺(tái)設(shè)備共用一個(gè)證書(shū)云端想踢掉某一臺(tái)設(shè)備都做不到。更隱蔽的問(wèn)題是權(quán)限策略。AWS IoT里設(shè)備權(quán)限通過(guò)Policy控制你定了iot:Connect、iot:Publish、iot:Subscribe這些操作但到底允許設(shè)備發(fā)布到哪個(gè)Topic、訂閱哪個(gè)Topic策略里要寫(xiě)清楚。很多項(xiàng)目圖省事直接給設(shè)備配一個(gè)通配符權(quán)限所有的Topic都能收發(fā)結(jié)果一個(gè)設(shè)備被入侵之后整個(gè)項(xiàng)目的數(shù)據(jù)都被拖走。這就是“最小權(quán)限”標(biāo)準(zhǔn)沒(méi)有落地。OTA這塊標(biāo)準(zhǔn)化的價(jià)值更明顯。做過(guò)大規(guī)模OTA的人都知道推送固件最怕的不是網(wǎng)絡(luò)慢而是設(shè)備升級(jí)后起不來(lái)一批接一批地變磚。所以O(shè)TA任務(wù)一定不能是簡(jiǎn)單粗暴地全量推送至少要有灰度分批、版本校驗(yàn)、失敗回滾這幾個(gè)環(huán)節(jié)。具體到策略上我通常建議這么排先推1%的設(shè)備做小批量驗(yàn)證觀(guān)察24小時(shí)一切正常再擴(kuò)大到10%最后全量。同時(shí)設(shè)備端要內(nèi)置雙分區(qū)機(jī)制固件包下載完先寫(xiě)到備用分區(qū)校驗(yàn)簽名和哈希通過(guò)后再切換啟動(dòng)分區(qū)。如果新固件啟動(dòng)失敗自動(dòng)回滾到舊分區(qū)避免設(shè)備變磚。這些機(jī)制看起來(lái)像是產(chǎn)品功能設(shè)計(jì)但本質(zhì)上就是OTA安全標(biāo)準(zhǔn)化的落地。3. 實(shí)操過(guò)程搭一個(gè)“標(biāo)準(zhǔn)意識(shí)”的接入框架3.1 設(shè)備影子與統(tǒng)一狀態(tài)模型光講理念不夠下面用一個(gè)實(shí)際項(xiàng)目的接入框架來(lái)說(shuō)明“標(biāo)準(zhǔn)意識(shí)”怎么落地。我拿一個(gè)典型的智能設(shè)備接入云端場(chǎng)景為例。很多平臺(tái)都引入了“設(shè)備影子”Device Shadow的概念云端保存設(shè)備最近一次上報(bào)的狀態(tài)即使設(shè)備離線(xiàn)業(yè)務(wù)側(cè)也能通過(guò)API讀取到設(shè)備的最新?tīng)顟B(tài)設(shè)備重新上線(xiàn)后可以主動(dòng)拉取影子實(shí)現(xiàn)狀態(tài)同步。我們?cè)谧鲞@個(gè)設(shè)計(jì)時(shí)第一件事就是定義“統(tǒng)一狀態(tài)模型”。所有設(shè)備不管類(lèi)型是什么上報(bào)數(shù)據(jù)都必須包含以下基礎(chǔ)字段{ message_type: property_post, device_id: sn_20250101_0001, product_key: pk_standard_demo, timestamp: 1735718400000, seq: 1001, payload: { properties: { temperature: 26.5, humidity: 58.2, switch_status: on } } }上面這個(gè)模型有幾個(gè)關(guān)鍵約定device_id是設(shè)備唯一標(biāo)識(shí)對(duì)應(yīng)我們內(nèi)部的設(shè)備三元組不能跟產(chǎn)品型號(hào)混在一起。timestamp統(tǒng)一為UTC毫秒時(shí)間戳每臺(tái)設(shè)備上線(xiàn)前必須校準(zhǔn)時(shí)鐘歷史遺留設(shè)備也要在網(wǎng)關(guān)上做時(shí)間戳轉(zhuǎn)換。seq是設(shè)備側(cè)自增的消息序號(hào)平臺(tái)側(cè)可以用它做冪等判斷防止網(wǎng)絡(luò)重傳導(dǎo)致數(shù)據(jù)重復(fù)。payload.properties里的字段名和單位必須遵循設(shè)備模型規(guī)范網(wǎng)關(guān)在接入時(shí)負(fù)責(zé)把廠(chǎng)商私有格式映射成規(guī)范格式。項(xiàng)目里我見(jiàn)過(guò)太多團(tuán)隊(duì)直接讓設(shè)備上報(bào)什么就存什么結(jié)果到了做告警規(guī)則時(shí)才發(fā)現(xiàn)有的設(shè)備上報(bào)的開(kāi)關(guān)狀態(tài)是on/off有的是1/0有的是true/false規(guī)則引擎寫(xiě)起來(lái)非常痛苦。定義了這個(gè)統(tǒng)一模型之后告警引擎、數(shù)據(jù)清洗、大屏展示都只需要對(duì)著這一套模型做適配。3.2 報(bào)文模板與解析層的雙向約束有了統(tǒng)一模型還需要一套機(jī)制保證設(shè)備側(cè)和平臺(tái)側(cè)都在按這個(gè)模型工作這就需要一個(gè)“解析層”來(lái)做雙向約束。先說(shuō)Topic規(guī)范。MQTT場(chǎng)景下Topic設(shè)計(jì)不能隨手起名我們內(nèi)部約定了一套標(biāo)準(zhǔn)格式/{product_key}/{device_name}/properties/post /{product_key}/{device_name}/properties/get /{product_key}/{device_name}/command/reply為什么用這種層級(jí)結(jié)構(gòu)主要有三個(gè)好處產(chǎn)品維度隔離在云端做Policy授權(quán)時(shí)可以直接按product_key過(guò)濾不同產(chǎn)品之間天然隔離。設(shè)備維度可以精確控制想給某臺(tái)設(shè)備單獨(dú)授權(quán)時(shí)直接指向device_name即可。訂閱關(guān)系清晰業(yè)務(wù)側(cè)用通配符訂閱時(shí)不會(huì)誤收到其他設(shè)備的消息。解析層做的第二件事是Schema校驗(yàn)。設(shè)備上報(bào)的消息進(jìn)入平臺(tái)后會(huì)先經(jīng)過(guò)一個(gè)校驗(yàn)器檢查必填字段是否齊全、字段類(lèi)型是否正確、數(shù)值是否在合法范圍內(nèi)。比如溫度傳感器的合理范圍是-40到85如果上報(bào)一個(gè)500直接判為非法數(shù)據(jù)走異常流程。我當(dāng)時(shí)寫(xiě)過(guò)一個(gè)簡(jiǎn)單的Python演示用于模擬設(shè)備上報(bào)和校驗(yàn)的過(guò)程import json import time import uuid def build_telemetry_payload(device_id, product_key, properties): payload { message_id: str(uuid.uuid4()), device_id: device_id, product_key: product_key, timestamp: int(time.time() * 1000), message_type: property_post, payload: { properties: properties } } return json.dumps(payload, ensure_asciiFalse) def validate_schema(message): required_fields [message_id, device_id, product_key, timestamp, message_type, payload] for field in required_fields: if field not in message: return False, fmissing field: {field} if not isinstance(message.get(timestamp), int): return False, timestamp must be int ms if properties not in message.get(payload, {}): return False, missing payload.properties return True, ok # 模擬一個(gè)溫濕度傳感器 msg build_telemetry_payload(sn_20250101_0001, pk_standard_demo, { temperature: 26.5, humidity: 58.2 }) print(msg) print(validate_schema(json.loads(msg)))這段代碼雖然簡(jiǎn)單但它體現(xiàn)了一個(gè)很重要的思路解析層不只是“把MQTT消息讀出來(lái)”還要承擔(dān)字段校驗(yàn)、格式校驗(yàn)的職責(zé)。這樣數(shù)據(jù)到了存儲(chǔ)和業(yè)務(wù)層永遠(yuǎn)都是干凈、統(tǒng)一、符合預(yù)期的。類(lèi)似的思路可以推廣到設(shè)備模型定義用JSON Schema或ProtoBuf來(lái)描述設(shè)備屬性后面開(kāi)發(fā)文檔自動(dòng)生成、調(diào)試工具模擬、規(guī)則引擎配置都可以基于這份模型來(lái)做。3.3 OTA升級(jí)任務(wù)的策略設(shè)計(jì)再接上OTA這個(gè)話(huà)題因?yàn)闊嵩~里提到了AWS IoT OTA我們也用過(guò)這個(gè)服務(wù)確實(shí)能幫你省掉不少重復(fù)造輪子的工作。但就算平臺(tái)幫你管了很多東西方案本身還是要設(shè)計(jì)好。一個(gè)標(biāo)準(zhǔn)的OTA任務(wù)至少包含幾個(gè)關(guān)鍵階段版本發(fā)布準(zhǔn)備固件包上傳到云端記錄版本號(hào)、校驗(yàn)哈希、發(fā)布范圍。版本號(hào)建議用三段式例如2.1.02.1是功能版本0是補(bǔ)丁號(hào)方便管理增量更新。灰度發(fā)布策略先選一個(gè)小批次設(shè)備比如設(shè)備總量的1%這個(gè)批次要覆蓋不同硬件版本和網(wǎng)絡(luò)環(huán)境不能只挑信號(hào)好的設(shè)備。觀(guān)察指標(biāo)包括在線(xiàn)率、上報(bào)頻率、錯(cuò)誤日志、設(shè)備崩潰率。任務(wù)監(jiān)控云端標(biāo)記每臺(tái)設(shè)備的升級(jí)狀態(tài)等待中、下載中、升級(jí)中、成功、失敗。這個(gè)過(guò)程中要特別關(guān)注“失敗后重試”的次數(shù)防止設(shè)備陷入“下載-失敗-重啟-再下載”的死循環(huán)。回滾機(jī)制設(shè)備側(cè)在啟動(dòng)新固件后要有一個(gè)自檢邏輯如果在規(guī)定時(shí)間內(nèi)無(wú)法完成初始化或者上報(bào)心跳自動(dòng)回滾到舊版本。我當(dāng)時(shí)最深刻的教訓(xùn)是OTA不僅是“推包”還要管好一批設(shè)備同時(shí)在線(xiàn)下載帶來(lái)的帶寬沖擊。有一次我們給一批4G設(shè)備推一個(gè)有30MB的升級(jí)包沒(méi)做并發(fā)限制結(jié)果一下子幾百臺(tái)設(shè)備同時(shí)下載邊緣站點(diǎn)的帶寬被打滿(mǎn)正常業(yè)務(wù)數(shù)據(jù)全被堵住了。后來(lái)學(xué)乖了每次OTA任務(wù)都設(shè)置最大并發(fā)下載數(shù)比如一個(gè)站點(diǎn)同一時(shí)間最多20臺(tái)設(shè)備在下其他設(shè)備排隊(duì)等待。除了這些AWS IoT的OTA還涉及用戶(hù)策略配置。Job執(zhí)行階段的權(quán)限要單獨(dú)配比如iot:StartNextPendingJobExecution、iot:DescribeJobExecution、iot:GetPendingJobExecutions這些權(quán)限少配一個(gè)設(shè)備都可能收不到升級(jí)指令。這類(lèi)問(wèn)題是典型的“看起來(lái)連上了但什么都沒(méi)發(fā)生”的坑排查起來(lái)很費(fèi)時(shí)間。4. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄4.1 多協(xié)議網(wǎng)關(guān)導(dǎo)致字段丟失有一個(gè)項(xiàng)目邊緣網(wǎng)關(guān)同時(shí)接了Modbus設(shè)備和新款MQTT傳感器我發(fā)現(xiàn)上位機(jī)讀到的溫度偶爾會(huì)跳變比如從26.4突然跳到6.4然后又恢復(fù)正常。查了很久最后定位到問(wèn)題是Modbus寄存器默認(rèn)按16位讀取而設(shè)備側(cè)實(shí)際上是把溫度按32位浮點(diǎn)數(shù)存儲(chǔ)的網(wǎng)關(guān)在做協(xié)議轉(zhuǎn)換時(shí)只讀了低16位導(dǎo)致數(shù)據(jù)被截?cái)?。后面我讓網(wǎng)關(guān)層把Modbus寄存器配置改成了“32位浮點(diǎn)、按兩個(gè)寄存器組合讀取”跳變消失。這事的教訓(xùn)是多協(xié)議轉(zhuǎn)換場(chǎng)景下千萬(wàn)不要默認(rèn)所有廠(chǎng)家的寄存器配置都一樣。對(duì)接Modbus設(shè)備時(shí)寄存器地址、長(zhǎng)度、數(shù)據(jù)類(lèi)型、字節(jié)序、縮放因子這些必須逐項(xiàng)核對(duì)并記錄成一份映射表后續(xù)排查才好對(duì)照。4.2 時(shí)間不同步引發(fā)數(shù)據(jù)錯(cuò)亂前面提到過(guò)時(shí)間戳問(wèn)題我再展開(kāi)講講。有一次項(xiàng)目上線(xiàn)后數(shù)據(jù)分析團(tuán)隊(duì)反饋某條產(chǎn)線(xiàn)的溫度曲線(xiàn)和壓力曲線(xiàn)對(duì)不上看起來(lái)像是兩套數(shù)據(jù)有時(shí)間偏移。查了設(shè)備端發(fā)現(xiàn)PLC時(shí)間是通過(guò)NTP從工廠(chǎng)內(nèi)網(wǎng)同步的但傳感器用的還是出廠(chǎng)時(shí)間而且傳感器的產(chǎn)品固件對(duì)時(shí)區(qū)處理得很糙直接用了本地時(shí)間。解決方案分三步所有設(shè)備統(tǒng)一使用NTP或平臺(tái)下發(fā)的校時(shí)指令確保設(shè)備本地時(shí)間偏移控制在秒級(jí)以?xún)?nèi)。網(wǎng)關(guān)側(cè)對(duì)設(shè)備上報(bào)的時(shí)間戳做合法性校驗(yàn)如果與網(wǎng)關(guān)當(dāng)前時(shí)間偏差超過(guò)5分鐘打上異常標(biāo)記并告警。平臺(tái)側(cè)在處理數(shù)據(jù)時(shí)統(tǒng)一轉(zhuǎn)成UTC時(shí)間存儲(chǔ)展示層再按業(yè)務(wù)時(shí)區(qū)轉(zhuǎn)換。時(shí)間戳這個(gè)問(wèn)題看起來(lái)小但在數(shù)據(jù)分析、告警編排、審計(jì)追蹤里都是底層依賴(lài)。時(shí)間不一致后面所有環(huán)節(jié)都會(huì)跟著亂。4.3 批量OTA失敗如何快速定位還有一次我們對(duì)一批設(shè)備推送新固件發(fā)布后當(dāng)天夜里就有運(yùn)維反饋說(shuō)設(shè)備在批量掉線(xiàn)。一開(kāi)始懷疑是網(wǎng)絡(luò)問(wèn)題檢查了云端流日志發(fā)現(xiàn)設(shè)備是在OTA任務(wù)啟動(dòng)后才斷開(kāi)的而且斷開(kāi)前有大量固件包下載請(qǐng)求。進(jìn)一步排查發(fā)現(xiàn)這批設(shè)備的硬件版本是V1.2但固件包里包含了V1.3才支持的配置項(xiàng)設(shè)備解析配置時(shí)直接報(bào)錯(cuò)退出進(jìn)入重啟循環(huán)。因?yàn)樯弦话婀碳](méi)有做好版本兼容所以問(wèn)題一直被藏到OTA發(fā)布時(shí)才集中爆發(fā)。那之后我們強(qiáng)制要求OTA灰度范圍除了按設(shè)備ID或批次篩選還必須按硬件版本、當(dāng)前固件版本、地域、網(wǎng)絡(luò)類(lèi)型做組合篩選。每次發(fā)布前要在測(cè)試環(huán)境跑一遍版本清單校驗(yàn)確保目標(biāo)設(shè)備的硬件和當(dāng)前版本都符合升級(jí)條件。4.4 證書(shū)過(guò)期和權(quán)限策略問(wèn)題AWS IoT里設(shè)備突然大批量離線(xiàn)查下來(lái)發(fā)現(xiàn)根因是設(shè)備證書(shū)過(guò)期。更麻煩的是有些設(shè)備沒(méi)有內(nèi)置證書(shū)輪換流程只能靠人工重新燒錄現(xiàn)場(chǎng)幾百臺(tái)設(shè)備一臺(tái)臺(tái)處理非常痛苦。后來(lái)我們做了三件事證書(shū)有效期統(tǒng)一設(shè)為3年并在證書(shū)到期前90天啟動(dòng)自動(dòng)續(xù)期流程設(shè)備端實(shí)現(xiàn)證書(shū)自動(dòng)下載和更換。平臺(tái)側(cè)做證書(shū)到期檢測(cè)提前一個(gè)季度輸出到期設(shè)備清單而不是等設(shè)備掉了再救火。權(quán)限策略全部從“寬泛授權(quán)”改成“最小授權(quán)”每個(gè)產(chǎn)品線(xiàn)一套專(zhuān)用策略模板不隨便給設(shè)備開(kāi)通配符權(quán)限。權(quán)限策略還有一個(gè)隱蔽問(wèn)題設(shè)備明明在線(xiàn)但OTA任務(wù)一直不執(zhí)行。一查策略少了iot:StartNextPendingJobExecution權(quán)限。這種問(wèn)題用AWS的Policy模擬器可以快速定位模擬設(shè)備身份執(zhí)行指定操作它會(huì)直接告訴你哪個(gè)Action被Denied了。5. 未來(lái)幾年IoT標(biāo)準(zhǔn)演進(jìn)值得關(guān)注的方向5.1 Matter不是終點(diǎn)而是“互聯(lián)范式”的開(kāi)始前兩年Matter發(fā)布時(shí)很多人以為智能家居的標(biāo)準(zhǔn)之爭(zhēng)到此終結(jié)。實(shí)際用下來(lái)Matter確實(shí)在設(shè)備描述、協(xié)議轉(zhuǎn)換、本地互聯(lián)上做了大量工作但它真正有價(jià)值的不是那一套規(guī)范本身而是確立了“基于IP、本地通信、多生態(tài)兼容”的互聯(lián)范式。這個(gè)范式可能會(huì)延伸到更多領(lǐng)域。未來(lái)的設(shè)備出廠(chǎng)時(shí)自帶一套標(biāo)準(zhǔn)描述文件網(wǎng)關(guān)或者平臺(tái)接入后自動(dòng)發(fā)現(xiàn)設(shè)備能力自動(dòng)生成控制界面不再需要人工在后臺(tái)一件一件配置設(shè)備類(lèi)型和屬性映射。也就是說(shuō)標(biāo)準(zhǔn)化會(huì)從“協(xié)議能接通”升級(jí)為“語(yǔ)義能看懂”。具體到落地企業(yè)現(xiàn)在就可以開(kāi)始做一件事把設(shè)備描述文件、通信協(xié)議、數(shù)據(jù)模型抽象成獨(dú)立于業(yè)務(wù)代碼的資產(chǎn)。以后每接一個(gè)新設(shè)備先看它能不能映射到已有的標(biāo)準(zhǔn)模型實(shí)在對(duì)不上再擴(kuò)展模型而不是每次新設(shè)備進(jìn)來(lái)都臨時(shí)造一套新字段。5.2 大模型讓“協(xié)議自動(dòng)翻譯”成為可能這兩年大模型火熱它對(duì)IoT標(biāo)準(zhǔn)的影響也開(kāi)始顯現(xiàn)。最直接的一個(gè)應(yīng)用方向就是“協(xié)議文檔解析和映射生成”。以前我們接一個(gè)私有協(xié)議要把廠(chǎng)家提供的幾百頁(yè)協(xié)議文檔翻完然后手動(dòng)寫(xiě)解析規(guī)則和字段映射一個(gè)設(shè)備類(lèi)型少說(shuō)也要一周。有了大模型以后可以把協(xié)議文檔導(dǎo)入讓它生成JSON Schema、解析模板、字段映射初稿工程師再做人工審核修正效率能提高不少。但這里一定要提醒AI生成的東西只能當(dāng)草稿不能直接進(jìn)生產(chǎn)。關(guān)鍵設(shè)備尤其如此一個(gè)字段解析錯(cuò)誤輕則數(shù)據(jù)不對(duì)重則控制指令發(fā)錯(cuò)出事就是生產(chǎn)事故。所以我的建議是讓大模型做“翻譯草稿”人做“最終裁判”把人工審核流程做成標(biāo)準(zhǔn)環(huán)節(jié)目前階段這是最穩(wěn)妥的做法。5.3 標(biāo)準(zhǔn)將更多與合規(guī)綁定接下來(lái)幾年IoT標(biāo)準(zhǔn)不再只是技術(shù)團(tuán)隊(duì)內(nèi)部的事它會(huì)越來(lái)越頻繁地與安全合規(guī)綁定在一起。你出口的設(shè)備、上線(xiàn)的平臺(tái)需要滿(mǎn)足越來(lái)越多的安全基線(xiàn)要求比如設(shè)備必須具備安全啟動(dòng)、數(shù)據(jù)加密傳輸、固件簽名校驗(yàn)、可追溯日志等能力。這些正在從“用戶(hù)要求”變成“準(zhǔn)入門(mén)檻”。對(duì)企業(yè)來(lái)說(shuō)現(xiàn)在就要把自己的產(chǎn)品線(xiàn)按“標(biāo)準(zhǔn)合規(guī)框架”重新過(guò)一遍看看哪些設(shè)備還不支持安全啟動(dòng)哪些設(shè)備的數(shù)據(jù)鏈路還是明文傳輸哪些設(shè)備的固件沒(méi)有簽名校驗(yàn)。這些事越早做后面的整改成本越低。我個(gè)人的看法是標(biāo)準(zhǔn)會(huì)從過(guò)去的“建議參考”變成“事實(shí)準(zhǔn)入門(mén)檻”。技術(shù)團(tuán)隊(duì)如果能在項(xiàng)目層面提前把標(biāo)準(zhǔn)能力沉淀為平臺(tái)能力后續(xù)就不會(huì)被合規(guī)問(wèn)題拖住交付節(jié)奏。做過(guò)越多的IoT項(xiàng)目我越覺(jué)得標(biāo)準(zhǔn)不是一個(gè)純技術(shù)概念而是工程問(wèn)題。它要求你在設(shè)備接入的第一天就想清楚數(shù)據(jù)模型是什么字段怎么命名時(shí)間戳用什么格式升級(jí)策略怎么定安全最小權(quán)限怎么配這些看起來(lái)瑣碎的約定決定了系統(tǒng)跑起來(lái)之后是健康還是每天救火。如果現(xiàn)在有人問(wèn)我面對(duì)碎片化的IoT標(biāo)準(zhǔn)最先該做什么我的建議是先定一個(gè)“最小標(biāo)準(zhǔn)集”。不用一開(kāi)始就追求包羅萬(wàn)象的國(guó)際標(biāo)準(zhǔn)先把設(shè)備ID、消息格式、時(shí)間戳、單位、錯(cuò)誤碼這五件事定死然后讓所有接入流程都遵守這套約束。這套最小約束會(huì)隨著項(xiàng)目迭代慢慢完善但它能保證你從第一天起數(shù)據(jù)就是干凈的接入就是有序的。標(biāo)準(zhǔn)永遠(yuǎn)在演進(jìn)但工程上“先立規(guī)矩再干活”這個(gè)原則不會(huì)變。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
这里只有精品久| 九九九九综合| 婷婷久久欧美| 综合99久久| 成人五月丁香花| 中文字幕av在线播放| 五月丁香色五月| 人妻精品在线| 91ncm视频| 婷婷五月综合性爱| 99在线精品免费视频| 激情六月丁香| 九热...av| 狠狠狠狠操| 亚洲人妻av| 色婷婷综合在线| 中文字幕精品无码一区二区| 欧美在线视频99| 色婷婷五月天成人网| 伍月婷丁香花全集| 丁香五月开心五月激情| 婷婷激情丁香六月| 天天操狠狠操| 国产精品日韩十五区| 婷婷婷色五月| 色综合五月婷婷狠狠干| 五月婷婷成人网首页| 久操大| 久久日本wwww色| 久久人妻少妇嫩草AV| 第五色婷婷| 99热碰碰热| 综合网亚洲| 99热6色| 激情色情五月天| www.夜夜操.con| 99,色| 六月婷婷啪啪| 丁香婷婷基地| 美女亚洲五月丁香| 色婷婷深爱五月| 做爱夜夜干天天操| 久久久五月激| 天天做天天摸| 九九热精品视频| 五月天婷婷在线AN| 精品九九婷婷| 久久九九九九| 91黄址| 久热超碰91| www.色情五月天.com| 狠狠色噜噜色狠狠狠综合色| 精品网站:999WWW| 亚洲性视频| 色婷婷88| 梁铮版蜘蛛女在线观看| 淫荡综合网| 人人做人人看人人摸| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 99热国产| 五月激情综合五月| 五月天开心婷婷激情网站| 狠狠狠狠狠干| 婷婷五月天综合网| 婷婷开心激情五月激情网| 婷婷精品性性性性性性性| 婷婷五月天首页| 五月激情基地| 九九人人精品| 亚洲视频在线观看| 97碰碰人人视频| 色婷婷文字幕| www。狠狠干。com| 五月婷婷六月丁香综合| 婷婷五月天小说网| 免费一区二区三区| 99热最新| 天天操,夜夜骑| 色色综合成人网| 五月丁香999| www.狠狠| 99re视频精品| 青青草五月天| 色播五月丁香综合| 色七色九九| 日本熟妇人妻在线| 欧美综合五月丁香六月婷| 丁香五月婷婷啪啪| 蒲京久久无码视频| 国产中文亚洲欧美日韩性交| 99爱在线观看视频| 天天插天天日| 一婬一伦一区二区三区| 情五月亚洲婷婷| 夜夜爽天天日| 91性高潮久久久久久久久| 激情五月天婷婷播播久久综合91| 色999;丁香五月| 狠狠色丁香婷婷基地| 久久人妻www| 黄网免费看| 9+1视频网址| 99在线爽| 麻豆五月丁香婷婷| 丁香五月天视频| 狠狠狠狠草草| 丁香婷婷免费| 大香蕉手机视频| 日比网免费国产| 亚洲婷婷丁香五月| 久久久精久人妻| 婷婷激情视频| 丁香五月婷婷综合91| 金桔一区二区ab地址| 丁香五月 六月婷婷首页| 天天综合网91| 99视频在线啪| 婷婷丁香五月天中文字幕| 六月婷久久| 欧美黑人巨大性生话| 97热久久| 777色色色| 色色色99| 五月丁香激情综合网| 色丁香影院| 色噜噜狠狠色综合日日| 婷婷丁香花五月天| 天天爱天天做天天操| 九九黄色网| 欧美性猛交99久久久99| jiqingliuyuetian| 婷婷五月性感| 狠狠干青青草| 国产AV一区二区三区日韩| 久9视频| 五月天国产婷婷精品视频在线| 婷婷色色五月天| 91久久久久久久久久| 这里只有国产精品在线| 中国丰满熟女A片免费观| 色七七九九| 五月婷婷丁香社区| 六月丁香婷婷综合影院| 国产激情综合五月久久| 色yeye色综合| 婷婷色狠狠| 亚洲国产精品SUV| 粉嫩av懂色av蜜臀av熟妇| 亚洲六月婷婷| 色蜜婷婷| 婷婷色片| 97久久人人| 66成人网| 久久99久久99精品免观看粉嫩| 日本色色色| 五月婷婷综合激情小说| 婷婷激情五月天视频在线| 色伦专区97中文字幕| 五月综合激情久久| 中文中文在线| 99热成人在线观看| 18久久| WWW五月| 欧美日韩一区二区三区四区| 丁香婷婷成人网| 开心色色五月天综合| 婷婷五月天激情综合| 色色综合网站| 激情网婷婷婷| 7777精品伊人久久久大香线蕉最新版| 五月婷激情影院| 成年视频免费观看| 97干网站| 丁香五月婷婷亚洲色图| 欧美成人猛片AAAAAAA| 亚洲第一色色色| 人人摸人人干| 日夜夜天天| 婷婷色五月91啪啪| 天天综合网在线| 久久九九婷婷| 精品久热| 久久这里都是精品视频| 99热在线网站| 九九婷婷网五月天| 色婷婷五月综合在线| 成人av在线网| 天天干天天干天天干| 五月婷婷丁香啪啪| 久久久中文| 少妇久久诱惑视频| 亭亭玉月丁香| 天天日天天插| va亚洲中文在线| 色综合久久8| 色五婷婷在线视频| 激情网站五月| 在线日本www| 婷婷婷婷婷婷婷婷| 婷婷免费精品视频| 欧美日韩精品一区二区三区钱| www.五月天婷婷| 玖玖爱综合网| 色色五月婷婷狠狠| 久久新地址| 天天天天天天天干| 五月香蕉网| 超碰色综合| 丁香五月婷婷啪| 中文字幕1区2区。| 色婷操逼| 日本成人噜噜| 五月天婷婷激情网| 六月丁香狠狠爱| 色色色色网站| 五月丁香偷拍| 色狠狠六月| 婷婷色一二三区波多野结衣| 日日夜夜天天| 五月天丁香| 99re思思| 色五月婷婷91| 日韩99无码| av在线中文| 激情婷婷内射| 色狠狠999综合| 桃色成人网| 五月丁香六月婷婷色日| 九九视频精品视频精品| 91久热| 操精品9| 亚洲欧美婷婷五月色综合| 天天插天天草人人玩| 任你搞在线观看视频| 五月丁香777| 婷婷情色激情| 亚洲 在线 性爱| 无码髙清| 色吧99| 色色色综合色| 久9久9热久热| 婷婷色啪| 欧美激情-区二区三区| 五月婷婷激情综合网| 蜜臀嫩草| 色婷婷丁香五月丁香| 五月激情婷婷国产精品久久久久久| 99热超碰| 开心深爱激情网| 九九热99热| 午夜 外网 精品 在线| 91色噜噜狠狠狠狠色综合| 婷婷五月色播天| 久久综合婷婷| 91精品国产91久久久久青草| 成人视频在线免费播放| www激情| 婷婷五月丁香伊人网| 色色色激情| 久久婷婷人人| 色娸娸综合网| 婷婷五月天综合AV| 在线99精品| 日碰日| 天天爽天天爽| 免费无码毛片一区二区A片| 97热在线精品| 大香蕉婷婷五月| 99精色| 天天摸天天高潮天天爽| renre人人操国产超碰在线 | 激情五月色播五月| 五月婷天天搞视频| 亚洲天堂aaa| 丁香六月天婷婷开心综合| 日韩一区二区在线播放| 色婷婷六月性| 婷婷五月天少妇| 精品久久二6| 久操无码| 99热这里只有精品26| 六月丁香综合| 久久伊人大香蕉| 日本婷久久| 视频一二区| 99啪在线| 五月天天堂久久| 欧美色色色色色色| 日本一级| 九九热九九| 婷婷五月激情六月丁香| 五月婷婷这里都是精品| 色欲资源网| 九九热短视频在线观看| 五月天久久综合婷婷丁香| 五月丁香六月婷婷a v| 激情综合网激情五月网| 亚洲AV成人无码久久精品老人法拉利| 婷婷五月亚洲一本在线丁香| 天天在线XXX| 91se在线观看| 深爱激情五月网| 久久草大香蕉| www,99热在线观看| 极品另类| 精品一二三区视频立| 五月激情开心婷婷| 久久人妻伦理| WWW久久久| 激情五月五月婷婷| www久久久久久久久久久| 国产无套精品一区二区| 亚洲成人无码片| 91青娱乐青青草| 色情五月丁香| 婷婷丁香五月天亚洲| 亚洲色婷婷视频| 五月激情站| 欧美色色色色色| 俺去也五月| 99热免费| 国产小网站| A片一曲| 色色网站在线免费观看视频| 天天操天天操天天操天天操天天操天天操 | 免费亚洲婷婷中文字幕| 亚洲情综合五月天| 超碰无码318604| 永久无码色| 亚洲狠狠婷婷综合久久久| 激情婷婷网| 亚洲AV网站在线观看| 开心激情五月天网| 国模狼狼| 丁香五月婷婷狠狠色| 男人综合网| 五月天啪啪啪| 国产精品a无线| 色五月激情图片| www.色色五月天.com| 五月婷婷在线视频免费观看| 五月天婷婷影院影院观看| 久久92| 精品一二三区久久AAA片| 91丁香色五月| 综合激情五月丁香9999久久精| 99热亚洲精品66| 九九色婷婷| 婷婷五月激情欧美大胆视频| 日本高清久久| 久久狠狠干| 亚洲精品亚洲人成人网| 国产综合婷婷| 五月天婷婷高清无码| 久久人人九九| 色碰97| 99色综合网| 婷婷久久丁香| 91久女| 色婷婷五月影视| 久草五月天| 99综合视频| 亚洲超级碰| 国产26uuu视频| 永久免费视频| 九月丁香欧美综合| 一级A片天天操夜夜操| www99精品| 色九月综合| 久久只有这里精品免费| 成人国产综合| 色综合香蕉| 婷婷丁香五月天亚洲| 99热精品在这里| 六月激情网| 亚州视频九九99| 婷婷色色五月天| caopeng97人人| 九九这里精品| 国产成人精品一区二三区熟女在线| 91凹凸在线| 婷婷五月中文在线视频| 五月桃花网综合| 婷婷色女| 五月丁香色婷婷| 4438激情网| 婷婷五月天第三页| 丁香五月 无码| 五月综合激情综合久| 色色色999| 日本综合色色| 亚洲永久免费| 三级三久久线久久99久目本WW| 人人色婷婷| 日韩精品在线观看9| 日批在线看| www.久久| 激情婷婷五六月天| JAPANRCEP老熟妇乱子伦视频| 色啪网| 综合激情在线| 99九色视频在线观看| 激情六月婷婷| 国产精品日日躁夜夜躁| 色婷婷伊人| 99久久精品色老| 日本天堂免费99| 日本毛片内射| 夜夜大香蕉婷婷丁香| 888久久久| 99在线精品免费视频| 婷婷激情六月中文| 天天噜噜| 欧美大香蕉视频| 最新色色五月天| 人妻九九九九| 大香蕉五月天| 人人综合五月人人婷婷| 影院久久久| www.99视频| 影音先锋偷偷色男人站| 色婷婷操逼| 99在线播放视频| 九九九九这里只有精品| 青青操绿aaa一区日v| 蜜桃五月天| 激情亚洲婷婷六月| 免费超碰在线| 狠狠色综合网| 久久伊人日日夜夜| 激情丁香五月综合| www狠狠| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | a久久免费视频| 伊人久久大香线蕉综合网站| 91婷婷丁香| 久色视频在线| 人人操超碰| 色偷偷五月天| 午夜理论片最新午夜理论剧| 99ri网站在线观看| 日本色99| 亚洲 无码 中文字幕 中出| 激情超碰网| 97干在线播放| 天天色爽| 一起肏在线视频| 婷婷丁香色五月| 久久 这里只有精品1| 超碰成人在线免费观看| 激情丁香五月天| 99精品爱| 91超碰九色| 国产精产国品一二三在观看| 天天色天天日天天舔| 激情综合色网| 国产精品成人网址| 天天爽夜爽| 操你av| 色九亚洲| 五月激情丁香啪啪| 婷婷五月综合在线| 丁香五月婷婷激情中文| 天天玩夜夜操天天爽| www激情婷婷com| 色婷婷先锋| 少妇大叫太大太粗太爽了A片 | 五月婷婷六月丁香激情综合网| 丁香五月婷婷五月基地| 五月婷婷啪| 久久丁香五月婷婷| site:hcxsz888.com| 久热A片| 久久婷婷五月| 婷婷五月天色播| 激情com| 无码色综合| 99久久国产宗和精品1上映| 99热在这里只有精品| 99爱视频精品在线观看| 在线伦子99热| 天堂久久久久天堂网| 婷婷情色五月天| www.婷婷,com| 久久丁香婷婷五月天| 免费成人中文字幕| 91男女视频在线观看| 色婷婷伊人| 这里只有精彩视| 人人澡天天色天天做| 国产黄色一级片| 一级黄在线| 色色色图| www.99热视频| 开心五月深爱五月| 人人草人| 婷婷五月天综合小说网| 日在线V视频在线播放| 人妻人人操| 99色视| 婷婷五月天综合亚洲| 婷婷五月天在线观看| 五月丁香婷婷爱| 婷婷五月深深爱| 色天天久婷婷| 日本丁香五月婷婷| 亚洲色网络| 色爱亚洲| 操人妻视频91| 洗浴中心操B视频| 午夜不卡成人一区二区| 婷婷色五月亚洲| 久色视频在线| 色频玖玖五月天| 美女黄频aⅴ视频| 欧美亚洲成人在线| 日韩无码人妻一区二区| 亚洲成人中文字幕| 麻豆精品| 182TV大香蕉| 日本 色综合| 日逼影音先锋AV男人资源站| 色五月色五天色情网址| 性爱五月婷| 日韩狠狠色婷婷| 色色网五月激情| Av性爱网站| 狠狠综合区| 婷婷丁香五月天综合AV| 六月丁香婷婷六月激情综合| www.yw尤物| 丁香五月色网| 五月婷婷丁香社区| 久热99中文字幕| 日本人妻A片成人免费看片| 激情网五月| 五月综合激情网| 丁香五月激情综合| 丰满少妇猛烈A片免费看观看| 婷婷五月丁香综合网| 久久婷婷色色| 成人片黄网站色大片免费毛片| 国产精品久久久久久久久久| 婷婷丁香五月天综合在线日韩| 久久R激情| 午夜丁香婷婷| 中文字幕网伦射乱中文| 激情五月天啪啪视频| 五月色婷婷中文字幕| 久久天堂婷婷五月| 激情六月综合| 亚洲图色五月天| 婷婷丁香激情| 热久久999| 婷婷激情鹿城五月天| 激情综合久久| 天堂婷婷五月色| 婷婷丁香成人| 操人妻90p| 97综合在线| 天天日天天舔天天摸| 婷婷伊人网| 日本3级片偷拍网站| 婷婷五月天激情电影| www.9797国产| 亚洲综合无码| 91婷婷丁香| 99操视频| 色色亚洲无码| 色婷青青| 婷婷五月综合激情免费| 亚洲无aV在线中文字幕| www99精品| 狠狠色色| 成人做爰高潮A片免费视频| 成人五月天在线视频在线观看| 五月婷婷五月天| 九九精品片一| 色99久草在线| 欧美Va日本Va| 丁香婷婷网| 99这里有精品视频| 激情五月天网页| 丁香五月婷婷国产在线| 操逼巨乳91| 丁香大香蕉| 综合色播| 婷婷开心激情五月激情网| 日本A片一区| 激情五月天开心| 特黄三级片| h在线看免费版在线看| 五月五丁香婷婷| 五月天婷婷丁香人人操91| 亚洲婷婷欧美婷婷| 色婷婷婷av | 人妻中文在线| 亚洲视频在线网站| 九九热精品| 日木狠狠干| 专区无日本视频高清8| 亚洲AV色婷婷人禽五月天| 国产免费av在线| 这里只有精彩视频| 情趣视频66| 欧美色图天堂网| 色综合久久之分久久| 中文av网| 色婷婷综合中心| 激情婷婷网| 激情五月天网站| 99热在线观看免费| 亚洲婷婷五月天在线激情综合网| 成人性生活免费观看。| 色五月首页| 五月色俺婷婷| 色色精品色| 精品九九久久| 狠狠综合| www.五月婷婷.com| 五月综合缴情网| 婷婷九月丁香| 久久久色情| 九九综合久久| 色婷婷88| 婷婷丁香色无五月| se99在线| 丁香婷婷久久 | 99亚洲视频| 国产XXXX搡XXXXX搡麻豆| 丁香激情五月天| 日在线V视频在线播放| 日本高清久| 91久久久久| 99色| 久久久8| 激情深爱综合网| 五月婷婷久久综合| 亚洲综人色综网| 五月丁香激情综合啪啪| 最熟少妇乱码| 久99久视频精品| 深爱五月婷婷| 久久综合干| 亚洲热视频| 色情免费视频播放| 婷婷涩涩网| 梁铮版蜘蛛女在线观看| 这里有精品99| 91精品久久久久久| 精品久久久999| 99五月婷| 色婷婷情片| 国产黄色大片| 婷婷五月综合中文字幕| 欧美久久九九| 国产女18毛片多18精品| 182.t午在线观看| 99久久国产宗和精品1上映| 五月天色综合| www.99色| 精品无码久久久久久久久| 激情综合婷婷| 五月婷婷深深爱| 深爱激情五月天| 99热在线播放| 婷婷激情五月综合| 国产肥白大熟妇BBBB视频 | 99综合| 婷婷亚洲综合| 九九热最新地址| 色婷婷小说| 久操大香蕉| 五月丁香在线观看| 婷婷导航| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 激情av| 六月丁香久久| http:色情日本com| 香蕉久操| 婷婷五月精品中文| www.射伊蕉婷婷| 二色AV| 欧美噜噜免费观看| 六月五月久久丁香| 婷婷五点亚洲| 成人一级片| 26UUU精品一区二区| 欧美成人精品A片免费一区99| 无码免费人妻A片AAA毛片西瓜| 人妻日日日| 丁香花狠狠婷婷亚洲中文字幕| 国产色色小草视频| 婷婷五月色综合| WWW.天天日| 99久久思思| 五月丁香六月婷婷无码| 婷婷色网站| 五月开心网| 丁香五月婷婷香| 欧美性久| 亚洲性图一区二区三区| 色色欧美色色| 99黄色性生活| 五月美女婷婷风骚| 婷婷97碰碰| 六月婷婷狠狠| 开心五月婷婷婷美女| 亚洲国产成人综合| 丁香婷婷天堂| 99精品自拍视频| 夜夜做天天爽| 伊人网碰碰| 国产精品18久久久| 色吧婷婷| 99re这里有精品手机在线| 婷婷丁香六月| 黄桃AV无码免费一区二区三区| 超碰成人AV| 婷婷激情五月天7| 丰满熟女人妻一区二区三| 99热手机在线精品| 色五月中文字幕| 婷婷伊人无码| 婷婷六月综合基地| 乱乱av| 丁香五月欧美激情| 色五月婷婷激情| 97干在线视频| 亚洲色图五月丁香| 天天射色五月天| 96丁香六月婷婷蜜桃综合久久| 99在线免费视频播放| 国产99热在线看| 国产色色视频| 99欧美热| 五月香蕉婷婷| 人妻啪啪啪| 色玖玖玖| 丁香 婷婷 亚洲 熟女| 久热免费视频| 亚洲啪啪啪啪| 激情第四色| 九色99视频| 婷婷黄色五月天在线视频| 香蕉操亚洲| 免费在线a| 特级片神马电影| 99ER热精品视频| 99精品自拍视频| 五月婷婷激情综合av| 五月停视频天堂| 高清激情av在线观看| 久久五月丁香| 国産精品| 色婷婷88| 五月婷婷婷综合网| 中文av网| 99热在线观看99| 国产午夜精品久久久观看| 女人被躁到高潮嗷嗷叫小| 韩国情人在线电视剧免费观看高清版全集 | 九九精品网站| 亚洲激情AV| -91九色大屁股| 最新av在线观看| 六月丁香停| 伊人激情影院| 成人视频在线免费播放| 一本色道久久综合狠狠躁小说| 欧美97超碰| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 91人人爽狠狠狠| 婷婷久久综| 色婷婷免费观看| 五月丁香 啪啪| 日本三级黄色大片| 婷婷五月丁香综合亚洲 | 5月丁香婷婷| 午夜不卡久久精品无码免费 | 99热这里只有精品9| 99热国产国产| 深爱激情网婷婷| 激情五月天色爱| 思思久久青草热| 99热这里只有免费精品| 五月花免费视频| 噜一噜在线| 久99在线视频| 九九热最新地址| 婷婷五月天成人网| 亚洲国产精品二二三三区| 婷婷99视频在线| 人人操超碰| 色婷婷AⅤ| 超碰色色综合| 日日噜狠狠色综| 日批在线看| http://www.sd-xiangsu.com/| 五月丁香六月婷婷操操操| 亚洲婷婷五月天| 色啪影院| 国产乱人偷精品人妻A片| 婷婷五月色综合香五月| 久久九九婷婷| 色婷婷狠狠爱| 六月综和久久| 天堂草在线看www| 一区视频网站| 天天爽夜夜操| 991自拍视频| 99黄色在线视频精品熟女| 99热福利| 婷婷激情网五月天| 丁香五月激情网| 婷婷五月天小说| 丁香婷婷狠狠97| 99偷拍视频在线日本| 久久xxxx| 久久婷婷五月草视频| 激情五月天影院| 日韩啊啊啊| 九九九九热99超碰| WWW99热| 色五月天综合| 人妻久久久久久久| 婷婷五月成人| 99色亚洲| 五月天婷婷操逼视频| 国产成人网址| 婷婷五月综合色中文字幕| 天天操夜夜爽天天操| 国产精品成人av在线观看春天| 婷婷久久免费| 被强行糟蹋的女人A片| 九九www| 丁香五月婷婷性爱| 日本成人噜噜噜| 丁香激情五月天| 日韩啪图| 激情五月激情综合网一级丸片 | ss五月天激情| 日日操天天操| 日本熟妇乱妇熟色A片蜜桃| 激情 婷婷| WwW天天干| 思思99久久| 色色婷婷综合| 亭亭五月丁香综合欧美| 五月婷亚洲精品| 激情五月婷婷| 五月婷婷色播| 日本成人噜噜| 五月婷婷色色| 狼人婷婷久久| 深爱激情网综合| 激情综合五月婷婷| 婷婷玖玖五月天| 色狠狠色狠狠| 久久性视频| 六月丁香停| 五月婷婷自拍视频| 这里只有精品久久| 五月婷婷狠狠干| 国产无套精品一区二区| 国产精品扒开腿做爽爽爽A片唱戏| 碰97久久| 天天日,天天插| 极品人妻VIDEOSSS人妻| 丁香婷婷五月天激情四射| 夜夜撸天天操| 色色网站毛片| 丁香五月狠狠在线观看| 亚洲在线综合| 99久久五月天| 99re最新地址| 久久caop| yazhou seshipin| 九九av| 成人五月天丁香婷| 99这里只有精品视频| 99干免费视频| 婷婷六月中文字幕| 婷婷五月花| 99在线精品观看99| 九九婷婷综合| 欧美日韩成人在线网| 综合激情五月天六月婷免费视频| 91精品久久久久久久久久| 五月天婷婷黄色视频| 九色视频91| www999日韩精品| 免费精品99| 秋霞少妇毛片| 婷婷丁香五月高清| av在线免费播放观看| 爱的综合网| 国产成人精品123区免费视频 | 美女伊人久久| 丁香五月在线| 亚洲人成网站999久久久综合| 久久久久久丁香五月| 色吧婷婷五月亚洲| 99精品久久久久久久婷婷久久| 日本欧美成人片AAAA| 色色色视频免费无码 | 久久五月天综合| 日韩成人精品中文字幕| 五月天婷婷在线AN| 婷婷激情中文综合| 五月天婷婷小说| 九九热这里有精品视频| 天天爱天天爽| 天天做天天爱天天日| 色99视频| 狠狠色婷婷丁香六月| 免费看欧美成人A片无码| 天天综合天天做天天综合| 国产成人精品一区二三区熟女在线| 综合激情五月综合激情五月激情1| 人妻久久久久久| 好好日激情五月天| 超喷97免费在线视频| 色婷婷丁香中文在线播放| 五月激情综合婷婷| 亚洲婷婷免费| 丁香久久综合| 亚洲高清在线| 人妻系列久久久久久久久久久| 欧美性色A片免费免费观看的| 嫩BBB槡BBBB搡BBBB视频| 五月丁香另类网| 天天色天天日天天舔| 大香蕉久久久| 男人天堂伊人五月丁香| 五月熟妇婷婷久久| 亚洲激情五月天| AV性爱网| 超碰97色| 狠狠香婷婷五月| 丁香六月婷婷激情| 开心五月深爱五月| 婷婷久久欧美| 丁香六月婷婷一区| 九九99精品视频在线观看| 色五月丁香网| www.久久色.com| 丁香婷婷激情综合五月激情| 九九热视频免费| 色啪网| 碰人人97| www.minyis.com【JT】实力收量可预付TG@LXSPSW8| 色情五月天婷婷| 午夜成人AV在线| 天天干在线播放| 久热伊人| 精品久久久人妻| 精品国产乱码久久久久夜深人妻| AAA久久久AAA久久久AAA| 五月丁香六月婷婷中文版| 激情爱爱网站超大免费| 青青草伊人婷婷| 色婷婷五月天av在线| 五月婷婷69| 国产成人精品一区二三区熟女在线| 色情五月婷| 99小视频网站| 激情九月婷婷| 夜夜资源站| 99视频这里只有精品10| 午夜精品人妻无码一区二区三区| 玖玖在线| 色播播五月| 亚洲无码影音| 色五月婷婷少妇人妻| 久久久激情视频| 一区二区三区四区牛| 我爱婷婷五月天综合88| 九九亚洲| 色色色五月婷婷| 1024操逼视频| 日本人妻操| 丁香久久久| 熟女人妻视频| 亚洲 精品 综合 精品| www.99久| 99riAV国产精品视频| 丁香婷婷色五月激情综合| yw国产AV| 操一操插一插| 无码少妇高潮喷水A片免费| 色色吧综合| 久99视频在线观看| 偷偷操99| 激情九色| 久色五月天| 99色热视频在线| 中文字幕+中文在线| 婷婷五月天成人网站| 婷婷婷狠狠| 操操操操操电影网| 久色精品| 伊人狠狠综合| 国产精产国品一二三在观看| 久久这里只有精品07| www久| 熟女乱论网| 久久精品国产一区二区三区四区| 丁香色情五月天| 婷婷五月激情综合| 婷婷亚洲激情在线观看视频 | 九九精品自拍| 亚洲激情综合网| 久久久久久欧美精品se一二三四| 色综合色五月| 色播五月天激情| 热这里只有精| 三级av在线| 日日夜夜小色哥| 伦乱人妻| 久久婷婷综合国产| 色五月首页| 久久色情| 99热日| 碰人人97| 蜜臀av粉嫩av懂色av| 亚洲天堂爱爱| 在线不卡视频| 五月丁香六月婷婷手机无线| 永久天堂日本| 婷婷六月天天| 精品婷婷五| 蜜臀久久99精品久久久久久酒店| 狠狠干思思热| 大香av| 丁香五月欧美| 综合网五月天123| 日hao1区| 五月天综合色| m色激情网| 99精品高潮| 激情五月婷婷五月| 激情五月色综合国产精品| 久久婷婷五月综合色天| 欧美人人操| 婷婷五月丁香激情色情| 国产婷婷五月| 丁香五月播播| 天天狠狠色噜噜| 色青五月天| 超碰91在线| 99久久玖玖| 97人人操人人爽| 国内一级片| 日韩超碰在线| 亚洲色小说在线综合| 亚洲色婷婷五月天| 国产亚洲在线观看| 国产无套精品一区二区| 99小视频在线| YW无码| 99热都是精品| 五月婷婷五月天激情网| 久久丝丝热| 亚洲中文字幕翔田千里| 欧美日韩999| 久久久久久久久久人妻| 久久婷婷视频| 欧美日韩一区二区三区四区| 99人人干| 天天综合天综合| 六月色婷婷色| 中文av在线观看| 日本猛少妇色XXXXX猛叫| 99只有精品| 日韩六十路91性交电影| 91人人网| 九九热内射| www.狠狠| 久久久久激情| 婷婷丁香五月亚洲| 玖玖在线资源视频| AV色婷婷| 国产欧美大香蕉一区| 我爱大香蕉| 亚洲精品在线视频| 99色免费视频| 日本婷婷综合精品| AV五月丁香| 一本九九色| 懂色av粉嫩av蜜臀av| 天天影院色| 久大香蕉| 99久热这里只有精品| 国产日日夜夜操| 色五月激情视频在线综合| 国产婷婷综合| 亚洲精品另类| 色无婷婷| 精品人妻伦九区久久AAA片| 色婷久久| 久婷久婷| 99热一区| 婷婷五月激情在线视频| 日韩婷婷五月天| 丁香色六月婷婷| 婷婷五月丁香五月| 91超碰在线播放| 老妇操B| 久热99久热| 久777| se色婷婷视频| 激情内射人妻1区2区3区| 色婷婷色99国产综合精品| 亚洲网视屏| 婷婷射图| 男女免费视频999| 亚洲激情综合| 五月婷婷影| 婷婷夜夜操| 九九在线这里只有精品视频| 婷婷五月天首页| 婷婷五月开心中文字幕在线| 丁香婷婷偷拍| 五月丁香视频在线观看| 免费视频舔| 婷婷五月天成人娱乐| 亚洲五月天第一综合干| 天天玩天天摸| 久久视屏这里只有久久| 狠狠色丁香久久久婷| 五月开心婷婷网| 丁香六月婷婷综合激情欧美 | 国产看真人毛片爱做A片| 丁香六月啪| 丁香六月综合激情| 狠狠色综合网| 久久在线视频免费观看| 亚洲精品又粗又大又爽A片| 最近中文字幕大全免费版在线| 五月丁香网站| 婷婷五月花| 91碰免费视频| 五月激情婷婷四射| 日本3级片一区2区| 99精品久久久| 噜噜噜噜婷婷五月天| 99这里只有精品国产| 久久99久久99精品免视看婷婷| 色婷婷亚洲在线| 26UUU欧美| 国产精品视频免费看| 日本一级一级一级一级| 成人精品在线观看| 天天色粽合合合合合合合| 久久激情综合| 天天天天天天天操| 五月婷婷之综合激情| 天天日天天爽| 亚洲无码色色| 69精品人人人人人人人人人| 91人妻九色大屁股| 99热欧美精品| 超碰久热| 丁香五月婷婷乱| 色五月丁香婷婷| 伊人91| 日韩AV免费电影在线播放| 国产高清视频91九九九久久久| 久久综合色五月| 888精品福利地址| 久久婷婷五月综合色丁香| 色五月大| 色婷五月天| 91干99| 人妻中文在线| 99热这里只有精品一区| 久久99久久99精品免观看粉嫩| 五月婷婷丁香| 五月丁香日逼| 成人色五月天婷婷| 婷婷五月天另类网站| 区美毛片子| 中文字幕无码人妻少妇免费视频| 91综合色噜噜| 秋霞电影一级黄| 色婷婷久综合久久一本国产AV| 精品成人久久久久久久_一二三四视| 日日夜夜狠狠| 五月丁香中文婷婷中文| 天天 青草 制服丝袜 在线| 国产日韩欧美| 五月天综合在线| 一级二级色大片| 人人干天天操五月丁香| 女人被男人吃奶到高潮| 色五月激情五月| 91肏| 狠狠色五月| 婷婷综合网站| 色婷婷人人| 99热久久这里只有精品| 婷婷五月丁香色综合| 日韩av手机在线观看| 丁香五月另类色婷婷麻豆| 国产精品A片| 激情网五月天| 97色色综合| 色色色色色色综合| 天天操天天操天天操天天操天天操| 91/九色黑人| www.五月激情.com| 成人 在线 日韩| 色五月婷婷天堂| 日在线V视频在线播放| 九九香蕉网| 91视频免费后入强操| 色婷婷在线视频综合| 婷婷色中文字幕| 色色免费网站| 婷婷狠狠操| 久久婷婷五月天大香蕉| 看黄的网站18禁| 日本色久| 综合久久综合综合| 色五月婷婷开心| 五月天婷婷成人网| 91九色视频| 丁香久久久| 久久中国毛毛片爱久久| 五月丁香另类网| 午夜天堂一区人妻| 99精品视频免费在线播放| www.97碰碰com| 色五月婷婷激情基地| 婷婷爱五月天人人爱| Blackedraw视频一区二区| 99无吗| 我去色色网五雨天| 激情丁香五月婷婷啪啪| 欧美69久成人做爰视频| 人人舔人人| 欧美在线看| 成人做爰高潮A片免费视频| 五月丁香婷爱在线| 亚洲成人AV在线观看| 免费视频WWW在线观看网站| 五月婷婷六月开心| 五月丁香六月综合基地| 色吧五月| 思思精品久久艹| 天天肏天天肏天天肏| 五月天婷婷影院| Www,五月天| 在线播放成人网站| 超极99精品| 久久99精品视频| www.色五月天.com| 九色自拍| www.婷婷com| 人妻22p| 99精品无码网站| 婷婷五月丁香六月| www.ywav| 五月天婷婷基地| 丁香五月婷婷日本|