99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

嵌入式視角下的MQTT協(xié)議實戰(zhàn):機制、落地與避坑指南

嵌入式視角下的MQTT協(xié)議實戰(zhàn):機制、落地與避坑指南 做了這么多年嵌入式我越來越覺得物聯(lián)網項目里真正決定體驗的往往不是傳感器精度多高、MCU主頻多快而是設備跟云端之間那根“看不見的線”夠不夠穩(wěn)。而MQTT就是這根線上最常見的載體。今天想跟你好好聊聊這個協(xié)議——不是泛泛地講概念而是從嵌入式工程師的實際視角把它拆開揉碎看看里面的機制到底怎么工作、在真實項目里怎么落地、又有哪些坑是文檔里不會寫但現(xiàn)場一定會踩的。這篇文章適合正在做或準備做物聯(lián)網設備端開發(fā)的朋友無論是用ESP32快速原型驗證還是在STM32、RTOS環(huán)境下做產品級固件甚至是在Linux板卡上做網關都應該能從中找到可以直接參考的東西。我會盡量把協(xié)議機制、代碼實現(xiàn)和排障經驗串在一起講力求讓你讀完能對MQTT有一個立體、可落地的認識。1. 為什么物聯(lián)網設備端幾乎繞不開MQTT先說一個我從多個項目里總結出來的判斷物聯(lián)網通信方案選型本質上是帶寬、功耗、實時性、可靠性、實現(xiàn)復雜度這五個維度的平衡而MQTT在絕大多數(shù)場景下都能站在一個非常舒服的位置。1.1 從一份需求說起假設你現(xiàn)在接手一個環(huán)境監(jiān)測項目十幾個節(jié)點分布在廠區(qū)不同角落每個節(jié)點用STM32采集溫濕度、PM2.5和噪聲數(shù)據(jù)通過4G模塊上云云端要能實時展示曲線也要能遠程下發(fā)控制指令比如打開排風扇。最初你可能會想用HTTP——每個節(jié)點定時POST JSON數(shù)據(jù)到服務器簡單直接。但用一段時間就會發(fā)現(xiàn)幾個問題節(jié)點多了以后服務器要維護大量短連接壓力很大設備端的網絡狀態(tài)不穩(wěn)定HTTP請求經常超時數(shù)據(jù)就丟了而且服務器想主動給設備下發(fā)指令特別別扭要么設備輪詢要么就得搞長連接或WebSocket工程復雜度一下子就上去了。換用MQTT之后這些問題會變得順滑很多。設備只需要和服務器維持一個TCP長連接數(shù)據(jù)通過發(fā)布消息上報指令通過訂閱主題下發(fā)服務器不需要知道設備IP、不需要維護復雜路由設備也不需要公網地址純粹通過主題來解耦。1.2 MQTT的核心設計哲學MQTT全稱是MQ Telemetry Transport最早是1999年由IBM的Andy Stanford-Clark和Arcom的Arlen Nipper為石油管道衛(wèi)星通信場景設計的。這個背景很重要因為石油管道那種環(huán)境帶寬極其有限、鏈路極不可靠、設備節(jié)點又多所以協(xié)議從誕生那天起就帶著三個基因極簡報文、容忍斷線、發(fā)布訂閱。所謂發(fā)布訂閱簡單說就是把消息的發(fā)送方和接收方徹底解耦。設備A往主題factory/zone1/sensor發(fā)布消息任何訂閱了這個主題的客戶端不管是云端服務、手機App還是另一臺設備都能收到這條消息。發(fā)布者不需要知道誰在收訂閱者不需要知道誰在發(fā)Broker代理服務器在中間做轉發(fā)。這種模式對設備端極其友好因為設備端只關心兩件事連上Broker把消息丟給Broker。剩下的分發(fā)、路由、權限控制全是Broker的事。1.3 和常見協(xié)議的對比對比維度MQTTHTTP/HTTPSCoAPTCP私有協(xié)議傳輸層TCPTCPUDPTCP/UDP報文開銷最小可到2字節(jié)頭請求頭往往幾百字節(jié)4字節(jié)頭由開發(fā)者定義實時下發(fā)支持服務端可推送不友好需輪詢支持觀察模式支持消息可靠性支持QoS分級依賴HTTP狀態(tài)碼確認報文需自己設計實現(xiàn)復雜度低低中高典型場景物聯(lián)網設備上報/下發(fā)接口調用、網頁資源受限的傳感網定制化強但開發(fā)量大拿HTTP做類比你會更容易理解MQTT的輕量一個HTTP GET請求光是頭部就可能有幾百字節(jié)而MQTT一個完整的PUBLISH報文固定頭加主題加負載幾十個字節(jié)就能搞定而且QoS 0場景下連應答都不需要。對于NB-IoT、2G這種按流量計費、帶寬極窄的無線網絡這個差距是真實可見的成本差異。1.4 MQTT在嵌入式學習路線中的位置如果你是剛入門嵌入式、正糾結先學什么我的建議是MCU外設和RTOS是基本功但通信協(xié)議一定要盡早涉及而MQTT是一個特別好的切入點。原因很實在它不需要你懂太多底層網絡知識只要有TCP/IP協(xié)議棧比如lwIP、Wiznet硬協(xié)議棧就能在上面跑起來它也不挑硬件一個ESP8266、一塊STM32加個串口WiFi模塊幾十行代碼就能把數(shù)據(jù)送到云端更關鍵的是它的調試工具鏈非常成熟你可以用MQTTX、mosquitto_sub這種現(xiàn)成工具在PC上模擬全部行為這對理解“設備-服務器-客戶端”三方交互非常有幫助。2. MQTT協(xié)議核心機制逐層拆解很多初學者看MQTT覺得頭大是因為一上來就扎進報文格式和回調函數(shù)里缺少一個整體框架。我建議你按“連接生命周期”這個思路去理解怎么建立連接、怎么保證連接活著、怎么傳輸數(shù)據(jù)、怎么保證數(shù)據(jù)不丟、怎么優(yōu)雅地告知別人自己掛了。把這個鏈條走通協(xié)議就算吃透了一半。2.1 連接建立CONNECT與CONNACK的細節(jié)客戶端和Broker建立MQTT會話第一步是發(fā)送CONNECT報文。這個報文里包含幾個關鍵字段ClientID、Clean Session標志、Keep Alive心跳周期、Username/Password以及可選的Will遺囑信息。其中ClientID特別值得注意。Broker要求同一時刻同一ClientID只能有一個連接存在如果兩個客戶端用了相同ClientID后連接的會把先連接的踢掉這在很多項目里是“設備頻繁掉線”的隱形元兇。設備重啟后如果固件里生成ClientID的邏輯不穩(wěn)定比如用了隨機數(shù)每次重連ClientID都變那么Broker上舊的會話就永遠得不到清理長期運行會堆積大量殘留會話消耗服務器內存。建議產品化設備固件里用芯片唯一ID或MAC地址作為ClientID的一部分比如esp32_a1b2c3d4e5f6。Clean Session標志決定了連接是持久會話還是臨時會話。置1表示連接斷開后Broker立即清除該客戶端的會話狀態(tài)置0表示Broker會保存客戶端的訂閱關系和離線期間QoS 1/2的消息等下次同ClientID上線時再補推。這個機制用好了能極大提升設備斷線重連后的數(shù)據(jù)連續(xù)性但代價是Broker內存消耗增加所以要在產品設計階段就決定好會話策略。2.2 Topic的結構設計與通配符規(guī)則Topic是MQTT消息路由的路徑結構上用斜杠分層比如devices/device01/telemetry/temperature。設計Topic時最忌諱的是把設備唯一標識放在層級深處這會讓權限配置和通配符訂閱變得非常痛苦。MQTT提供了兩種通配符單層和多層#。比如訂閱devices//telemetry/temperature就能收到所有設備上報的溫度消息不管中間的設備ID是什么訂閱devices/#則能收到devices下面所有層級的消息。上一級$SYS開頭的是Broker的系統(tǒng)主題用于發(fā)布Broker自身的運行狀態(tài)比如客戶端連接數(shù)、消息吞吐量這在運維監(jiān)控時很有用。關于Topic命名和規(guī)劃幾個實操經驗分享給你層級不要超過五層否則主題長度會白白消耗帶寬而且管理起來容易亂把設備類型放前面devices/{device_id}/telemetry/xxx把具體數(shù)據(jù)類型放后面方便用通配符做批量訂閱發(fā)布權限和訂閱權限要分開規(guī)劃設備端只允許往自己的Topic發(fā)布不允許訂閱別的設備消息這個在Broker的ACL里一定要限制住不然后果不堪設想云端可以訂閱通配符設備端不要用#去訂閱一堆和自己無關的消息白白耗流量燒電。2.3 QoS語義及其實現(xiàn)原理QoSQuality of Service是MQTT里最容易被誤解的部分。它分三個等級QoS 0最多一次。消息發(fā)出去了就不管了不管Broker有沒有收到不管接收方有沒有處理。適合傳感器周期上報這類允許丟數(shù)據(jù)的場景在嵌入式設備上也是最常用的等級。QoS 1至少一次。發(fā)送方發(fā)出消息后必須等到Broker返回PUBACK才認為發(fā)送完成否則重發(fā)。好處是保證Broker肯定能收到壞處是可能重復投遞接收方要做冪等處理。QoS 2恰好一次。通過兩輪四次握手PUBLISH-PUBREC-PUBREL-PUBCOMP保證消息既不丟也不重復代價是鏈路交互次數(shù)翻倍實時性和吞吐都會受影響。實際項目中除非是交易類、控制類指令一般很少用QoS 2。這里要糾正一個常見誤區(qū)QoS不是端到端的而是分段保證的。發(fā)布端與Broker之間是一段Broker與訂閱端之間是另一段。發(fā)布方用QoS 1發(fā)消息Broker可能以QoS 0轉給訂閱方這個在連接配置里是可以分別指定的。所以如果你需要消息到達最終接收方都有保證兩端的QoS都要配置成相應等級。2.4 Retain、遺囑與Keep Alive三個“小而美”的設計Retain標志可能是很多嵌入式工程師最容易忽略的一項。當發(fā)布者往主題發(fā)消息時如果置了RetainBroker會把這個消息存為“保留消息”這樣以后任何客戶端訂閱這個主題都會立刻收到這條保留消息。這個特性做狀態(tài)同步特別有用設備上線后往device/status發(fā)一條Retain消息表示“在線”云端或App后續(xù)訂閱這個主題不需要等設備再上報就知道當前狀態(tài)。要注意的是Retain消息會一直存在如果設備狀態(tài)變了要用新的Retain消息覆蓋設備離線要發(fā)一條空負載的Retain消息把它清掉否則云端讀到的永遠是過期狀態(tài)。遺囑消息Last Will and Testament則是一個“善后”設計。設備在建立連接時帶上一條遺囑指定遺囑主題和遺囑消息內容如果之后Broker檢測到設備異常斷開比如TCP連接超時、心跳超時、網絡無故中斷Broker就會代替設備把遺囑消息發(fā)布出去。這樣云端就能立刻感知設備異常下線而不是等超時。我在實際項目里經常用device/{id}/status這個主題配合遺囑設備正常上線發(fā)布Retain消息“online”異常掉線Broker自動發(fā)遺囑“offline”形成一個非常干凈的生命周期管理閉環(huán)。Keep Alive心跳機制則是維持連接的“體溫計”。客戶端在CONNECT時聲明一個心跳間隔通常30到120秒之后每隔這段時間就發(fā)一個PINGREQ報文給BrokerBroker回PINGRESP。如果Broker在約1.5倍間隔時間內沒收到任何報文就認為連接已死斷開連接并觸發(fā)遺囑消息。這個機制對嵌入式設備尤其重要因為很多嵌入式設備走的無線網絡運營商NAT超時一般只有幾分鐘如果沒有心跳保活連接會被網絡設備悄悄斷開設備端還以為連接還活著直到下次發(fā)數(shù)據(jù)才傻眼。3. 嵌入式端實戰(zhàn)從ESP32到STM32的落地經驗理解協(xié)議是第一步真正把它跑在受限的嵌入式環(huán)境里會有一堆工程問題等著你。這一節(jié)我以ESP32和STM32兩個平臺為例把從零到能跑通全鏈路的經驗和代碼片段整理出來。3.1 基于ESP-IDF的MQTT客戶端實現(xiàn)ESP-IDF自帶的esp-mqtt組件是基于ESP32的lwIP協(xié)議棧封裝的高層API底層用的是mqtt_client.c使用起來非常簡單。但簡單歸簡單有幾個配置項如果沒搞清楚實際項目里會很被動。先看一個最小可用的初始化流程#include mqtt_client.h static void mqtt_event_handler(void *handler_args, esp_event_base_t base, int32_t event_id, void *event_data) { esp_mqtt_event_handle_t event event_data; switch ((esp_mqtt_event_id_t)event_id) { case MQTT_EVENT_CONNECTED: ESP_LOGI(MQTT, Connected to broker); // 連接成功后訂閱指令主題 esp_mqtt_client_subscribe(event-client, devices/esp32/cmd, 1); // 發(fā)布一條上線消息 esp_mqtt_client_publish(event-client, devices/esp32/status, online, 0, 1, 0); break; case MQTT_EVENT_DATA: ESP_LOGI(MQTT, Received: %.*s, event-data_len, event-data); // 解析并執(zhí)行云端下發(fā)的指令 break; case MQTT_EVENT_DISCONNECTED: ESP_LOGW(MQTT, Disconnected from broker); // 斷線后esp-mqtt內部會自動重連這里主要做業(yè)務上的處理 break; default: break; } } void app_main(void) { esp_mqtt_client_config_t mqtt_cfg { .broker.address.uri mqtt://192.168.1.100:1883, .session.keepalive 60, .credentials.client_id esp32_a1b2c3d4e5f6, .credentials.username device01, .credentials.authentication.password passwd, .session.disable_clean_session true, .network.reconnect_timeout_ms 5000, }; esp_mqtt_client_handle_t client esp_mqtt_client_init(mqtt_cfg); esp_mqtt_client_register_event(client, ESP_EVENT_ANY_ID, mqtt_event_handler, NULL); esp_mqtt_client_start(client); }注意幾個坑esp_mqtt_client_publish的參數(shù)順序是(client, topic, data, len, qos, retain)len傳0表示自動用strlen計算但如果你發(fā)的數(shù)據(jù)是二進制流里面可能帶\0一定要顯式傳長度否則消息會被截斷.session.disable_clean_session true對應Clean Session置0也就是持久會話。開啟后設備重連Broker會記住它的訂閱設備端就不需要每次重連都重新訂閱一遍但Broker側會話內存會增加這個要根據(jù)實際設備量權衡事件回調里不要做耗時操作比如不要直接在里面解析大JSON、跑算法或者寫Flash。標準做法是把數(shù)據(jù)拷貝到隊列或任務通知交給其他任務處理。因為esp-mqtt的事件是跑在它自己的task上下文里的如果阻塞太久TCP接收緩沖會溢出導致連接質量問題。3.2 數(shù)據(jù)序列化JSON與二進制怎么選很多新手喜歡把傳感器的所有數(shù)據(jù)拼成一個很長的JSON字符串一次性發(fā)上云比如{t:25.6,h:58.2,pm25:35.4,noise:62.1,battery:78,rssi:-65}這樣做的好處是云端解析方便各種云平臺、Node-RED都能直接消費。但在嵌入式設備端要注意幾個問題第一浮點數(shù)轉字符串再打包成JSONMCU上做這個操作比較吃力尤其是Cortex-M0這種小核跑起來會有明顯延遲第二JSON字符串越長空中傳輸時間越長掉線窗口越大功耗也越高。我常用的策略是“雙軌制”日常周期上報用緊湊二進制格式按固定字段順序打包成字節(jié)流云端先根據(jù)設備類型和協(xié)議版本解析這種格式十幾二十個字節(jié)就能塞下全部數(shù)據(jù)調試模式或做產品演示時才發(fā)JSON方便抓包看內容。如果你覺得自研二進制格式維護成本高也可以考慮用CBOR或Protobuf它們在MCU上有現(xiàn)成庫解析效率和JSON完全不是一個量級。還有一點很關鍵無論用哪種格式都建議在消息里帶一個單調遞增的序列號或時間戳云端消費側做去重和亂序處理都靠它。我之前遇到過一個詭異問題設備上報的數(shù)據(jù)在云端經常出現(xiàn)舊值覆蓋新值的現(xiàn)象查到最后就是網關轉發(fā)消息亂序丟了一個序號字段導致下游沒法判序。3.3 STM32 lwIP/串口WiFi模塊的MQTT移植思路如果你用的是STM32且需要通過以太網接入常見的路徑有兩種一是跑帶lwIP的以太網方案比如W5500硬協(xié)議?;騍TM32PHYFreeRTOSlwIP二是用串口WiFi模塊比如ESP8266或Air724MCU通過AT指令驅動。兩種路徑移植MQTT的思路差別很大。先說帶lwIP的情況嵌入式MQTT庫最主流的是Eclipse Paho MQTT Embedded-C它有MQTTClient這個平臺無關的封裝只需要你實現(xiàn)網絡層的connect、read、write、disconnect這幾個函數(shù)就能跑起來。底層可以基于lwIP的socket也可以基于Netconn API。這里提醒一下lwIP默認的MEM_SIZE和TCP_SND_BUF/TCP_WND比較保守如果頻繁發(fā)大數(shù)據(jù)包要適當調大這些參數(shù)否則MQTT的send會被阻塞或返回錯誤表現(xiàn)為連接正常但消息發(fā)不出去。再說串口WiFi模塊的方案MCU只把MQTT報文當普通數(shù)據(jù)交給WiFi模塊透傳嗎不能直接這么干因為AT模塊的串口透傳模式通常只是裸TCP透傳MQTT報文本身需要MCU自己構造也就是你需要在MCU端實現(xiàn)MQTT協(xié)議的封包和解包。好在MQTT協(xié)議本身不復雜一個狀態(tài)機加上CRC校驗其實MQTT沒有CRC靠TCP保證就能搞定。如果想省事可以選那種內置MQTT協(xié)議的AT固件比如ESP-AT官方固件就支持ATMQTTCONN等命令MCU發(fā)幾條AT指令就能完成連接和發(fā)布代價是靈活性差一些而且如果固件有bug很難繞過。3.4 斷線重連與低功耗策略物聯(lián)網設備最大的敵人是“死了還在假裝活著”。設備端斷線重連不能簡單地“斷了我重連”要有策略。推薦指數(shù)退避方案第一次重連等3秒第二次等6秒第三次12秒最多拉到5分鐘封頂同時記錄連續(xù)失敗次數(shù)超過一定閾值要主動上報本地錯誤狀態(tài)或者進入低功耗深睡過一段時間再起來嘗試而不是無限空轉。在ESP-IDF里esp-mqtt自帶reconnect_timeout_ms但對于需要精細控制退避策略的場景更適合自己監(jiān)聽MQTT_EVENT_DISCONNECTED在事件里做業(yè)務決策比如“連續(xù)掉線N次就重啟WiFi”很多時候比單純靠協(xié)議層重連有效得多。低功耗場景下MQTT最大的矛盾在于長連接需要高頻心跳而高頻心跳會頻繁喚醒射頻非常耗電。如果設備電池只能支撐幾個月卻要保持“實時在線”這是個無解的矛盾除非接受一個折中設備平時處于deep sleep上報數(shù)據(jù)時醒來臨時連接發(fā)完就斷線睡覺。這種模式不走Keep Alive長連接而是“按時醒來發(fā)完走人”功耗能壓到極低代價是云端看到設備的狀態(tài)是“時隱時現(xiàn)”不適合需要持續(xù)在線控制的設備。如果是需要“在線但省電”的場景可以考慮用NB-IoT那種PSM模式或者把心跳周期拉長到幾分鐘同時配合遺囑消息功耗和實時性取一個中間值。4. 服務端搭建與調試工具鏈協(xié)議是雙方的事光有設備端還不行Broker選型、服務器部署、調試工具的使用這些環(huán)節(jié)直接決定開發(fā)效率和生產穩(wěn)定性。4.1 Broker選型Mosquitto還是EMQX輕量測試階段我個人很推薦Mosquitto。它是Eclipse社區(qū)的老牌開源Broker單機部署只要一條命令資源占用極小樹莓派上都能跑非常適合開發(fā)環(huán)境快速驗證協(xié)議邏輯。但Mosquitto的功能相對基礎集群、規(guī)則引擎、插件擴展這些企業(yè)級能力比較弱生產環(huán)境設備量一旦上千單節(jié)點很容易成為瓶頸。EMQX在這幾年是很多物聯(lián)網團隊的選擇它基于Erlang/OTP天生適合高并發(fā)連接幾萬甚至幾十萬連接在一個節(jié)點上都扛得住而且自帶Web管理控制臺、規(guī)則引擎、數(shù)據(jù)橋接能直接把消息流轉到MySQL、Kafka、InfluxDB這些存儲系統(tǒng)。還有Kepserver這種工業(yè)領域常用的OPC網關近幾個版本也提供了MQTT IoT Gateway能把PLC的OPC數(shù)據(jù)直接映射成MQTT主題在工業(yè)物聯(lián)網項目里很常見。選型建議很簡單做原型驗證或者設備量在百級以內用Mosquitto產品化、設備量千級以上、需要可視化監(jiān)控和規(guī)則鏈用EMQX省去后續(xù)遷移的痛苦。4.2 Docker快速搭建MQTT服務器不管選哪種Broker用Docker部署都會省去很多環(huán)境相關的麻煩。以EMQX為例docker run -d --name emqx \ -p 1883:1883 \ -p 8083:8083 \ -p 8084:8084 \ -p 18083:18083 \ emqx/emqx:5.8.0端口說明一下1883是MQTT標準端口8083是WebSocket端口瀏覽器里的MQTT客戶端一般都走這個8084是WebSocketSSL18083是EMQX自帶管理控制臺的端口。啟動后訪問http://服務器IP:18083默認賬號admin/public就能看到連接數(shù)、消息流入流出速率這些實時指標。Mosquitto更簡單不過要注意Docker跑Mosquitto需要掛載配置文件否則默認配置不允許遠程匿名連接docker run -d --name mosquitto \ -p 1883:1883 \ -v /path/to/mosquitto.conf:/mosquitto/config/mosquitto.conf \ eclipse-mosquitto:2一個能跑起來的最小配置長這樣listener 1883 0.0.0.0 allow_anonymous true persistence true persistence_location /mosquitto/data/生產環(huán)境務必關閉allow_anonymous改成賬號密碼認證再疊加啟用TLS否則你的Broker就是一臺公共廣播站。4.3 MQTT調試利器MQTTX與命令行工具調試MQTT最常見也最好用的桌面工具是MQTTX支持Windows/Mac/Linux界面清爽可以同時建多個客戶端連接手動指定Topic、QoS、Retain這些標志位也可以腳本化自動測試。它還能直接模擬遺囑消息這對驗證設備離線通知邏輯特別有用。比如你想測試“設備異常斷開后云端的遺囑監(jiān)聽邏輯是否正確”直接在MQTTX里建一個帶遺囑的連接然后強殺這個連接看Broker是否發(fā)布了遺囑。命令行場景下Mosquitto自帶的客戶端工具也是神器# 訂閱主題加 -v 選項會打印消息主題 mosquitto_sub -h localhost -t devices/# -v # 發(fā)布一條消息到指定主題 mosquitto_pub -h localhost -t devices/esp32/cmd -m {action:reboot} # 用 -q 指定QoS用 -r 開啟Retain mosquitto_pub -h localhost -t devices/esp32/status -m online -q 1 -r這套工具鏈的最大價值在于它讓你能把“設備端-云端”和“測試客戶端”分開來查問題。設備端數(shù)據(jù)上報不上來先用MQTTX訂閱設備主題看Broker到底有沒有收到消息如果Broker收到了但云端沒顯示那問題就在云端消費側不要一上來就懷疑設備固件。4.4 與云平臺對接一機一密與Topic權限除了自建Broker很多項目會直接選用阿里云IoT、華為云IoT或騰訊云IoT平臺。這些平臺的MQTT接入地址、端口、認證方式都有差異但大致流程一致在云端創(chuàng)建產品和設備拿到設備三元組ProductKey、DeviceName、DeviceSecret設備端用三元組計算簽名拼進MQTT的Username和Password字段就能連上。連接時注意這些云平臺對ClientID格式有嚴格約定通常是DeviceName_安全級別_時間戳這種后綴拼錯了連不上拼對了但大小寫出錯也連不上細節(jié)一定要對著文檔核對。云平臺的Topic體系也頗有講究通常分為物模型Topic如/sys/{ProductKey}/{DeviceName}/thing/event/property/post、自定義Topic和數(shù)據(jù)流轉Topic。設備端只能往云端規(guī)定的Topic發(fā)布或訂閱權限在平臺側控制。這些Topic往往比自建Broker的Topic長得多在設計設備固件時要把Topic存儲的內存預留好我用ESP32時因為Topic太長導致發(fā)送緩沖區(qū)不夠出現(xiàn)過發(fā)布接口返回錯誤的問題后來把緩沖區(qū)從默認的1024調到2048才解決。5. 常見問題與排障經驗實錄最后這部分把我的實際排障經驗和高頻問題整理成速查表每一個都是踩過坑換來的。5.1 高頻故障速查表現(xiàn)象可能原因排查思路與解法設備連不上Broker端口不通、防火墻攔截、Broker地址配錯先本機用MQTTX測試再在設備端ping服務器IP確認網絡層通不通1883被運營商封鎖也很常見嘗試改走8883端口TLS能連接但一訂閱就斷開ClientID重復或被Broker判定為非法訂閱檢查是否有兩個客戶端用了相同ClientID檢查ACL權限設備端沒權限訂閱某些主題會被斷開設備頻繁掉線重連NAT超時、心跳間隔太長、WiFi信號差縮短Keep Alive到30秒確認設備端啟用了心跳排查周圍WiFi信道干擾順便看RSSI變化趨勢消息偶爾丟失QoS 0場景下網絡抖動Broker端內存溢出對關鍵數(shù)據(jù)升到QoS 1設備端記錄發(fā)送日志檢查Broker日志看是否有連接被強制斷開消息重復收到使用了QoS 1且接收端沒做冪等消費端按消息里的序列號去重升級到QoS 2但確認你的場景能接受額外網絡開銷遺囑消息沒觸發(fā)設備是“優(yōu)雅斷開”而不是異常斷開只有異常斷線才觸發(fā)遺囑如果設備主動調用disconnectBroker不會發(fā)遺囑確認遺囑主題和QoS配置正確Broker內存持續(xù)上漲大量持久的會話堆積檢查是否大量ClientID變了但Clean Session為0定時清理殘留會話限制離線消息大小5.2 一個典型的“幽靈掉線”排查案例有一次在客戶現(xiàn)場設備上報數(shù)據(jù)總是每隔一兩分鐘斷一次然后又重新連上看云端日志全是CONNACK成功和DISCONNECT交替。一開始懷疑是設備端代碼問題用支持抓包的調試器盯了好久也沒發(fā)現(xiàn)異常。后來我用MQTTX掛在同一個Broker上觀察全局連接發(fā)現(xiàn)設備連接斷開的時間點很有規(guī)律——幾乎精確地落在每兩分鐘整。這個規(guī)律立刻讓我想到運營商NAT超時很多4G模塊默認的心跳是120秒而運營商NAT的空閑超時通常也是2到5分鐘。設備端發(fā)了心跳Broker回了PINGRESP但NAT映射已經被回收了下一次心跳就丟了。Broker端一直沒收到后續(xù)報文就按Keep Alive超時把連接斷開觸發(fā)重連。而問題更隱蔽的地方在于設備端的lwIP認為TCP連接還是活的因為沒收到RST所以不會主動重連直到應用層超時才能感知。解決辦法是雙管齊下把Keep Alive從120秒縮短到30秒同時在設備端加了TCP層的心跳檢測和異常重連機制。從那以后掉線頻率幾乎降到零。這個案例也側面說明MQTT的Keep Alive不能簡單照抄配置要結合自己所處網絡環(huán)境來定尤其是蜂窩網絡和跨運營商通信心跳間隔寧可小一點。5.3 設備端資源受限的優(yōu)化心得MCU的Flash和RAM都很珍貴跑MQTT庫之前一定要算清楚開銷。以Paho Embedded-C為例默認緩沖區(qū)分配是連接緩沖區(qū)加發(fā)送緩沖區(qū)最大包大小直接決定RAM占用。如果你只需要發(fā)幾十字節(jié)的傳感器數(shù)據(jù)把緩沖區(qū)調小到256字節(jié)內存占用可以省下一大截。但要注意如果Topic本身很長加上固定頭、可變頭、消息體總包大小一旦超過緩沖區(qū)接口就會返回MQTT_BUFFER_TOO_SMALL錯誤。正確的做法是事先估算最壞情況下的報文大小。我在一個STM32L4項目里就遇到這個問題。固件里規(guī)劃了一塊1KB的MQTT發(fā)送緩沖區(qū)結果設備端訂閱的主題長度達到150字節(jié)加上負載將近300字節(jié)勉強沒問題。但后來在固件里加了OTA升級包URL上報功能URL里塞了帶簽名的長連接整條消息奔著1.2KB去了發(fā)布直接失敗。后來我把消息拆分URL拆成多條內容塊分批發(fā)才繞過了物理限制。這個經驗告訴我做MQTT設備端開發(fā)時報文最大長度是一個要提前確定的架構級參數(shù)后續(xù)所有功能設計都得為它讓路別等到上線了才發(fā)現(xiàn)頂不住。5.4 安全相關的底線建議如果你做的設備要過等保、過安全測試或者連接的是公網Broker下面幾條是基礎底線不做到位很容易被攻破生產環(huán)境禁用匿名連接每個設備分配獨立賬號密碼用一機一密方式動態(tài)生成不要所有設備用同一個密碼優(yōu)先使用8883端口TLS加密通信哪怕證書是自簽的也比裸用1883強得多如果MCU性能不夠跑完整TLS握手至少要做設備端到Broker端的鑒權并考慮使用更輕量的XAUTH、PSK等方案設備端不要硬編碼Broker密碼在固件里最好通過產線工具注入到獨立存儲區(qū)域防止固件逆向后密碼泄露導致整個Broker被刷Topic劃分時收和發(fā)的權限要嚴格隔離。一個常規(guī)的權限配置是設備能往device/{id}/pub/#發(fā)布只能訂閱device/{id}/sub/#跨設備訂閱一律拒絕。這些習慣看似繁瑣但真到出事的時候就知道了多一道閘就多一份安全。6. 最后分享幾個個人習慣根據(jù)自己的實際經驗最后羅列幾條我平時做MQTT項目時一定會遵守的習慣算是給新入坑的朋友一些參考第一每個Topic的消息結構一定要寫文檔哪怕不寫正式文檔也要在代碼倉庫里維護一份Markdown記錄字段類型、單位、取值范圍、版本變更。MQTT項目后期最痛苦的永遠是消息格式的兼容問題設備固件不能像App一樣強制升級格式一旦定了再改是牽一發(fā)動全身。第二設備端固件里把連接狀態(tài)、最后心跳時間、最后消息收發(fā)時間記錄下來出了問題先看這個日志能省大量摸底時間。我見過太多設備掛在墻角問現(xiàn)場的人說“剛才還好好的”拿日志一看重連機制早就失效了。第三新項目上線前做一個簡單的拔線測試把設備正常跑起來然后直接插拔網線或者斷電WiFi觀察設備重連、緩存、消息補償、遺囑觸發(fā)這些行為是否符合預期。這個測試聽著簡單但很多看起來很高端的物聯(lián)網項目連這一步都做不好。MQTT作為一個已經存在二十多年的協(xié)議其設計簡練而實用但它終究只是個傳輸管道真正值錢的是圍繞它建立的一整套端到端系統(tǒng)設計能力。希望這篇文章能幫你把這條管道的每個閥門都看清楚下次做物聯(lián)網項目時能少走一些彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色色色成人网| yellow视频在线观看91| 丁香婷婷色色| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 色宗合,宗合网| 五月婷婷影视| 大香蕉综合在线| 婷婷五月丁香六月天亚洲综合| 色婷婷五月影视| 99热这里有精力| 日日想日日夜日日操| 71在线精品视频一区| 日本久久网| 色五月婷婷色五月| 新激情五月天色播| 抽插特写| 丰满少妇猛烈A片免费看观看| 五月天国产| 亚洲综合丁香五月| 色五月涩涩婷婷蜜桃| 久久久五月天婷婷| 123日本不卡在线| 天天日,天天插| 天天操婷婷| 久久99热 这里有精品| 久99热在线观看| 丰满少妇乱A片无码| 天天日天天操心| 丁香五月老师| 五月综合激情视频| 狠狠色噜噜狠狠| 精品婷婷五月天| 91AV婷婷| 超碰av在线| 婷婷伊人綜合| 伊人五月婷婷国产视频| 色九九丁香九月色九九色| 亚洲精品一区无码A片| 五月天丁香网站| 久99999热视频在线观看免费| 久久婷婷网| 天天婷婷色六月| 亚洲综合丁香婷婷六月天| 六月丁香婷| 91精品又长又大又粗又爽又猛| 色综合色香蕉网| 熟妇人妻中文字幕无码老熟妇| 91婷婷丁香| 久久五月婷婷丁香| 99九九视频| 超碰com| 人人草人人舔| 久9热| 久久婷网| 色99视频| 久777| 少妇搡BBBB搡BBB搡毛茸茸| 婷婷伊人綜合中文字幕小说| 日本强伦片中文字幕免费看| 亚洲AV永久无码影院黑人| 久久久全国免费视频| 91男女视频在线观看| 免费看欧美成人A片无码| 久久婷婷亚洲五月天| 亚洲第一色网站| 性爱动图国产麻豆一区二区三区| 五月丁香九九九综合| 亚洲激情五月婷婷日日| 桔色成人在线| 天天色宗合| 丁香五月婷婷啪啪啪| 中文字幕成人影视| 日本欧美成人片AAAA| 中文字幕日本最新乱码视频 | 思思热精品免费视频| 翔田千里aV中文字幕| 精品99久久久久成人网站免费| 五月香蕉婷婷| 五月丁香六月婷婷激情视频在线观看免费 | 欧美日韩成人| 婷婷丁香综合色AV| 九九热色视频| WWW,五月| 99色在线| 97色色视频| 五月激情综合网| 日本综合久久| 丁香五月天堂网AV| 天天AV导航网| 欧美色99| 丁香五月欧美婷婷| 思思热99er在线视频| 激情婷婷另类| 色色a| www久久久久久久久久久| 五月丁小婷婷激情四射| 激情综合女人网五月播播| 五月婷婷干| 五月天丁香成人社| 狠狠色婷婷色| 五月天欧美 另类小说| 天天做天天摸| 先锋影音av色五月天资源站| 97色色色色色色色| 亚洲无线视频| 久99精品视频| 996热re视频精品视频这里| 婷婷激情九月| av线电影| 这里只有精品视频99| 色999五月色| 天天色综合图片| 婷婷久久综| 日本人人超碰| 婷婷五月丁香综合激情小说| 俺去也五月| 99热人人艹| 大香蕉婷婷| 欧美色色色色色色色| 99热在线观看免费精品| 色狠狠综合| 丁香婷婷激情网站| 五月婷护士| 久久久妻人人人| 大香蕉久久婷婷| 日本色99网站| 天天影视色综合网| 久久久全国免费视频| 九九碰九九爱97| 婷婷深爱五月丁香| 日本色天堂| 激情操逼婷婷| 五月天激情.com| 99自拍视频在线观看| 色色五月天婷婷丁香| 五月婷婷无码专区| 99爱在线| 五月天久久91| 国产激情在线| 综合久久9| 99资源人人| 襙比视频| 九九99精品免费播放| 欧美激情五月天在线观看| 精品久久99码| 就要去操亚洲成人精品五月天丁香婷婷| 日韩啊啊啊| 99久热在线精品99re6热| 无月播播激情在线观看视频| 丁香五月天激情四射网络不好| 丁香五月久久综合| 狠狠色综合网站久久久久| 色婷婷久久综合丁香五月| 亚洲精品无AMM毛片| 秋霞午夜理论| 激情涩播| 狠狠干综合| 丁香五月激情婷婷| 少妇日麻屄| 色情五月综合婷婷| 深爱激情网噜噜色| 欧美激情伊人| 五月天色区| 丁香色婷婷| 天天精品视频免费观看| 日批在线看| 久久无码成人| 99热这里都是精品| 丁香婷婷精品视频| 午夜丁香久久久久久| www夜夜操com| 色婷婷欧美| 婷婷色五月天在线| 日韩色情亚洲五月天婷婷| 婷婷狠狠青青| 婷婷在线免费| 狠狠干思思热| 丁香五月婷婷狠狠色| 丁香六月婷| 丁香五月大香蕉在线99| 激情综合激情综合| 色黑鬼导航| 色欧美一级| 激情99在线视频| 超级碰碰91| 丁香五月人妻| 亚洲天堂色色| 99er国产| 综合久久高清| 色婷婷综合久久| 99热综合网| 99re最新地址视频| 4438国产免费看| 久久激情视频| 精品成人a v无码内射| 午夜爱插插| 五月丁香六月婷| 综合久久五月天| 激情九月婷婷| 日韩有码一区| 亚洲亚洲人成综合网络| 九九99免费视频| 丁香伊人综合| 91婷婷丁香五月天免费视频网站| 久久久潮喷-久久久九九-成人AV| 高清无码网址| 99热这里有精品| WWW,婷婷,COM| 人妻久久久久久久久妻久久久久| 97在线视频人妻九色| 97精品人人A片免费看| www.五月天社区| 91日韩在线| 啪啪东京热| 中文字幕日产A片在线看| 亚洲成人噜噜| 亚洲综合色丁香婷婷六月| 碰碰操91| 91jiuseshunv| 欧美日本不卡黄色片| 99re思思久久| 综合另类视频| 天天肏高清在线| 天天射射夜| 99热国内精品| 丁香五月婷婷亚洲色图| 色色色色区| 极品人妻VIDEOSSS人妻| 少妇性BBB搡BBB爽爽爽视頻| 99这里有精品视频| 丁香五月激情综合| 开心五月婷婷| 六月激情网| 婷婷刺激综合| 久婷久婷| 亚洲五月天婷婷| 新伍月婷婷| 99热这是里只有精品| 欧美交换配乱吟粗大25P| 99国产精品久久久久久久久久久| 五月婷婷网五月在线| 99视频久久免费视频| 五月天操逼网| 久婷婷| 婷婷国产欧美97| 懂色av粉嫩AV蜜臀AV| 色五月激情五月| 亚洲九九视频| 无码激情AAAAA片-区区| 99视频综合| 一级片操逼视频| 久久久激情| 97色色色色色| 色级停停| 免费看片在线观看| 婷婷九月狠狠色| 激情爱爱网站| 激情五月天色色| 9精品在线| 婷婷黄色| 情婷婷五月天在线| 亚洲一区二区无遮挡A片| 美女久久婷婷| 欧美啪啪五月天| 色噜噜五月丁香婷婷| 牛牛色av| 五月天啪啪视频| 五月天社区| 免费黄色视频网址| Va另类视频| 丁香色情五月综合网站| 五月天成人综合| 婷婷玖玖五月天| 大香蕉婷婷久久| 超碰人人干| 色五月AV| www网站在线观看| 九九人人看| 五月婷婷欧美| 久久午夜理论| 操日视频| 国产AV一区二区三区日韩| 色五月六月| 99在线小视频| 色墦五月丁香| 中日韩美欧成人一区二区精品在线| 婷婷色五月91啪啪| www.五月婷婷久久.com| 99久久99热这里只有精品| av性爱网站| 婷婷激情人妻| 婷婷五月花.97| 9久久AV| 玖玖综合色| 成人小说 五月天 婷婷| 狠狠狠色激情综合适合| 久久99国产综合精品免费| 丁香操逼| 欧美激情 日韩无码 婷婷 五月天 久久婷婷丁香五月一二三 | 丁香五月天婷婷激情| www.99热在线观看| 婷婷丁香五月综合网| 久久大香蕉伊人| 色很很96| 婷婷五月丁香色综合| 26uuu亚洲| 91人人人人人| 99精品国产在热久久| 99热视| 99亚洲综合| 狠狠久久婷五月综合色| 国产avapp 网| 区欧美日韩成人| 综合色五月天| 国产成人亚洲综合亚洲| 少妇激情五月婷婷| 伊人干综合| 草草色情综合网| 五月婷婷五月天| 丁香色综合| 色吧五月婷婷| 99九九在线观看免费| 天天色官网| 综合网亚洲| 中文婷婷狠狠| 婷婷五月天亚洲综合网| 五月丁香婷婷啪啪| 亚洲色9| 人人视频人人干人人做| 五月婷婷影视| 米奇影视资源婷婷狠狠色激情欧美五月丁香| 欧洲一区二区| 欧美人人女女精品综合五月天| 亚洲第精品| 亚洲尤物在线| 风流少妇A片一区二区蜜桃| 国产视频福利| 五月天天综合| 色99在线看| 亚洲 五月 婷婷 成人| 可以看的av| 亚洲成人高清在线| 操操国产| 99综合久久| 婷婷五月六月丁香| 五月婷婷六月丁香首页| 五月丁香六月婷婷色日| 色开心五月丁香| 丁香六月天之亚州热女| 国产高潮白浆一区二区| 思思久久99热只有频精品66| 玖玖@三月天天丁香婷婷| 色婷婷欧美在线| 色婷久久| 99精品在线下载| 欧美搡BBBBB摔BBBBB| 伊人影音无码一区二区三区| 九九香蕉网| 久久久久久久综合狠狠综合| 大地9中文在线观看免费高清| 丁香五月天欧美成人| 亚洲热综合| AV九九| 久久久人妻人伦| 激情五月天综合| 9精品在线| 91爱操| 五月色丁香| 一级精品999WWW| 日韩在线视频网站| 日本99热| 色五月丁香六月婷婷| 色五月婷婷在线观看第一页舔| 五月丁香网站在线播放| 色婷婷激情视频| 婷婷丁香五月高清| 99ri久久| 男妓跪趴把舌头伸进我的嘴巴| 婷婷丁香一月| 一级黄色操B| 成人永久免费视频在线观看| 国产激情综合五月| 婷婷五月丁香四射| 五月婷婷色情| 天天射射夜| 99视频日韩| 丁香五月天婷婷中文字幕| 色五月婷婷综合在线| 99热日韩| 午夜婷婷五月天在线| 超碰不卡在线| 激情综合网络插| 成人做爰A片免费看网站找不到了| 九九热在线视频,| 六月婷婷青青青视频| 色婷婷9| 欧美日韩大黄| www久久久久| 夜夜操天天干| 婷婷干五月综合在线播放| 偷偷操99| 操操综合网婷婷| 久99在线视频| 色性日本| 色婷婷丁香网| 综合久久综合综合| 成人无码精品1区2区3区免费看| 亚洲色亚洲精品| 免费黄色片子| 99热全是精品| 久久大大香| 色婷婷激情| 激情五月五月五月婷婷| 成人片在线播放| 182无码| 99热都是精品| 五月天色不卡| 六月婷婷影院| 99热国产这里只有| 九九久久五月天综合伊人| 精品二区| 日欧一片内射VA在线影院| 激情中文在线| 天天久| 亚洲avjiujiur91| www一起操| 99色在线观看视频者| 久久激情综合| av在线激情| 大陆肏屄视频| 日本va视频| 日本精品在线噜噜噜| 精品成人在线观看| 激情99在线视频| 亚洲综合新99视频| 久久久久9| 久久青青日本视频| 黄色短视频在线观看| 久久婷五月天| 成人在线视频网| 国产精品色婷婷99久久精品| 五月丁香激情综合网| 我爱va亚洲va52| 天天做综合| 丁香激情网| 日本在线wwww| 激情五月天福利| 久久久久久久11111111111| 五月丁香色| 五月丁香啪啪啪| 色欲色香综合网| 欧美成人精品老美女噜噜噜| 九一99| 狠狠色狠狠色综合日日91| 欧洲亚洲免费视频9| 久久婷婷亚洲| 91夫妻视频| 久久精品99国产精品日本| 亚洲五月婷婷| 婷婷大香蕉| 91精品91久久久中77777| 色色色图| 久9视频| 婷婷五月天av| 丰滿爆乳一区二区三区| 九九美女视频| 操操自拍| 97在线视频观看| 五月丁香六月婷婷精品| 激情校园 亚洲| 很操日本7| 东北婷婷五月天| 色五月婷婷久久大| 五月婷激情| 五月天成人综合| 淫视馆AV在线| 婷婷五月婷婷| 婷婷五月色播天| Av中文在线| 欧美性交一区二区三区| 激情AV在线| www.yw尤物| 六月色婷婷欧美| 五月天婷婷乱| 九九热视频在线观看| www.jiujiujiu| 婷婷色在线| 丁香婷婷大香蕉| 99燥99日| 五月天综合视频| 大香蕉啪啪啪| 月色色综合婷婷网| 狠狠干天天内射| 综合五月激情网| 99热亚洲| 这里只有精品视频| 人人叉久| 成人超碰AV| 婷婷五月综合啪| www.夜夜操.com| www婷婷| 婷婷丁香18| 丁香五月综合久久综合| 成人婷婷色五月天| 五月丁香激情综合久久| 可以免费观看的AV| 97色97干| 日本熟女一区二区| 激情性爱五月天| 极品人妻VIDEOSSS人妻| 亚洲网站999| a69在线视频| 色五月婷婷亚洲| 91狠狠色丁香婷婷综合久久| 91综合网| 国产淫熟妇| 丁香五月综合婷婷| 国产原创视频91九色| 精品99在线| 艾小青av| 九九黄色网| 9 1在线视频| 婷婷久久视频| 色婷婷久久综合| 超碰人妻公开在线| 亚州激情网| 久青草影院| 亚洲国产精品二二三三区| 婷婷色色欧美| 蜜桃五月天| 九九色综合| 超碰免费大香蕉| 五月婷网站| 婷婷五月天福利| 丁香 亚洲 久久| 射久久丁香五月| 婷婷久久综合久| 亚洲婷婷久久综合| 丁香婷婷噜噜| 99热午夜精品| 综合五月亭亭9| 99久久久久| 99碰在线视频| 这里只有精品网站| 91大屁股在线| 99这里只有精品在线| 五月丁香色| 久99在线视频| 欧美在线97| 久久人五月| 日本成人噜噜| 在线看AV| 亚洲成人噜噜| jiuse91在线| 五月婷婷丁香av| 成人无码髙潮喷水A片| 丁香五月天偷拍| 婷婷午夜天| 99九九99九九九视频精彩| 五月激情六月宗合| 婷婷伊人綜合| 久久色五月天| 色情五月天丁香社区| 99色色视频| 丁香玖玖视频大全| www.91九色| 色色色婷婷五月| 久热 91| 六月色播| 六月丁香五月天| 国产成人+综合亚洲+天堂| 97色在线视频| 丁香五月天天哦| 99色热| 99爱免费在线观看| 日日干四虎| 97好吊操| 久操97| 亚洲六月婷婷| 亚洲激情免费久久| 色吧婷婷五月亚洲| 激情小说在线视频| AV在线资源| 人人干av| 这里只有精品视频看看| 婷婷丁香五月基地| 亚洲激情av| 久久九九怡红院| 99这里有精品| 99热在线成人网站| 久久人人九九| 丁香五月花| 99热亚洲精品66| 97碰成超视频免费视频| www.久久99| 精品九九在线观看| 激情五月天婷婷丁香| 99色精品| 五月天色官网| 99色| 五月激情综合网| 五月天另类图片| 影音先锋一区| 熟女人妻视频| 2017狠狠干| 人妻videos人妻高清| 激情五月婷色| 色婷婷久久| 五月婷婷激情综合拍| 97se视频在线| 免费无码毛片一区二区A片| 五月婷婷AV| 日本人妻A片成人免费看片| 99国产精品久久久久久久久久久| 97色色综合| 一區四區歐美日韓| 色情五月婷| 久久人妻熟女一区二区| yellow视频在线观看91| 综合综合网| 1024国产| 激情国产五月| 这里只有精品视频| 久9无码视频| 我要色综合五月婷婷| 色天堂在线| 久久婷婷五月天丁香| www.99久久久| 天天插天天插天天插天天插| 狠狠88综合久久久久噜噜噜| 久久伦乱| 婷婷色色丁香| 玖玖爱伊人网| www色色com| www.91婷婷| 9久热这里只有精品| 久久这里这里有精品免费视频| 激情av网| 91免费试看| 噼里啪啦在线观看免费完整版视频| 五月丁香网站| 色婷婷丁香五月综合| 成人五月天在线观看| 色色五月天婷婷丁香| 67194中文在线| 激情av| 天天肏夜夜肏| 九九性爱网| 五月激情天天干| 亚洲性爱99在线| 亚洲另类婷婷五月丁香在线播放| 欧美天堂久久| www.婷婷,com| 99超碰在线观看| 久久精品日| 999热这里只有美国精品| 亚洲精品久久久无码| www.五月.com| 青草激情综合| 97av在线视频| 思思热精品在线视频| 久久99久久99精品免观看粉嫩| 情久久综合五月天| 六月婷婷五月天| 五月婷婷自拍| 色狠久| 色欲天天综合| 国产婷婷色综合AV蜜臀AV| 色人妻五月| 91久久婷婷人人澡草| 99视频一区| 丁香六月亭亭久久综合| 婷婷精品综合| 一丁香五月天月AV| 66成人网| www.色五月.com| 激情综合国产| 国产精品电影| 五月丁香| 67久久| 九九热91| 99九九综合久久九九| 久久99操| 99热无码精品| 99色看| 激情综合色播| 亚洲婷婷基地| 五月婷婷色播| 色综合久久久无码中文字幕999| 久久性都花花世界成人免费视频| 91日精品| 婷婷色在线| 婷婷舔| 丁香5月婷婷| 亚洲最大激情无码| 强伦轩人妻一区二区电影| 99热这里都是精品| 五月久久丁香| 六月丁香中文字幕| 婷婷天天舔| 99这里有精品视频视频| 亚韩在线视频| 精国产品一区二区三区A片| 亚洲xx在线| 超碰在线免费9| 99久久a线观| 五月花激情| 777色色色| 风流少妇A片一区二区蜜桃| 日本A片一区| 性欧美日本| 颜射 精品性爱av| 开心婷婷丁香五月| 九九99精品| 国产三级在线播放| 99热这里只有99| 凹凸操Av| 综合激情婷婷| 综合五月丁香97| 天天天久久久| 激情99| 成人无码精品1区2区3区免费看| 婷香狠狠爱五月| site:xmssd.com| 五月丁香在线看| 亚洲操人| 国产熟女大叫受不了| 内射激情在线| 996er热| 91色综合网站在线| 99国产小视频2013| 五月开心网| 久久caop| 丁香五月激情宗合| 婷婷婷婷婷婷婷婷| 嫩草极品| 五月五婷婷网| 日日干日日| 人人操9| 安息电影在线观看完整版| 五月天婷综合| 婷婷激情六月中文| www.五月天性.com| 一本色道久久综合狠狠躁小说| 丁香花操逼| 色青五月天| 91丨九色丨熟女高潮| 99资源在线视频| 五月开心深爱激情网| 国产真实乱了老女人视频| 五月婷网| 极品另类| 91热久| 开心五月激情婷婷| AV大片在线播放| 欧美婷婷六月丁香综合色连续高潮抽搐| 丁香五月婷婷AV在线| 中文字幕91,综合| 性色99| 人与禽A片啪啪| 丁香六月婷婷综合激情欧美| 综合色99| 婷婷性爱影院| 伊人干综合| 午夜爱爱网站| 67194中文字幕| 伊人婷婷91| 婷婷五月六月丁香| 97婷婷丁香五月天激情图片| 丁香五月激情五月开心五月| 天天操天天插天天射| 色婷婷a三区麻| aV直接看| 天天成人综合视频| 五月婷婷影视| 国产精品久久7777777精品无码| 亚洲V国产V欧美V久久久久久| 梁铮版《蜘蛛女侠》在线| 亚洲人人操| 亚洲精品乱码久久久久久按摩观| 久草五月天| 人人亚洲| 国产精品扒开腿做爽爽爽A片唱戏 亚洲爆乳无码精品AAA片蜜桃 | 青青草青青草五月天| 精品色色网| 99热在线中出| 综合网视频| 久久婷婷综合拍| 色五月av| av在线资源| 天天干天天拍| 狠色狠色狠色狠色狠色网| www.91av.com| www,色色色网站| 日本久久视频| 成人片在线播放| 精品色色网| 久久99jiu9| 91九色熟女| 丁香婷婷老熟女综合网| 丁香五月电影| 六月婷婷私欲| 丁香五月婷婷激情中文| 五月婷婷综合丁香视频| 激情综合五| 99啪啪| 婷婷激情五月天色| 天天网曰日曰夜夜综合永久免费| 狼人婷婷久久| 丁香五月网络网络| 青青草婷婷五月天| www.99热在线| 亚洲激情99| 久9热插入| 色哟哟精品| 99热这里只有精品亚洲| 九九久久偷拍| 色色色五月婷婷| 色婷婷伦理| 六月丁香婷婷综合影院| 无码激情| 五月天色视频| 亚洲人妻av| 1024操逼| 色欲天天综合| 26UUU精品一区二区Com| WWW.99视频| 国产午夜精品一区二区三区四区| 久久99热在线观看| 精品视频这里只有精品| 久久九九一區| 五月丁香影院| 狠狠狠狠狠狠色| 91啪级电影| 五月天操逼网| 日韩一级淫乱片一区二区三区| 色哟哟精品| 激情五月天免费视频| 超碰色综合| 任你搞免费视频观看| 丁香五月色| 亚洲亚洲永久无码777777| 丁香五月天婷婷在线视频| 69久久久| 99热这里有精品| 日本高清久| 五月丁香激情欧洲啪啪| www.天天色综合| 久久九九一區| 色色欧美色色色| 婷婷五月天久久久| 热久久这里只有精品| 激情都市五月天| 欧美成性色| 91丁香五月| 国产性爱大片久久| 国产看真人毛片爱做A片 | 九九色精品| 天天插天天插天天插天天插| 麻豆123区| 成人五月天综合网| 97热在线精品| 狠狠色婷婷丁香五月| 天天射网站| 婷婷啪啪| 激情五月影院| 综合婷婷| 日韩综合久久| 激情五月天啪啪| 色婷婷久久综合中文久久一本| 婷婷丁香五另类网站| 久久精彩免费视频精彩免费视频| 日韩AV中文字幕在线| 婷婷99狠狠躁天天久久久九九九| 99热成人| 狠狠搞狠狠操| 激情婷婷丁香五月天| 深爱五月婷婷| 色综合激情| 婷婷五月天成人综合网| 丁香五月另类小说在线阅读| 97人人射| 色五月婷婷色| 伊人婷婷五月天| 久久综合丁香| 任你擦免费视频| 99久久视频| 毛v一区二区视频| Av在线资源| 丁香五月婷婷高清| yiqicaoav| 亚洲精品网址| AV成人在线播放| 五月丁香综合中文| 五月婷婷丁香大陆免费| 色综合色五月| 操91| 六月婷婷之青青草| 免费99情趣网视频| 婷婷五月天激情小说网站| 99热在线这里只有精品| 9久热这里只有精品| 久久视频这里99| 五月丁香六月激情欧美综合| 九九热婷婷| 激情av| 天天综合精品| 五月成人丁香av91| 色婷婷AV久久| 五月丁香婷婷婷激情爱爱| 伊人婷婷大香蕉| 亚洲五月天,激情视频| 干亚洲天堂| 襙逼网| 伊人五月天在线| 丁香五月综合婷婷| 激情网五月天| 欧美日韩一区二区三区四区| 色综合偷拍| 中文字幕在线免费观看视频| 人人操Av| 亚洲最大五月六月丁香婷婷| 99爱视频| 亚洲色久| 国产女人十八水真多1| 成人永久免费视频在线观看| 丁香色五月直播| 亚洲 无码 中文字幕 中出| 热热久久99| 五月丁香啪啪啪综合网| 日韩免费视频| 成人VAV视频在线观看| 97操操操| 欧美丁香五月天| 日日操夜夜撸| 狠狠操狠狠爱| 欧美男女婷婷| 欧美va精品va老师va| 久久婷婷丁香六月天| AV成人在线播放| 另类少妇人与禽zOZZ0性伦| 九九久久腿| 丁香五月激情婷婷视频| 精品草原久久视频| 激情色播| 懂色av粉嫩av蜜臀av| 欧美在线视频免费播放| www.色婷婷。com| 激情六月婷婷| 丁香五月激情综合| 97碰人人操| 婷婷色色播五月天| 天天搡日日搡aaaaⅩ| 成人国产网站在线免费看| 久久狠狠干| 99re这里只有精品首页| 激情av| WWW、日本色丁香、co m| 精品思思久久| 狠狠五月天| 69凹凸成人综合网| 99精品久久| 欧美日本另类| 色情终和网| 日韩操人| 六月婷婷啪啪| 久久综合图片| 91精品熟女| 五月丁香啪啪激情| 激情超碰网| 99这里只有精品在线| 99小精品| 大香蕉五月丁香| 日韩美一级毛卡片| 色欲日日躁| 色激情五月| 婷婷五月丁香香蕉| 26uuu另类亚洲欧美日本一| 爱射综合| 久久久久久久97| 丁香六月婷婷五月婷婷| 伊人九九68| 色情五月天se| 九九碰九九爱97超碰| 五月丁香免费视频| 五月婷婷综合在线| 综合网色综合| 99er6热在线观看精品6| 国产婷婷色综合AV蜜臀AV| 91丨九色丨熟女高潮| 五月婷婷色播| 丁香六月婷婷社区| 九九性视频| 婷婷丁香激情五月天色色色| 婷婷色五月天第7色| 五月婷在线观看| 九九综合精品| 日韩成人网址| 丁香六月婷婷综合| 色婷婷久久综合| AA久久| 五月天婷婷基地综合网| 色色色色色五月| 激情小说婷婷| 欧美日韩国产一区二区| 五月婷婷综合在线视频小说| 91九色 熟| 亚洲色A| 五月激情婷婷四射| 婷婷五月天开心网| 色爱综合五月| 婷婷五月综合体验看| 99精品视频推荐| 综合五月丁香六月婷婷| 久久九九@| 97丁香婷婷| 大香蕉综合在线| 丁香六月婷婷| 丁香五月狠狠在线观看| 成人午夜视频精品一区| 99爱最新免费视频在线观看| 五月婷婷丁香日韩在线| www.夜夜騎夜夜狠| 一区=区操屄高清大全av| 狠狠草狠狠草| 色欲影香| www.狠狠| 婷婷丁香午夜综合影视| 激情婷婷丁香五月| jiqingliuyuetian| 99热色婷婷| 精品成人久久久久久久_一二三四视| 色~性~乱~伦~噜| 国产成人综合网| 开心五月色婷| www.91AV.COM| 色播婷婷大香蕉| 中海油常州环保涂料有限公司| 欧美在线| 天天日,天天射,天天舔| 另类图片激情五月| 99热免费| 丁香五月中文字幕久色| 99人人干人人| 色婷婷电影| 91色情播放| 玖玖99免费视频| 亚洲中文字幕在线观看| 色情综合网| 婷婷网影院| 婷婷99狠狠躁天天躁| 思思热99在线视频| 成人丁香色| 久久在线视频免费观看| 天天操天天曰| 人妻内射一区二区在线视频| 激情五月婷婷丁香综合网| 亚洲熟女色| 免费无码毛片一区二区A片| 久久99网| 一夜福利不卡| 99久久五月丁香野外| 99爱爱| 色五月婷婷色五月婷婷色五月婷婷| 免费亚洲婷婷中文字幕| 久久99热网| www.五月天色色.com| 91视屏在线观看com.wwwvv| 六月大香蕉| 2018国产大陆天天弄| 婷婷五月婷婷| 色天天狠狠干| 九月av| 久久大国产香蕉| 久久性爱视频| 五月婷婷网五月在线| 婷婷久久大香蕉| 婷婷五月在线| 亚洲熟妇AV乱码在线观看| 97婷婷丁香| 热99只有里视频| 色,激情五月天| 欲求不满的人妻| 开心激情站| 午夜九九九九九九九九九九九九九| 婷婷色五月天第7色| 九九婷婷综合| 中文字幕欧美精品久久| 五月天激情婷婷| 久久免费操| 国产三级秋霞| 激情五月网站| 久久精彩综合视频| 综合玖玖偷拍| 久热伊人91| 五月婷婷六月色| 9l视频自拍九色9l视频自拍九色9l社区 | 91久久婷婷| 久久a热| 精品皮股午夜AV| 六月丁香五月婷婷首页| 丁香花五月天激情| 激情五月丁香六月综合AVXXXX| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 婷婷六月综合在线| 五月婷婷啪啪啪| 9999综合99综合人| www.婷婷com| h在线看免费版在线看| 九九久久综合| 日韩欧美成人片| 亚洲色网址| 色久五月天| 五月天狠狠干| 丁香六月色情| 99热99日…..| a色色片| 天天做天天爱高潮片| 噜噜干日本| 婷婷激情性爱| 久操福利| 久青操| 日本欧美国产| 超碰资源在线| 在线观看av网站| 97欧美在线| 丁香六月婷婷色播| 久热亚洲| 97干在线观看视频| 亚洲婷婷丁香| 另类专区在线| 激情网第九色| 66精品国产成人| 深爱五月月天| 亚洲婷婷五月天综合| 五月激情丁香五月| 亚洲国产精品五月天| 国产99美少妇| 婷婷五月天激情偷拍| 五月丁香六月婷婷综合网| 色色丁香五月婷婷| 六月婷婷影院| 可以免费看AV网站| 深爱婷婷丁香五月激情| 天天插,天天射| 五月天婷婷影院| 热久国产| 激情小说婷婷| 欧洲电影在线观看免费版英语版 | 人妻精品久久久久久久| 日本色色色| WWW.17C亚洲精品| 久久停停超碰| 日本婷婷| 女人被躁到高潮嗷嗷叫小| 男人大jjc女人免费视频| 久久38视频| 欧美性爱日韩性爱| 97香蕉碰碰人妻国产欧美| 极品色丁香| 激情黄色五月天| 婷婷五月情天| 超碰人人艹| 久热这里| 丁香五月 性爱| 丁香六月婷婷久久高清| 激情深爱综合| 停停五月天激情网| 超碰在线9| 久久性爱视频| 艹色18p| 日本熟妇乱妇熟色A片蜜桃| 久久婷婷六月综合国际| 超碰在线综合| 六月色日韩| 五月丁香婷婷俺| 九九五月天| 九九操屄| 丁香五月区| 久热最新视频| 操操自拍| 欧洲第一无人区观看| se.久久视频在线观看| 色情综合网| www一区二区三区| 91精品久久久久久77777| 男人操女人高潮91视频| 99精品高潮| 免费99情趣网视频| 婷婷 色 丁香 夜| 五月婷婷综合在线| 丁香五月婷婷激情完整版| 久久婷婷五月天| 亚洲欧美一区二区三区爱爱动图| 激情www| 人人超碰99| 五月色情婷婷开心五月天| 日本在线wwww| 五月婷婷大香蕉| 丁香五月婷婷综合激情哟哟哟| 97热这里精品在线视频| 婷婷五月天手机版视频| 色综合久久综合中文综合网| 无码少妇高潮喷水A片免费| 欧美日本国产欧美日本韩国99| 激情五月五月五月婷婷| 91精品丝袜久久久久久| 天天肏视奸| 99热精品10| 五月丁香六月成人| 中文字幕丰满乱孑伦无码专区| 另类在线| 狠狠干五月天| 天堂在线观看视频| 六月婷婷深深爱| 极品另类| 3DAV亚洲香蕉久久 一区二区| 丁香六月 婷婷六月| 色99热| 九九精品丁香花| 五月婷婷久久激情| 亚洲成人网在线观看| 99久热在线精品99re6热| 日本色婷婷久久99精品91| 亚洲AV综合网| 久久婷婷大香蕉| 五月丁香伊人网| 激情小说五月天| 91色久| 久久久性爱视频| 久久综合婷| 亚洲人成人五月天| 国产av一区二区三区| 无码一区二区日韩| 亚洲综合激情五月久久| 三级毛片7979| 永久精品| 色操综合| 久久在线人妻| 99热久久这里只有精品| 色婷婷丁香六月| 79精品视频在线观看,| 色狠狠色综合久久久绯色AⅤ影视| 激情六月日韩| 一区=区操屄高清大全av| 色五月成人在线| 操操操97| 色婷婷五月天成人网| va婷婷在线免费观看| 五月丁香网站| 成人必爱视| 久久精品99| 色五月之第四色| 五月婷婷丁香六月| 成人做爰A片免费看网站找不到了| 久99久视频| www久久99| 丁香六月在线| 五月婷婷黄色| 五月天久久久| 热这里只有精| 亚洲精品无人区| 色噜噜在线| 99久久偷拍视频| 婷婷五月av| 亚洲成人另类|