99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實戰(zhàn)洞察。

物聯(lián)網(wǎng)云監(jiān)控平臺開發(fā)實戰(zhàn):基于MQTT的設(shè)備管理系統(tǒng)設(shè)計

物聯(lián)網(wǎng)云監(jiān)控平臺開發(fā)實戰(zhàn):基于MQTT的設(shè)備管理系統(tǒng)設(shè)計 簡介一套面向物聯(lián)網(wǎng)開發(fā)者的WEB設(shè)備管理與云監(jiān)控源碼項目適用于智能家居、工業(yè)自動化等場景解決設(shè)備遠(yuǎn)程接入、狀態(tài)監(jiān)測、數(shù)據(jù)管理與可視化的實際問題。壓縮包共1915個文件約27.24MB以PHP后端邏輯、HTML/JS前端頁面、CSS樣式、PNG圖片素材為主同時包含MySQL數(shù)據(jù)庫腳本、配置文件及說明文檔便于本地搭建和二次開發(fā)。已有836人學(xué)習(xí)瀏覽。源碼涵蓋設(shè)備注冊、數(shù)據(jù)上報、API接口、規(guī)則引擎、可視化界面等完整模塊并提供MQTT通信示例與C語言組件開發(fā)者可據(jù)此掌握從設(shè)備接入到前端展示的完整鏈路還可結(jié)合Excel數(shù)據(jù)表格和Markdown筆記理解項目結(jié)構(gòu)適合希望系統(tǒng)學(xué)習(xí)IoT開發(fā)和云監(jiān)控實踐的初中級工程師。1. 項目背景與整體設(shè)計思路1.1 為什么需要一套物聯(lián)網(wǎng)云監(jiān)控平臺我做過不少設(shè)備管理類項目但真正把設(shè)備接入、實時監(jiān)控、遠(yuǎn)程運(yùn)維、告警通知串成一條完整閉環(huán)的還是這套物聯(lián)網(wǎng)云監(jiān)控WEB設(shè)備管理系統(tǒng)。以前很多工廠或集成商的設(shè)備管理方式說句不好聽的靠的就是一張Excel表和老師傅的經(jīng)驗。設(shè)備掛沒掛、數(shù)據(jù)對不對、耗了多少電全憑人工去現(xiàn)場看效率低不說出了問題往往已經(jīng)是幾個小時之后了。這套項目的核心價值就是給傳統(tǒng)設(shè)備裝上物聯(lián)網(wǎng)這雙眼睛。通過傳感器和智能網(wǎng)關(guān)把設(shè)備狀態(tài)、環(huán)境參數(shù)、能耗數(shù)據(jù)實時采集上來再在WEB端用圖表、儀表盤、地圖等形式直觀展示。運(yùn)維人員不用再頻繁跑現(xiàn)場坐在電腦前甚至用手機(jī)瀏覽器就能看到設(shè)備的實時狀態(tài)。平臺內(nèi)置的告警規(guī)則還能在設(shè)備異常時第一時間推送通知把故障響應(yīng)時間從小時級壓縮到分鐘級這背后省下的人力成本和產(chǎn)能損失做過工業(yè)項目的人心里都有數(shù)。1.2 技術(shù)選型背后的真實考量做物聯(lián)網(wǎng)平臺技術(shù)棧的選擇直接決定后續(xù)的開發(fā)效率和運(yùn)維成本。這套源碼的技術(shù)路線比較主流后端采用Java Spring Boot框架前端使用Vue.js Element UI數(shù)據(jù)庫選用MySQL存儲業(yè)務(wù)數(shù)據(jù)消息通信層用的是EMQX或Mosquitto這類MQTT Broker。為什么這么選Spring Boot的生態(tài)成熟集成MyBatis、Redis、定時任務(wù)都非常順手Vue.js配合Element UI做后臺管理界面效率極高畢竟設(shè)備管理頁面的形態(tài)大家都熟悉——表格、表單、彈窗、樹形結(jié)構(gòu)這套組合閉著眼睛都能寫MQTT協(xié)議則是物聯(lián)網(wǎng)場景的事實標(biāo)準(zhǔn)帶寬占用低、QoS機(jī)制可靠非常適合大量設(shè)備的長連接場景。不少同學(xué)會糾結(jié)要不要上微服務(wù)或者直接用Netty自己寫通信層。我的建議是如果不是千萬級設(shè)備接入體量單體應(yīng)用加MQTT Broker的方案完全夠用開發(fā)成本低、排查問題方便后期真到了瓶頸階段再按模塊拆分也不遲。做物聯(lián)網(wǎng)平臺跑通業(yè)務(wù)閉環(huán)永遠(yuǎn)是第一優(yōu)先級過度設(shè)計是新手最容易犯的毛病。2. 系統(tǒng)架構(gòu)與核心模塊拆解2.1 三層架構(gòu)設(shè)備端、平臺端、WEB端整個平臺在大體上分為三層設(shè)備接入層、平臺服務(wù)層、WEB展示層。設(shè)備接入層負(fù)責(zé)各類傳感器、控制器、智能網(wǎng)關(guān)的數(shù)據(jù)采集和指令下發(fā)通過MQTT協(xié)議與平臺保持長連接平臺服務(wù)層是核心大腦負(fù)責(zé)設(shè)備認(rèn)證、數(shù)據(jù)解析、存儲、規(guī)則引擎、告警計算等WEB展示層面向運(yùn)維人員和管理員提供設(shè)備管理、實時監(jiān)控、數(shù)據(jù)報表、系統(tǒng)配置等界面。這三層之間通過HTTP和MQTT兩類協(xié)議交互。HTTP用于前后端業(yè)務(wù)接口比如登錄、設(shè)備增刪改查、歷史數(shù)據(jù)查詢MQTT用于實時數(shù)據(jù)上行和指令下行。為什么要用兩種協(xié)議因為業(yè)務(wù)操作和實時通信的訴求不一樣HTTP請求響應(yīng)模式適合低頻、可控的操作而設(shè)備數(shù)據(jù)是持續(xù)產(chǎn)生、需要主動推送的輪詢HTTP不僅浪費(fèi)帶寬延遲也不可控。這種混合架構(gòu)是當(dāng)前物聯(lián)網(wǎng)平臺的主流做法既保證交互體驗又兼顧實時性能。2.2 數(shù)據(jù)存儲時序數(shù)據(jù)與業(yè)務(wù)數(shù)據(jù)分離設(shè)備產(chǎn)生的數(shù)據(jù)有一個顯著特點寫入頻繁、更新極少、帶有時間戳。如果和業(yè)務(wù)數(shù)據(jù)混在一起存隨著時間推移表會變得非常大查詢效率也越來越差。這套項目里的做法是將兩類數(shù)據(jù)分開存儲設(shè)備基本信息、用戶信息、組織架構(gòu)、告警規(guī)則等存在MySQL業(yè)務(wù)庫溫濕度、電壓、電流這類遙測數(shù)據(jù)按天或按月分表也可以選擇存入InfluxDB、TDengine等時序數(shù)據(jù)庫。這里有個設(shè)計細(xì)節(jié)值得拓展一下很多設(shè)備數(shù)據(jù)本身對實時性要求高但對歷史精度要求沒那么苛刻所以在存儲策略上可以做降采樣。比如原始數(shù)據(jù)每5秒一條存3個月后可以聚合為每分鐘一條存1年后再降為每10分鐘一條。這樣既保證近期數(shù)據(jù)的高精度又能控制長期存儲的成本。代碼里通常用一個定時任務(wù)來完成數(shù)據(jù)清理和聚合調(diào)用時序庫的連續(xù)查詢功能就能實現(xiàn)。這套方案對于預(yù)算有限的團(tuán)隊特別實用因為服務(wù)器磁盤沒那么容易被打滿。2.3 平臺的核心能力邊界這套源碼作為中小型物聯(lián)網(wǎng)平臺覆蓋的能力包括設(shè)備管理、實時監(jiān)控、遠(yuǎn)程控制、告警中心、數(shù)據(jù)統(tǒng)計、用戶權(quán)限、操作日志等。設(shè)備管理支持批量導(dǎo)入導(dǎo)出方便初始化或者遷移遠(yuǎn)程控制支持下發(fā)指令并反饋執(zhí)行結(jié)果告警中心支持按設(shè)備分組、按規(guī)則模板批量配置閾值告警數(shù)據(jù)統(tǒng)計提供曲線圖和報表導(dǎo)出用于分析運(yùn)行趨勢。在實際落地中平臺還有幾個隱藏價值點容易被忽略一是操作日志完備誰在什么時間操作了哪臺設(shè)備全程留痕這在工廠審計中很關(guān)鍵二是開放API接口方便與第三方系統(tǒng)如ERP、MES對接三是數(shù)據(jù)看板支持大屏展示會議室墻上的大屏接上這個頁面整個產(chǎn)線狀態(tài)一目了然很適合做成果匯報。這套源碼的邊界和應(yīng)用場景基本覆蓋了中小型項目的絕大多數(shù)需求。3. 設(shè)備接入與上下行數(shù)據(jù)鏈路3.1 MQTT接入流程與設(shè)備認(rèn)證設(shè)備接入的第一步是認(rèn)證。每個設(shè)備在平臺注冊后會生成唯一的設(shè)備標(biāo)識如產(chǎn)品Key和設(shè)備序列號設(shè)備端連接MQTT Broker時使用設(shè)備證書或Token進(jìn)行認(rèn)證。最常用的做法是采用一機(jī)一密的機(jī)制平臺為每一臺設(shè)備生成專屬的ClientId和密碼設(shè)備連接時攜帶這些信息Broker通過認(rèn)證插件校驗合法性非法設(shè)備直接拒絕連接。從實操層面看設(shè)備接入流程可以拆成四步第一步在WEB端添加產(chǎn)品定義產(chǎn)品的數(shù)據(jù)模型包括屬性、事件、服務(wù)三類能力第二步為具體設(shè)備實例填寫序列號等信息獲取連接憑證第三步設(shè)備端使用MQTT客戶端庫如Eclipse Paho、MQTT.fx連接Broker訂閱指令主題第四步設(shè)備上報數(shù)據(jù)后平臺驗證數(shù)據(jù)格式、寫入數(shù)據(jù)庫并更新設(shè)備在線狀態(tài)。這套流程走順了后面接新設(shè)備就是純粹的配置工作不用改代碼。3.2 數(shù)據(jù)上行從JSON到結(jié)構(gòu)化存儲設(shè)備上報的數(shù)據(jù)格式通常有兩種一種是非標(biāo)的JSON字符串另一種是物模型定義的標(biāo)準(zhǔn)數(shù)據(jù)格式。推薦使用物模型的方式因為這樣平臺可以通過JSON Schema校驗數(shù)據(jù)合法性新設(shè)備接入也不用為每種設(shè)備寫一套解析代碼。例如一個溫濕度傳感器上報的JSON內(nèi)容大致為{temperature:25.6,humidity:60.3,deviceId:SN001}平臺收到后先做格式校驗再映射到內(nèi)部數(shù)據(jù)結(jié)構(gòu)最終寫入MySQL或時序數(shù)據(jù)庫。這個過程有幾個坑需要特別注意第一字段名的統(tǒng)一設(shè)備端上報temperature數(shù)據(jù)庫字段也叫temperature代碼里不會出歧義第二數(shù)據(jù)截斷問題浮點數(shù)精度在傳輸過程中可能丟失建議后端用BigDecimal或Decimal類型存儲避免后續(xù)統(tǒng)計對不上第三時間戳規(guī)范化設(shè)備上報的時間可能是本地時間也可能是UTC時間必須統(tǒng)一轉(zhuǎn)換為服務(wù)器時區(qū)的DateTime否則報表的時間線會亂套。這些細(xì)節(jié)看似零碎但直接影響數(shù)據(jù)質(zhì)量而數(shù)據(jù)質(zhì)量就是物聯(lián)網(wǎng)平臺的命根子。3.3 指令下發(fā)同步確認(rèn)還是異步通知遠(yuǎn)程控制是物聯(lián)網(wǎng)平臺的一個重要面。指令下發(fā)的流程是WEB端點擊控制按鈕后端服務(wù)收到請求后將控制指令發(fā)布到該設(shè)備對應(yīng)的MQTT主題設(shè)備端訂閱該主題并執(zhí)行動作執(zhí)行完畢后將結(jié)果上報。這里需要區(qū)分平臺命令送達(dá)和設(shè)備執(zhí)行成功兩個概念前者只表示消息到達(dá)Broker后者需要設(shè)備端回復(fù)確認(rèn)指令。在項目實踐中我習(xí)慣把所有下發(fā)的指令記錄到指令表并維護(hù)一個狀態(tài)字段取值是待下發(fā)、已送達(dá)、執(zhí)行中、成功、失敗、超時。后端下發(fā)消息后通過定時任務(wù)輪詢指令狀態(tài)如果超過設(shè)定閾值仍未收到設(shè)備回復(fù)就自動標(biāo)記超時。這種機(jī)制能讓W(xué)EB端界面向用戶展示準(zhǔn)確的指令執(zhí)行狀態(tài)而不是發(fā)出去就黑盒狀態(tài)排查離線場景下的假死指令非常好用。3.4 設(shè)備在線狀態(tài)與心跳機(jī)制設(shè)備在線狀態(tài)判斷是物聯(lián)網(wǎng)平臺基礎(chǔ)卻容易出問題的一環(huán)。純TCP長連接可以直接通過斷開事件判定掉線但MQTT的心跳包機(jī)制需要單獨處理。設(shè)備端按設(shè)定間隔發(fā)送心跳例如每60秒一次Broker如果在1.5倍的心跳時間內(nèi)沒有收到任何報文就判定連接斷開。平臺側(cè)通過訂閱在線狀態(tài)主題或查詢Broker的客戶端列表來感知這些變化。這里要說明一個實際經(jīng)驗單純依賴Broker連接狀態(tài)還是不夠的因為有些設(shè)備斷電前來不及發(fā)送遺囑消息主機(jī)已經(jīng)掉了Broker雖然能感知但展示層如果做了本地緩存狀態(tài)就會不一致。我建議平臺在設(shè)備狀態(tài)判斷時采用雙保險Broker連接狀態(tài)為主要依據(jù)服務(wù)端再做一層最后活躍時間校驗超過設(shè)定時間強(qiáng)制標(biāo)記為離線。這樣即使在Broker異常或數(shù)據(jù)推送延遲的場景下界面展示的在線狀態(tài)也不會失真太久。4. 云監(jiān)控核心功能實現(xiàn)4.1 實時數(shù)據(jù)大屏與監(jiān)控看板實時監(jiān)控功能是這套平臺的門面。它包含設(shè)備狀態(tài)總覽、實時數(shù)據(jù)儀表盤、地圖分布展示、告警滾動播報等模塊。WEB端通過WebSocket與后端保持長連接當(dāng)設(shè)備上報數(shù)據(jù)后后端服務(wù)將最新的點播數(shù)據(jù)推送到前端前端自動更新表格或圖表達(dá)到秒級看到現(xiàn)場變化的效果。大屏看板的實現(xiàn)需要從設(shè)計上區(qū)分實時數(shù)據(jù)和歷史數(shù)據(jù)兩種數(shù)據(jù)流。實時數(shù)據(jù)走WebSocket即時推送直接用當(dāng)前最新值刷新看板上的儀表盤指針和數(shù)字實時變化歷史趨勢曲線則通過HTTP調(diào)用查詢接口獲取按時間范圍返回聚合后的數(shù)據(jù)點。尤其需要注意的是數(shù)據(jù)頻率的適配如果設(shè)備每5秒上報一次數(shù)據(jù)而看板只需要30秒級別的刷新那就不應(yīng)該讓W(xué)ebSocket每條都推送再重繪圖表中間加一層數(shù)據(jù)緩沖和節(jié)流可以大幅降低前端開銷。這套系統(tǒng)在監(jiān)控大屏場景下的加載速度和流暢度都比我之前用輪詢方案做的第一版不知道強(qiáng)了多少。4.2 告警規(guī)則引擎與通知渠道告警是物聯(lián)網(wǎng)監(jiān)控的核心痛點需求。沒有告警光屏上看到數(shù)據(jù)異常等人工反應(yīng)過來損失已經(jīng)造大了。平臺內(nèi)置了一套規(guī)則引擎支持為每個物理量配置多個告警規(guī)則比如溫度高于80度觸發(fā)緊急告警持續(xù)5分鐘仍然高于75度觸發(fā)高溫預(yù)警。規(guī)則引擎的核心就是對流式數(shù)據(jù)進(jìn)行持續(xù)計算每條新數(shù)據(jù)進(jìn)來都要做閾值判斷同時還要處理持續(xù)時長、恢復(fù)判斷、告警去重等問題。告警消息的觸達(dá)方式也是物聯(lián)網(wǎng)平臺比較看重的一塊。除了在WEB端彈出通知和告警列表之外往往還要支持郵件、短信、企業(yè)微信/釘釘機(jī)器人等渠道。在項目里我實現(xiàn)了一個簡單的策略模式定義一個告警通知接口不同渠道各自實現(xiàn)一個發(fā)送方法告警觸發(fā)時按照規(guī)則配置的路由策略決定發(fā)哪個渠道。短信適合值班人員接收的緊急告警郵件適合常規(guī)日報企業(yè)微信群機(jī)器人適合運(yùn)維協(xié)同。花錢買短信的人都知道渠道收斂很重要不然一分鐘能給你發(fā)一兩百條告警短信誤報和重復(fù)告警能煩死人。4.3 歷史數(shù)據(jù)查詢與報表統(tǒng)計歷史數(shù)據(jù)是設(shè)備優(yōu)化和故障分析的原始依據(jù)。平臺提供兩種查詢方式原始數(shù)據(jù)明細(xì)查詢和聚合統(tǒng)計。明細(xì)查詢用于定位某個時間點的具體數(shù)據(jù)聚合統(tǒng)計用于分析趨勢、均值、峰值等。比如查詢某臺設(shè)備一周內(nèi)的溫度最大值、平均值用于判斷設(shè)備運(yùn)行環(huán)境是否穩(wěn)定。報表模塊可以導(dǎo)出Excel或生成PDF方便運(yùn)維會議匯報。在實現(xiàn)上有幾個效率點值得注意。第一查詢條件必須帶時間范圍索引否則后期數(shù)據(jù)量大了會慢到?jīng)]法用第二聚合統(tǒng)計盡量在數(shù)據(jù)庫層面完成SQL里用GROUP BY配合時間窗口函數(shù)不要把所有數(shù)據(jù)撈到Java內(nèi)存里再聚合第三緩存熱數(shù)據(jù)最近一小時的實時數(shù)據(jù)可以放在Redis里查詢時優(yōu)先走緩存緩存未命中再落庫。這些優(yōu)化做完大數(shù)據(jù)量下的報表打開速度能快一個數(shù)量級用戶體感完全不同。4.4 視頻監(jiān)控與告警聯(lián)動很多物聯(lián)網(wǎng)平臺還有接入攝像頭視頻流的場景。源碼里通過GB28181協(xié)議或RTSP拉流方式接入網(wǎng)絡(luò)攝像頭WEB端通過Flv.js或WebRTC播放實時視頻流。更實用的是告警聯(lián)動功能當(dāng)某個報警觸發(fā)后系統(tǒng)自動調(diào)取關(guān)聯(lián)攝像頭的錄像或截圖保存到告警記錄中方便事后回溯現(xiàn)場。這在養(yǎng)殖場、倉庫、配電房等場景中極其有用光看數(shù)據(jù)很難判斷現(xiàn)場是什么狀況但視頻畫面一看就明白了。不過說實話視頻監(jiān)控模塊在中小型項目里不宜做太深涉及視頻轉(zhuǎn)碼、存儲、回放的話工程量會成倍上漲。建議初期只用云臺控制、實時預(yù)覽、截圖三種基礎(chǔ)能力后續(xù)再按需擴(kuò)展錄像回放、智能識別人員闖入、煙火檢測等功能。畢竟項目核心是云監(jiān)控的云端管理能力視頻是輔助增強(qiáng)不是主菜。5. WEB端設(shè)備管理與權(quán)限設(shè)計5.1 設(shè)備全生命周期管理WEB端的設(shè)備管理模塊要做到從設(shè)備注冊到注銷的全生命周期管理。設(shè)備狀態(tài)分為未激活、在線、離線、禁用、注銷五種。設(shè)備新增后處于未激活狀態(tài)第一次成功上報數(shù)據(jù)后自動激活并上線管理員可以手動禁用某臺設(shè)備禁用后平臺忽略該設(shè)備的采集數(shù)據(jù)和指令請求注銷則是徹底移除設(shè)備并保留歷史記錄供追溯。設(shè)備詳情頁我建議至少包含四個區(qū)塊基本信息產(chǎn)品名稱、序列號、安裝位置、經(jīng)緯度等、運(yùn)行狀態(tài)當(dāng)前在線狀態(tài)、最后在線時間、連接IP、實時數(shù)據(jù)當(dāng)前最新的各屬性值、歷史操作指令下發(fā)記錄、告警記錄。很多運(yùn)維問題都是從這臺設(shè)備最后在線是什么時候這種基礎(chǔ)查詢開始的信息越全排查越省力。設(shè)備導(dǎo)入導(dǎo)出功能也建議在初期就做。工廠一次性接入幾百臺設(shè)備如果手工逐個添加半天時間就耗在這了。Excel模板批量導(dǎo)入 二維碼批量生成是部署階段最高效的手段。設(shè)備安裝時現(xiàn)場人員掃碼就能在手機(jī)上看到設(shè)備信息并綁定工單安裝效率明顯提升。5.2 組織架構(gòu)與多租戶權(quán)限模型企業(yè)使用物聯(lián)網(wǎng)平臺時往往涉及總部和多個分部或車間的組織結(jié)構(gòu)。WEB端需要支持按組織架構(gòu)管理設(shè)備也就是設(shè)備的歸屬不只是一個部門而是層層嵌套的樹形結(jié)構(gòu)。總部管理員能看到所有設(shè)備數(shù)據(jù)車間管理員只能看到自己車間內(nèi)的設(shè)備。這種基于RBAC模型的權(quán)限管理比較簡單用戶、角色、權(quán)限點、數(shù)據(jù)范圍四個維度就夠了。數(shù)據(jù)權(quán)限的控制是很多項目容易做糙的地方。簡單粗暴的做法是查詢時只做名稱過濾但真正的數(shù)據(jù)權(quán)限需要在SQL層面按組織ID進(jìn)行攔截??蚣苌峡梢酝ㄟ^MyBatis的攔截器自動拼接數(shù)據(jù)權(quán)限條件凡是查詢設(shè)備、數(shù)據(jù)、告警等核心表的地方都自動帶上當(dāng)前用戶的可視范圍條件。這樣即使開發(fā)人員中途忘了寫權(quán)限判斷也不會出現(xiàn)越權(quán)訪問的低級漏洞。5.3 前端交互與性能體驗WEB管理端畢竟是給管理員天天用的交互體驗直接決定平臺被接受的程度。項目使用Vue.js Element UI表格支持分頁、排序、列顯隱、批量選擇操作頁面操作步驟盡量控制在2跳以內(nèi)。設(shè)備列表和實時監(jiān)控頁在數(shù)據(jù)量大時要有分頁和懶加載機(jī)制否則每3秒鐘WebSocket推一次數(shù)據(jù)前端頁面卡成幻燈片那就沒法用了。我實際測試下來前端在這幾個點上下對功夫體驗提升最明顯一是表格的虛擬滾動渲染幾千行不卡二是圖表的動畫開關(guān)實時數(shù)據(jù)刷新時關(guān)閉動畫流暢很多三是全局異常提示和加載狀態(tài)的一致性避免用戶重復(fù)點擊提交。整體的前端架構(gòu)建議采用Vuex存儲用戶信息、權(quán)限點、設(shè)備樹緩存避免每次切換頁面都要重新拉取設(shè)備列表。6. 部署上線與常見問題排查6.1 Docker Compose一鍵編排部署部署這套平臺推薦使用Docker Compose。數(shù)據(jù)庫、Redis、MQTT Broker、后端服務(wù)、前端Nginx五個容器通過一個compose文件編排起來非常省心。特別是現(xiàn)場實施的時候目標(biāo)機(jī)器上環(huán)境可能千奇百怪Docker可以把服務(wù)和依賴打包在一起部署一臺新服務(wù)器大概就是十分鐘的事情。部署時要注意幾個配置項MySQL的volume掛載路徑要持久化不然容器重建數(shù)據(jù)就丟了EMQX要開放18083端口用于Dashboard管理1883端口用于設(shè)備連接Nginx配置HTTP長連接和WebSocket升級頭否則前端實時推送連不上。生產(chǎn)環(huán)境務(wù)必開啟防火墻只放行必要端口設(shè)備接入端口、Web端口、SSH端口三個就好其他端口全關(guān)。6.2 后端服務(wù)層面常見問題與優(yōu)化在實際運(yùn)行中后端服務(wù)最常碰到的問題基本集中在三塊數(shù)據(jù)庫連接池耗盡、Netty線程阻塞、內(nèi)存溢出。連接池耗盡多半是因為慢SQL太多排查可以打開MySQL的慢查詢?nèi)罩景褕?zhí)行時間超過1秒的SQL抓出來做索引優(yōu)化線程阻塞常見于設(shè)備大量涌入時的任務(wù)隊列擠壓建議拆分線程池設(shè)備消息處理和數(shù)據(jù)落庫分開內(nèi)存溢出則需要調(diào)整JVM參數(shù)同時關(guān)注是否有集合類沒有清理導(dǎo)致對象無法回收。還有一個容易忽略的服務(wù)端優(yōu)化點是消息并發(fā)處理。全量設(shè)備長時間在線、數(shù)據(jù)流量大時單機(jī)處理能力會到瓶頸。如果單機(jī)資源還不夠必然要上集群。這一步建議后置先把單機(jī)壓到極致再做集群擴(kuò)展避免在項目初期就背上一堆分布式復(fù)雜度。6.3 設(shè)備端接入的典型異常排查這里整理了一張設(shè)備接入時的排查速查表我在多個現(xiàn)場項目實施中用過可以減少大量溝通成本現(xiàn)象可能原因快速排查思路設(shè)備連不上MQTT認(rèn)證失敗核對ClientId和密碼檢查是否一機(jī)一密機(jī)制設(shè)備連上了但數(shù)據(jù)沒入庫主題訂閱錯誤檢查設(shè)備發(fā)布主題與平臺訂閱主題是否匹配數(shù)據(jù)入庫但沒有顯示物模型字段映射錯誤檢查數(shù)據(jù)庫字段名與上報JSON字段名是否一致設(shè)備狀態(tài)一直離線心跳間隔配置過大查看平臺日志中的最后活躍時間調(diào)整心跳策略指令下發(fā)設(shè)備無響應(yīng)設(shè)備處于透傳模式確認(rèn)設(shè)備是否訂閱了指令主題查看指令狀態(tài)機(jī)每次在現(xiàn)場排查問題我第一步永遠(yuǎn)是看設(shè)備端日志和平臺端日志的時間戳對齊沒有。設(shè)備上報時間、平臺接收時間、入庫時間三個時間一對比鏈路瓶頸在哪個環(huán)節(jié)基本就清楚了。6.4 實戰(zhàn)心得從源碼部署到二次開發(fā)拿到這套源碼之后我建議先不急著改代碼按以下步驟走一遍第一步部署起基礎(chǔ)環(huán)境跑通設(shè)備模擬器上報數(shù)據(jù) - WEB端看到實時數(shù)據(jù) - 修改設(shè)備閾值觸發(fā)告警這條主鏈路第二步仔細(xì)閱讀數(shù)據(jù)庫設(shè)計文檔和核心代碼重點理解數(shù)據(jù)表之間的關(guān)系第三步針對自己的業(yè)務(wù)場景做二次開發(fā)優(yōu)先從增加一種產(chǎn)品類型這種小需求入手逐步熟悉代碼風(fēng)格第四步再進(jìn)行頁面定制化改造。二次開發(fā)時注意保持原有分層結(jié)構(gòu)不要在Controller里寫復(fù)雜業(yè)務(wù)邏輯所有數(shù)據(jù)處理都放到Service層。自定義告警規(guī)則時盡量復(fù)用原來的規(guī)則引擎接口而不是在原有代碼里加特定判斷邏輯。這樣后續(xù)升級官方源碼時改動沖突會小很多。還有一點就是在改數(shù)據(jù)庫表字段時及時同步更新前后端的數(shù)據(jù)模型代碼報錯說找不到字段的問題在二次開發(fā)階段我?guī)缀趺看味紩龅健?. 寫在最后一次完整的物聯(lián)網(wǎng)閉環(huán)實踐做這套物聯(lián)網(wǎng)云監(jiān)控平臺帶給我最大的體會是物聯(lián)網(wǎng)系統(tǒng)真正的復(fù)雜度不在通信協(xié)議也不在某個炫酷的前端圖表而是把設(shè)備接入、數(shù)據(jù)流轉(zhuǎn)、告警處理、業(yè)務(wù)展示這條鏈路完整地串起來每一環(huán)都可靠運(yùn)轉(zhuǎn)。設(shè)備端斷線重連、平臺側(cè)數(shù)據(jù)清洗、WEB端信息展示任何一個環(huán)節(jié)出紕漏整套系統(tǒng)的可信度就會打折扣。在實際落地過程中我還有一個很深的經(jīng)驗項目驗收階段展示給客戶看的永遠(yuǎn)不是代碼寫得多漂亮而是業(yè)務(wù)的完整閉環(huán)。從設(shè)備添加開始到數(shù)據(jù)上傳到異常告警到遠(yuǎn)程控制再到報表導(dǎo)出每一步都能走得通、看得見、解釋得清這個項目就成功了九成。這套源碼的價值正在于它把上述細(xì)節(jié)都做了相對規(guī)范的實現(xiàn)給二次開發(fā)提供了一套可以起步的骨架。最后再分享一下個人部署體驗如果條件允許建議在同一臺性能還行的服務(wù)器上完整部署一遍用MQTT.fx模擬10臺設(shè)備做壓力測試觀察CPU和內(nèi)存指標(biāo)調(diào)整數(shù)據(jù)庫連接數(shù)和JVM參數(shù)。這個過程走完你對這套系統(tǒng)的理解深度比單純看源碼要扎實得多。做物聯(lián)網(wǎng)這行動手永遠(yuǎn)是學(xué)習(xí)效率最高的方式。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷综合六月| 丁香五月91| 五月丁香久久激情综合| 91美女被操| 欧美在线骚货| 超碰资源在线| 99少妇精品| 九月婷婷综合| 久久久婷婷| 天天操天天插| 高清无码网址| www,av好吊操| 开心五月婷婷六月丁香| 美日韩成人| 丁香六月在线综合| www.久久| 成人在线99| 永久AⅤ1| 欧美激情凹凸丁香网| 人妻激情综合| 91 九色 入口| 丁香啪啪中文字幕| 激婷网| 生活片五区| 怡红院院久久| 蜜桃婷婷丁香五月天狠狠久久综合| 久久99精品久| 偷拍九九热| 久久婷婷视频| 色偷偷综合| 六月天婷婷| 欧美性色五月天| 色色色精品无码区| 玖玖伦理电影| 开心激情色婷婷五月天| 狠狠色狠狠干| va婷婷在线| 男人天堂99| 中文字幕成人版| 六月婷婷开心| 99国产精品白浆在线观看免费| www.色五月| 俺也去综合| 9999热在线免费观看| 五月婷婷涩涩爱| 婷婷久久综合久| 五月亭亭开心网| 色五月婷婷五月天激情综合| 5月婷婷激情在线| 五月天激情无码高清| AV天堂淫乩| 99精品自拍视频| 日本全黄一级999| 久草婷婷网| 五月婷婷五月天| 久久人人看| 久久久久久人妻久久久久久久久久人妻久久久 | 操人妻视频91| 色欲色香伊人| 久热中文字幕| 国产一级片| 在线中文亚洲| 五月色影院| 成人亚洲精品| 色色五月婷婷| 91女人18毛片水多国产| 99婷婷国产最新视频| WWW.久久久久久久久久久久久| 日韩熟女啪啪视频| 强壮公让我夜夜高潮A片视频| 丁香五月Av| 丁香五月欧美成人| 性无码专区无码| 九久9精品| 婷婷五月六月| 日本三级第一页| 91丨九色丨首页| 婷婷五月综合丁香久久| 五月婷婷人人人操| 十月丁香婷婷| 噜噜噜精品欧美成人在线观看| 这里只有精品视频看看| 亚洲欧美婷婷五月色综合| 噜噜色噜噜网| 日本色色色| 狠狠操狠狠插| 婷婷五月色情| 五月噜噜噜色综合| 99久久五月婷婷| 99人妻碰碰碰久久久久视| 九九热免费视频| va婷婷| 婷婷激情五月天在线| 婷婷涩涩五月天| 国产精品久久久海的味道| 欧美色97| 一点色成人网| 中文精品在| 亚洲夜五月| 婷婷五月图片小说视频| 激情小说婷婷| 婷婷综合在线播放| 一区二区三区四区无码| 色欲影香| 欧美日韩成人h| 影视av久久久噜噜噜噜噜三级| 日韩欧美一区二区三区四区| 色色色综合色| 亚洲成人无码专区| 五月丁香六月在线欧美| 九九久久这里只有精品XB| 嫩草乱码一区三区四区| 成人国产欧美大片一区| 欧美、日韩、中文、制服、人妻| 五月激情精品视频| 97精品综合| 婷婷色五月综合| 玖玖在线视| 丁香五月综合图片在线观看| 激情综合网五月丁香| 久久久99精品免费观看| 天天爽爽日日做做| 超碰91人人操| 五月婷婷色啪| 欧美人妻一区二区| 精品一区久热| 五月天激情网址| 天天综合五月| 丁香五月婷婷欧美激情-中文天堂最新版在线观看 | 色欲婷婷五月天| 丁香欧美| 婷婷色网| 成人婷婷桔色| 五月色丁香| 99热高清在线| 五月香婷婷| 丁香婷婷激情网站| 婷婷性爱无码视频| 精品人妻一区二区三区四区不卡在| BlACKEDRAW视频一区二区| 桃色五月婷婷| 久久激情五月| 久人操| 99色综合网| 五月天久久综合婷婷丁香| 九九热最新| 五月激情网站| 超碰激情网| 国模狼狼| 五月天啪啪啪| 涩 五月 婷婷 狠狠| 五月丁香综合啪啪対白| 亚洲中字AV电影在线网站| 激情欧美婷婷| 国产精品电影| 激情综合4月| 大香蕉婷婷| 99热官网精品在线| 天天爽夜夜操| 四色永久成人网站| 极品少妇XXXX精品少妇偷拍| 熟女五月天久久综合| 超碰av在线| 激情五月,激情综合网| 另类综合色| 亚洲一区二区 成人网站戴套| 亚洲另类在线观看| 极品人妻VIDEOSSS人妻| 日韩激情人伦人| 99热8| 国产精品视频网| 天天做天天双| 成人看片网站| 色婷婷色五月天| 另类图片五月天激情| 五月六月伦理| 91精品综合久久婷婷九色| 婷婷激情五月天色| 五月婷婷精品视频| 色婷婷激情| 99日本视频在线观看专区| 婷婷色五月丁香六月欧美啪| 五月婷视频| 超碰人人干| 99久久6| 开心婷婷五月激情网小说| 日狠狠| 九九色热| 午夜成人av在线| 九九99视频| 亚洲在线网站| 丁香五月婷婷色| 99热99热在线观看| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 久久久久9| 99亚洲综合| 欧美69久成人做爰视频| 色丁香五月婷婷| 六月丁香大香蕉| 丁香五月天社区| 99ri国产在线| 五月婷婷综合成人| 91丨九色丨国产打屁股| 五月婷婷激情五月| 五月丁香六月色情网欧美| 久久丁香婷婷色情综合| 色色五月天婷婷| 五月天激情综合10p| 人妻中文av| 有哪些A片网站| 久久综合五月天| 久热这里只有精品3| 精品一二三区久久AAA片| 国产高清精品色| 色综合中文色综合网| 婷婷九月狠狠色| 亚洲激情AV| 久香草视频在线观看| 五月婷婷七月丁香| 人人播| 五月丁香婷婷激情视频| 日本精品。999| 久热久操久热久草国产91| 婷婷俺去也| www.五月天社区| 91超碰在线播放| 狠狠婷婷色| 九色色| 综合亚洲六月婷婷在线| 肏屄色播伊人97婷婷| 人人草人人爱| 久久久久er热| 97操碰视频| 99热这里只有精品一区| 天天日狠狠| 五月婷久久草| 色99www.| 国产黄色av| 色九月婷婷| 噜噜狠狠色综合久| 婷婷五月天伊人| | 噜一噜免费视频| 丁香五月婷婷99| 91精品激情9| 天天干夜晚夜操| 色色综合成人网| 9有码中文| 婷婷日日夜夜| 五月丁香五月综合欧美| 欧美va亚洲va在线播放| 亚洲99在线| 秋霞学生妹一二级| 影音先锋色婷婷| 日韩十国产极品久久| WWW.五月天9999| 五月色网| 9久久精品视频| AV亚洲在线| 乱精品一区字幕二区| 成片免费播放| 久久99久久99久久99人受| 久热一本| 亚洲综合五月天婷婷| 婷婷五月天色网久| 第一区久久网站| 亚洲激情 久久| 亚洲综合在线伊人婷| 欧美大香蕉视频| 91美女艹逼网站| 狠狠干五月| 超碰人妻公开在线| www.一起草av| 五月婷在线影院| 97超碰在线免费观看| 五月天丁香欧美激情| 丁香六月av| 中文av在线观看| 五月天综合在线| 91超碰在线播放| nvrentiantang av| 日韩亚洲视频| 男人先锋久久| 任你日热视频| 激情五月天婷婷激情| 97黑人精品区| 丁香五月花婷婷开心| 久久久er热| 66久久视频在线| 99色综合| 91精品久久久久久综合五月天| 激情五月天婷婷五月天| 色色色热热热| 久久成人亚洲欧美电影| 91超碰九色| 99热精品网| 深爱丁香激情| 青草五月天| 丁香花色色网| 五月婷狠狠| 色情婷| 九九热在线99| 无码G高清天| 大陆肏屄视频| 激情久久久| 丁香婷五月| 五月色婷婷综合| 婷婷五月激情图片| 五月婷婷 激情按摩| 荡乳尤物3HP1V5| 嫩草免费视频| 色激情五月| 婷婷激情伍月网| 亚洲综合色网站| 性生活视频98791| 丁香六月婷婷综合欧美| 五月丁香综合激情| 91碰操| 色激情五月| 五月丁香久久综合| 九九大香蕉黄色影院| 亚洲综合另类| 色婷五月天| 69激情小说| 久久A区B区| 婷婷综合在线观看视频| 激情五月婷婷开心网| 亚洲激情综合| 激情综合婷婷| 激情图片久久| 欧美日本99| 五月丁香六月婷婷亚洲天堂网站| 天天舔天天| 99精品一二三四视频| 亚洲区视频| 亚洲精品V天堂中文字幕| 精品久久9| 99视频一区| 99无码视频| 久久五月婷综合网| 天天 青草 制服丝袜 在线| 停停五月丁香| 五月丁香花激情综合网| 久久精彩免费视频| 婷五月天天| 婷婷在线综合| 日韩99视频| 亚洲五月情| 婷婷99| 中文字幕按摩做爰| 六月丁香婷婷综合影院| 亚洲欧美一区二区三区四区爱爱动图| 久草婷婷网| 五月婷婷黄色| 五月停停色色丁香| 久久看婷婷| 黄页大全十八禁| 丁香五月激情五月| 开心 五月 综合| 五月丁香婷爱在线| 色婷婷成人色网| 亚洲AAA| 婷婷五月激情天| 综合色久| 五月丁香婷婷五月色| 激情综合亚洲| 3p久久| 成人在线视频一区| 99精品在线观看视频| 欧美25p| 婷婷综合久久综合| www.夜夜操| 久久精品五月| 激情六月婷婷| 久久这里只有精彩| 五月天激情小说| 蜘蛛女免费观看完整版高清电影| 中文字幕按摩做爰| 色综合久久久久久久久五月| 欧美三级视频下载| 91操熟女| 亚洲性爱干干| 高清无码网址| 久久怡红院| 青青操avbb| 精品人妻伦九区久久AAA片| 成人 在线 日韩| 99久久99久久综合| 久久五月婷综合网| 久热精彩视频98| www.五月瑟| 婷婷五月天亚洲综合网| 噜噜噜久久| 精品女人九九九| 色一情一乱一乱一区91Av| 久久视网36| 色综合丁香| 99热国内| 国产亚洲99久久精品熟女| 99在线观看精彩视频| 五月深爱激情网| 俺去婷婷 丁香| 丁香六月婷婷久久综合| 久久99久久99精品免观看粉| 熟妇无码乱子成人精品| 色婷婷五月天在线| 六月婷基地| 99热成人| 思思久久99| 九九碰九九爱97超碰| A片试看120分钟做受视频红杏 | 五月丁香好婷婷姑娘综合网| 久久丁香社| 亚洲99热| 亚洲va在线∨a天堂va欧美va| 久久99婷婷| 五月网站| 婷婷91| 天天情色五月天| 99丁香五月婷| 丁香五月成人| 亚洲无码99| 色色色视频免费无码| 91大屁股在线| 天天干天天做| 婷婷射图| se影音资源在线观看| 亚洲区,视频区,视频区免费| 综合色七七| 五月丁香激情综合啪啪| 婷婷久久五月天| 无码日本精品XXXXXXXXX| 色综合九九| 99aese| 久9久9热久热| 色色丁香五月天社区| 婷婷五月天福利| jizzdr| 26uuu欧美日韩| 97日本在线| 五月丁香黄色视频| 欧美色久| 激情五月天婷婷视频| 性视频久久| 99热综合| www.色婷婷| 99热这里只有免费精品| 婷婷五月天堂| 婷婷成人AV| 丝袜熟女一区二区三区| 99婷五月| 婷婷五月五月丁香| 麻豆观看夏晴子| 91九色首页| 中文字幕综合网| 开心激情网五月| 天天综合亚洲综合| 91啪级电影| www.久久久久久| 噢美99| 亚洲国产精品VA在线看黑人| 熟妇人妻中文字幕无码老熟妇| 久99热| 久播影院免费观看电视剧大全最新网| 狠狠色婷婷六月激情网| 五月婷婷精品无在线| 色五月亚洲五月天| 91艹人| 六月丁香五月激情亚洲AV| 亚洲欧洲午夜成人精品av| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 五月停停999| 欧美色偷拍| 在线综合91| 久久爱综合| 99在线看片| 激情电影五月婷婷| 成人无码精品1区2区3区免费看| 狠狠操狠狠操AV| 色吧综合网| 婷婷天天日婷婷| 久久这里只精品| 天天天天干| 青草网在线观看| 久9久成人精品视频| 国产精品国产| 久久五月丁香| 亚洲久久视频| 五月天另类小说久久小说网| VA婷婷亚洲| 丁香五月 综合| www.99热视频| 嫩草综合网| 丁香五月婷婷五月天在线| 99精品在线观看| 色综合爽| 天天天天色天天天天天干| 丁香六月欧美| 思思久久精品| 色无婷婷| 激情综合在线观看| 婷婷五月天激情偷拍| 色婷婷六月开心中文字| 亚洲成人无码网站| 色婷婷成人做爰A片免费看网站| 天天躁日日躁狠狠躁日日躁2022年5月9日| 亚洲一二三网| 99视频自拍| 久热这里有精品视频| 激情九九综合网| 新激情五月天天在线网| 色噜噜狠狠色综合日日| www.1024久久| 色网站99| 狠狠穞A片一區二區三區| 激情婷婷色色| 丁香五月综合| 中文在线成人| 日本婷婷丁香五月| 综合五月激情网| 玖玖在线视| 色婷婷小说| ady狠狠入| 男女99免费视频| 色丁香久综合在线久综合在线观看| 国产密乳av一区二区三区四区| 久久草大香蕉| 丁香激情五月天| 欧美五月丁香啪啪响视频| 无码色色| 激情五月图| 五月婷婷丁香五月天| 婷婷丁香在线| 97热在线精品| 国产色99| 亚洲亚洲人成综合网络| 精品成人久久久久久久_一二三四视| 五月天性色| 激情另类综合| 97超碰欧美中文字幕| 欧美成人无码高清一区二区三区| 日本九九视频| 婷婷干六月综合旧址| 狠狠操天天操| 色五月综合在线| 色开心五月丁香| 婷婷五月天.com| 丁香婷婷基地| 五月天婷婷綜合院| 五月丁香综合网| 国产成人AV不卡| 五月情丁香色| 综合网天天| 99在线资源| 亚洲色婷婷五月| 熟女人妻一区二区三区免费看| 精品99在线| www夜夜操com| 五月天婷婷Av| 五月天停停成人网| 久久久婷婷五月天| 五月丁综合在线观看| 亚洲九九视频| 这里只有精品在线视频精品| 婷婷久久综合久| 九月婷婷综合网| 成人精品亚洲性爱| 婷婷五月丁香色播| 色婷婷先锋| 免费亚洲婷婷| 久热这里只有精品性色AV| 亚洲综合1024| 99ri精品视频在线观看| 色色色999| 欧美影院婷婷| 日韩啪啪网| 日本一道久久| 色情五月综合婷婷| 激情欧美婷五月| 国产肥白大熟妇BBBB视频| 丁香五月综合色婷婷| 久久这里只有精品99| 综合狠狠伊人| 少妇人妻丰满做爰XXX| 婷婷九月激情网| 成人午夜视频精品一区| 国产精品蜜臀99| 五月丁香久久久| 婷婷六月激情在线视频| 玖玖热99| 九九久久99精品免费观看www| 99riAV国产精品视频| www.91操| 七七九九色色| 91操操| 婷婷激情五月天亚洲综合| 天天天天天操| 人妻在线网站| 91丨九色丨熟女高潮| 99爱视频精品在线观看| 嫩草AV久久伊人妇女超级A| 久久久人人人妻丝丝丝| 九九色天堂| 精品久久久999| 色五月开心婷婷| 日本啪啪视频HD| 日本五月婷| 色婷婷av在线| 国产精产国品一二三在观看 | 婷婷激情六月天视频| 91日综合欧美| 五月综合色| 桃色激情婷婷伊人网| 九九无码AV| 五月婷婷丁香俺日污视频| 久久综合无| 丁香五月影院| 五月丁香成人网| 亚洲色9| 蒲京久久无码视频| 国产一级片| 久久久人人人妻丝丝丝| 欧美啪啪9| 一本大道嫩草AV无码专区| 五月激情啪啪| 天天插综合| 婷婷开心激情综合五月天| 小骚穴电影| 蜜桃成语时李时珍 免费| 五月天婷婷视频| 99精品激情| 五月婷婷综合天天操| 99re免费精品视频| 26uuu亚洲精品国产| 久久久WWW| 内射 无码 伊人| 天天摸天天肏| 99视频在线精品| 国内婷婷丁香社区在线播放| 丁香五月综合激情性爱| 碰碰碰97国产| 九九色综合| 97se视频在线| 婷婷五月伦理网站| 深爱激情九九五月天| 午夜丁香综合婷婷| 色啪久| 久久久婷| 99久久久| www.婷婷,com| 天天天天天天操| a色色色色色| 99内射视频| 日日噜噜夜夜狠狠久久丁香五月| 五月丁香婷婷综合网| 激情网婷婷五月天| 成人超碰Av| 日韩抽插操逼| 久热这里只精品| 九九九九九九毛片| 激情丁香五月综合| 热思思九九| 婷婷亚洲综合| 欧美丁香五月夫妻天| 五月天停停基地| 婷婷六月网| 国产色色在线| 777色婷婷爱五月| 91婷婷在线| 性色av大香综合| 婷婷久久婷婷色五月| 丁香五月综合网| 亚洲无AV在线中文字幕| 天天在线久久综合 | 丁香六月色婷婷欧美| 婷婷五月综合社区| 成年人夜夜喷水| 狠狠色噜噜狠狠| 九九综合五月欧美| 亚洲AV免费国产电影| 婷婷五月天首页激情| H亚洲| 色区久久| 色婷婷激情| 大地9中文在线观看免费高清| 五月丁香六月激情综合| 色婷婷六月| 五月丁香啪啪啪| 国产在线aaa片一区二区99| 久久久久人妻| 狠狠干最新地址| www.金莲av| 丁香青青五月天| 超碰国产AV| 日韩色久| 色七色九九| www.久久五月天.com| er99免费视频在线| 99久久久| 碰97久久| 开心五月天激情网| 艹B高清无码| 狠狠色中色| 久久婷婷丁香视频网| 一级七香蕉| 91色噜噜狠狠狠狠色综合| 一本久道综合色婷婷五月| 狠狠艹狠狠艹| 99国产小视频| 26uuu丁香婷婷五月| 婷婷五月丁香基地| 草草女人亚洲| 色婷婷色综合激情91| 婷婷精品视频| 99色一| 婷婷99狠狠| 综合网五月| 色和综合网| 欧在线一区| 99久久97| 九九香蕉网| 色综合久久88色综合中文字幕| 久久久久丁香婷婷五月天| 91色综合| 五月丁香婷婷欧美色图视频五月丁香777电影 | 9er热在线精品视频| 99热这里只有精品2016| 第四色五月婷婷| 伊人久久大香网| 综合在线丁香五月| 日本系列_4页_777FP| 婷婷中文字幕| 嫩草AV久久伊人妇女超级A| 无码一级片| 五月天婷婷一起草| 亚洲美女网Va| 色久综合| 亚洲婷婷丁香| 婷婷丁香色情| AA丁香综合激情| 色婷婷色综合激情91| 婷婷丁香六月影视| 久久性操| 婷婷五月在线| 爱草视频在线| 亭亭五月色男人| 亚洲国产另类av| site:picc-up.com| 日本在线视频www色| 伊人99久久| 天天开心天天色| 五月天婷婷7米| 久久97久久99久久综合欧美| 五月婷丁香| 综合色播| 第四色色色色色丁香五月天| 99热久久这里只有精品| 五月丁香啪啪综合| 9 9热这里有精品| 亚州日本欧州韩美高青高潮一| 4399在线日本A片| 色婷婷狠狠18yy| 99区视频| 99热激情| 91日本在线| 十一月婷婷激情四射| 人碰人人人玩91| 婷婷五月免费观看| 性综合网| 九九色中文| 久久婷.com| 人人妻人人澡人人爽| 五月激情网综合| 免费看欧美成人A片无码| 色 免费网站视频| 99热青青草| 超碰97久久| 五月丁香色婷婷基地| 午夜色婷婷| 久久久久久久久久91| 婷婷爱五月天| 亚洲AV无码一区二| 色色色com| 国产亚洲99久久精品熟女| www开心激情网| 欧洲电影在线观看免费版英语版 | 一本久道综合99| 狠狠色大香蕉| 东京热人妻一区二区三区在线| 99色热综合| 九九成人电影婷婷| 婷婷射图五月天| 激情6月| 夜夜爽天操| 五月刺激丁香月综合| 亚洲丁香五月| 人妻在线网站| 1024操逼视频| 成人五月丁香社区| 少妇激情基地| www.zbzhongsen.com| 国语对白性爱视频播放| 少妇AB又爽又紧无码网站| 色婷婷色久综| 婷婷94s| 综合久久99| 丁香影院五月综合| 五月六月伦理| 97在线/亚洲| 五月婷婷在线视频| 最新精品视频99| 成人五月天。COM| 五月婷婷丁香俺日污视频| 久久大香蕉视频| 在线另类| 婷婷激情五月天亚洲综合| 性爱技巧五月| 久久婷狠狠色| 人妻性爱| 九九成年视频| 亚洲操人| 亚洲丁香五月美女| 九九综合88| 九九激情综合| 色综合久久88色综合中文字幕| 9国产在线视频| 99精品亚洲| 国产激情AV| 成人无码髙潮喷水A片| 噜噜精品| 丁香五月色| 黄色激情网站在线观看| 久久久WWW| 五月婷婷六月激情网| 99热高清在线| 国产精品VIDEOSSEX久久发布| 色婷视频| 熟女色专区| 婷婷色色色| 五月婷六月| 久久免费视频62| 亚洲操逼片| 日韩一级片| 人人干天天操五月丁香| 久婷婷五月综合欧美| 久久伊人大香蕉| 丁香五月成人社区| 99久久国产成人精品| 婷婷五月无码| 日比网免费国产| 丁香六月激情| 99热99这里免费的精品| 天天干,天天舔| 91碰九色| 青青久在线视频免费观看| 99热网址| 性天天中文网| 草操网| 色综合天堂| 欧美激情综合色综合啪啪五月| 婷婷久久精品| 丁香婷婷六月在线资源观看| 丁香五月天信号| 99久久99久久| 91免费试看| 欧美性生交A片免费看| 日韩成人中文字幕| 婷婷深爱五月| 99久久综合精品五月天| 99婷婷五月天| 97丁香五月| 五月婷婷丁香综合| 丁香婷五月天| 操操碰| 久久综合影院| 婷婷五月色花丁香社区| 中文字幕精品无码一区二区| 亭亭五月色男人| 五月天综合| 五月婷婷免费看| 婷婷五月丁香色情| 梁铮版《蜘蛛女侠》在线| 91人妻人人操人人爽| 婷婷色一二三区波多野结衣| www.com久久久久久久久久久久久久久久久| 五月花激情| 婷婷九月激情| 色永久| 久久婷婷五月综合伊人| 99精品无码网站| 爱草视频在线观看| 丁香五月色综合色播五月| 玖玖国产视频一区| 九月丁香| 五月婷婷六月丁香免费| 九热视频| 全亚洲最大的婷婷五月天网站COM| 超碰资源在线| 99久久婷婷五月综合| 欧美操逼天堂| 久久婷视频| 毛片新网地| 九九色天堂| 丁香婷婷AV| 91丁香色| 成人精品免费在线观看| 亚洲丁香婷婷| 色综合久久88色综合天天| 国产高清视频91九九九久久久| 国产亚洲AV人片在线| 人碰人人人玩91| 久久电影五月天丁香电影| 精品五月花| 色开心五月丁香| 婷婷五月色惰| 97碰啪啪| 六月激情婷婷色| 99综合| 丁香五月天黄色片| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 丁香五月手机在线| 婷婷五月色图| 99久久婷婷国产综合| 激情五月天噢美| 森林影视大全,最好看的2019年视频 | 99免费在线视频| XX色综合| 1769在线观看欧美国产| 91疯狂操操操操| 六月婷婷激情| 欧美色播综合在线观看| 这里只有精品视频一区| 十一月婷婷激情四射| 男女99免费视频| 婷婷五月天综合网| 熟妇无码乱子成人精品| 丝雨一区二区| 亚洲色图五月丁香| 侠女刀之记忆电影在线看免费| 99只有这里是精品| 99免费视频| 97干在线| 中文字幕久久婷九女同| 99热大香蕉| 快乐激情五月色婷婷 | 婷婷五月天成人网| 最新久久网址| 婷婷香草网| 亚洲人人操| tingtingjiqingwuyue| 90色免费视频| 97精品欧美91久久久久久久| 99国产小视频免费观看| 深爱婷婷丁香五月激情| 91人人操人人| 国产成人精品一区二三区熟女在线| www91色网站| 日韩性视频| www.六月丁香看AV| 国产67194| www.99精品日操伊人乱碰在线| 五月丁香六月成人| 9这里只有精品| 天天看A片| 丁香九月色| 久久五月综合| 国产原创视频91九色| 婷婷色婷婷| 香蕉AV777XXX色综合一区| 婷婷色中文字幕| 九九热9| 91丨九色丨43老版熟女| 五月丁香六月婷婷中文版| 色五月综合| 性欧美大战久久久久久久83| 婷婷 伊人 久久| 五月天婷五月天综合网在线观| 激情综合色播| 99国产精品白浆在线观看免费| 69色婷婷| 玖久精品视频9| 99视频精品在线| 婷婷欧美激情| 天天做天天爱天天玩夜夜爽| 99热97| 丁香五月AV| 九九亚洲视频| 中国女人内射6XXXXX| 国产操碰| 日本九九热| www.99在线| 99色干| 丁香五月成人婷婷| 亚洲av电影在线| 色五月丁香激情视频| 99热.com| 色婷操逼| www久久艹| 五月婷视频| 婷婷丁香高潮了| 五月天激情国产综合婷婷| 天堂综合久久| 六月丁AV| 色婷婷亚洲综合天堂| 影音先锋 91工厂| 亚洲精品无码久久| 久久天堂网| 91色在线 | 日韩| 99热99草97| 婷婷五月综合激情免费视频| 琪琪布丁香社区激情五月天| 亚洲 日韩色色| 久久婷婷五月天| 成人视频在线免费播放| 丁香婷婷六月男男| 成人网站高清无码| 真实亲子乱子伦高清在线观看| 久久看九九90| 99热国产在线| 丁香五月婷婷操逼| 天天色官网| 天天综合网站| VA国产在线综合网站| 亚洲色五月| 丁香五月婷婷色综合基地| 五月丁香成人网| 婷婷五月丁香高清无码| 北京熟妇搡BBBB搡BBBB| 大香蕉啪啪网| 五月天另类激情在线| 再綫Av免费視品| EEUSS鲁片一区二区三区| 这里只有精品视频国产| 日韩免费视频| 99色在线视频观看| 成人精品视频99在线观看免费 | 五月丁香啪| 色色激情五月天| 丁香亚洲婷婷五月| 九久久九精品视频| 色小说五月天| 五月丁香激情综合啪啪| 丁香色婷婷五月天| 久婷婷色| 日韩1区2区| 婷婷五月天va| 丁香五月伊人| www.97碰碰com| 久热爱大香蕉在线蜜臀悦色| 天堂综合久| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 激情小说婷婷小说| 欧美色综合天天久久综合精品| 丁香五月天啪啪激情综合网| 99热很操老逼| 99热精品在线| 婷婷五月天深爱| 五月丁香婷婷色播无码| 久久激情五月婷婷| 深爱五月激情网| 狼人伊人天堂| 色综合久久88色综合天天看| 亚洲人成网亚洲欧洲无码久久| 婷婷五月花| 五月婷视屏在线观看| 色综合中文| 成人综合网站| 99色视频在线| 高清无码.com| 91在线人| 激情五月婷婷五月| 久久久久人妻中文| 婷婷涩五月| 香蕉久操| 91九色视频| 色香五月天| 99综合自拍| 成 人片 黄 色 大 片| 噜噜视频| 色噜噜,噜噜色| 啪精品| 免费视频无码| 懂色AⅤ| 五月丁香A片| 啪啪色激情五月天| 九九色精品| 久久精彩视频| 九九热这里只有精品23| 9l视频自拍九色9l黑人| 婷婷五月天色色| 五月丁香龟婷婷| 欧美五月丁香在线| 91 九色 入口| 久久一级AV| 精品人妻一区| 日韩久热| 这里只有精品无码| 日日肏夜夜干| 色五月激情五月丁香五月婷婷啪啪综合| 97视频.干com| 九九色天堂| 狠狠色婷婷综合开心影视| 99在线免费观看| 欧美人妻一区二区| 九热视频在线精品15| 久久综合五月| 99热99热不卡| 丁香五月天精品| 五月色丁香成人| 婷婷五月亚洲激情| 久久精品五月天| 秋霞网在线免费基地五月婷婷丁香| 精品一区二区三区免费毛片爱| 欧美婷婷色五月| 深爱激情九九五月天 | 天天综合精品| 99自拍网| 五月天社区| 五月丁香青草综合啪啪| 激情com| 五月丁香六月激情综合网| 在线日韩av| 色五月 婷婷, 大香蕉| 日日夜夜干| 激情无码网| 婷婷五月激情五月激情| 久久深爱激情网| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 桃色五月天| 国产操碰| 日本久久人人| 91精品综合久久久久久五月丁香| 婷婷五月天日日日干干干| 色噜噜伊人| 五月丁香婷婷基地| 久久婷婷五月天激情四射| AV免费在线网站| 婷婷丁香五月基地| 五月婷婷亞洲中文| 五月婷婷九| 久热这里这里有精品| 很很操96| www.99热最新视频8| 久久99热免费| 婷婷五月激情基地| 欧美婷婷五月无砖| 六月丁香婷婷视频综合在线观看| 国产激情综合五月久久| 五月天综合视频| 国产操逼视频网站| 激情婷婷五月社区| 国产欧美大香蕉一区| 97超级碰| 一区无码| 艹色18p| 色婷婷色综合激情91| 久热亚洲| 婷婷综合干| 六月婷婷网| 人人操人人操919999| www色五月| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 五月天激情丁香| 激情五月婷婷五月| 婷婷五月天激情小说| 色吧网91| 久99久精品视频| 激情四射五月天偷偷看婷婷| 婷婷五月丁香激情色情| 99er精品视频| 久热 91| 欧美性猛交 XXXX 乱大交| 俺来也狠狠| www.99热在线| 婷婷色播色五月五色五月天色妇| 亚洲九九99精品视频在线播放| 日日干天天爽| 天天狠天天叉| 日本在线观看99| 色婷婷88| 五月激情婷婷六月丁香| 日本色爽| 国产激情久久久| 在线成人av播放| 99噜噜噜在线播放| 5月婷婷五月天| 97婷婷色| 91操黄| 亚洲操人| 久久九九视频| 99精品视频免费观看| 亚洲啪啪自拍| 色色综合成人网| 婷婷五月天成人小说| 婷婷社区五月天| 91丨九色丨老熟女激情| 这里只有精品亚洲| 天天做天天爱天天综合网| 99热激情| 国产在线视频1234| 人妻系列久久久久久久久久久| 五月天网站免费欧美| 国产精品久久久久久久久久久久| 成人丁香五月婷| 伊人六月丁香婷婷| 激情久久五月天| 中文字幕丰满乱孑伦无码专区 | 五月丁香免费看| 99亚洲精品| 色婷婷久久天天性爱| 丁香六月无码| 色婷婷五月综合| 伊人狠狠丁香婷婷综合尤物| 99热这里只有免费| 99精品久久| 色丁香五月天| 99热最新| 丁香五月激动深爱欧美| 婷婷五月丁香av网站| 99色| 五月天婷婷丁香人人操91| 久久五月丁香激情综合| 狠狠干综合| 久久婷婷夜| 五月激情婷婷女| 国产成人精品123区免费视频| 婷婷永久在线| 五月天开心网| 午夜在线成人网站免费观看| 五月婷婷六月激情在线| 欧美人妻一区二区| 99啪啪网| 五月婷婷成人| 任我干视频在线观看| 管管補管管紱| 激情五月丁香五月| 99热婷婷| 久久久久久激情| 超碰资源在线| 九九热精品在线| 狠狠色狠狠色综合日日91| 色综合综合色| 久久五月婷6 9| 天天色综合色| 国产精品a无线| 99视频久久免费视频| 激情丁香五月婷婷| 色情综合网| 五月婷婷基地| 五月丁香性爱| 另类图片色五月| 91久久综合亚洲鲁鲁五月天| 婷婷激情视频| 六月丁香色色| 99这里有精品视频| 四虎成人精品永久免费AV九九| 99狠狠色| 影音先锋四区| 99久在线精品99re8| 日本三级韩三级99久久| 国产免费一区二区在线A片视频| 久天综合| 色五月激情婷婷| 天天草人人摸| www.夜夜| 激情99|