99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

WebSocket詳解:從握手原理到生產(chǎn)環(huán)境的心跳重連實(shí)戰(zhàn)

WebSocket詳解:從握手原理到生產(chǎn)環(huán)境的心跳重連實(shí)戰(zhàn) 網(wǎng)上搜“websorket詳解”大概率是手滑把WebSocket打錯(cuò)了但點(diǎn)進(jìn)來的朋友應(yīng)該都是想搞懂這個(gè)協(xié)議到底是怎么回事。我先說結(jié)論WebSocket就是跑在TCP之上的一條全雙工通道客戶端和服務(wù)端完成一次握手之后兩邊隨時(shí)都可以往對(duì)面懟數(shù)據(jù)不用像HTTP那樣每次請(qǐng)求都重新建立連接。它解決的核心痛點(diǎn)就是——HTTP的“請(qǐng)求-響應(yīng)”模型沒法讓服務(wù)器主動(dòng)找客戶端說話而現(xiàn)實(shí)里聊天、推送、協(xié)同編輯、實(shí)時(shí)行情這類場景恰恰最需要的就是“服務(wù)器主動(dòng)開口”。這篇東西我會(huì)從協(xié)議原理講到代碼實(shí)現(xiàn)再到生產(chǎn)環(huán)境的坑適合兩種人看一是剛準(zhǔn)備做實(shí)時(shí)功能、想知道WebSocket和輪詢?cè)趺催x的小白二是用了很久但老在斷線重連、心跳?;钌显愿^的實(shí)戰(zhàn)派。1. WebSocket到底解決了什么問題1.1 從輪詢地獄到長連接在WebSocket出現(xiàn)之前想做實(shí)時(shí)功能基本就三條路短輪詢前端每隔幾秒發(fā)一次HTTP請(qǐng)求問“有消息沒”。實(shí)現(xiàn)最簡單但消息延遲取決于輪詢間隔間隔調(diào)短了服務(wù)端壓力成倍翻。我見過一個(gè)項(xiàng)目把輪詢間隔從5秒改到1秒數(shù)據(jù)庫連接池直接被打滿最后只能加機(jī)器。長輪詢請(qǐng)求發(fā)過去之后服務(wù)端先hold住有數(shù)據(jù)再返回。比短輪詢省請(qǐng)求但每個(gè)未完成的請(qǐng)求都會(huì)占用一個(gè)連接連接數(shù)上去之后網(wǎng)關(guān)和服務(wù)器都得跟著調(diào)參數(shù)而且請(qǐng)求超時(shí)、中間鏈路斷掉的問題排查起來特別累。SSEServer-Sent Events服務(wù)端單向推送瀏覽器端用EventSource就能接比WebSocket簡單但只能服務(wù)端往客戶端推客戶端想給服務(wù)端傳數(shù)據(jù)還得另開一條HTTP通道。這三條路各有各的憋屈。短輪詢的延遲和服務(wù)器負(fù)載互相矛盾長輪詢?cè)陂L連接數(shù)量大的時(shí)候?qū)Υ韺雍瓦B接池極不友好SSE又天生是半雙工。WebSocket的思路完全不一樣——它把“建立連接”和“傳輸數(shù)據(jù)”拆開先用HTTP協(xié)議完成一次升級(jí)握手然后保持這條TCP連接不關(guān)閉后續(xù)所有數(shù)據(jù)都在這條連接上雙向流動(dòng)。下面這張對(duì)比表可以直觀看到差別方案實(shí)時(shí)性服務(wù)端壓力雙向通信短輪詢?nèi)Q于間隔秒級(jí)起步高支持長輪詢有改善但仍受超時(shí)影響中高支持SSE高低不支持WebSocket毫秒級(jí)推送低支持這個(gè)設(shè)計(jì)的直接收益是通信雙方不需要再花時(shí)間在連接建立、請(qǐng)求頭解析這些重復(fù)勞動(dòng)上實(shí)時(shí)性從“秒級(jí)輪詢”直接拉到了“毫秒級(jí)推送”。同一臺(tái)服務(wù)器同樣的配置用WebSocket支撐的連接數(shù)往往是輪詢方案的數(shù)倍因?yàn)槭〉袅撕A恐貜?fù)的HTTP握手開銷。1.2 協(xié)議設(shè)計(jì)的核心思路一次握手雙向通信很多人誤以為WebSocket是HTTP的升級(jí)版其實(shí)它跟HTTP是平級(jí)的關(guān)系。WebSocket握手走的是HTTP的Upgrade機(jī)制但握手完成之后協(xié)議就切換成了RFC 6455定義的獨(dú)立協(xié)議后續(xù)的幀格式、掩碼規(guī)則、控制幀這些跟HTTP沒有任何關(guān)系。那為什么非要借HTTP來握手因?yàn)閷?shí)際工程里客戶端到服務(wù)端之間往往隔著一堆基礎(chǔ)設(shè)施——負(fù)載均衡、反向代理、防火墻、網(wǎng)關(guān)。這些設(shè)施大部分只認(rèn)HTTP如果WebSocket上來就自己搞一套握手協(xié)議所有中間層都得跟著改。借道HTTP升級(jí)意味著現(xiàn)有的80/443端口、SSL證書、域名配置還有那些按HTTP路由分發(fā)請(qǐng)求的代理全部可以復(fù)用落地成本低得多。所以協(xié)議設(shè)計(jì)的核心思路就一句話用HTTP的殼完成升級(jí)用獨(dú)立協(xié)議做傳輸。這個(gè)妥協(xié)換來了巨大的工程收益也讓W(xué)ebSocket在瀏覽器、App、服務(wù)端之間幾乎成了實(shí)時(shí)通信的默認(rèn)選項(xiàng)。后面不管你用哪種語言的庫底層走的都是這套流程理解了這個(gè)思路看任何WebSocket框架的文檔都會(huì)快很多。2. 協(xié)議層的關(guān)鍵機(jī)制弄清楚這些才算真正入門2.1 握手階段到底發(fā)生了什么握手過程其實(shí)就是兩條HTTP報(bào)文但有幾個(gè)細(xì)節(jié)值得單獨(dú)摳一摳??蛻舳税l(fā)起請(qǐng)求大致長這樣GET /chat HTTP/1.1 Host: example.com Upgrade: websocket Connection: Upgrade Sec-WebSocket-Key: dGhlIHNhbXBsZSBub25jZQ Sec-WebSocket-Version: 13注意兩個(gè)頭缺一不可Upgrade: websocket表示要升級(jí)協(xié)議Connection: Upgrade則告訴中間設(shè)備別把連接關(guān)掉。Sec-WebSocket-Key是一個(gè)隨機(jī)的Base64編碼字符串原始數(shù)據(jù)長度16字節(jié)它的作用是觸發(fā)服務(wù)端校驗(yàn)防止老式緩存代理把后續(xù)WebSocket數(shù)據(jù)錯(cuò)誤地當(dāng)HTTP響應(yīng)緩存或轉(zhuǎn)發(fā)。服務(wù)端收到之后會(huì)把這個(gè)Key拼上一個(gè)固定的魔數(shù)GUID這個(gè)字符串在RFC 6455里寫死了258EAFA5-E914-47DA-95CA-C5AB0DC85B11然后做一次SHA-1哈希再Base64編碼作為Sec-WebSocket-Accept返回HTTP/1.1 101 Switching Protocols Upgrade: websocket Connection: Upgrade Sec-WebSocket-Accept: s3pPLMBiTxaQ9kYGzzhZRbKxOo這個(gè)Accept值是可以自己驗(yàn)證的別把它當(dāng)黑盒。我調(diào)試自研服務(wù)端時(shí)就經(jīng)常用Node.js的crypto先算一遍確認(rèn)自己實(shí)現(xiàn)的握手邏輯和庫的行為一致const crypto require(crypto); function computeAccept(key) { const GUID 258EAFA5-E914-47DA-95CA-C5AB0DC85B11; const hash crypto.createHash(sha1); hash.update(key GUID); return hash.digest(base64); }如果你在做跨語言對(duì)接拿著客戶端發(fā)來的Sec-WebSocket-Key用這段邏輯算一遍跟服務(wù)端返回的Accept比對(duì)就知道握手到底有沒有走對(duì)。這里有一個(gè)容易忽略的工程細(xì)節(jié)握手之后原始HTTP連接就被“奪走”了不能再往這條連接上發(fā)任何HTTP響應(yīng)。有些新人在握手完成后試圖通過同一個(gè)socket返回一段JSON數(shù)據(jù)結(jié)果客戶端直接報(bào)協(xié)議錯(cuò)誤原因就是沒理解“協(xié)議切換”這件事。另外如果客戶端需要攜帶子協(xié)議標(biāo)識(shí)比如聊天走JSON、文件走二進(jìn)制可以加Sec-WebSocket-Protocol頭服務(wù)端在響應(yīng)里選一個(gè)返回這是業(yè)務(wù)層的協(xié)議協(xié)商跟前文的協(xié)議升級(jí)是兩碼事別搞混。2.2 數(shù)據(jù)幀格式一個(gè)字節(jié)一個(gè)字節(jié)拆給你看WebSocket傳輸數(shù)據(jù)的基本單位是“幀”frame。一個(gè)幀從前往后依次是FIN1 bit標(biāo)志這一幀是不是消息的最后一幀。大消息可以拆成多幀發(fā)送最后一幀的FIN置1。RSV1-3各1 bit一般不用只有協(xié)商了擴(kuò)展比如壓縮才會(huì)用到收到非0值且沒協(xié)商對(duì)應(yīng)擴(kuò)展時(shí)必須斷開連接。opcode4 bits幀類型。0x1是文本幀0x2是二進(jìn)制幀0x8是關(guān)閉幀0x9是Ping0xA是Pong。MASK1 bit客戶端發(fā)往服務(wù)端的幀這一位必須為1服務(wù)端發(fā)往客戶端的幀這一位必須為0。就這么一個(gè)不對(duì)稱規(guī)則坑了無數(shù)人。Payload length7 bits/16 bits/64 bits載荷長度。前7位小于126時(shí)就是實(shí)際長度等于126則后面2字節(jié)才是長度等于127則后面8字節(jié)才是長度。Masking key4字節(jié)MASK為1時(shí)這里帶上隨機(jī)掩碼密鑰。Payload data實(shí)際數(shù)據(jù)。其中opcode的取值是排查問題時(shí)的關(guān)鍵信息整理成表格方便對(duì)照opcode含義說明0x1文本幀載荷按UTF-8編碼0x2二進(jìn)制幀載荷原樣傳輸0x8關(guān)閉幀帶關(guān)閉碼和原因文本0x9Ping心跳探測(cè)0xAPong收到Ping后必須回復(fù)載荷原樣復(fù)制理解了幀格式最大的收獲是能看懂“為什么短字符串抓包出來幀頭挺長”——因?yàn)橐獛?字節(jié)掩碼和幀頭本身的開銷。消息越短這個(gè)固定開銷占比越明顯。實(shí)測(cè)一條5字節(jié)的消息實(shí)際線上傳輸大約是10到14字節(jié)批量發(fā)送大量短消息時(shí)這個(gè)開銷積少成多會(huì)直接影響吞吐量。2.3 掩碼規(guī)則為什么客戶端必須加掩碼而服務(wù)端不用這是很多教程一筆帶過但面試和實(shí)戰(zhàn)都愛考的點(diǎn)。RFC規(guī)定客戶端發(fā)送的幀必須設(shè)置MASK位并用隨機(jī)Masking key對(duì)載荷做掩碼服務(wù)端發(fā)送的幀則不允許設(shè)置MASK位。掩碼不是加密算法非常簡單——把載荷的每個(gè)字節(jié)與Masking key循環(huán)異或masked[i] payload[i] ^ maskingKey[i % 4]那為什么非要這樣設(shè)計(jì)核心原因是防御一種叫做“緩存投毒”cache poisoning的攻擊場景。早期WebSocket在公網(wǎng)環(huán)境可能經(jīng)過某些中間代理代理會(huì)基于HTTP語義去解析流量。如果沒有掩碼攻擊者可以通過偽造報(bào)文讓代理把一段精心構(gòu)造的HTTP響應(yīng)“緩存”下來進(jìn)而污染其他用戶拿到的內(nèi)容。加一層隨機(jī)掩碼之后代理無法可靠解析和預(yù)測(cè)數(shù)據(jù)內(nèi)容這種攻擊基本就失效了。明白這層邏輯你就知道為什么自己寫服務(wù)端時(shí)解析客戶端幀必須做“取消掩碼”而往客戶端回消息時(shí)直接明文發(fā)送即可。很多人第一次抓包發(fā)現(xiàn)客戶端發(fā)過來的數(shù)據(jù)跟實(shí)際文本對(duì)不上十有八九就是忘了處理掩碼。2.4 心跳與?;頟ing/Pong的正確姿勢(shì)TCP長連接本身不會(huì)自動(dòng)保持活躍。如果一段時(shí)間沒有數(shù)據(jù)傳輸中間的路由器、NAT網(wǎng)關(guān)、負(fù)載均衡都可能因?yàn)榭臻e超時(shí)把連接靜默回收。連接“假死”之后兩端在真正發(fā)數(shù)據(jù)之前是感知不到的于是就會(huì)出現(xiàn)“看起來連著一發(fā)消息就失敗”的詭異現(xiàn)象。WebSocket協(xié)議內(nèi)置了Ping/Pong控制幀一端發(fā)Ping另一端收到后必須回一個(gè)Pong載荷數(shù)據(jù)原樣復(fù)制。這套機(jī)制在協(xié)議層面提供了合規(guī)的探活方式應(yīng)用層只需要在合理的時(shí)間間隔內(nèi)發(fā)Ping并記錄上一次Pong回來的時(shí)間就能判斷連接是否真的活著。實(shí)際落地時(shí)心跳不是“發(fā)個(gè)Ping”這么簡單。間隔太短高頻Ping幀本身就成了不小負(fù)擔(dān)間隔太長又起不到及時(shí)發(fā)現(xiàn)問題的作用。我一般以60秒為基準(zhǔn)30秒發(fā)一個(gè)Ping連續(xù)兩次未收到Pong就主動(dòng)斷開重連。但這不是固定值需要根據(jù)你所在網(wǎng)絡(luò)環(huán)境、代理超時(shí)時(shí)間、服務(wù)端負(fù)載綜合調(diào)整具體怎么校準(zhǔn)我在第四節(jié)細(xì)講。3. 手把手搭一個(gè)完整的WebSocket服務(wù)3.1 技術(shù)選型不同語言和庫怎么選WebSocket在服務(wù)端幾乎是標(biāo)配能力各語言都有成熟庫。Node.js生態(tài)里最常見的兩個(gè)ws輕量、性能好底層就是純WebSocket實(shí)現(xiàn)沒有多余的開銷我搭內(nèi)部服務(wù)時(shí)首選它。socket.io自帶斷線重連、事件廣播、rooms等功能適合快速開發(fā)但它不是純WebSocket協(xié)議握手和數(shù)據(jù)格式都有自己的封裝真要深入調(diào)協(xié)議時(shí)會(huì)多一層黑盒。Java那邊常用Netty生態(tài)成熟Go有g(shù)orilla/websocket寫起來很舒服Python的websockets庫也不錯(cuò)。選型建議很簡單先看團(tuán)隊(duì)熟悉度再看你是想“開箱即用”還是“要掌控每一個(gè)字節(jié)”。前者選帶封裝、帶重連的庫后者選純協(xié)議實(shí)現(xiàn)。下面我用Node.js的ws庫走一遍完整流程。這套代碼我直接用在內(nèi)部消息推送服務(wù)上邏輯不復(fù)雜但很完整可以直接抄。提示如果你當(dāng)前用的框架本身帶了WebSocket支持可以先基于內(nèi)置能力跑通再考慮引入獨(dú)立庫。沒必要為了“用庫”而多加一層依賴。3.2 服務(wù)端實(shí)現(xiàn)核心步驟第一步初始化一個(gè)HttpServer掛到同一個(gè)端口上。WebSocket握手走的是HTTP Upgrade所以需要先有一個(gè)HTTP服務(wù)去接住握手請(qǐng)求再升級(jí)成WebSocket連接const http require(http); const WebSocket require(ws); const server http.createServer((req, res) { res.writeHead(200, { Content-Type: text/plain }); res.end(WebSocket server is running\n); }); const wss new WebSocket.Server({ server, path: /ws });注意path參數(shù)它規(guī)定只有訪問/ws的請(qǐng)求才會(huì)被升級(jí)其他路徑仍走普通HTTP邏輯。這個(gè)設(shè)計(jì)很方便做“HTTP WebSocket 共用一個(gè)端口”生產(chǎn)環(huán)境里一個(gè)8000端口既能提供REST接口又能提供實(shí)時(shí)通道省得再多開一個(gè)端口去應(yīng)付防火墻策略。第二步監(jiān)聽連接事件維護(hù)客戶端集合處理消息和關(guān)閉邏輯const clients new Map(); wss.on(connection, (socket, req) { const id ${Date.now()}-${Math.random().toString(16).slice(2, 8)}; clients.set(id, socket); socket.id id; socket.on(message, (data) { const text data.toString(); // 這里解析業(yè)務(wù)消息比如 { type: chat, payload: {...} } handleMessage(id, text); }); socket.on(close, () { clients.delete(id); console.log(client ${id} closed, current${clients.size}); }); socket.on(error, (err) { console.error(socket ${id} error:, err.message); }); });這里有兩個(gè)細(xì)節(jié)值得說。一是用Map而不是數(shù)組管理客戶端連接頻繁上下線時(shí)Map的增刪都是O(1)而且每個(gè)連接有獨(dú)立ID做定向推送特別方便。二是error事件一定要監(jiān)聽。Node.js的EventEmitter如果沒監(jiān)聽error一旦socket異常直接會(huì)把整個(gè)進(jìn)程帶崩這是新手最常見的翻車點(diǎn)。第三步實(shí)現(xiàn)廣播和定向推送。WebSocket本身沒有“房間”概念所有業(yè)務(wù)上的分組、私聊、群聊都是應(yīng)用層用Map、Set這些數(shù)據(jù)結(jié)構(gòu)自己維護(hù)的function broadcast(json, exceptId null) { const text JSON.stringify(json); for (const [id, socket] of clients) { if (id ! exceptId socket.readyState WebSocket.OPEN) { socket.send(text); } } } function sendTo(id, json) { const socket clients.get(id); if (socket socket.readyState WebSocket.OPEN) { socket.send(JSON.stringify(json)); } }發(fā)送前檢查readyState OPEN是必須的。TCP斷開的通知往往有延遲Map里存的連接可能已經(jīng)死亡但還沒觸發(fā)close事件不加這個(gè)判斷就會(huì)往死連接上寫數(shù)據(jù)進(jìn)而觸發(fā)error嚴(yán)重時(shí)導(dǎo)致內(nèi)存堆積。服務(wù)端寫完還要處理優(yōu)雅退出進(jìn)程收到SIGTERM時(shí)先給所有客戶端發(fā)一個(gè)關(guān)閉幀opcode 0x8并帶上規(guī)范關(guān)閉碼再關(guān)閉服務(wù)。這個(gè)細(xì)節(jié)很多人不做但做了之后客戶端重連的日志會(huì)干凈很多排錯(cuò)也更省心。3.3 客戶端接入與消息協(xié)議設(shè)計(jì)瀏覽器端幾乎不用引任何庫直接用原生WebSocket對(duì)象const ws new WebSocket(ws://localhost:8000/ws); ws.onopen () { console.log(connected); ws.send(JSON.stringify({ type: join, room: general })); }; ws.onmessage (event) { const msg JSON.parse(event.data); // 按 type 分發(fā)處理 handleMsg(msg); }; ws.onclose () { console.log(disconnected, will retry in 3s...); setTimeout(connect, 3000); };這里我要單獨(dú)強(qiáng)調(diào)“消息協(xié)議設(shè)計(jì)”。很多人直接ws.send(hello)裸發(fā)字符串demo沒問題但業(yè)務(wù)一復(fù)雜無結(jié)構(gòu)的字符串會(huì)讓服務(wù)端解析邏輯變成一個(gè)巨大的if-else沼澤改一個(gè)字段要翻半天代碼。我的習(xí)慣是統(tǒng)一用JSON封裝消息至少包含兩個(gè)字段type表示消息類型payload表示具體數(shù)據(jù)。比如聊天消息是{ type: chat, payload: { from: u1, content: hi } }心跳是{ type: ping }服務(wù)端通知是{ type: notice, payload: {...} }。前端收到消息先看type再分發(fā)后端處理也只需要一個(gè)switch新增功能時(shí)改動(dòng)的局部性很好。如果涉及二進(jìn)制傳文件、傳圖片可以用type區(qū)分文本和二進(jìn)制通道或者約定二進(jìn)制幀的第一個(gè)字節(jié)表示類型。這種做法在工程里比“協(xié)議文檔寫一套、代碼實(shí)現(xiàn)套另一套”靠譜得多因?yàn)轭愋妥侄尉驮跀?shù)據(jù)里連文檔都不用翻。4. 生產(chǎn)環(huán)境實(shí)測(cè)那些不得不踩的坑4.1 斷線重連別用定時(shí)器硬懟WebSocket連接在弱網(wǎng)、移動(dòng)網(wǎng)絡(luò)切換、服務(wù)端重啟、代理超時(shí)這些場景下斷線幾乎是必然的。生產(chǎn)環(huán)境必須實(shí)現(xiàn)斷線重連但重連不是setInterval每3秒連一次那么粗暴。無腦定時(shí)重連有兩個(gè)問題一是服務(wù)端宕機(jī)期間客戶端同時(shí)高頻重連可以把服務(wù)端“重連風(fēng)暴”打到雪崩二是客戶端重試太頻繁在弱網(wǎng)下會(huì)消耗大量電量和流量后臺(tái)掛著幾十個(gè)連接無限重試用戶手機(jī)直接發(fā)燙。我的做法是指數(shù)退避加隨機(jī)抖動(dòng)function connect(attempt 1) { const ws new WebSocket(url); ws.onclose () { const delay Math.min(30000, 1000 * Math.pow(2, attempt - 1)); const jitter Math.floor(Math.random() * 1000); setTimeout(() connect(attempt 1), delay jitter); }; }從1秒起步每次翻倍上限30秒每次加一個(gè)隨機(jī)抖動(dòng)。抖動(dòng)的意義在于打散客戶端的重連時(shí)刻避免成百上千個(gè)客戶端同時(shí)發(fā)起連接請(qǐng)求。這個(gè)策略一般項(xiàng)目直接抄就行。另外給重連設(shè)一個(gè)“冷靜期”連續(xù)重連多次后停止自動(dòng)重連提示用戶手動(dòng)刷新或點(diǎn)按鈕避免客戶端在后臺(tái)無限重試、白白耗電。4.2 心跳超時(shí)參數(shù)怎么調(diào)前面說過Ping/Pong的機(jī)制這里給一組我在實(shí)戰(zhàn)中校準(zhǔn)過的經(jīng)驗(yàn)值。服務(wù)端主動(dòng)Ping間隔建議設(shè)在30到60秒超時(shí)閾值設(shè)為間隔的2倍。比如60秒發(fā)一次Ping120秒沒收到Pong就斷開。如果服務(wù)部署在云廠商負(fù)載均衡后面一定要先查LB的空閑超時(shí)時(shí)間這個(gè)值通常在60秒左右。心跳間隔必須比它短不然LB先把連接掐了你的心跳探活反而成了擺設(shè)。我遇到過線上WebSocket每過幾分鐘就批量斷開日志全是1006最后發(fā)現(xiàn)就是心跳間隔跟LB超時(shí)卡在同一臨界點(diǎn)兩邊在打架??蛻舳藗?cè)的心跳邏輯要更謹(jǐn)慎。移動(dòng)端App切后臺(tái)時(shí)系統(tǒng)隨時(shí)可能凍結(jié)網(wǎng)絡(luò)這時(shí)候發(fā)Ping也沒意義。有的客戶端干脆在切后臺(tái)時(shí)主動(dòng)斷開回到前臺(tái)再重連。這個(gè)策略聽起來粗暴但在移動(dòng)網(wǎng)絡(luò)下體驗(yàn)反而更好省掉了無數(shù)“假死連接”的維護(hù)成本。注意不要把Ping和業(yè)務(wù)消息混在一起。業(yè)務(wù)消息密集時(shí)確實(shí)能順帶?;畹珮I(yè)務(wù)一減少連接就裸奔了。心跳一定要用獨(dú)立的Ping/Pong幀來做。4.3 代理層、負(fù)載均衡和網(wǎng)關(guān)配置WebSocket長連接最大的敵人就是中間層的空閑超時(shí)和并發(fā)限制。我踩過的一個(gè)典型坑是服務(wù)端部署在內(nèi)網(wǎng)前端通過反向代理訪問線上跑著跑著連接就斷客戶端日志全是1006。查了半天才定位到反代默認(rèn)的空閑超時(shí)是60秒心跳間隔剛好也壓著60秒結(jié)果兩邊在臨界點(diǎn)上打架。解決辦法是把反代的proxy_read_timeout調(diào)大到比如300秒同時(shí)把心跳間隔壓到30秒。這兩個(gè)參數(shù)配合好之后斷線問題立刻消失。如果你用的是云LB同理去控制臺(tái)把“空閑超時(shí)”調(diào)到合理值同時(shí)保證心跳周期小于該值留出余量。另外還要注意HTTP/2的問題。很多反代默認(rèn)開啟HTTP/2而HTTP/2和WebSocket的兼容性在早期并不好部分老版本反代甚至不支持在HTTP/2連接上做Upgrade。遇到“客戶端能連上但升級(jí)總是失敗”的情況優(yōu)先檢查反代是不是把HTTP/2的流量劫走了需要關(guān)閉HTTP/2或?qū)ebSocket路徑做特殊處理。這個(gè)坑排查起來相當(dāng)隱蔽因?yàn)轫撁嫫渌涌谌钦5闹挥袑?shí)時(shí)通道不通。4.4 連接堆積與內(nèi)存泄漏排查WebSocket是長連接意味著每個(gè)客戶端在服務(wù)端都占著一個(gè)socket對(duì)象和對(duì)應(yīng)的網(wǎng)絡(luò)緩沖。連接數(shù)上來之后內(nèi)存和句柄數(shù)的增長是線性的管理不好很容易把服務(wù)器內(nèi)存吃爆。我排查內(nèi)存泄漏有一套固定動(dòng)作先用process.memoryUsage()或系統(tǒng)自帶的監(jiān)控工具觀察堆內(nèi)存曲線的斜率再看clients這個(gè)Map的size是不是在持續(xù)增長如果是就檢查是否有連接沒有觸發(fā)close事件。常見原因是客戶端異常斷電TCP的FIN包沒發(fā)出來服務(wù)端感知不到連接死亡只能靠心跳超時(shí)兜底。所以生產(chǎn)環(huán)境里“服務(wù)端主動(dòng)心跳 超時(shí)斷開未響應(yīng)連接”不是可選項(xiàng)而是必須項(xiàng)。每次心跳都會(huì)過濾掉一批僵尸連接Map的size才會(huì)穩(wěn)定在一個(gè)正常水位。我算過一筆賬一個(gè)僵尸連接大約占幾十KB內(nèi)存一萬條僵尸連接就能吃掉幾百M(fèi)B內(nèi)存在云服務(wù)器上這不是小數(shù)目。還有一個(gè)隱蔽問題消息發(fā)送太頻繁客戶端處理不過來網(wǎng)絡(luò)緩沖不斷堆積最后服務(wù)端發(fā)送延遲飆升。這時(shí)候需要做背壓處理——把發(fā)送操作放進(jìn)隊(duì)列當(dāng)隊(duì)列超過閾值時(shí)主動(dòng)斷開最慢的那個(gè)客戶端防止整個(gè)服務(wù)的發(fā)送延遲被拖垮。這個(gè)在消息量大的聊天室和行情推送場景里非常關(guān)鍵不做的話一個(gè)慢客戶端能把全房間的推送速度都帶下來。寫在最后WebSocket這個(gè)協(xié)議原理講起來就那些東西但真正把它用穩(wěn)靠的是工程里一個(gè)個(gè)細(xì)節(jié)。我自己的體會(huì)是先把握手和幀格式吃透遇到問題能自己抓包分析再把心跳和重連做成標(biāo)配別指望網(wǎng)絡(luò)永遠(yuǎn)可靠最后是消息協(xié)議一定要結(jié)構(gòu)化不然項(xiàng)目越改越亂。如果你正準(zhǔn)備在項(xiàng)目里上實(shí)時(shí)通信建議先別急著引入消息隊(duì)列那一套重裝備用WebSocket加一個(gè)簡單的消息分發(fā)就能覆蓋絕大多數(shù)場景。等真到了需要跨服務(wù)推送、消息持久化、多端同步的時(shí)候再考慮在WebSocket之上加一層業(yè)務(wù)消息總線那時(shí)候你會(huì)感謝當(dāng)初把協(xié)議底層搞明白的自己。最后再分享一個(gè)小技巧調(diào)試WebSocket問題抓包工具比日志好用得多因?yàn)槟隳苤苯涌吹轿帐謭?bào)錯(cuò)、幀類型、掩碼位這些底層信息??蛻舳巳罩局桓嬖V你“斷了”抓包才能告訴你“為什么斷”。把這個(gè)習(xí)慣養(yǎng)成以后遇到再詭異的連接問題都不會(huì)慌。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷五月天激情AV影院| 停停色综合伊人| 激情美女五月天激情在线| 裸体做A爰片毛片A片免费| 婷婷无码视频| 97色碰| 久久婷婷网站| 婷婷五月天视频在线观看| 婷婷99狠狠| 性爱动图国产麻豆一区二区三区| 乱码操操| 人人草人人爱手机视频看看 | 亚洲精品永久久久久久| 亚洲天堂青草| www五月| 久久一热免费视频| 99热精品超碰| 综合色久| 色婷婷电影网| site:picc-up.com| 丁香五月综合激情性爱| 97在线精品| 99在线观看| 99ER热精品视频| 婷婷五月丁香网| 五月天久久综合| 久久久久久人妻| 综合网亚洲| 婷婷五月开心中文字幕色| 欧美色色色| 久婷婷久草| 丁香色五月AV在线| 91久久九色| 欧美婷婷综合| 丁香六月综合激情| 91人妻视频| 大香蕉久久婷婷| 亚洲超碰在线| 4399在线日本A片| 天天色天天操天天射| 丁香无月在线观看| 香蕉视频91| 综合色五月亭亭| 欧美色色色色色色色| 五月婷婷少妇之| 激情啪啪五月天| 888久久久| 超91热| 日本不卡中文字幕| 人人爱国产| 欧美va在线| 婷婷六月激情小说网| 亚洲成人在线观看av| www.丁香五月| 婷婷五月天视频| 深爱激情AV| 天天天久久久| 99re99热| 天天爽天天透天天爱| A在线观看| 色婷婷亚洲综合av| 五月婷久久综合| 久久久.www| 97碰碰碰免费公开在线视频| 狠狠色成人影片| 99久久性爱| 五月花免费视频| 精品爆操| 天天做天天爱天天玩| 成人综合网站| www.99精品日操伊人乱碰在线| 久久这里只有精品热在99| 婷婷五月综合欧美在线播放| 亚洲性爱干干| 日韩在线五月天婷婷| www.久久爱| 玖玖在线视频福利| 开心久久xxx色| 婷婷五月天天天日日夜夜| 97超碰,人人舔,人人操,人人摸| 丁香九月婷| 色五月首页| 五月丁香六月在线| 成人精品网站在线观看| 大香人妻| 午夜理论片最新午夜理论剧| 天天在线久久综合| 人妻精品一区二区三区| 色五月婷婷天天操夜夜操| 九九热10| 丁香五月1页| 五月香蕉婷婷| 97五月天婷婷| 这里只有精品视频| 欧美槡BBBB槡BBB少妇| 久久99网| 天天做夜夜爽| 1234操逼网| 91超级碰人人操| 五月天激情网页| 色五月天成人| VA色婷婷| 97在线天堂| 丁香蜜臀黄色婷婷五月天| 在线伦子99热| 五月开心婷婷极品激情| 婷婷五月天亚洲天堂| 色婷婷欧美在线| 激情五月,激情综合网| 激情小说视频图片网| 狠狠色狠狠干| 天天天天天天天操| 五月丁香婷婷色| 97超碰在线观看免费| 色婷婷四色| 婷婷六月丁香开心深深爱| site:pzdcoin.com| 国产精品日日躁夜夜躁| 激情无码网| 99∨VTV| 亚洲另类在线观看| 色婷婷aV四虎| 狠狠擼综合| 久久婷婷久久| 日日影院 | 午夜在线成人网站免费观看| 蒲京久久无码视频| www九九| 丁香六月婷婷激情综合| 爱iii做iiii日| 91美女啪啪| 天天人人综合| 99色婷婷视频| -91九色大屁股| 五月丁香 久久久| 九色啦蜜臀| 丰满少妇猛烈A片免费看观看| 香蕉综合在线| 91伦| 人人人舔人人人操人人人摸人人人97| 成人 视频免费观看网站| 五月丁香六月婷婷无码| 天天噜| AA片在线观看视频在线播放 | 九九热视频在线观看| 最新无毒无码AV| 丁香五月1页| 五月丁香六月婷婷色情| 九九人人操| 热久久这里只有三级视频| 丁香久月婷| 丁香婷婷大香蕉| 99热精品一区| 26uuu精品一区二区| 中文字幕免费高清电视剧| 色丁香五月婷婷综合久久| 葵花AV在线| 色五月视频无码播放| 先锋av性爱成人电影| 激情婷婷五月天日本系列| 99精品热视频| a色色色色色| 91精品综合久久久久久五月丁香| 狠狠干狠狠干| 颜射 精品性爱av| 日韩综合天堂| 欧洲永久精品| A片试看120分钟做受视频红杏 | 伊人婷婷大香蕉| 久久这里只有精品99| 97在线精品| 久久综合九九| 婷婷五月天丁香| 亚洲精品国产成人AV在线| 九九精品网站| 天天弄天天操| 另类五月婷婷| 日韩成人不卡| 狠狠操天天操天天操| 婷婷五月天Av| 天天狠狠婷婷在线| 97久久久久久久久久久| 97干婷婷五月天| 国产真实乱对白精彩| 伊人9草在线观看| 伊人AV五月婷| 免费观看亚洲AV片| 碰碰女| 色五月色五天色情网址| 天天射天天射一道本日本社区| www.91在线观看| 精品久久婷婷| 99热99色| 丁香 婷婷五月| 精品国产乱码久久久久夜深人妻| 五月丁香天天| 天天综合网~91| 久久99成人性爱高清视频| 色五月激情| 六月色伊人婷婷| 国产欧美日韩综合精品一区二区| 五月婷婷丁香大陆免费| 做爰丰满少妇1313| 99爱在线视频| 国产精品18久久久| 五月丁香综合在线| 综合天天综合| 色在线免费观看| 五月丁香婷婷综合| 五月婷婷六月丁香免费| 国产欧美婷婷| 91精品综合久久久久久五月天| 亚洲第一视频 久久| 亚洲愉拍99热成人精品| 激情丁香网| 国产亚洲精品久久久久苍井松| 丁香五月天激情五月天激情五月天激情网| 丁香五月婷婷av影院| 色 五月婷婷基地| 99久久婷婷五月| 五月丁香久人妻中文| 99热这里有精品首页10| 97人人操人人爽| 欧美人人超级碰| 大香蕉伊人99| 婷婷五月六月激情| 激情网站五月| 久久在线大香蕉| 五月丁香影院| 玖玖五月丁香| 五月丁香婷婷爱激情综合网| 性做久久久久久久免费看| 国产精品色色666| 婷婷激情97| 91五月天| 久久婷婷五月综合| 99精品7| 激情五月天的婷婷| 丁香五月激情综合久久| 9热在线观看| 五月天成人在线视频丁香| 少妇性按摩无码中文A片| 99热欧| 能看的av| 五月婷婷性爱| 五月丁香综合影院| 丁香婷婷色五月| 99热热九九| 日日色综合| 思思热闹这里只有精品| www.夜夜爱.com| 狠狠搞狠狠操| 五月婷婷在线播放| 亚洲婷婷丁香五月在线| 久热精彩视频98| 99re思思久久| 中文无码婷婷| 丁香五月婷婷大香蕉| 久操婷婷| 五月婷婷色播| 五月开心久久| 精品网站:999WWW| 婷婷色色网站| 亚洲欧美在线观看| 嫩草AV久久伊人妇女超级A| 欧美啄木乌丝袜人妻系列| 任我鲁这里有精品视频| 九月婷婷在线视频| 五月天色丁香| 91一起操| 婷婷五月天综合久久| 免费婷婷| 大鸡巴伊人网| 欧美大片免费观看| 少妇2做爰HD韩国电影| 99热免费精品| 久久小片| 婷婷五月天欧美| 五月激情基地| 五月WWW| 色婷婷五月天天天做| 69人妻人人澡人人爽久久| 夜夜撸夜夜骑| 大香网伊人久久综合| www.色色com| 久热成人| 久久久精品色| 激情综合五月| AA丁香综合激情| 丁香五月激情综合| 超碰人人操在线| 综合啪啪| 色婷婷免费观看| 无码髙清| 五月天伊人网| 99热亚洲| 九九这里只有精品| 成人综合网站| 国产激情综合五月久久| 操97免费超级视频| 丁香六月在线| 精品国产乱码久久久久夜深人妻 | 国产毛片精品一区二区色欲黄A片| 九九激情| www九九热| 欧美日本国产欧美日本韩国99| 亚洲激情无码久久| 99re在线这里只有精品视频首页| 婷婷五月天777| 精品九九在线观看| 丁香五月色情| 五月婷婷六月情| 婷婷99狠狠| 日本三久久| 日韩综合久久| 99国产精品久久久久久久久久久| 婷婷午夜| 1024在线观看免费视频| 91怕怕网| 色综合色| 亚洲无码AV片| 91seav| 丁香五月亚洲激情婷婷射| 日韩欧美成人片| 九九综合九九| 五月天久久www| 欧美日本va| 国产午夜精品一区二区| 六月激情综合| 女同激情久久av久久| 蜘蛛女侠2003满天星免费观看| 久久思思热视频| 婷婷婷婷婷婷婷婷| 天天插天天射| 99久久久久久久| 日韩一级片| 五月综合婷婷开心网| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 91色在线/日韩| 九九激情网| 丁香五月久久综合| 久久精典| 亚洲成人日韩无码精品| yiqicaoav| 婷婷成人网五月天| 日日天天干| 人妻av在线| 九九九九操逼| 淫视馆aV二区一区| 五月婷婷真爱激情网| 熟女激情网| 99热在线观看免费| 成片免费播放| 日韩综合久| 天天色丁香| 五月情涩综合婷婷| 超碰99热| 99色网站| 青草五月天| 亚洲色五月| 99久久玖玖| 丁香五月综合福利视频导航| 欧美va在线| 五月天激情小说| 99玖玖视频| 怕怕av| 色九亚洲| 青青草原爱爱网| 国产永久一二一起草| 丁香5月综合啪啪| AV在线免费播放| 男人的天堂99| 婷婷丁香五月欧美人| 《蜘蛛女》梁铮1995| 天天综合五月天| 影音 五月 婷婷 久久| 九月丁香八月婷婷久久综合久97| 亚洲婷婷在线播放十月| 欧美激情综合色综合| 婷婷色五天| 五月婷婷色欲| 久色姿源| 91碰碰碰| eeuss人妻| 免费看成人747474九号视频在线观看| 色在线免费观看| 99久热这里有精品| 色婷婷亚洲婷婷| 九九精品综合| 停停五月色宗合| 婷婷性爱五月天丁香网| 婷婷丁香五月天婷婷| 色色色色色色色色色999| 欧美五月婷婷| 日韩成人电影av| 精品一区二区三区木瓜| 色吧综合网| 色欲久久久久久综合网综合网| 五月丁香日本片| 亚洲网视屏| 黄网在线免费播放| 亚洲一区二区无遮挡A片| 操一区| 中文字幕在线播放视频| 五月天婷婷婷| 五月婷婷狠狠久久| 婷婷五月天美女21p| AA片在线观看视频在线播放 | 6080av| 99九九精品| 天天综合亚洲综合网天天αⅴ| 欧洲亚洲精品| 欧美网站视频4399| 五月婷啪啪| 4438国产免费看| 午夜不卡成人一区二区| 九九99精品视频在线观看| 中文字幕av久久爽| 九九激情| 丁香五月婷婷啪| 日本在线视频播放91| 99精品久久| 那里有AV网址| 五月丁香激情综合六月涩涩爱| 婷婷 丁香 精品| 久久五月婷婷视频| 色色五月天网站| aaa久久| 日本婷久久| 婷婷五月天激情综合| av中文网站| 午夜精品人妻无码一区二区三区| 天天爽在线视频| 26uuu在线观看| 色视频2025| 欧美日韩999| 大香蕉520| 丁香五月欧美| 狠狠干激情五月| 五月婷婷香蕉| 4438激情网| 婷婷综合色色| 超碰97在线操| 激情五月婷婷五月| 99,色| 丁香五月大香蕉| 色色网站免费观看| 久久五月天视频| 久久只有18视频| 日韩成人五月天| 九色亚洲| 婷婷亚洲影院| 婷婷丁香五月六月激情| 五月丁香综合啪啪| 丁香五月区| 涩九九九九| 五月天综合久久| 五月久久亚洲| 久久婷婷网站| 伊人婷婷福利网| 女人被男人吃奶到高潮| 九九热99免费视频| 激情婷婷五月丁香啪啪啪| 狠狠色无码| 9色天堂| 五月婷婷六月丁香综合| 久久婷婷五月综合| 五月综合激情图片| 91精品丝袜久久久久久| 五月激情久久综合| 综合久久高清| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 黄色AAAAA| 五月丁香婷婷综合网| 久久性视频| 亚洲mm色| 久综合网| 天堂网色色| 久久久中文| 欧美婷婷综合| 天天粽合合合合| 97热久久五月婷婷| 性爱激情五月| 人妻久久久| 激情五月天com| 婷婷六月色丁香视频在线观看| 少妇人妻人伦A片| 热99在线精品| 思思re99视频在线观看| 五月丁香成人| 五月婷婷www| 99热久久这里只有精品| 极品人妻VideOssS人妻| 六月99天天婷婷激情综合| 人妻丰满精品一区二区A片| 五月丁香激情婷婷| 欧洲高清免费久久| 丁香香五月激情免费视频| 婷婷色五月91啪啪| 狠狠干,狠狠操| 色综合久久99色| 热99热9| 欧美婷婷六月丁香综合色连续高潮抽搐| 五月天堂色色| 天天肏在线视频| 欧美成人一区二区三区在线视频| 天天噜噜| 夜夜操,天天撸| 亚洲五月天综合| 九九国产视频| 99热在线观看| 大香蕉婷婷色| 婷婷五月电影院| 色婷婷久久视屏| 99@久久@99精品视频| 操日视频| 色色色五月婷| 色五月亚洲| 激情综合五月婷婷六月丁香| 欧美激情 日韩无码 婷婷 五月天| 伊人狼人干| 亚洲A片成人无码久久精品青桔| 婷婷五月天视频亚洲| 99综合色色色| 五月天激情偷拍| 91丨九色丨东北熟女| 婷婷丁香精品视频在线观看| 大香蕉五月天| 操碰97| 狠狠操综合| 无码99| 五月婷婷婷| 色五月婷婷综合| 99综合在线| 99热老司机| 啪啪色区| 99热9| 五月丁香六月激情欧美综合| 天天干天天操天天爽| 婷丁香五月天| www.人人操人人看人人想人人摸 人人人人操,COM| 婷婷六月丁香综合| 白天AV月月| 五月婷色啪| 欧美日韩AAA| 日韩精品二三区| 色色色9| 亚洲va在线∨a天堂va欧美va| 激情五月六月婷婷综合啪啪| 天天色情站| 4399在线观看免费高清电视剧| 9月色婷婷| 色综合久久44| 月月AV| 97干婷婷五月天| 日韩av网址大全| 99热九九热| 激情无码网| 天天插综合| 丁香激情网| 狠狠色丁香乆乆| 综合久久首页| 婷婷色五月丁香六月欧美啪| www,超碰| 六月激情网| 色婷婷久久综合| 丁香婷婷五月激情综合| 性 色 婷婷| 女力报到正好爱上你| 俺来也综合网精品一区| 99视频超级精品| 欧美97p| 色五月激情网| 欧美性爱五月天| 五月精品99综合| 五月丁香婷婷婷激情爱爱| 操操熟女| 欧美激情五月综合| 婷婷五月天综合小说网| 国产成人99久久亚洲综合精品| 狠狠狠狠狠草| 九九色色网| 国产SUV精品一区二区6| 大伊香蕉精品视频在线| 久久全意婷婷| 在线成人网址| 开心五月婷婷在线| 婷婷五月天色| 五月天丁香花婷婷| 激情综合青草| 五月天播播中文字幕 | www狠狠| 日韩99视频| 国产午夜精品AV一区二区麻豆| 国产亚洲精品AAAAAAA片| 欧美性做爰大片免费看办公室| 少妇人妻偷人精品无码视频新浪| 9久久狠狠的| 日本操片| 五月婷婷精品无在线| 99热这里只有精品3| 99热只有| 日韩成人精品中文字幕电影| 丁香六月欧美| www.五月激情.com| 久久综合丁香激情五月| 成人精品一区日本无码网| 国产无套精品一区二区| 五月丁香综合久久夜夜| 婷婷五月天激情小说| 亚洲丁香五月综合| 91热在线| 久久五月天免费网站| 五月婷婷啪啪啪| 综合图区激情| 成熟妇人A片免费看网站| 九九99偷拍视频| 丁香五月色色色色| 日韩人妻在线观看| 涩 五月 婷婷 狠狠| 五月天丁香网站| 亚洲最大五月天成人网| 婷婷综合网| 色婷婷在线影院| 六月婷婷色宗合| 亭亭玉月丁香| 综合久久97| 99热在线只有精品| 99视频日韩| 777精品成人a v久久| 深爱激情五月网| 丁香伍月婷电影全集| 五月丁香婷婷成人版| 99这里有精品免费| 欧美成人va| 大香蕉五月天婷婷丁香91| 国产精品五月丁香| 精品久热| 九九热这里只有精品556| 亚洲激情免费视频| 99综合网| WWW色五月天| 婷婷亚洲综合| 丁香五月香蕉在线| 五月天婷婷激情小说电影| 色网站9| 久热视频这里只有精品68| 成人在线不卡| 日本熟妇精品99| 日本久热| 亚洲午夜AV| 丁香五月香蕉| www99热| 亚洲超碰在线| av九九| 91超级碰碰| 激情文学久久| 天天爽天天操| 桃色伊人在线| 性爱网五月婷婷| 亚洲小视频| 九月婷婷综合色干| 婷婷五月丁香在线视频| 操97在线观看| 噜噜精品| 97操碰98| 天天插天天爽| 变态另类9| 久久色情| 欧日韩AV| 婷婷婷婷婷婷婷婷婷婷丁香| 色欲婷婷夜夜| 亚洲三A| 丁香五月冃欧美| 1024久婷| www.99热在线观看| 日韩色色网| AA片在线观看视频在线播放| 日韩三级片一区二区| 97在线精品视频| 俺来也综合网精品一区| 婷婷丁香五月亚洲| 激情五月综合色婷婷| 99ri精品| 怡红院精品视频久久久久久久久| 亚洲精品久久久久AV无码| 五月丁香六月色婷婷综合五月天| 色色激情五月| 亚洲五月丁香综合网| 亚洲五月婷婷| 五月激情丁香五月宗合| 色婷婷成人做爰A片免费看网站| 丁香五月电影| 成人在线观看精品| 九九亚洲| 欧美群妇大交乱婬网| 久热无码| 五月婷婷视频28| 成人网站av免费网站推荐| 精品久久久人妻| 亚洲天堂热| 69凹凸成人综合网| 免费观看大片视频 丁香婷婷 六月欧美| 99人人干| 国产干逼片| 五月婷婷中文字幕| 丁香五月亚洲综合| 五月色丁香| 国产亚洲精品久久久久久牛牛| 五月天激情小说电影| 日产精品一线二线三线芒果| 五月丁激情| 九九九九中文字幕| 亚洲五月天婷婷在线| 婷婷成人五月天一区| 成人美女网| 五月婷婷色| 色噜噜,噜噜色| 欧美啪啪网| 九九热视频在线观看| 久久五月网| 久青操| 国产SUV精品一区二区883| 国精产品久久| aaaaa黄色| 欧美日本97| 五月天啪啪| 99热天堂| 五月婷婷丁香综合| 美女五月天婷婷| 欧美成人日韩| 五月婷婷操操| 色播五月网| 99热激情| 大伊久久| 五月婷婷综合网在线播放| 一级AV片| 成片免费观看视频大全| 欧美成人精品老美女噜噜噜| 日本久久精品18| www.金莲av| 丁香五月久久| 99无码超碰| 婷婷五月激情视频在线| 九九九这里只有精品| AV片一区在线观看| 九九色逼| 久久久激情| 美国十月色婷婷在线观看| 任你爽视频| 在线观看日韩12345区| 欧美色97| 日韩AAAAAAAAAAA片| 丁香五月激情宗合网| 99精品久久久久久| 草草色情综合网| 乱精品一区字幕二区| 激情五月天影院| 久久九九99亚洲国产久精综合| 翔田千里 50岁 无码| 色狠狠伊人久久五月丁香| 91操屁股| 色五月色五天色情网址| 五月丁香婷婷六月| 五月欧美丁香在线观看| 色播丁香五月婷婷操:屄| 色五月婷婷五月天激情综合| 亚洲五月天激情| 五月天伊人网| 九九热在线99| 激情五月小说婷婷| 天天插综合| 久久伊人五月天| 色情婷婷| 日韩色色视频| 免费黄色片子| 婷婷色色五月| 粉嫩AV久久一区二区三区| 日本九九视频| 日韩在线9| www.色色五月天.com| 亚洲第一色区| 玖玖热视频| 久热免费| 一月婷婷色色| 91玖玖| 激情五月天丁香| 国产色色视频| 色一情一乱一伦一区二区三区| 欧美精品啪啪| 五月婷婷综合激情网| 天天综合网在线| 日本色综合| 精品网站:999WWW| 久操无码| 精品婷婷| 久久婷婷五月天丁香| 99在线免费观看| 丰满少妇猛烈A片免费看观看| 五月婷婷久久久| 亚洲欧洲另类| 五月丁香啪| 色啦啦视频| 五月色激情综合网| 偷拍91九色| AV九九| 无码天天操| 婷婷爱五月天人人爱| 开心五月丁香婷婷| 99热综合网| 色综合区| 日本欧美成人片AAAA| 思思热视频在线| 9热网站| 伊人久久大香线蕉AV最新午夜| 丁香六月综合| 久久刺激网| 色噜噜,噜噜色| 五月天色裸体视频| 五月天丁香综合久久国产| 色九月婷婷丁香| 99成人| Av中文在线| 亚洲操精品| 情情五月天色| 五月丁香啪啪啪| 久久久久久久久久8888| 99精品网| 婷婷久久天堂网| 成人av免费观看| 手机AVAV天堂看网| 激情视频综合| 国产高潮A片羞羞视频涩涩| 亚洲精品字幕| 婷婷综合在线播放| 一區四區歐美日韓| 婷婷五月天国产在线播放| 五月丁香婷婷导航视频| 久操福利| 91操人人操| 婷婷九月综合| 五月婷婷激清网| 激情四射五月天| 五月天丁香婷婷久久九| 日韩天堂久久| 综合激情五月丁香9999久久精| 激情五月天开心网丁香无码| 91在线观看九区| 日本操碰碰| 淫荡综合网| 这里只有精彩视频| 五月天婷婷久草丁香| 久99热在线观看| 99视频内射三四| 五月在线| 免看黄大片AA | 97精品欧美91久久久久久久| 六月丁香啪| 五夜丁香| 国产精品男人AV不卡| www.97干视频| AAA亚洲AV| 亚洲五月婷婷| 色碰碰| 色五月在线观看| 国产精品久久久久久久久久免费| 大香蕉丁香五月| site:jszngf.com| 女同激情久久av久久| 五月综合激情| 九九人人操| 久久精彩视频| 亚洲成人在线电影网站| 久久艹99| 五月婷婷丁香婷婷| 久久久精品免费啪啪国| 香蕉久久国产av一区二区| 激情五月黄色小说| 超碰人人干| 99日在线观看视频| 亚洲最大五月天成人网| 97九色| 丁香五月激情综合婷综| 亚洲视99| 激情五月综合网| 日韩视频女神99| 天天谢天天操| 色综合色香蕉网| 夜夜做天天爽| 久热这里| 五月天五月色婷婷综合| 99热6这里只有精品| 久久ww| 丁香婷婷激情综合五月激情| 婷婷五月天在线观看免费| 97干在线视频| 九九re精品视频在线观看| 91艹人| 97操操| 好吊操这里只有精品| 天天色激情| 五月天婷婷偷拍| 亚洲人妻一区二区 | 激情国产综合| 精品成人a v无码内射| 97精品综合久久| 九九热色视频| 亚洲综合九九| 精品婷婷五月视| 最近免费中文字幕大全高清大全1| 亚洲激情久久| 九九99男女视频在线观看| 亚洲视频丁香网va| 国产欧美熟妇另类久久久| 激情六月婷婷| 91久久婷婷| 五月6香色婷婷视频| 婷婷五月天激情开心网| 久久综合66| 狠狠插日日干撸| 色婷婷五月天无码视频| 色青五月天| 人操综合| 天天日,天天干,天天操| 少妇伦子伦精品无吗| 丁香 婷婷 激情 综合 五月| 蜜桃人妻无码AV天堂三区| 97操资源婷婷| 色婷婷狠狠| 任你擦免费视频| 伊人久久婷婷| 欧美在线骚货| 天天草女人| 噜噜久| 操人精品| 色五月大香蕉| 久久久久亚洲A∨成人乱码电影| 婷婷五月天奸女| 亚洲激情四射| 日本熟妇乱妇熟色A片蜜桃| 综合五月天亚洲婷婷| 91男同| 久久久久亚洲AV成人无码电影| 五月丁香六月婷婷色情| 性色综合网| 精品人人操| 五月丁香激情五月天| 99亚洲视频| 91视屏在线观看com.wwwvv| 久热这里| 91精品久久久久久综合五月天| www.com久久久久久久久久久久久久久久久| 天天日天天干天天插天天射| 超碰在线免费观看日韩| 色五月丁香一区在线| 精品国产AV色一区二区深夜久久| 色狠狠激情五月| 激情综合五月丁香六月婷婷| 色射婷婷五月天| 欧美色色色色色色| 婷婷另类小说| 综合一本道| 另类专区在线| 亚洲日韩久久婷婷伊人| 五月丁香另类网| 猫咪伊人久久| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 99热精品一区| 五月天婷婷操逼视频| 亚洲不卡| 天天天天做夜夜夜夜做| 北条麻妃伊人 | 激情亭亭五月| 欧美天天综合网站上去吧| 香蕉AV777XXX色综合一区 | 99色视| 丁香影院五月综合| 久久激情五月| 激情国产五月| 成人av免费观看| 狠狠操性爱av| 亚洲成人在线播放| 超碰成人影视| 97久久久| 色色色地址| 思思热久久爱| 99热99网| 美国不卡视频| 亚洲亚洲人成综合网络| 伍月婷丁香花全集| 日本69日人视频| 丁香五月色激情| 99精品视频在线观看| 深爱激情网五月| 射久久丁香五月| 免费视频在线观看的网站| 亚洲第一精品成人999久久精品| 日本123区日韩欧美不卡在线看| 99婷婷国产最新视频| 91操人| 婷婷成人在线| 激情久久伊人| 婷婷色婷婷| 日本一级一片免费视频| 日本女天天爽| 亚洲碰碰碰| 超碰人人摸AV| 丁香激情网| 91久久久久久久| 狠狠狠色激情综合适合| 色情综合网| 91在线日本| 久9综合| 国产成人精品一区二三区熟女在线 | 婷婷中文字幕在线| 99ree6| 丁香五月婷婷基地| 五月久久婷婷| 婷婷玖玖五月天| 十月色综合| 天天看夜夜看| 色五月五月丁香| 包操45分钟网站| 久久五月综合| 天堂久久婷婷| 99热99| 久久日本wwww色| 9热成人在线视频| 欧美成人AAA片一区国产精品| 狠狠操狠狠操AV| 99综合一区| 另类小说五月天激情| 91婷婷色五月| 五月99久久| 成人AV网站在线| 热久91| 国产一级黄色影片,| 99re思思热久久| 东京热免费视频| 久久9精品| 欧美精品99| 九九色色网| 91爱操| 久久久久婷婷| 另类图片色五月| 91欧美日韩综合| 久久综合性| 婷婷五月天激情文学| 夜夜躁爽日| 六月综合在线| 九九热在线精品视频| 五月丁香AV、伊人业余、性色熟妇 | 人人摸人人澡人人| 性爱久久| 婷婷五月天成人网| 婷婷婷久久久| 五月天激情影院| 91五月天| 能看的AV| 嫩BBB搡BBBB榛BBBB| 99re热在线视频| 久久一热| 色色五月婷婷| 激情五月丁香五月色| 亚洲超碰在线| 熟女少妇内射日韩亚洲| 超碰免费在线| 激情综合五月婷婷| 五月天开心色色网| 99精品视频免费| 色婷婷在线视频| 97婷婷狠狠| 五月婷丁香| 极品人妻VIDEOSSS人妻| 日本丁香五月| 在线观看国产高清视频免费网站| 第五色婷婷| 激情综合五月天| 婷婷丁香五月天激情四射| 丁香五月五月婷婷欧美大香蕉| 日韩婷婷| 五月天丁香久久综合| 久久久国产精品黄毛片| 99操视频| 亚洲一级 片内射网站在线观看| 无码人妻AV久久久一区二区三区 | 性爱激情五月| 四季AV综合网| 99热在线观看免费中文| 91日本在线观看| 五月婷婷丁香五月亚洲色| 午夜理论片最新午夜理论剧| 九九九精品视频免费观看| 久久黄A片| 天天色综合色| 久久久免费精彩视频| 婷婷亚洲综合| 婷婷丁香五月天激情| 26uuu国产| 爱爱网址9| 日韩av在线播放综合网| 99热国产在线| 久99热在线观看| 狠狠88综合久久久久噜噜噜| 色婷婷五月天激情久久| 天天日日天天| 狠狠摸狠狠摸| 狠狠干综合| 97在线/日本| 五月婷六月综合在线观看| 99成人网站| 五月激情综合美女久久| 婷婷五月综合体验看| 狠狠人妻色综合| 亚洲国产精品二二三三区 | 丁香色婷婷| 深爱五月激情| 大香久久综合网| 国在线激情网| 日日插日日干| 婷婷色六月| 久热99久热| 九九热这里有精品视频| 思思热性操| 超碰在线观看9| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 色无婷婷| 强伦轩人妻一区二区电影| 婷婷日本在线| 久久久8| 久久婷婷色五月| 精品久久久人妻| 五月丁香六月停停停| 99在线热视频| 开心日韩丁香婷婷五月| 亚洲综合狠狠艹| 丁香久久| 成人综合网站| 婷婷中文无码| 欧美美美女性色视频| 成人婷99最新| 婷婷婷五月香蕉| 丁香五月天婷婷久久| 丁香五月婷综合网| av亚洲国产小电影| 97AV在线视频| 色色性爱视频| 久久R激情| 婷婷五月亚洲激情| 91婷婷丁香五月| 99热伊人综合| 日本熟女三区| 色情综合| 《久久综合九色综合97婷婷| WWW,激情五月天,COM| 久热这里只有精品66| 综合伊人久久| 丁香五月婷综合| 丁香五月激情性色郤| 丁香婷婷色情| 亚洲无码免费看| 日韩av干| 狠狠爱综合网| 亚洲熟女色| 五月丁香综合| 99超级超级超级碰| 蜜臀av在线成人电影| 色五月色五天色情网| 欧美性爱丁香五月| 五五月五月| www.色婷婷.com| 开心婷婷五月天综合| 五月丁香六月综合基地| 色欲一区二区三区精品A片| 超级碰碰碰久久网站| 色999五月色| www99在线观看视频| 日本V在线观看不卡视频网站| 成人免费在线电影| 六月激情婷婷| 影音先锋综合网| 婷婷中文字暮| 精品热九九| 伊人深爱综合| 色婷婷狠狠18yy| 五月婷久久在线| 五月伊人91| 99.色| 日韩99无码| 综合激情深爱| 五月停停99| 淫荡工a| 男女啪啪视频久 9| 五月天激情视频网站| 日韩婷婷| 丁香五月色综合色播五月| 六月丁香色色| 色v综合网| 亚洲最大在线| 色色婷| 九九Av| 人妻内射麻豆视频| 亚洲精品又粗又大又爽A片| 国产成人av在线播放| 一级黄色尤物综合视频手机在线观看| www...com黄在线观看| 99在线观看视频精品| 999热在线视频| www.日本久久videos| 婷婷色六月| 爽极品色| 激情六月婷婷| 色婷丨日丨天丨综合久久| 国产精品成人AV在线| 五月天婷婷涩涩| 九九热精品视频在线观看| 国产女18毛片多18精品| 天天做天天要天天爽| 五月丁香激情啪啪| 欧美毛片www| 91久久18| 激情婷婷久久| 九九人妻福利| 少妇伦子伦精品无吗| 丁香婷婷综合五月天| 99免费在线视频| 久热2025无码| 久婷婷视平| 99热成人精品网站| 97人人操人人爽| 国产精品18久久久| 丁香婷婷在线| 久婷首页| 婷婷六月天| 欧美久久婷婷| 色一情一乱一乱91Av| 五月丁香婷婷综合网| 69热91天堂| 日韩一级网站| 五月天激情播播网| www.婷婷com| 国产精品色婷婷久久久精品| 97干婷婷| 婷婷激情综合网| 欧美激情综合色综合| 1024AV视频| 久久九九@| 天天日天天摸天天| 欧美碰碰| 亚洲操人| 婷婷五月丁香六月天亚洲综合| 五月婷婷很很色| 操逼巨乳91| 狠狠色官网| 天天干,天天操,天天射| enecarbon-materials.com污K127封锁请涟系@wip1688 | 丰满少妇猛烈A片免费看观看| 欧美综合激情五月丁香| 一本大道伊人AV久久综合| 亚洲精品五月| 综合久久9| 五月天福利影院导航| 婷婷激情五月天在线| 黄色91在线观看| 伊人99热| 日日夜夜狠狠|