99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

WebSocket詳解:從握手原理到生產(chǎn)環(huán)境的心跳重連實(shí)戰(zhàn)

WebSocket詳解:從握手原理到生產(chǎn)環(huán)境的心跳重連實(shí)戰(zhàn) 網(wǎng)上搜“websorket詳解”大概率是手滑把WebSocket打錯(cuò)了但點(diǎn)進(jìn)來的朋友應(yīng)該都是想搞懂這個(gè)協(xié)議到底是怎么回事。我先說結(jié)論WebSocket就是跑在TCP之上的一條全雙工通道客戶端和服務(wù)端完成一次握手之后兩邊隨時(shí)都可以往對(duì)面懟數(shù)據(jù)不用像HTTP那樣每次請(qǐng)求都重新建立連接。它解決的核心痛點(diǎn)就是——HTTP的“請(qǐng)求-響應(yīng)”模型沒法讓服務(wù)器主動(dòng)找客戶端說話而現(xiàn)實(shí)里聊天、推送、協(xié)同編輯、實(shí)時(shí)行情這類場景恰恰最需要的就是“服務(wù)器主動(dòng)開口”。這篇東西我會(huì)從協(xié)議原理講到代碼實(shí)現(xiàn)再到生產(chǎn)環(huán)境的坑適合兩種人看一是剛準(zhǔn)備做實(shí)時(shí)功能、想知道WebSocket和輪詢?cè)趺催x的小白二是用了很久但老在斷線重連、心跳?;钌显愿^的實(shí)戰(zhàn)派。1. WebSocket到底解決了什么問題1.1 從輪詢地獄到長連接在WebSocket出現(xiàn)之前想做實(shí)時(shí)功能基本就三條路短輪詢前端每隔幾秒發(fā)一次HTTP請(qǐng)求問“有消息沒”。實(shí)現(xiàn)最簡單但消息延遲取決于輪詢間隔間隔調(diào)短了服務(wù)端壓力成倍翻。我見過一個(gè)項(xiàng)目把輪詢間隔從5秒改到1秒數(shù)據(jù)庫連接池直接被打滿最后只能加機(jī)器。長輪詢請(qǐng)求發(fā)過去之后服務(wù)端先hold住有數(shù)據(jù)再返回。比短輪詢省請(qǐng)求但每個(gè)未完成的請(qǐng)求都會(huì)占用一個(gè)連接連接數(shù)上去之后網(wǎng)關(guān)和服務(wù)器都得跟著調(diào)參數(shù)而且請(qǐng)求超時(shí)、中間鏈路斷掉的問題排查起來特別累。SSEServer-Sent Events服務(wù)端單向推送瀏覽器端用EventSource就能接比WebSocket簡單但只能服務(wù)端往客戶端推客戶端想給服務(wù)端傳數(shù)據(jù)還得另開一條HTTP通道。這三條路各有各的憋屈。短輪詢的延遲和服務(wù)器負(fù)載互相矛盾長輪詢?cè)陂L連接數(shù)量大的時(shí)候?qū)Υ韺雍瓦B接池極不友好SSE又天生是半雙工。WebSocket的思路完全不一樣——它把“建立連接”和“傳輸數(shù)據(jù)”拆開先用HTTP協(xié)議完成一次升級(jí)握手然后保持這條TCP連接不關(guān)閉后續(xù)所有數(shù)據(jù)都在這條連接上雙向流動(dòng)。下面這張對(duì)比表可以直觀看到差別方案實(shí)時(shí)性服務(wù)端壓力雙向通信短輪詢?nèi)Q于間隔秒級(jí)起步高支持長輪詢有改善但仍受超時(shí)影響中高支持SSE高低不支持WebSocket毫秒級(jí)推送低支持這個(gè)設(shè)計(jì)的直接收益是通信雙方不需要再花時(shí)間在連接建立、請(qǐng)求頭解析這些重復(fù)勞動(dòng)上實(shí)時(shí)性從“秒級(jí)輪詢”直接拉到了“毫秒級(jí)推送”。同一臺(tái)服務(wù)器同樣的配置用WebSocket支撐的連接數(shù)往往是輪詢方案的數(shù)倍因?yàn)槭〉袅撕A恐貜?fù)的HTTP握手開銷。1.2 協(xié)議設(shè)計(jì)的核心思路一次握手雙向通信很多人誤以為WebSocket是HTTP的升級(jí)版其實(shí)它跟HTTP是平級(jí)的關(guān)系。WebSocket握手走的是HTTP的Upgrade機(jī)制但握手完成之后協(xié)議就切換成了RFC 6455定義的獨(dú)立協(xié)議后續(xù)的幀格式、掩碼規(guī)則、控制幀這些跟HTTP沒有任何關(guān)系。那為什么非要借HTTP來握手因?yàn)閷?shí)際工程里客戶端到服務(wù)端之間往往隔著一堆基礎(chǔ)設(shè)施——負(fù)載均衡、反向代理、防火墻、網(wǎng)關(guān)。這些設(shè)施大部分只認(rèn)HTTP如果WebSocket上來就自己搞一套握手協(xié)議所有中間層都得跟著改。借道HTTP升級(jí)意味著現(xiàn)有的80/443端口、SSL證書、域名配置還有那些按HTTP路由分發(fā)請(qǐng)求的代理全部可以復(fù)用落地成本低得多。所以協(xié)議設(shè)計(jì)的核心思路就一句話用HTTP的殼完成升級(jí)用獨(dú)立協(xié)議做傳輸。這個(gè)妥協(xié)換來了巨大的工程收益也讓W(xué)ebSocket在瀏覽器、App、服務(wù)端之間幾乎成了實(shí)時(shí)通信的默認(rèn)選項(xiàng)。后面不管你用哪種語言的庫底層走的都是這套流程理解了這個(gè)思路看任何WebSocket框架的文檔都會(huì)快很多。2. 協(xié)議層的關(guān)鍵機(jī)制弄清楚這些才算真正入門2.1 握手階段到底發(fā)生了什么握手過程其實(shí)就是兩條HTTP報(bào)文但有幾個(gè)細(xì)節(jié)值得單獨(dú)摳一摳??蛻舳税l(fā)起請(qǐng)求大致長這樣GET /chat HTTP/1.1 Host: example.com Upgrade: websocket Connection: Upgrade Sec-WebSocket-Key: dGhlIHNhbXBsZSBub25jZQ Sec-WebSocket-Version: 13注意兩個(gè)頭缺一不可Upgrade: websocket表示要升級(jí)協(xié)議Connection: Upgrade則告訴中間設(shè)備別把連接關(guān)掉。Sec-WebSocket-Key是一個(gè)隨機(jī)的Base64編碼字符串原始數(shù)據(jù)長度16字節(jié)它的作用是觸發(fā)服務(wù)端校驗(yàn)防止老式緩存代理把后續(xù)WebSocket數(shù)據(jù)錯(cuò)誤地當(dāng)HTTP響應(yīng)緩存或轉(zhuǎn)發(fā)。服務(wù)端收到之后會(huì)把這個(gè)Key拼上一個(gè)固定的魔數(shù)GUID這個(gè)字符串在RFC 6455里寫死了258EAFA5-E914-47DA-95CA-C5AB0DC85B11然后做一次SHA-1哈希再Base64編碼作為Sec-WebSocket-Accept返回HTTP/1.1 101 Switching Protocols Upgrade: websocket Connection: Upgrade Sec-WebSocket-Accept: s3pPLMBiTxaQ9kYGzzhZRbKxOo這個(gè)Accept值是可以自己驗(yàn)證的別把它當(dāng)黑盒。我調(diào)試自研服務(wù)端時(shí)就經(jīng)常用Node.js的crypto先算一遍確認(rèn)自己實(shí)現(xiàn)的握手邏輯和庫的行為一致const crypto require(crypto); function computeAccept(key) { const GUID 258EAFA5-E914-47DA-95CA-C5AB0DC85B11; const hash crypto.createHash(sha1); hash.update(key GUID); return hash.digest(base64); }如果你在做跨語言對(duì)接拿著客戶端發(fā)來的Sec-WebSocket-Key用這段邏輯算一遍跟服務(wù)端返回的Accept比對(duì)就知道握手到底有沒有走對(duì)。這里有一個(gè)容易忽略的工程細(xì)節(jié)握手之后原始HTTP連接就被“奪走”了不能再往這條連接上發(fā)任何HTTP響應(yīng)。有些新人在握手完成后試圖通過同一個(gè)socket返回一段JSON數(shù)據(jù)結(jié)果客戶端直接報(bào)協(xié)議錯(cuò)誤原因就是沒理解“協(xié)議切換”這件事。另外如果客戶端需要攜帶子協(xié)議標(biāo)識(shí)比如聊天走JSON、文件走二進(jìn)制可以加Sec-WebSocket-Protocol頭服務(wù)端在響應(yīng)里選一個(gè)返回這是業(yè)務(wù)層的協(xié)議協(xié)商跟前文的協(xié)議升級(jí)是兩碼事別搞混。2.2 數(shù)據(jù)幀格式一個(gè)字節(jié)一個(gè)字節(jié)拆給你看WebSocket傳輸數(shù)據(jù)的基本單位是“幀”frame。一個(gè)幀從前往后依次是FIN1 bit標(biāo)志這一幀是不是消息的最后一幀。大消息可以拆成多幀發(fā)送最后一幀的FIN置1。RSV1-3各1 bit一般不用只有協(xié)商了擴(kuò)展比如壓縮才會(huì)用到收到非0值且沒協(xié)商對(duì)應(yīng)擴(kuò)展時(shí)必須斷開連接。opcode4 bits幀類型。0x1是文本幀0x2是二進(jìn)制幀0x8是關(guān)閉幀0x9是Ping0xA是Pong。MASK1 bit客戶端發(fā)往服務(wù)端的幀這一位必須為1服務(wù)端發(fā)往客戶端的幀這一位必須為0。就這么一個(gè)不對(duì)稱規(guī)則坑了無數(shù)人。Payload length7 bits/16 bits/64 bits載荷長度。前7位小于126時(shí)就是實(shí)際長度等于126則后面2字節(jié)才是長度等于127則后面8字節(jié)才是長度。Masking key4字節(jié)MASK為1時(shí)這里帶上隨機(jī)掩碼密鑰。Payload data實(shí)際數(shù)據(jù)。其中opcode的取值是排查問題時(shí)的關(guān)鍵信息整理成表格方便對(duì)照opcode含義說明0x1文本幀載荷按UTF-8編碼0x2二進(jìn)制幀載荷原樣傳輸0x8關(guān)閉幀帶關(guān)閉碼和原因文本0x9Ping心跳探測(cè)0xAPong收到Ping后必須回復(fù)載荷原樣復(fù)制理解了幀格式最大的收獲是能看懂“為什么短字符串抓包出來幀頭挺長”——因?yàn)橐獛?字節(jié)掩碼和幀頭本身的開銷。消息越短這個(gè)固定開銷占比越明顯。實(shí)測(cè)一條5字節(jié)的消息實(shí)際線上傳輸大約是10到14字節(jié)批量發(fā)送大量短消息時(shí)這個(gè)開銷積少成多會(huì)直接影響吞吐量。2.3 掩碼規(guī)則為什么客戶端必須加掩碼而服務(wù)端不用這是很多教程一筆帶過但面試和實(shí)戰(zhàn)都愛考的點(diǎn)。RFC規(guī)定客戶端發(fā)送的幀必須設(shè)置MASK位并用隨機(jī)Masking key對(duì)載荷做掩碼服務(wù)端發(fā)送的幀則不允許設(shè)置MASK位。掩碼不是加密算法非常簡單——把載荷的每個(gè)字節(jié)與Masking key循環(huán)異或masked[i] payload[i] ^ maskingKey[i % 4]那為什么非要這樣設(shè)計(jì)核心原因是防御一種叫做“緩存投毒”cache poisoning的攻擊場景。早期WebSocket在公網(wǎng)環(huán)境可能經(jīng)過某些中間代理代理會(huì)基于HTTP語義去解析流量。如果沒有掩碼攻擊者可以通過偽造報(bào)文讓代理把一段精心構(gòu)造的HTTP響應(yīng)“緩存”下來進(jìn)而污染其他用戶拿到的內(nèi)容。加一層隨機(jī)掩碼之后代理無法可靠解析和預(yù)測(cè)數(shù)據(jù)內(nèi)容這種攻擊基本就失效了。明白這層邏輯你就知道為什么自己寫服務(wù)端時(shí)解析客戶端幀必須做“取消掩碼”而往客戶端回消息時(shí)直接明文發(fā)送即可。很多人第一次抓包發(fā)現(xiàn)客戶端發(fā)過來的數(shù)據(jù)跟實(shí)際文本對(duì)不上十有八九就是忘了處理掩碼。2.4 心跳與?;頟ing/Pong的正確姿勢(shì)TCP長連接本身不會(huì)自動(dòng)保持活躍。如果一段時(shí)間沒有數(shù)據(jù)傳輸中間的路由器、NAT網(wǎng)關(guān)、負(fù)載均衡都可能因?yàn)榭臻e超時(shí)把連接靜默回收。連接“假死”之后兩端在真正發(fā)數(shù)據(jù)之前是感知不到的于是就會(huì)出現(xiàn)“看起來連著一發(fā)消息就失敗”的詭異現(xiàn)象。WebSocket協(xié)議內(nèi)置了Ping/Pong控制幀一端發(fā)Ping另一端收到后必須回一個(gè)Pong載荷數(shù)據(jù)原樣復(fù)制。這套機(jī)制在協(xié)議層面提供了合規(guī)的探活方式應(yīng)用層只需要在合理的時(shí)間間隔內(nèi)發(fā)Ping并記錄上一次Pong回來的時(shí)間就能判斷連接是否真的活著。實(shí)際落地時(shí)心跳不是“發(fā)個(gè)Ping”這么簡單。間隔太短高頻Ping幀本身就成了不小負(fù)擔(dān)間隔太長又起不到及時(shí)發(fā)現(xiàn)問題的作用。我一般以60秒為基準(zhǔn)30秒發(fā)一個(gè)Ping連續(xù)兩次未收到Pong就主動(dòng)斷開重連。但這不是固定值需要根據(jù)你所在網(wǎng)絡(luò)環(huán)境、代理超時(shí)時(shí)間、服務(wù)端負(fù)載綜合調(diào)整具體怎么校準(zhǔn)我在第四節(jié)細(xì)講。3. 手把手搭一個(gè)完整的WebSocket服務(wù)3.1 技術(shù)選型不同語言和庫怎么選WebSocket在服務(wù)端幾乎是標(biāo)配能力各語言都有成熟庫。Node.js生態(tài)里最常見的兩個(gè)ws輕量、性能好底層就是純WebSocket實(shí)現(xiàn)沒有多余的開銷我搭內(nèi)部服務(wù)時(shí)首選它。socket.io自帶斷線重連、事件廣播、rooms等功能適合快速開發(fā)但它不是純WebSocket協(xié)議握手和數(shù)據(jù)格式都有自己的封裝真要深入調(diào)協(xié)議時(shí)會(huì)多一層黑盒。Java那邊常用Netty生態(tài)成熟Go有g(shù)orilla/websocket寫起來很舒服Python的websockets庫也不錯(cuò)。選型建議很簡單先看團(tuán)隊(duì)熟悉度再看你是想“開箱即用”還是“要掌控每一個(gè)字節(jié)”。前者選帶封裝、帶重連的庫后者選純協(xié)議實(shí)現(xiàn)。下面我用Node.js的ws庫走一遍完整流程。這套代碼我直接用在內(nèi)部消息推送服務(wù)上邏輯不復(fù)雜但很完整可以直接抄。提示如果你當(dāng)前用的框架本身帶了WebSocket支持可以先基于內(nèi)置能力跑通再考慮引入獨(dú)立庫。沒必要為了“用庫”而多加一層依賴。3.2 服務(wù)端實(shí)現(xiàn)核心步驟第一步初始化一個(gè)HttpServer掛到同一個(gè)端口上。WebSocket握手走的是HTTP Upgrade所以需要先有一個(gè)HTTP服務(wù)去接住握手請(qǐng)求再升級(jí)成WebSocket連接const http require(http); const WebSocket require(ws); const server http.createServer((req, res) { res.writeHead(200, { Content-Type: text/plain }); res.end(WebSocket server is running\n); }); const wss new WebSocket.Server({ server, path: /ws });注意path參數(shù)它規(guī)定只有訪問/ws的請(qǐng)求才會(huì)被升級(jí)其他路徑仍走普通HTTP邏輯。這個(gè)設(shè)計(jì)很方便做“HTTP WebSocket 共用一個(gè)端口”生產(chǎn)環(huán)境里一個(gè)8000端口既能提供REST接口又能提供實(shí)時(shí)通道省得再多開一個(gè)端口去應(yīng)付防火墻策略。第二步監(jiān)聽連接事件維護(hù)客戶端集合處理消息和關(guān)閉邏輯const clients new Map(); wss.on(connection, (socket, req) { const id ${Date.now()}-${Math.random().toString(16).slice(2, 8)}; clients.set(id, socket); socket.id id; socket.on(message, (data) { const text data.toString(); // 這里解析業(yè)務(wù)消息比如 { type: chat, payload: {...} } handleMessage(id, text); }); socket.on(close, () { clients.delete(id); console.log(client ${id} closed, current${clients.size}); }); socket.on(error, (err) { console.error(socket ${id} error:, err.message); }); });這里有兩個(gè)細(xì)節(jié)值得說。一是用Map而不是數(shù)組管理客戶端連接頻繁上下線時(shí)Map的增刪都是O(1)而且每個(gè)連接有獨(dú)立ID做定向推送特別方便。二是error事件一定要監(jiān)聽。Node.js的EventEmitter如果沒監(jiān)聽error一旦socket異常直接會(huì)把整個(gè)進(jìn)程帶崩這是新手最常見的翻車點(diǎn)。第三步實(shí)現(xiàn)廣播和定向推送。WebSocket本身沒有“房間”概念所有業(yè)務(wù)上的分組、私聊、群聊都是應(yīng)用層用Map、Set這些數(shù)據(jù)結(jié)構(gòu)自己維護(hù)的function broadcast(json, exceptId null) { const text JSON.stringify(json); for (const [id, socket] of clients) { if (id ! exceptId socket.readyState WebSocket.OPEN) { socket.send(text); } } } function sendTo(id, json) { const socket clients.get(id); if (socket socket.readyState WebSocket.OPEN) { socket.send(JSON.stringify(json)); } }發(fā)送前檢查readyState OPEN是必須的。TCP斷開的通知往往有延遲Map里存的連接可能已經(jīng)死亡但還沒觸發(fā)close事件不加這個(gè)判斷就會(huì)往死連接上寫數(shù)據(jù)進(jìn)而觸發(fā)error嚴(yán)重時(shí)導(dǎo)致內(nèi)存堆積。服務(wù)端寫完還要處理優(yōu)雅退出進(jìn)程收到SIGTERM時(shí)先給所有客戶端發(fā)一個(gè)關(guān)閉幀opcode 0x8并帶上規(guī)范關(guān)閉碼再關(guān)閉服務(wù)。這個(gè)細(xì)節(jié)很多人不做但做了之后客戶端重連的日志會(huì)干凈很多排錯(cuò)也更省心。3.3 客戶端接入與消息協(xié)議設(shè)計(jì)瀏覽器端幾乎不用引任何庫直接用原生WebSocket對(duì)象const ws new WebSocket(ws://localhost:8000/ws); ws.onopen () { console.log(connected); ws.send(JSON.stringify({ type: join, room: general })); }; ws.onmessage (event) { const msg JSON.parse(event.data); // 按 type 分發(fā)處理 handleMsg(msg); }; ws.onclose () { console.log(disconnected, will retry in 3s...); setTimeout(connect, 3000); };這里我要單獨(dú)強(qiáng)調(diào)“消息協(xié)議設(shè)計(jì)”。很多人直接ws.send(hello)裸發(fā)字符串demo沒問題但業(yè)務(wù)一復(fù)雜無結(jié)構(gòu)的字符串會(huì)讓服務(wù)端解析邏輯變成一個(gè)巨大的if-else沼澤改一個(gè)字段要翻半天代碼。我的習(xí)慣是統(tǒng)一用JSON封裝消息至少包含兩個(gè)字段type表示消息類型payload表示具體數(shù)據(jù)。比如聊天消息是{ type: chat, payload: { from: u1, content: hi } }心跳是{ type: ping }服務(wù)端通知是{ type: notice, payload: {...} }。前端收到消息先看type再分發(fā)后端處理也只需要一個(gè)switch新增功能時(shí)改動(dòng)的局部性很好。如果涉及二進(jìn)制傳文件、傳圖片可以用type區(qū)分文本和二進(jìn)制通道或者約定二進(jìn)制幀的第一個(gè)字節(jié)表示類型。這種做法在工程里比“協(xié)議文檔寫一套、代碼實(shí)現(xiàn)套另一套”靠譜得多因?yàn)轭愋妥侄尉驮跀?shù)據(jù)里連文檔都不用翻。4. 生產(chǎn)環(huán)境實(shí)測(cè)那些不得不踩的坑4.1 斷線重連別用定時(shí)器硬懟WebSocket連接在弱網(wǎng)、移動(dòng)網(wǎng)絡(luò)切換、服務(wù)端重啟、代理超時(shí)這些場景下斷線幾乎是必然的。生產(chǎn)環(huán)境必須實(shí)現(xiàn)斷線重連但重連不是setInterval每3秒連一次那么粗暴。無腦定時(shí)重連有兩個(gè)問題一是服務(wù)端宕機(jī)期間客戶端同時(shí)高頻重連可以把服務(wù)端“重連風(fēng)暴”打到雪崩二是客戶端重試太頻繁在弱網(wǎng)下會(huì)消耗大量電量和流量后臺(tái)掛著幾十個(gè)連接無限重試用戶手機(jī)直接發(fā)燙。我的做法是指數(shù)退避加隨機(jī)抖動(dòng)function connect(attempt 1) { const ws new WebSocket(url); ws.onclose () { const delay Math.min(30000, 1000 * Math.pow(2, attempt - 1)); const jitter Math.floor(Math.random() * 1000); setTimeout(() connect(attempt 1), delay jitter); }; }從1秒起步每次翻倍上限30秒每次加一個(gè)隨機(jī)抖動(dòng)。抖動(dòng)的意義在于打散客戶端的重連時(shí)刻避免成百上千個(gè)客戶端同時(shí)發(fā)起連接請(qǐng)求。這個(gè)策略一般項(xiàng)目直接抄就行。另外給重連設(shè)一個(gè)“冷靜期”連續(xù)重連多次后停止自動(dòng)重連提示用戶手動(dòng)刷新或點(diǎn)按鈕避免客戶端在后臺(tái)無限重試、白白耗電。4.2 心跳超時(shí)參數(shù)怎么調(diào)前面說過Ping/Pong的機(jī)制這里給一組我在實(shí)戰(zhàn)中校準(zhǔn)過的經(jīng)驗(yàn)值。服務(wù)端主動(dòng)Ping間隔建議設(shè)在30到60秒超時(shí)閾值設(shè)為間隔的2倍。比如60秒發(fā)一次Ping120秒沒收到Pong就斷開。如果服務(wù)部署在云廠商負(fù)載均衡后面一定要先查LB的空閑超時(shí)時(shí)間這個(gè)值通常在60秒左右。心跳間隔必須比它短不然LB先把連接掐了你的心跳探活反而成了擺設(shè)。我遇到過線上WebSocket每過幾分鐘就批量斷開日志全是1006最后發(fā)現(xiàn)就是心跳間隔跟LB超時(shí)卡在同一臨界點(diǎn)兩邊在打架??蛻舳藗?cè)的心跳邏輯要更謹(jǐn)慎。移動(dòng)端App切后臺(tái)時(shí)系統(tǒng)隨時(shí)可能凍結(jié)網(wǎng)絡(luò)這時(shí)候發(fā)Ping也沒意義。有的客戶端干脆在切后臺(tái)時(shí)主動(dòng)斷開回到前臺(tái)再重連。這個(gè)策略聽起來粗暴但在移動(dòng)網(wǎng)絡(luò)下體驗(yàn)反而更好省掉了無數(shù)“假死連接”的維護(hù)成本。注意不要把Ping和業(yè)務(wù)消息混在一起。業(yè)務(wù)消息密集時(shí)確實(shí)能順帶?;畹珮I(yè)務(wù)一減少連接就裸奔了。心跳一定要用獨(dú)立的Ping/Pong幀來做。4.3 代理層、負(fù)載均衡和網(wǎng)關(guān)配置WebSocket長連接最大的敵人就是中間層的空閑超時(shí)和并發(fā)限制。我踩過的一個(gè)典型坑是服務(wù)端部署在內(nèi)網(wǎng)前端通過反向代理訪問線上跑著跑著連接就斷客戶端日志全是1006。查了半天才定位到反代默認(rèn)的空閑超時(shí)是60秒心跳間隔剛好也壓著60秒結(jié)果兩邊在臨界點(diǎn)上打架。解決辦法是把反代的proxy_read_timeout調(diào)大到比如300秒同時(shí)把心跳間隔壓到30秒。這兩個(gè)參數(shù)配合好之后斷線問題立刻消失。如果你用的是云LB同理去控制臺(tái)把“空閑超時(shí)”調(diào)到合理值同時(shí)保證心跳周期小于該值留出余量。另外還要注意HTTP/2的問題。很多反代默認(rèn)開啟HTTP/2而HTTP/2和WebSocket的兼容性在早期并不好部分老版本反代甚至不支持在HTTP/2連接上做Upgrade。遇到“客戶端能連上但升級(jí)總是失敗”的情況優(yōu)先檢查反代是不是把HTTP/2的流量劫走了需要關(guān)閉HTTP/2或?qū)ebSocket路徑做特殊處理。這個(gè)坑排查起來相當(dāng)隱蔽因?yàn)轫撁嫫渌涌谌钦5闹挥袑?shí)時(shí)通道不通。4.4 連接堆積與內(nèi)存泄漏排查WebSocket是長連接意味著每個(gè)客戶端在服務(wù)端都占著一個(gè)socket對(duì)象和對(duì)應(yīng)的網(wǎng)絡(luò)緩沖。連接數(shù)上來之后內(nèi)存和句柄數(shù)的增長是線性的管理不好很容易把服務(wù)器內(nèi)存吃爆。我排查內(nèi)存泄漏有一套固定動(dòng)作先用process.memoryUsage()或系統(tǒng)自帶的監(jiān)控工具觀察堆內(nèi)存曲線的斜率再看clients這個(gè)Map的size是不是在持續(xù)增長如果是就檢查是否有連接沒有觸發(fā)close事件。常見原因是客戶端異常斷電TCP的FIN包沒發(fā)出來服務(wù)端感知不到連接死亡只能靠心跳超時(shí)兜底。所以生產(chǎn)環(huán)境里“服務(wù)端主動(dòng)心跳 超時(shí)斷開未響應(yīng)連接”不是可選項(xiàng)而是必須項(xiàng)。每次心跳都會(huì)過濾掉一批僵尸連接Map的size才會(huì)穩(wěn)定在一個(gè)正常水位。我算過一筆賬一個(gè)僵尸連接大約占幾十KB內(nèi)存一萬條僵尸連接就能吃掉幾百M(fèi)B內(nèi)存在云服務(wù)器上這不是小數(shù)目。還有一個(gè)隱蔽問題消息發(fā)送太頻繁客戶端處理不過來網(wǎng)絡(luò)緩沖不斷堆積最后服務(wù)端發(fā)送延遲飆升。這時(shí)候需要做背壓處理——把發(fā)送操作放進(jìn)隊(duì)列當(dāng)隊(duì)列超過閾值時(shí)主動(dòng)斷開最慢的那個(gè)客戶端防止整個(gè)服務(wù)的發(fā)送延遲被拖垮。這個(gè)在消息量大的聊天室和行情推送場景里非常關(guān)鍵不做的話一個(gè)慢客戶端能把全房間的推送速度都帶下來。寫在最后WebSocket這個(gè)協(xié)議原理講起來就那些東西但真正把它用穩(wěn)靠的是工程里一個(gè)個(gè)細(xì)節(jié)。我自己的體會(huì)是先把握手和幀格式吃透遇到問題能自己抓包分析再把心跳和重連做成標(biāo)配別指望網(wǎng)絡(luò)永遠(yuǎn)可靠最后是消息協(xié)議一定要結(jié)構(gòu)化不然項(xiàng)目越改越亂。如果你正準(zhǔn)備在項(xiàng)目里上實(shí)時(shí)通信建議先別急著引入消息隊(duì)列那一套重裝備用WebSocket加一個(gè)簡單的消息分發(fā)就能覆蓋絕大多數(shù)場景。等真到了需要跨服務(wù)推送、消息持久化、多端同步的時(shí)候再考慮在WebSocket之上加一層業(yè)務(wù)消息總線那時(shí)候你會(huì)感謝當(dāng)初把協(xié)議底層搞明白的自己。最后再分享一個(gè)小技巧調(diào)試WebSocket問題抓包工具比日志好用得多因?yàn)槟隳苤苯涌吹轿帐謭?bào)錯(cuò)、幀類型、掩碼位這些底層信息??蛻舳巳罩局桓嬖V你“斷了”抓包才能告訴你“為什么斷”。把這個(gè)習(xí)慣養(yǎng)成以后遇到再詭異的連接問題都不會(huì)慌。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
这里只有精品视频在线| av无码电影| 久久婷婷成人视频| 丰满人妻一区二区三区| 成人婷婷五月| 亚洲av电影网站| 开心五月综合激情综合五月| 嫩草视频| 99热这里只有国产精品| 国产精品18久久久| 五月丁香激情深爱婷婷| 大香伊人婷婷| 九九碰九九爱97| 91成人品| 丁香六月婷婷综合啪啪| 黑人无码一区| 综合色播| 26uuu欧美激情另类| 99热综合在线观看| 开心激情婷婷| 色综合夜夜| 九九热视频在线观看| 一起草av| 五月婷婷综合在线亚洲视频| 久久婷婷六月综合综合色| 四川操逼站| 超碰国产AV| 成人综合视频在线| AV九九| 婷婷五月天综合网| 亚洲情综合五月天| 99色视频| Av性爱网| 九月丁香八月婷婷久久综合久97| 综合激情五月天| 五月婷婷另类| 五月婷婷香蕉| 五月天丁香网站| 成人电影一区| 久久九九Com| 五月天综合在线观看| 久re热视频| 九九激情网| 777.色色| 丁香五月婷婷天堂大香蕉| 久久六月天| 伦乱美欧| 31色区视频免费看| 日本激情91| 99热这里只有精品26| 国产成人精品一区二区三区视频| 婷婷五月天激情开心网| 婷婷久久午夜网| 夜夜嗨一区二区三区直播内容 | 少妇人妻人伦A片| 色婷婷丁香五月综合| 99热在线看片| 欧美三级巜人妻互换| 99热中文字幕久久| 激情五月黄色小说| 小泽玛利亚视频一区二区| 色综合色色| 六月丁香婷婷综合色播| 在线91日韩| 亚洲六月色| 五月丁香久久呀| 国产免费av在线| 九九综合久久| 五月婷婷色影院| 激情婷婷丁香五月| 日韩综合网络男女香蕉a片| 色婷婷成人做爰A片免费看网站| 日日夜夜久| 五月天婷婷色| 大天天伊人| 丁香六月婷| 99热6色| 国产日批视频免费播放| 91综合色| 色九综合| 新激情婷婷| 大香蕉五月天婷婷| 六月份天丁香婷婷| 五月天激情社区| 激情五月天久久丁香| 久久日婷婷| 99热精品在线| 无码动漫av| 天天舔天天插天天干| 六月丁香色色| 亚洲有码在线视频| 草久私拍| 色婷婷成人色网| www.minyis.com【JT】实力收量可预付QQ2101460746 | 天天檫天天爽| 97碰碰九九视频| 色噜噜伊人| 老妇操B| 成人做爰黄A片免费看直播室男男 久草热8精品视频在线观看 | www.久久婷婷| 啪啪操网| 91麻豆国产三级精品福利在线观看| 色5月婷婷| 日日日日操| 立川无码av| 99热免费精品| 五月婷婷影| 99五丁香月| 三人荫蒂添的好舒服A片| 五月婷婷激情| 亚洲六月婷婷| 伊人超碰| 亚洲色五月| 深爱激情五月网| 狠狠五月激情婷婷直播片| 九九热10| 伊人玖玖精品| 久久性刺激| 色婷婷综合丁香五月天| 激情婷婷网| 激情色五月天| 91综合视频丁香| 日韩1区2区| 五月丁香啪综合| 久久欧洲综合网| 五月丁香天堂网婷婷| 丁香五月激情图片婷婷| 操比激情五月综合| 久久99热精品a片在线观看| 久久精彩免费视频| 五月天婷婷在线观看精品男人| 色色色色色综合| 欧美一级a | 六月婷婷网站| 激情小说五月天| 综合婷婷| 91人人爽狠狠狠| 夜夜做天天爽| 丁香五月播播| 婷婷 丁香 久久| 美女天天艹人人爽| 日本一毛片| 亚洲这里只有精品| 日韩 中文 欧美| 国际国外精品欧洲南美洲专区无码不卡| 丁香五月开心五月激情| 疯狂做受XXXX高潮A片动画| 久久婷婷五| 99亚洲综合| 这里只有精品视频在线| 182tv992tv人之初午夜免费观看| 六月丁香婷婷综合色播| 亚洲操人| 久久久久久激情| 这里只有精品视频一区| 怡红院AV亚洲一区二区三区H| 亚洲99在线| 五月婷婷免费| AA片在线观看视频在线播放| 亚洲激情亚洲激情| 天天综合色| 国产69久久久欧美黑人A片| 五月天婷婷社区久久综合| 激情婷婷综合| 五月天另类视频| 性爱五月婷婷| 欧美婷婷五月天| 666555。COm毛片| 婷婷丁香社区网| www.日韩国产| 大香蕉中文| 丁香五月婷中字幕| 久久五月丁香综合| 婷婷中文字暮| 激情综合九| 99热20| 久草视频一,二三四| 日本色色视频| 激情综合色播| 六月色 亚洲| 99色看| 99热综合| 丁香五月天欧美| 午夜色婷婷| 久久99网站| 99精品无码| 亚洲不卡123| 亚洲色欲AAAAAA| 97av在线视频| 五月丁香激情综合欧美| 乱精品一区字幕二区| 婷婷在线观看五月天在线视频| 超碰人人艹| 久久玖玖综合| 99精品在这里| 国产.亚洲.欧洲视频在线| 久久亚洲婷婷| 青996青| 丁香激情四射| 五月天丁香六月综合| 99热国产精品| 九九热这里都是精品6| 亚洲情欲| 狠狠五月丁香色婷| www.一区二区三区| 99精品网| 超碰人人在线| 内射在线CHINESE| 东北婷婷五月天| 日本强伦片中文字幕免费看| 色色五月婷婷丁香| 激情AV在线| 亚洲色五月婷婷| 大胆伊人久久| 久久久久这里只有精品| 97婷婷丁香五月| 牛色色碰| 五月天影院| 欧美三级A做爰在线观看| 天天摸,天天爽| 69精品人人人人| 这里只有国产精品在线| 九九热婷婷| 色婷婷19| 五月丁香六月婷婷综合伊人| 美国不卡视频| 久久婷婷视频| 丁香五月激情五月开心五月| 欧美精品999| 天天日天天爽| 五月天婷婷在线视频| 岛囯综合激情网| 亚洲中文乱字字幕在线永久| www.婷婷亚洲基地| 超PEN精品在线| 色情婷婷五月天| 欧美丁香五月97色| 操B视频在线播放| 九九精品免费| 99久热这里有精品| 五月丁香中文婷婷中文| 丁香婷婷久久| 色爱亚洲| 69五月天视频| 欧美久久网| 天天插天天干| 五月婷婷在线免费| 亚洲人妻AV| 久久99久久99久久99人受| 五月天停停成人网| 99色区| 五月精品99综合| 色你久久| 操射国产日本| 国产99精品免费视频| 极品嫩草| 国产小精品| 五月婷婷五月天在线| 成人在线日韩| 成人丁香五月婷| 操逼视频一区| 五月天天爽| 九九久久99| 美女被操一区二区| 大香蕉手机视频| 色综合色综合色综合色综合| 青草久久五月婷伊人| 另类丁香综合| 天天综合天综合久久网| 久久机热/这里只有精品| 99er精品视频| 五月四色色| 九九无毛| 午夜天堂一区人妻| 天天色天天日| 亚洲国产成人在线| 99色色网| 天天草比天天爽| 九九热只有这里是精品| 成人在线日韩| 91久久久久久久久久| 中文字幕成人网站| 99精品成人无码A片观看金桔| 99热久| 久久性爱网站| 春色激情第四色| 香蕉综合在线| 色色免费网站| 久久新| txt五月激情四射网综合俺也来了 五月天婷婷丁香人人操91 | 丁香成人五月天| 97欧美在线| 视色综合| 婷婷,五月天,丁香,第一| 99视频在线观看网址| 日本色色影片| 久操欧美在线观看97| 色激情五月| 97干婷婷| 七七九色| 婷婷六月天| 色综合五月婷婷狠狠干| 天堂五月婷婷| 免费精品99| 五月婷婷综合久久| 久久激情五月婷婷| 五月丁香六月激情在线| 天天做天天爱天天玩| 激情五月天www| 日日干干天天干| 这里只有在线精品| 天天色爽| 五月天激情国产综合AV| 激情婷婷五月天在线观看| 久久婷婷六月天| 婷婷五月色| 黄网免费看| 五月婷婷激情久久| 五月天久久久| 天天舔夜夜操www com| 九九九精品视频免费观看| 久久九区| 99色最新在线视频| 亚洲XX日本| 99久久综合网| 99热精品综合| www色婷婷com| 大地9中文在线观看免费高清| 综合久久综合五月天婷婷| 开心五月激情网| 成人做爰高潮A片免费视频| 91Chinese在线| 色婷婷综合网站| 五月婷丁香| 成人做爰高潮A片免费视频| 99热精品在线| 少妇出轨做爰高潮A片| 嫩草AV久久伊人妇女超级A| 99热在线观看| www.激情五月天.con| 久久久久久久久久久44| 超碰人人艹| 天堂婷婷五月在线| 婷婷激情五月天网站| 亚洲丁香婷婷五月天综合色| 四色女婷婷| 婷五月天在线草| 噜噜噜噜在线| 超碰在线中文字幕| 色综合色色| 牛牛热这里只有jingpin| 国产高清视频91九九九久久久| 五月婷婷狠狠久久| 99操碰| 色丁香综合影院| 五月色丁香激情| www.深爱激情| 天天操比比| 亚洲第一成人无码A片| 日韩不卡123| 97五月综合网| 五月丁香亭亭成人电影| 亚洲婷婷月丁香五月| 激情婷婷丁香色五月| 六月婷婷五月丁香| 国产精品18久久久| 激情四射婷婷| 五月综合缴情网| 婷婷四色五月| 91色色色视频| 久久狠色噜噜狠狠狠狠97| 婷婷婷婷色| 日韩操人| 婷婷五月天首页激情| 色婷婷AAA| 婷婷成人丁香色情基地30 | 五月丁香综合啪啪啪啪啪| 色婷婷五月天激情综合| 婷婷97碰碰| 国外亚洲成AV人片在线观看| 成人av在线网站| 激情婷婷丁香色五月综合| 狠狠干婷婷| 五月婷婷六月丁香| 亚洲黄色影视| 狠狠五月天| 丁香激情五月| 色色色国产| 久久这里只| 五月婷在线| 成人午夜天| 久婷| 操逼六区| 婷婷五月天首页激情| 九九热在视频| 久久激情五月| 欧洲综合视频| 9久热在线视频精品| 婷婷大香焦| 97啪啪| 开心激情播播五月天| 亚洲无码色| 91黄址| 婷婷五月丁香五月综合网| 俺也去在线视频| 五月丁香婷婷综合| 久久综合性| 丁香五月婷婷色播艳门照| 五月丁香啪啪网| 色婷婷丁香综合中文字幕| www.激情.com.| 色播播五月天| 激情四射婷婷色色色| 天堂AV在线看| 狠狠色噜噜狠狠狠狠狠色综合久久| 亚洲小视频免费观看| 中文字幕av在线播放| 亚洲AV成人精品网站在线播放| 亚洲五月丁香综合网| 久久总和99| 无码啪啪| 色色爽爽天天| 亚洲啪啪视频| 亚洲啪啪啪啪| 1024国产| 噜噜噜噜噜在线| 色99日韩| 狠狠干狠狠色| 99热这里只有精品8| 婷婷丁香五月天影院| 五月天激情图片| 丁香婷婷综合喷| 色五月亚洲开心网| 超碰啪啪网| 日日艹思思热| 日韩精品无码一区二区| 天天橾日日橾夜夜橾17| 2050人人操免费工开爱| www.色五月天.com| 婷综合六月| 91婷婷五月天嫩女| 天堂综合久| 狠狠干在线| 婷婷丁香社区| 亚洲六月色婷婷| 91色噜噜狠狠狠狠色综合| 激情无码网| 操b视频在线观看一区二区| 激情久久综合网| 九九在线视频| www色婷婷久久综合久色 | 亚洲成人免费在线| www.婷婷| 777.色色| 一起操最新网址| 色色日本| 久久久18| 丰满少妇乱A片无码| 五月丁花色综合网| 99玖玖视频| 丁香 亚洲 久久| 超碰免费大香蕉| 五月丁香啪| 色综久久久| 国产亚洲AV人片在线| 五月婷婷激情久久| 99人人干| 伊人婷婷99热精品| 婷婷久久99| 婷婷五月天改成什么了| 狠狠干综合| 99热这里只有精品23| 五月婷婷伊| 五月成人网站| 丁香五月天偷拍| 天天综合精品| 桔色成人在线| 婷婷在线观看五月天在线视频| 嫩草AV久久伊人妇女超级A| 日撸夜撸日操| 操99| 99视频日韩| 色综合久久888| 丁香八月综合激情| 久久九九@| 国产肥白大熟妇BBBB视频| 久久婷婷丁香六月天| 91porn一起草| 性爱网五月婷婷| 丁香婷婷色色| 色播丁香婷婷五月激情| 操一区| 热99.com婷婷| 人人草人人舔| 91无码高清| www.激情五月天。com| 色狠狠色噜噜AV天堂五区| 91丨九色丨熟女丰满| 国产精品国产成人国产三级| 91婷婷搞| 深爱激情五月婷婷| 丁香五月婷婷亚洲综合精品在线| 97碰 在线视频观看| 思思精品视频| 殴美综合激情五月天免费视频| 99热99思午夜精品| 久久精品63| 亚洲岛国电影| 午夜少妇在线观看视频| 黄色五月婷婷| 激情五月婷婷开心网| 99爱免费在线观看| 五月婷婷啪啪| 欧美日比视频| 久久久色情| 亚洲精品字幕在线观看| 久久五月天婷婷| 久久机热/这里只有精品| 亚洲AV人人操| 日本3级片一区2区| 久久99免费视屏| 国产av一区二区三区| 天天色天天日| 五月丁香久久综合| 七七九色| 中文字幕 中文字幕明步| 综合久久五月| 深爱五月天天| 丁香五月天婷婷久久| www99热| 久久婷婷丁香| 超碰在线综合| 六月婷婷视频| 五月天婷婷久草丁香| 国产精品扒开腿做爽爽爽A片唱戏| 97狠狠色| 第四色激情网| www.99婷婷| 五月激情天| 丁香激情综合| 99热在线这里| 五月网网站| 日韩精品在线观看9| 欧美性爱五月天| www.久久爱.com| 五月天婷婷综合| 久久九九婷婷| 播五月开心婷婷欧美综合| 人人97操| 亚州精品久久久久AV无码| 久久人妻熟女一区二区| 六月丁香激情综合网| 超碰操网| 久热九九| 天天搞夜夜爽夜夜爽| 玖玖综合玖玖| 天天操夜夜爽| 国产精品国产成人国产三级| 色五月婷婷综合在线| 丁香激情网| 国产精品国产成人国产三级| 99re热视频这里只有综合亚洲| 异能之下短剧免费观看全集| 综合久久综合五月天婷婷| 密着浓厚中出乚交尾GvG935| www.99riav99| 国产精品美女| 狠狠干夜夜干| 亚洲婷婷丁香五月天激情小说 | 色色色色五月| 九九色院| 婷婷五月天黄色| 26uuu最新地址| 久久99热这里只有精品| 日本久久精品18| 91精品在线看| 少妇熟女视频一区二区三区| 免费无码毛片一区二区A片| 婷婷影院A成人| 日日操夜夜操中国无码| 影视av久久久噜噜噜噜噜三级| 激情综合九月| 欧美成人精品一区二区 | 肏屄色播伊人97婷婷| 伊人久久五月天| 色激情综合狠狠婷婷| 翔田千里 50岁 无码| 亚洲成片在线观看| 色愛综合网| 99热在线里有精品| 男女啪啪做爰高潮无遮挡| 免费观看欧美成人AA片爱我多深 | 亚洲人妻Av| 日日夜夜干| 91精品无码| 极品人妻VIDEOSSS人妻| 任你干嘛免费视频播放| www99久久| 久久久www| 色青青视频| 色色色色色五月| 丁香色婷婷| 超碰renrenai| 亚洲综合一区二区| 日日干夜夜干| 激情网婷婷婷| 色婷婷狠狠爱| 另类婷婷五月天啪帕帕| 欧美精品999| 99热这里只有精品一| 欧美操综合| 婷婷六月激情| 91九色欧美| 久久免片| 99热精品中文字幕| 九九热黄色| 这里只有精品96| 成人一级片| 天天综合色综合| 久久新地此| 高清一区二区三区日本久| 婷婷五月天国产在线播放| 丁香五月综合久久八| 六月婷综合| www.99婷婷| 丁香六月天婷婷开心综合| 五月婷婷熟女| 九九色video| 久久性爱视频网站| 天天色综合网1| 婷婷丁香色五月亚洲| AV网址大全在| 日本人妻伦在线中文字幕| 殴美97色| 九九性视频| 色婷久久| 天天综合网色欲香| 99成人无码| 丁香六月激情综合| 成人精品在线| 欧美色色色色色色色色色色| 丰满少妇乱A片无码| 九九色色| 欧美色婷婷| 五月天激情国产综合婷婷| 天天插天天日天天爽| 色五月91| 九九色播五月丁香| 香蕉99网| chaopengdaxiangjiao| 婷婷伊人五月天| 色综合99| 5月婷婷五月天| 婷婷五月丁香高清无码| 色婷婷av在线观看| 九九人人自拍| 啪啪五月综合| 久久五月丁香| 色吧五月| 亚洲AV人人操| 看全色黄大色大片| 国产在这里只有精品| 人人干AV| 日韩婷婷五月天| 色色五月婷婷久久| 丁香色色网| 99精品免费| 亚洲精品久久久无码| 九九AV在线| 欧洲不卡视频| 天天操夜夜爽天天操| 婷婷丁香五月激情密臀av| 五月婷婷久久网| 婷婷亚洲综合| 九九亚洲| 影音先锋一区| 婷色五月天| 九九热99免费视频| 97人妻碰碰碰久久香蕉| 色色色色色色色色色色色色色97| 五月婷婷综合丁香视频| 色色色.COM| 99热日韩| 狠狠色综合久久| 99精品免费欧美小视频| 老司机伊人| 天天色宗合| 97色色色色色| 五月成人网天天| 婷婷色五月天综合网| 97色伦另类图片小说视频| 婷婷五月天,影院| 草美女在线观看视频在线播放| 色五月婷婷久久爱| 丁香六月婷婷综合麻豆| ss99热| 丁香五月婷婷婷婷欧美综合| 久久这有这里精品| 久久五月天影院| 色婷婷五月综合在线| 丁香五月开心七月| 亚洲亚洲人成综合网络| www婷婷色| 人人操婷婷| 欧美婷婷综合网| 97人妻碰碰碰碰碰久久久久久| 天堂网色婷婷| 色噜噜97视频在线观看| 色综合久久888| 婷婷6月综合网| 色婷婷深爱五月| 99久久精品网| 狠狠操天天日| 久久久久er热| 日本啪啪网| 思思久久精品| 91精品久久久久久久久久| 久久丁香综合香蕉| 久久亚洲天堂| 中国女人内射6XXXXX| 色135综合网| 国产精品黑丝| 伊人网碰碰| 五月丁香 啪啪| 四色综合网| 99热在线爱| 思99热精品久久只有精品| 精品九九九久| 亚洲中文字幕av| site:pzdcoin.com| 久久五月天合网| 婷婷六月天亚州| 能看的av| 久久xxxx| 婷婷综合仓库中文| 色老久久| AV九九| 色婷婷五月婷婷五月婷婷五月| 青青草性爱视频| 五月婷婷开心爱| 色在线视频网2025| 久久综合丁香激情五月| 色婷婷在线电影| 操97免费超级视频| 亚洲色情免费网| 四色99久久| 极品人妻VideOssS人妻| 五月做爱| 一级黄色影片| 亚洲第一精品网站| 美女主播野战视步页| 欧美丁香五月| 亚洲成人中心| 亚洲妇女熟BBW| 国产免费一区二区三州老师F1F1……| 丁香色五月直播| 五月丁香天堂网婷婷| 99热最新| 一区二区免费看| www夜夜操wwwcon| 伊人久久五月天| 欧美日韩成人在线观看| 亚洲综合激情五月久久| 在线播放 精品| 依人大香蕉| 99热九九在线| 亚州操人在线视频| 丁香婷婷老司机久操| 激情综合婷婷五月| 亚洲激情网| 婷婷色五月丁香六月欧美啪| 丁香五月婷婷老师网站| 色吧综合网| www五月天com| 婷婷丁香社区| 五月婷婷三级| 99热a片免| 99国产精品久久久久久久久久久| 96精品久久久久久久久| 热99只有里视频| 久热91| 六月婷基地| 丁香五月停停av| 丁香六月激情| 在线精品97| 99丁香五月婷| www.色婷婷| 五月天偷拍| 婷婷色情网| 久草五月婷婷| 噜噜噜狠狠色综| 九月丁香| 七七色色综合| 丁香六月伊人| 岛国在线观看91| 婷婷综合另类小说| 99啪在线| 99热的无码| 欧美激情综合色综合啪啪五月| 久热一本| 99热精品观看| 色婷婷精| 99爱免费在线观看| 激情五月天小说网| 五月婷婷啪啪啪| 夜夜爽天操| 蜜乳av一级av| 日本特黄aaaaa| 五月丁香婷草| 激情久久丁香| 夜夜操天天干| 久9热插入| 婷婷深爱五月丁香网| 亚洲爆乳无码精品AAA片蜜桃| 人妻狠狠操| 激情99| 丁香五月婷婷色情综合| 香蕉人在线香蕉人在线 | 日本久久人人| 六月婷婷综合| 精品成人在线| 99热免费观看| 久热 91| 久操综合| 丁香五月中文字幕| 狠狠插日日干撸| 人人操9| 99亚洲色| 五月婷婷激情在线| 激情婷婷综合五月少妇| 九色在线五月婷婷网址| 国产Va视频| 极品少妇高潮啪啪AV无码| 五月丁香美女| 天天爽夜夜操| 丁香桃色综合网| 免费视频WWW在线观看网站| 亚洲第一色色色色| 国产毛多水多女人A片| 开心四月婷婷在线色播播| 97精品人人A片免费看| 色婷婷在线综合色播网| 少妇人妻人伦A片| 五月丁婷婷| 潘金莲AAAAAAAAAA| 开心五月激情婷婷| 99热官网| 色婷婷五月网| 狠狠婷婷综合| 色色色色色综合| 涩涩婷婷五月| 综合婷婷久久| ay2区| 大战熟女丰满人妻AV| 九九热这里都是精品6| 99国产精品久久久久久久久久久| 色婷激情网| 麻豆AV一区二区三区| 天天添天天摸天天天天做| 亚洲综合五月天婷婷丁香| 五月婷婷在线综合| 五月开心网| 欧美婷婷综合网| 午夜九九电影| 九九久久偷拍| 91久久电影| 九九碰九九爱97超碰| 99热无码精品| 五月丁香花激情啪啪网| 色九区| 亚洲乱码成人| 色五月综合| 伊人丁香在线| 久久99免费视屏| 色婷婷丁香五月在线观看| 婷婷五月天丁香| 蜜臀久久99精品久久久久久酒店| 九九精品综合| 天天色宗合| 农村熟妇高潮精品A片| 婷色五月天| 五月婷婷片| 亚洲性爱AV在线| 色噜噜婷婷| 婷婷激情综合| www.婷婷六月天| 色噜噜狠狠色综合网| 丁香六月天堂| 99re热视频这里只精品| 婷婷丁香成人| 另类小说色婷婷| av在线婷婷| 99热狠狠操| 91九色视频| 色婷婷AV五月天| 超碰不卡在线| 青柠影视免费高清电视剧| 日韩欧美四五区| 亚洲av网址| 久久精彩免费视频| 色五月xxx| 日本人妻久久| 伊人婷婷五月天| 丁香五月另类小说| 久这里只有精品99| 免费观看高清无码| 偷拍91九色| 管管補管管紱| 丁香六月婷婷综合欧美| 97高清国语自产拍| 久热69| 亚洲视频a| 色偷偷人人| 色婷婷综合网站| 日日干天天| 伊人天天色| 99爽视频| 天天日日| 五月天婷婷久久| 五月天婷婷丁香蜜桃91| 久久色五月| 亚洲av另类在线观看| 久久久这里有精品| 五月丁香婷色| 色五月婷婷中文字幕| 婷婷五月情| 99热色在线精品| 成人无码髙潮喷水A片| 九色自拍| 色婷五月| 五月丁香六月色婷婷综合五月天| 五月丁香六月激情综合| 丁香五月另类小说| 玖玖婷婷综合| 国产特黄色精品一区二区三区精品无广告| 激情图片久久| 色五月亚洲开心网| 五月婷婷深深爱爱| www.色色com| 99视频| 色婷五月天| 思思热在线播放| 538久久| 婷婷五月激情欧美| av人人操| 丰满熟女人妻一区二区三| 91操在线视频| 超碰激情五月| 97色射| 色婷婷五月天| 激情五月综合| 噜噜噜噜综合在线| 丁香五月 六月婷婷首页| 99精品久久久| 亚洲AV无码成人精品区电影网| 色欲色欲久久宗合网| 五月丁香狠狠爱| 欧美成人A片AAA片在线播放 | 天天爽天天爽夜夜爽| 91超碰在线观看| 伦乱天堂| 97高清国语自产拍| 日韩爱操视频| 色婷婷综合亚洲| 婷婷另类小说| 99色色网站| 综合另类激情| 激情丁香五月婷婷| 欧美日朝成人| 色99日韩| 播四月婷婷六月丁香| 天天日天天舔天天摸| 久久久激情视频| 色五月自偷自拍婷婷婷婷| 婷婷丁香五月社区亚洲| 日B日潘金莲BB| 中文字幕无线久必| 国外亚洲成AV人片在线观看| 影音先锋女人AA鲁色资源| 激情五月天视频| 六月综合婷婷开心伊人| 老司机伊人| 丝袜激情网| 色五月偷偷| 五月天色婷婷视频| 天天做天天干天天综合网| 丁香五月婷婷动漫| 五月婷婷 六月丁香| 思思99热热热99| 久热精品视频在线观| 天天久久66xxx| 国产99热在线看| 3pAV| 五月天婷婷青青| 深爱激情网噜噜色| 精品皮股午夜AV| 狠色色狠网| 六月婷婷色综合| 色婷婷激情四射视频| 丁香五月激情啪| 九九久久五月天| 夜夜操天天干| www.yw尤物| 国产成人AV| 久久曰9| 九九精品亚洲| 99热综合网| 人人爽天天莫| 日本99久久| 婷婷五月成年人| 丁香五月天婷婷久久| 婷婷五月天亚洲精品| 欧美性爱特黄一级aaaassss| 这里只有精品日韩精品| 99在线看片| 深爱1激情网| 日日.c| 香蕉婷婷色五月| 色九月婷婷综合| 婷婷五月丁香综合激情| 狠狠操综合| 婷婷五月丁香综合桃花色网| 青青草视频免费观看| 欧美顶级少妇做爰HD| 六月丁香五月婷婷| 色视频色综合91| 五月丁香花成人社区| 国产av天天插天天操天天爽| 色情五月天导航| 五月久久婷婷| 亚洲色婷婷婷婷人人爽| 思思精品久久艹| 五月天综合在线| 狠狠爱婷婷| 五月丁香六月在线| 欧美色片中文字幕久久久久| 亚洲久久天堂| 激情四射婷婷色色色| 91色综合网| 成人在线网站| 色视频2025| 亚洲婷婷丁香五月视频| 九九视频在线| 天天草天天爽| 黄色av网站在线免费播放| 九九青草热| 婷婷五月色色| 淫荡家庭AV| 五月天激情.com| 性欧美日本| 国产精品久久久久9999小说| 久久婷婷综合国产| 99久热| 这里只有精品视频一区| av在线中文| 五月天婷婷婷| 久久在这里99| 丁香五月天五码婷婷| 激情五月狠狠| 久久九色| 九九激情| 无码九九| 激情五月婷婷网| 婷婷爱五月| 色无码| 亚欧州精品视频| 色亭亭五月天丁香综合AV - 百度 - 百度 | 五月日韩中文字幕| 少妇熟女视频一区二区三区| 亚洲AV无码成人精品区电影网| 五月婷婷综合网| 99热6色| 国产激情综合| 天天视频精品9| 久久最新色色色| 亚洲另类视频| 亚洲欧洲另类| 欧美电影在线播放| 热996精品在线观看| 热热久久精品视频| 99九九在线视频| 久久婷婷青青草| 五月婷婷激情网| 激情综合丁香五月| 狠狠操天天干| 9l视频自拍9l九色9l成人| 六月丁香婷婷六月激情综合| 欧美五月婷婷| AV操一操| 日本欧美在线| 色婷婷五月在线| 天天日夜夜帕| 毛片色五月| 五月丁香在线| 久久久久久欧美精品se一二三四| 天天插天天爽| 亚洲亚洲人成综合网络| 中文字幕在线免费观看视频| 人人综合色| ji'qing'luan'ren'lun| 亚洲日日日| 色色婷婷丁香五月天| 99只有这里是精品| 五月色网| 久综合网| 玖玖五月丁香| 九九色黄色| 五月丁香激情婷婷综合| 丁香六月婷| 4399成人黄A片| 激情小说五月欧美亚洲丁香| 成人片黄网站色大片免费毛片| 久久女婷| 一月婷婷色色| 亚洲久艹| 综合激情深爱| 国产亚洲成AV人片在线观黄桃| 亚洲九九夜夜| 综合激情在线| 婷婷五月天桃花网| 91精品电影18T| 操一操干一干| 五月婷婷六月少妇激情| 五月婷婷激情综合| 久久大国产香蕉| 色综合日日| 欧美婷婷五月| 六月婷婷中文字幕| 大香蕉婷婷丁香视频在线| 99综合| 成人无码精品1区2区3区免费看| 六月丁香婷婷视频综合在线观看| 狠狠五月激情丁香六月| 婷婷综合在线视频| 夜夜操,天天撸| 久在热99| 丁香五月综合亚洲| 激情操逼婷婷| 无码激情精品色婷婷久久久久| 思思99热| 九久9精品| 亚洲综合五月天婷婷| 操97| 久久五月天婷婷| 婷婷丁香五月天哟啪| 久/久精品99看9| 在线视频你懂得| 五月天婷婷久久视频| 婷婷午夜| 婷婷久久色| 婷婷免费成人视频| 婷婷五月影院| 亭亭五月丁香综合欧美| 五月激情六月宗合| 丁香五月婷婷亚洲人| 天天干狠狠| 黄色一级影片| 色5月婷婷| 只有精品视频在线观看| 色综合色五月| 99热99ai| 久久视频在线视频| 婷婷丁香午夜综合影视| A片试看120分钟做受图片| 青青草婷婷综合五月| 91九色首页| 囯产精品一品二区三区| 日本韩国视频在线观看社区免费的9| 日韩一级片| 婷婷综合玖玖五月| 婷婷精品性性性性性性性| 热99热久| 国产精品日韩十五区| www.九月婷婷丁香.com| 99视频在线精品| 超碰av天堂| 亚洲综合久| 婷婷五月激情四月综合| 97人人射| 婷婷丁香色五月天久久88| 大地资源色婷婷视频在线| 亚洲性图一区二区| 五月婷婷九九热| 99精品自拍视频| 久久机热这里只有精品免费视频| 精品一二三区久久AAA片| 五月天激情综合10p| 日本天堂久久| 婷婷五月在线视频| 久99| 粉嫩AV久久一区二区三区| 五月婷婷综合精品| 九九艹女| 91久久电影| 久久婷婷综合基地| 免费做A爰片77777| 99r这里只有精品在线观看| 色色五月综合| 91超级碰碰| 五月天婷婷久色| 天久久久久| 这里只有精品免费| 五月久久五月激情| 亚洲超碰青涩| 婷婷射综合| 色网站99| 91AV视频| 人人干人人看| 丁香五月欧美色综合| 色色五月天婷婷丁香| 丁香五月天社区| 天天色官网| 日本色道视频网站| 9精品久久999| 五月色天情| www.五月天婷婷.com| 99热91| 1024操逼视频| 色婷婷操逼| 99成人网一区| 久久久久婷婷| 99热久久这里只有精品| wwwss在线观看| 思思w99| 五月天激情网站| 婷婷五月激情在线| 九九AV在线| 久久精品凹凸分类| 99热99干| 亚洲一区二区无码蜜乳av| 9色免费网| 五月丁香六月婷综合成人综合| 五月天婷婷无码视频| 亚洲区视频| 大香蕉 婷婷| 日韩999| 五月天色社区| 精品久久婷婷五月天| 婷婷五月丁香亚洲| 夜夜干夜夜操| 丁香五月婷婷影院| 丁香五月视频在线观看| 91丨九色|PRNY熟妇| 无码激情AAAAA片-区区| 久久色天堂| 五月天另类小说久久小说网| 97综合在线| 婷婷丁香综合色AV| 婷婷五月天激情四射| 欧美中文五月天| 色综合爱综合| 狼人狠狠操| 96精品国产综合久久久久久| 成人AV免费观看| 婷婷色无码| 99久久婷婷国产综合| 五月婷久久综合| 国产精产国品一二三在观看| www久久久久久久97| 丁香六月婷婷综合在线| 久久在这里有精品| 久久综合影院| 亚洲综合成人网站| 色综合综合综合| 超碰在线国产| 欧美色性色好|