99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

網(wǎng)絡(luò)協(xié)議棧實戰(zhàn)指南:從分層原理到問題排查

網(wǎng)絡(luò)協(xié)議棧實戰(zhàn)指南:從分層原理到問題排查 1. 從考研到實戰(zhàn)為什么我們需要重新認識網(wǎng)絡(luò)協(xié)議棧提到“408計算機網(wǎng)絡(luò)”很多人的第一反應(yīng)就是考研。沒錯作為計算機專業(yè)考研的“統(tǒng)考科目”408里的計算機網(wǎng)絡(luò)部分是無數(shù)考生必須啃下的硬骨頭。但如果你認為協(xié)議分層、TCP/IP模型這些知識僅僅是為了應(yīng)付試卷上的選擇題和綜合題那可就大錯特錯了。我見過太多剛?cè)胄械拈_發(fā)一遇到“Connection reset”、“TIME_WAIT過多”或者“HTTP 408請求超時”這類問題就頭皮發(fā)麻本質(zhì)上就是因為對網(wǎng)絡(luò)協(xié)議的理解還停留在“背八股文”的階段。網(wǎng)絡(luò)協(xié)議是互聯(lián)網(wǎng)世界的“憲法”和“交通規(guī)則”。從你手機刷短視頻到工廠里的PLC通過Modbus RTU控制機械臂再到數(shù)據(jù)中心里成千上萬服務(wù)器通過TCP/IP通信底層全是協(xié)議在干活。所謂“408各層協(xié)議”其實就是用一套系統(tǒng)化的框架OSI七層或TCP/IP四層把紛繁復(fù)雜的網(wǎng)絡(luò)通信過程給拆解明白了。理解它不是為了考試而是為了讓你在遇到“我們的系統(tǒng)檢測到您的計算機網(wǎng)絡(luò)中存在異常流量”這種莫名提示時能知道該從哪一層開始排查是為了讓你在調(diào)試STM32通過IAP升級失敗時能分清是Ymodem協(xié)議本身的問題還是底層UART/USB驅(qū)動的問題更是為了讓你在設(shè)計一個微服務(wù)接口時能清楚地知道數(shù)據(jù)是如何從你的應(yīng)用層代碼一路拆包、封裝、經(jīng)過路由、最終抵達對端又被重新組裝起來的。這篇文章我們就拋開考研真題的標(biāo)準(zhǔn)答案從一個一線開發(fā)者和問題排查者的視角重新走一遍這經(jīng)典的網(wǎng)絡(luò)協(xié)議棧。我們會看到每一層協(xié)議都不是枯燥的定義而是解決特定實際問題的一組合約和工具。你會發(fā)現(xiàn)無論是古老的Modbus、工業(yè)級的CAN/J1939還是現(xiàn)代的HTTP/2、QUIC它們都逃不出這個分層模型的框架。理解這個框架你就擁有了透視網(wǎng)絡(luò)問題的“X光眼”。2. 協(xié)議分層不止于OSI與TCP/IP的“地圖”當(dāng)我們打開任何一本計算機網(wǎng)絡(luò)教材開篇必然是兩個模型OSI七層模型和TCP/IP四層模型。很多人在這里就陷入了概念背誦的泥潭“物理層、數(shù)據(jù)鏈路層、網(wǎng)絡(luò)層、傳輸層、會話層、表示層、應(yīng)用層”…… 背是背下來了但到底為啥要這么分TCP/IP為啥又把會話層、表示層給合并了在實際工作中我?guī)缀鯊奈粗苯硬僮鬟^“會話層”或“表示層”的獨立協(xié)議這是不是說明它們沒用2.1 分層思想的本質(zhì)關(guān)注點分離與協(xié)作契約分層設(shè)計的核心思想是“關(guān)注點分離”和“定義清晰的接口”。想象一下造車。發(fā)動機部門只關(guān)心如何把燃油轉(zhuǎn)化成動力底盤部門只關(guān)心如何承載和轉(zhuǎn)向電氣部門只關(guān)心線路和控制系統(tǒng)。它們之間通過標(biāo)準(zhǔn)化的接口如發(fā)動機輸出軸規(guī)格、電氣接頭定義協(xié)作但彼此內(nèi)部實現(xiàn)可以獨立演進。網(wǎng)絡(luò)協(xié)議分層也是同理。物理層解決的是“信號如何在線路上跑”的問題。它關(guān)心電壓高低、光信號閃滅、頻率調(diào)制。比如你用的網(wǎng)線是Cat5e還是Cat6涉及頻率和抗干擾你的Wi-Fi路由器工作在2.4GHz還是5GHz頻段都屬于這一層。這一層的協(xié)議或規(guī)范定義了硬件的電氣、機械、功能和規(guī)程特性。當(dāng)你用示波器去測量網(wǎng)線接口的波形時你就是在觀察物理層。數(shù)據(jù)鏈路層解決的是“在同一個局部網(wǎng)絡(luò)內(nèi)如何準(zhǔn)確地找到一臺設(shè)備并可靠地傳輸一段數(shù)據(jù)”的問題。它管理的是“一跳”之內(nèi)的通信。這一層引入了“MAC地址”作為設(shè)備的物理標(biāo)識并定義了“幀”的結(jié)構(gòu)。最常見的協(xié)議就是以太網(wǎng)協(xié)議Ethernet。交換機Switch就是典型的數(shù)據(jù)鏈路層設(shè)備它通過MAC地址表進行數(shù)據(jù)幀的轉(zhuǎn)發(fā)。當(dāng)你抓包看到“以太網(wǎng)頭”里面包含源MAC和目的MAC這就是數(shù)據(jù)鏈路層的功勞。網(wǎng)絡(luò)層解決的是“如何跨越多個不同的網(wǎng)絡(luò)從源主機找到目標(biāo)主機”的問題。它引入了邏輯地址——IP地址。這一層的核心協(xié)議是IP協(xié)議IPv4/IPv6它負責(zé)全局尋址和路由。路由器Router是網(wǎng)絡(luò)層的核心設(shè)備它依據(jù)IP地址和路由表決定數(shù)據(jù)包該往哪個方向走。你常聽到的“子網(wǎng)掩碼”、“網(wǎng)關(guān)”、“路由”這些概念都在這層運作。傳輸層解決的是“如何為不同應(yīng)用程序提供端到端的、可靠或不可靠的數(shù)據(jù)傳輸服務(wù)”的問題。當(dāng)數(shù)據(jù)通過網(wǎng)絡(luò)層到達目標(biāo)主機后需要交給主機上的哪個程序進程呢這就是傳輸層通過“端口號”來區(qū)分的。TCP和UDP是這一層的雙子星。TCP像快遞公司的保價包裹服務(wù)提供連接建立、可靠傳輸、流量控制、擁塞控制UDP則像普通明信片只管發(fā)出不保證送到但速度快、開銷小。你編程時調(diào)用的Socket API主要就是在和傳輸層打交道。應(yīng)用層解決的是“最終用戶或應(yīng)用程序需要什么樣的網(wǎng)絡(luò)服務(wù)”的問題。這一層協(xié)議種類繁多直接面向具體應(yīng)用。HTTP/HTTPS用于網(wǎng)頁瀏覽SMTP/POP3用于郵件收發(fā)FTP用于文件傳輸DNS用于域名解析MQTT用于物聯(lián)網(wǎng)消息推送Modbus、CAN用于工業(yè)控制。你在瀏覽器地址欄輸入一個網(wǎng)址背后就觸發(fā)了DNS和HTTP這兩個應(yīng)用層協(xié)議。那么OSI模型中的會話層和表示層去哪了在TCP/IP模型中它們的功能被合并到了應(yīng)用層。這非常符合互聯(lián)網(wǎng)設(shè)計的“端到端原則”和實用主義精神。例如“會話”的管理如HTTP/1.1的Keep-Alive、SSL/TLS的會話恢復(fù)通常由應(yīng)用層協(xié)議自己或下層的庫如SSL/TLS庫實現(xiàn)。“表示”的功能如數(shù)據(jù)加密、壓縮、格式轉(zhuǎn)換如JSON/XML編碼解碼也完全由應(yīng)用程序來處理。因此在實際的TCP/IP協(xié)議棧實現(xiàn)和網(wǎng)絡(luò)編程中我們通常聚焦于“四層”模型。注意千萬不要教條地認為某個協(xié)議“絕對屬于”某一層。許多協(xié)議是跨層或“子層”的。例如ARP協(xié)議地址解析協(xié)議工作在數(shù)據(jù)鏈路層和網(wǎng)絡(luò)層之間用于將IP地址解析為MAC地址。TLS/SSL協(xié)議則可以看作是在傳輸層之上、應(yīng)用層之下的一層安全協(xié)議。2.2 數(shù)據(jù)封裝與解封裝協(xié)議棧的“洋蔥模型”理解了分層再看數(shù)據(jù)的流動過程就清晰了。這個過程就像寄快遞應(yīng)用層你寫好一封信應(yīng)用數(shù)據(jù)。傳輸層你把信裝進一個信封在信封上寫上“收件人張三端口80寄件人李四端口12345”。這個信封就是TCP或UDP頭部?,F(xiàn)在它變成了一個段SegmentTCP或數(shù)據(jù)報DatagramUDP。網(wǎng)絡(luò)層你把信封塞進一個快遞袋在袋子上寫上詳細的收寄地址源IP和目標(biāo)IP。這個快遞袋就是IP頭部。現(xiàn)在它變成了一個包Packet。數(shù)據(jù)鏈路層快遞員拿到快遞袋為了在本地運輸他需要知道下一站送到哪個中轉(zhuǎn)站網(wǎng)關(guān)的MAC地址。他把快遞袋放進一個運輸箱箱子上貼著“下一站XX物流點MAC地址”。這個運輸箱就是以太網(wǎng)頭部和尾部。現(xiàn)在它變成了一個幀F(xiàn)rame。物理層運輸箱被搬上貨車轉(zhuǎn)化成電信號或光信號在物理線路上傳輸。接收方的過程完全相反像剝洋蔥一樣從物理層信號還原成幀去掉數(shù)據(jù)鏈路層頭部得到IP包去掉IP頭部得到TCP段最后去掉TCP頭部將原始數(shù)據(jù)交給監(jiān)聽對應(yīng)端口的應(yīng)用程序。這個“層層封裝”的過程是理解網(wǎng)絡(luò)抓包如Wireshark和協(xié)議分析的基礎(chǔ)。你在Wireshark里看到的一個數(shù)據(jù)包從上到下顯示的就是從以太網(wǎng)幀、IP包、TCP段到HTTP消息的完整解封裝視圖。3. 核心層協(xié)議深度解析從原理到“踩坑”了解了地圖我們得深入幾個關(guān)鍵“城市”看看??佳?08可能會考各層PDU的名稱、協(xié)議特點但我們要搞清的是它們?nèi)绾喂ぷ饕约澳睦锶菀壮鰡栴}。3.1 網(wǎng)絡(luò)層核心IP協(xié)議——互聯(lián)網(wǎng)的“郵政系統(tǒng)”IP協(xié)議是無連接、不可靠的盡力而為服務(wù)。它只管根據(jù)目標(biāo)IP地址盡力把包送到不保證順序、不保證一定送到、也不保證不重復(fù)。可靠性的工作交給了上層的TCP。IP地址與子網(wǎng)劃分這不僅是考點更是網(wǎng)絡(luò)配置的基石。一個常見的坑是子網(wǎng)掩碼配置錯誤導(dǎo)致“網(wǎng)絡(luò)不通”。比如兩臺主機192.168.1.1/24和192.168.1.2/24它們屬于同一子網(wǎng)可以直接通信。但如果一臺是192.168.1.1/25子網(wǎng)范圍192.168.1.0-127另一臺是192.168.1.130/25子網(wǎng)范圍192.168.1.128-255盡管IP地址看起來相近但由于不在同一子網(wǎng)它們之間的通信必須經(jīng)過路由器網(wǎng)關(guān)。路由表可以把它理解成快遞公司的中轉(zhuǎn)路線圖。執(zhí)行route printWindows或ip routeLinux命令就能看到本機的路由表。當(dāng)主機要發(fā)送一個IP包時它會用目標(biāo)IP地址逐條匹配路由表中的條目決定這個包該從哪個網(wǎng)卡發(fā)出下一跳地址是誰。路由條目中0.0.0.0/0指向的網(wǎng)關(guān)就是“默認網(wǎng)關(guān)”所有沒有特定路由的包都發(fā)往那里。生存時間TTLIP頭中有一個TTL字段每經(jīng)過一個路由器值就減1。當(dāng)TTL減到0時路由器會丟棄該包并發(fā)送一個ICMP超時消息回給源主機。這個設(shè)計是為了防止數(shù)據(jù)包因路由環(huán)路而在網(wǎng)絡(luò)中無限循環(huán)。traceroute命令就是利用這個原理來探測路徑的。實操心得遇到“目標(biāo)主機不可達”或網(wǎng)絡(luò)間歇性不通首先用ping測試基礎(chǔ)連通性。如果ping不通緊接著用tracertWindows或tracerouteLinux跟蹤路徑看包是在哪一跳丟失的。這能快速定位問題是出在本地網(wǎng)絡(luò)、內(nèi)部路由器還是外部網(wǎng)絡(luò)。3.2 傳輸層雙子星TCP vs. UDP——可靠信使與快速郵差這是協(xié)議棧中最精彩、面試問得最多、也最容易在實際中出問題的一層。TCP面向連接的可靠傳輸TCP通過三次握手建立連接四次揮手斷開連接這幾乎是必考的知識點。但更重要的是理解其狀態(tài)機。比如為什么主動關(guān)閉的一方在發(fā)送最后一個ACK后會進入TIME_WAIT狀態(tài)并且通常要等待2MSL最大報文段生存時間的兩倍可靠地終止連接確保最后一個ACK能到達對端。如果ACK丟失對端會重發(fā)FIN此時處于TIME_WAIT狀態(tài)的主機能再次回應(yīng)ACK。讓舊連接的重復(fù)報文在網(wǎng)絡(luò)中消逝防止具有相同四元組源IP、源端口、目的IP、目的端口的新連接收到舊連接的延遲報文造成數(shù)據(jù)混亂。TIME_WAIT狀態(tài)過多會占用端口資源。在高并發(fā)短連接的服務(wù)器上如HTTP/1.0這可能成為性能瓶頸。解決方案包括啟用SO_REUSEADDR套接字選項允許端口重用、優(yōu)化應(yīng)用為長連接如HTTP/1.1 Keep-Alive、或者由客戶端主動發(fā)起關(guān)閉讓TIME_WAIT分散在客戶端。UDP無連接的簡單傳輸UDP頭部開銷小沒有連接建立和確認機制速度快。但它不保證可靠、不保證順序。哪些場景在用UDP實時音視頻如視頻會議、直播。丟失少量數(shù)據(jù)包可能只是造成瞬間花屏或雜音但低延遲至關(guān)重要重傳舊的視頻幀沒有意義。DNS查詢請求-響應(yīng)模式簡單一次查詢一個包如果超時未收到響應(yīng)應(yīng)用層會重試。用UDP比建立TCP連接快得多。物聯(lián)網(wǎng)傳感器數(shù)據(jù)有些傳感器周期性上報數(shù)據(jù)單個數(shù)據(jù)包丟失不影響大局低功耗和簡單性是首要考慮。廣播/多播如DHCP、某些服務(wù)發(fā)現(xiàn)協(xié)議。一個關(guān)鍵協(xié)議ICMP雖然ICMP通常被劃在網(wǎng)絡(luò)層但它與IP協(xié)議緊密協(xié)作用于傳遞控制信息和差錯報告。ping命令用的就是ICMP Echo Request/Reply報文。traceroute則利用了ICMP Time Exceeded和Destination Unreachable報文。當(dāng)你的程序遇到“Connection timed out”或“No route to host”時底層往往是ICMP報文在傳遞這些錯誤信息。3.3 應(yīng)用層協(xié)議萬花筒從HTTP到工業(yè)協(xié)議應(yīng)用層協(xié)議定義了通信的具體語義。理解它們就是理解業(yè)務(wù)邏輯如何跑在網(wǎng)絡(luò)之上。HTTP/HTTPS必須深入理解。HTTP/1.1的持久連接、管道化HTTP/2的多路復(fù)用、頭部壓縮HTTP/3基于QUIC運行在UDP上的革命性變化。狀態(tài)碼更是日常調(diào)試的關(guān)鍵200 OK成功404 Not Found資源不存在500 Internal Server Error服務(wù)器內(nèi)部錯誤而**408 Request Timeout** 則表示服務(wù)器等待客戶端發(fā)送請求的時間超時。當(dāng)你看到408錯誤通常不是網(wǎng)絡(luò)層不通而是客戶端可能是瀏覽器、也可能是你寫的爬蟲或SDK在建立連接后沒有在服務(wù)器規(guī)定的時間內(nèi)發(fā)送完整的請求報文。DNS將域名解析為IP地址的分布式系統(tǒng)。理解遞歸查詢、迭代查詢、緩存機制。一個常見的性能問題是DNS解析慢或失敗這會導(dǎo)致應(yīng)用連接建立緩慢。在Linux下/etc/resolv.conf文件配置了DNS服務(wù)器在編程中要注意DNS緩存和異步解析。MQTT物聯(lián)網(wǎng)領(lǐng)域的主流消息協(xié)議基于發(fā)布/訂閱模式輕量、省電。理解其QoS等級0-最多一次1-至少一次2-恰好一次對于設(shè)計可靠的物聯(lián)網(wǎng)應(yīng)用至關(guān)重要。工業(yè)協(xié)議Modbus, CAN, PROFINET等這些協(xié)議通常運行在串行總線如RS-485或?qū)S镁W(wǎng)絡(luò)如CAN總線上協(xié)議棧比TCP/IP簡單但實時性和確定性要求極高。例如Modbus RTU是二進制協(xié)議Modbus TCP則是將Modbus幀封裝在TCP報文中。調(diào)試這些協(xié)議需要專用的串口抓包工具或協(xié)議分析儀。4. 實戰(zhàn)如何利用協(xié)議知識排查網(wǎng)絡(luò)問題理論學(xué)得再好不會用也是白搭。下面我們模擬幾個真實場景看看如何運用分層的思想來解決問題。4.1 場景一Web服務(wù)間歇性無法訪問偶爾返回408現(xiàn)象用戶報告訪問公司內(nèi)部系統(tǒng)時有時很快有時白屏很久最后顯示“408 Request Timeout”。你作為開發(fā)者被叫去排查。分層排查思路物理層/數(shù)據(jù)鏈路層先檢查最基本的。服務(wù)器和客戶端所在的網(wǎng)絡(luò)是否穩(wěn)定有沒有網(wǎng)線松動、交換機端口閃爍異常可以嘗試在客戶端持續(xù)ping服務(wù)器IP看是否有丟包或延遲抖動。如果這一層有問題那么所有基于IP的應(yīng)用都會受影響。網(wǎng)絡(luò)層如果ping是穩(wěn)定的說明基礎(chǔ)網(wǎng)絡(luò)通路沒問題。檢查路由是否正常。對于內(nèi)部系統(tǒng)通常路由是簡單的但也要排除防火墻或安全策略攔截了某些IP包的可能。傳輸層問題開始聚焦。408錯誤發(fā)生在HTTP層但根源可能在下層。使用netstat或ss命令查看服務(wù)器上對應(yīng)服務(wù)端口如80或443的連接狀態(tài)。有沒有大量的TIME_WAIT或CLOSE_WAIT連接CLOSE_WAIT過多通常意味著你的服務(wù)器程序沒有正確關(guān)閉連接沒有調(diào)用close()。TIME_WAIT過多可能由于短連接高頻創(chuàng)建。考慮調(diào)整內(nèi)核參數(shù)如net.ipv4.tcp_tw_reuse、net.ipv4.tcp_tw_recycle但需謹慎或優(yōu)化應(yīng)用使用連接池。CLOSE_WAIT過多這是程序Bug的明確信號。需要檢查代碼確保每一個接受的Socket在業(yè)務(wù)處理完畢后都被正確關(guān)閉。應(yīng)用層HTTP這是408錯誤的直接發(fā)生層。服務(wù)器配置檢查Web服務(wù)器如Nginx、Apache的配置。client_header_timeout或client_body_timeout等參數(shù)是否設(shè)置過短在網(wǎng)絡(luò)慢或客戶端可能是移動端、或經(jīng)過復(fù)雜代理發(fā)送請求較慢時容易觸發(fā)超時。適當(dāng)調(diào)大這些超時時間。客戶端行為抓取客戶端發(fā)出的網(wǎng)絡(luò)包用瀏覽器開發(fā)者工具的Network面板或Fiddler/Wireshark。觀察失敗的請求客戶端是否發(fā)送了完整的請求頭請求體是否很大且發(fā)送緩慢是否遇到了網(wǎng)絡(luò)抖動導(dǎo)致TCP重傳使得請求遲遲不能完整送達服務(wù)器中間件與負載均衡如果服務(wù)前端有負載均衡器如F5、Nginx檢查其配置和日志??赡苁秦撦d均衡器的健康檢查或會話保持策略導(dǎo)致了問題。根本原因可能在這個場景中最可能的原因是服務(wù)器配置的client_header_timeout太短例如只有5秒而某些客戶端由于網(wǎng)絡(luò)波動或自身性能問題發(fā)送HTTP請求頭的速度很慢超過了這個時限服務(wù)器主動斷開了連接并返回408。解決方案是適當(dāng)增加超時時間并優(yōu)化客戶端網(wǎng)絡(luò)環(huán)境或代碼。4.2 場景二嵌入式設(shè)備STM32IAP升級失敗現(xiàn)象通過UART或USB使用Ymodem協(xié)議對STM32進行固件升級經(jīng)常在傳輸?shù)揭话霑r失敗日志顯示“協(xié)議錯誤”或“校驗失敗”。分層排查思路物理層這是最容易被忽略但問題最多的一層。檢查串口線/USB線是否接觸良好線纜是否過長導(dǎo)致信號衰減波特率、數(shù)據(jù)位、停止位、校驗位等串口參數(shù)在Bootloader程序和上位機軟件中是否設(shè)置得完全一致一個常見的坑是Bootloader使用了115200 8N1而上位機軟件默認是9600 8N1。數(shù)據(jù)鏈路層在串口通信中沒有標(biāo)準(zhǔn)的數(shù)據(jù)鏈路層協(xié)議但Ymodem協(xié)議自身定義了“幀”的結(jié)構(gòu)。每一幀數(shù)據(jù)包含幀頭、幀序號、數(shù)據(jù)、CRC校驗等。傳輸失敗很可能是單幀數(shù)據(jù)在物理層傳輸時發(fā)生了比特錯誤。干擾如果設(shè)備在工業(yè)環(huán)境電磁干擾可能很強。考慮使用屏蔽線纜降低波特率以提高抗干擾性。緩沖區(qū)溢出Bootloader中用于接收串口數(shù)據(jù)的緩沖區(qū)是否足夠大如果上位機發(fā)送數(shù)據(jù)過快而Bootloader處理如寫入Flash較慢可能導(dǎo)致緩沖區(qū)被新數(shù)據(jù)覆蓋造成幀不完整。應(yīng)用層協(xié)議Ymodem理解Ymodem的工作流程。它是通過發(fā)送C字符啟動傳輸然后文件以128字節(jié)或1024字節(jié)的塊發(fā)送每個塊后有校驗。失敗時觀察上位機軟件和Bootloader的交互日志。握手失敗Bootloader沒有正確回應(yīng)C。檢查Bootloader的串口初始化、中斷接收邏輯。校驗失敗CRC校驗不通過。確認雙方使用的CRC算法CRC-16是否一致。檢查數(shù)據(jù)傳輸過程中是否有字節(jié)丟失或錯位。超時Ymodem有超時重傳機制。如果網(wǎng)絡(luò)延遲大或設(shè)備處理慢可能導(dǎo)致超時??梢赃m當(dāng)增加超時時間。實操技巧在Bootloader中增加詳細的調(diào)試日志通過另一個串口打印出接收到的每一個字節(jié)、計算的CRC值、以及協(xié)議狀態(tài)機的變化。使用帶邏輯分析儀功能的USB轉(zhuǎn)串口工具可以捕獲物理層上的實際波形和數(shù)據(jù)字節(jié)與軟件日志對照能精確定位是硬件問題還是軟件問題。對于Flash寫入慢的問題可以考慮在Bootloader中先將數(shù)據(jù)塊緩存到RAM中然后快速寫入Flash或者使用STM32的硬件CRC加速校驗計算。4.3 場景三服務(wù)間RPC調(diào)用超時現(xiàn)象微服務(wù)A調(diào)用微服務(wù)B的接口經(jīng)常出現(xiàn)超時但直接pingB服務(wù)的IP和端口通配性測試telnet B_IP B_port又是通的。排查思路傳輸層telnet通只能說明TCP三次握手能完成即網(wǎng)絡(luò)層和傳輸層的基礎(chǔ)連通性沒問題。但握手之后的通信可能出問題。使用tcpdump或Wireshark在服務(wù)A或服務(wù)B的機器上抓包。觀察TCP握手是否真的成功SYN, SYN-ACK, ACK。握手成功后服務(wù)A是否發(fā)送了HTTP假設(shè)是HTTP RPC請求請求是否完整服務(wù)B是否回復(fù)了TCP ACK確認收到了請求是否發(fā)送了HTTP響應(yīng)有沒有大量的TCP重傳Retransmission重傳意味著網(wǎng)絡(luò)丟包或擁塞會導(dǎo)致應(yīng)用層超時。有沒有TCP零窗口Zero Window通告這表示接收方可能是服務(wù)B的應(yīng)用層處理不過來緩沖區(qū)滿了導(dǎo)致發(fā)送方服務(wù)A停止發(fā)送數(shù)據(jù)。應(yīng)用層服務(wù)B性能檢查服務(wù)B的CPU、內(nèi)存、線程池狀態(tài)。是不是處理請求太慢導(dǎo)致堆積查看服務(wù)B的應(yīng)用日志看請求是否真的被處理處理耗時多久。超時設(shè)置檢查服務(wù)A的RPC客戶端配置。連接超時、讀超時、寫超時分別是多少是否設(shè)置得太短特別是在高負載或Full GC時服務(wù)B的響應(yīng)時間可能會變長。序列化/反序列化如果RPC使用了復(fù)雜的序列化框架如Protobuf、Thrift檢查是否有巨大的消息體導(dǎo)致序列化/反序列化耗時異常。鏈路中的中間件調(diào)用鏈路是否經(jīng)過API網(wǎng)關(guān)、負載均衡、服務(wù)網(wǎng)格Sidecar如Istio Envoy在這些節(jié)點上抓包或查看日志定位超時發(fā)生在哪一段。常見原因服務(wù)B的數(shù)據(jù)庫連接池耗盡、內(nèi)部依賴的某個慢接口、或者一次長時間的Full GC都可能導(dǎo)致單個請求處理時間過長超過了服務(wù)A客戶端設(shè)置的讀超時時間。客戶端在等待響應(yīng)時超時斷開而服務(wù)B可能還在繼續(xù)處理最終將響應(yīng)寫回一個已被關(guān)閉的連接觸發(fā)“Connection reset by peer”錯誤。5. 工具與命令網(wǎng)絡(luò)工程師的“瑞士軍刀”理論聯(lián)系實際離不開工具。這里羅列一些各層排查中最常用的命令和工具并解釋其輸出關(guān)鍵信息。層級工具/命令主要用途關(guān)鍵輸出解讀物理/鏈路層ip link(Linux)ifconfig(傳統(tǒng))ethtool(Linux)查看和配置網(wǎng)絡(luò)接口狀態(tài)、MAC地址、速率等。state UP表示接口已啟用。ethtool可查看驅(qū)動、鏈路速度、丟包統(tǒng)計等。網(wǎng)絡(luò)層pingtraceroute/tracertip addr/ifconfigip route/routenslookup/dig測試連通性、追蹤路由、查看IP配置、查看路由表、DNS解析。ping的time值反映延遲丟包率反映穩(wěn)定性。traceroute顯示路徑每一跳的延遲。傳輸層netstatss(更推薦)lsof -i:端口號查看網(wǎng)絡(luò)連接、監(jiān)聽端口、路由表、接口統(tǒng)計。ss -tlnp查看所有TCP監(jiān)聽端口及對應(yīng)進程。ESTAB表示已建立連接TIME-WAIT/CLOSE-WAIT需關(guān)注。應(yīng)用層及全能Wireshark/tcpdumpcurltelnet/nc網(wǎng)絡(luò)抓包與深度協(xié)議分析。模擬HTTP等請求。測試TCP端口連通性。Wireshark過濾器ip.addr x.x.x.x,tcp.port 80,http。curl -v可顯示詳細的請求和響應(yīng)頭。綜合監(jiān)控nload/iftopnetstat -s實時查看網(wǎng)絡(luò)帶寬使用情況。查看各層協(xié)議的匯總統(tǒng)計信息如TCP重傳數(shù)。netstat -s的輸出中segments retransmitted過高表明網(wǎng)絡(luò)不穩(wěn)定。Wireshark抓包分析實戰(zhàn)技巧過濾是靈魂不要在海量包中盲目尋找。使用過濾表達式如http and ip.src192.168.1.100只看來自該IP的HTTP流量。關(guān)注TCP流右鍵一個TCP包 - “追蹤流” - “TCP流”可以將一次完整的TCP會話包括握手、數(shù)據(jù)傳輸、揮手的所有相關(guān)包提取出來并以對話形式呈現(xiàn)這對于分析HTTP請求/響應(yīng)、RPC調(diào)用等場景極其方便。專家信息Wireshark的“分析”菜單下的“專家信息”會匯總抓包文件中的警告和錯誤如重復(fù)的ACK、零窗口、連接重置等能快速定位潛在問題。統(tǒng)計功能使用“統(tǒng)計”菜單下的“對話”、“HTTP”等可以宏觀地看到哪些主機之間通信最多、HTTP請求的響應(yīng)時間分布等用于性能分析。6. 從學(xué)習(xí)到應(yīng)用構(gòu)建你的協(xié)議知識體系學(xué)習(xí)網(wǎng)絡(luò)協(xié)議切忌死記硬背。我推薦一種“自頂向下抓包驗證”的學(xué)習(xí)方法。從應(yīng)用入手選擇一個你熟悉的應(yīng)用層協(xié)議比如HTTP。用Wireshark抓取一次簡單的網(wǎng)頁訪問過程。層層剖析在Wireshark中從最頂層的HTTP開始看然后展開TCP層看三次握手、數(shù)據(jù)傳輸、四次揮手。再展開IP層看源目IP。最后展開以太網(wǎng)層看MAC地址。直觀地感受封裝過程。動手實驗自己寫一個最簡單的Socket程序。先寫一個TCP的“回聲服務(wù)器”和客戶端觀察連接建立和數(shù)據(jù)交換。再寫一個UDP版本的。在這個過程中體會bind(),listen(),accept(),connect(),send(),recv(),close()這些API是如何與協(xié)議棧交互的。關(guān)聯(lián)理論將你看到的現(xiàn)象和代碼行為與教材上的理論對應(yīng)起來。比如你的客戶端調(diào)用connect()時抓包看到的就是SYN包。調(diào)用close()時看到的就是FIN包。拓展場景用同樣的方法去分析你工作中接觸到的其他協(xié)議。如果是做Web開發(fā)深入研究HTTP/2、HTTPS(TLS)。如果是做物聯(lián)網(wǎng)去抓取分析MQTT包。如果是做底層嵌入式用邏輯分析儀或串口助手去看Modbus RTU的幀結(jié)構(gòu)。網(wǎng)絡(luò)協(xié)議的知識是“慢熱型”的它不會讓你立刻成為高手但會在你職業(yè)生涯的每一個排查線上故障的深夜、每一次設(shè)計系統(tǒng)間通信方案的討論中持續(xù)地提供堅實的支撐。當(dāng)你再看到“408 Request Timeout”你不會再感到茫然而是會下意識地打開Wireshark輸入過濾條件沿著協(xié)議棧一層層地向下探索直到找到那個隱藏在角落里的、錯誤配置的超時參數(shù)。這種能力遠比通過一場考試更有價值。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷电影院| 婷婷五月天久| 91操片| 9热在线观看| 婷婷久久综合| 婷婷欧美激情综合| 丁香五月婷婷亚洲天堂| 久热A片| 婷婷六月激情在线视频| 狠狠爱婷婷丁香| 美女激情综合| 99热这是里只有精品| 九九成人| 亚洲精品成人片在线播| 开心五月天激情网| 激情小说婷婷小说| 日本久久婷| 色中色综合| 天天拍久久| 久碰久| 久久激情五月天| 思思99re这里只有| 亚洲永久四色| www.99热精品99.com| 狠狠色噜噜狠狠狠888| 无码激情精品色婷婷久久久久| 五月婷婷婷色| 99噜噜噜在线播放| 99热9| 夜夜做天天爽| 婷婷 久综合| 五月天婷婷色综合| 亚洲欧洲中文日韩久久AV乱码| 思思re99视频在线观看| 丁香五月天激情小说| 久9热| 热99精品视频| 97人妻人人| 亚洲亚洲人成综合网络| 久久性爱视频| 五月丁香| 国产成人av在线播放| 热99久久这里只有精品| 偷拍视频五月天| 国产av基地| 久久五月婷天天干| 丁香五月婷中字在线| 国产毛片精品一区二区色欲黄A片| 五月天 无码| 99热在线里有精品| 久热2025无码| 狠狠干思思热| 狠狠插日日干撸| 色婷婷五月天成人网| 婷婷丁香六月激情综合| 十月丁香九月婷婷综合| 亭亭五月色男人| 五月婷婷久草在线视频综合| 欧美视频在线观看噜噜| 开心色五月天久久久久久久| 亚洲狠狠狠| 丁香亭亭久久| 天天拍久久| 色香五月天| 久久奄也去色色网站| 美臀自射自家人妻| 丁香六月情| 激情婷婷五月色| www婷婷色情网| 大香蕉九九| 中文字幕五月久久婷| 色色五月婷婷久久| 色香蕉影院| 婷香五月网在线| 激情五月激情综合俺也去婷婷小说| 嫩草AV久久伊人妇女超级A| 九九干视频| www.91九色| 99热超| 五月天婷综合| 99久久思思| 欧美人妻一区二区| 99热在线播放| 9久热在线视频| 成人免费在线电影| 激情五月天丁香| 97人妻碰碰碰久| 成人电影在线免费试看| 丁香桃色综合网| 色婷婷五月天激情久久| 人妻VideOssS人妻| 97色色色| 色一情一乱一乱一区91Av| 五月婷婷无码| 婷婷五月综合中文字幕| 久久久91| 思思热精品在线观看| 婷婷五月天激情五月天网站| 欧美丁香五月97色| 99国产精品久久久久久久久久久| 成人毛片在线免费观看| 开心五月婷婷五月| 五月婷深深爱激情网| 丁香五月五月婷婷| 91婷婷| 丁香六月婷婷色XXXXX| 亚洲欧洲中文日韩久久AV乱码| 狠狠色丁香久久综合婷婷亚洲成人福利 | 日本欧美999久久久三级片| 女人天堂久久| 色色色色色色97| 色婷婷在线视频综合| 亚洲激情综合五月婷婷啪啪| 久久久婷婷婷| 教师性爱毛片| 最新热中文字幕| 六月婷伊人| 人人爽天天爽| 99热午夜精品| www.婷婷亚洲基地| 久久ab| 超碰男人色| 欧美色色色色色| 99热亚洲| 99色婷婷视频| 成人电影AV在线观看| 国产婷婷色综合AV蜜臀AV | 国产激情在线| 日本色爽| 天天透天天干| 九九AV| 97超级啪啪在线观看| 日本超碰在线| 天天日日夜夜爽。| 日日做A爰片久久毛片A片英语| 婷婷五月天综合AV| 管管補管管紱| 日本人妻A片成人免费看片| 亚洲乱码日产精品BD| 99热只有精品在线| 亚洲国产成人裸舞| 亚洲蜜桃精久久久久久久久久久久| 91色逼| 激情五月开心五月丁香五月| 国产人人操| 婷婷五月天奸女| 久草热视频在线观看| 五月婷婷五月天| 亚洲情色一区| 蜜臀av粉嫩av懂色av| 日韩操人| 风流少妇A片一区二区蜜桃 | 久久五月丁香婷婷| 国产亚洲在线| 91操熟女| 激情www| 久久久久久久五月| 射久久丁香五月| 激情五月天色爱| 俺去也婷婷| www99精品在线观看| 成人婷婷五月天| 五月天欧美 另类小说| 日日插日日干| 五月色亭丁香| 99热成人精品网站| 欧美在线看| 天天综合在线网| 精品热九九| 色欲香综合网| 一级内射毛片| 久久五月丁香伊人青草| 久婷| 91性高潮久久久久久久久| 另类国产区| 99热99热在线| 久久婷婷内射| 狠狠干综合| 1024国产| 色视频五月天| 久久狠狠干| 五月丁香激情综合久久| 亚洲综合1024| 嫩草AV久久伊人妇女超级A| 婷婷丁香五月天之开心少妇| 欧美丁香五月| 中文字幕在线资源| 国外亚洲成AV人片在线观看| 深爱五月网| 婷婷久久伊人| 久久婷婷五月天| 狠狠大香婷婷爱| 操91| 色五月欧美| 久久久宗合| 91啪啪视频| caopeng超碰| 中文字幕丰满孑伦无码专区| 久久人妻视步| 亚洲综合五月天| 亚洲天天免费| 人人操人人看97干| 99久视频| 侠女刀之记忆电影在线看免费| 超碰人妻在线| 婷婷五月天激情免费在线观看| 射琪琪| 婷婷五月天色| 丁香婷婷视频一区二区| 99这里都是精品6| 我爱va亚洲va52| 99久久婷婷精品视频| 久久在线人妻| 99久热在线精品| 婷婷在线播放| 韩国情人在线电视剧免费观看高清版全集| 123日本不卡在线| 综合婷婷五月天| 丁香五月天婷婷91| 五月综合激情网| 午夜国产精品AV在线播放| 91精品综合久久久久久五月天| 国産精品| 天天日,天天射,天天舔| 伊人五月天男人的天堂在线| 中文字幕黄色电影网址| 婷婷久月| 色婷婷五月天激情久久| av国产精品偷| 色婷婷啪啪| 天天综合网站| 99久在线视频| 久久国产成人9999久久久久| 婷婷五月天伊人网| 婷婷五月激情网| 九九综合视频在线观看| 99久久视频| 色99视频| 99视频内射三四| 精品无码99| 天天爽成人综合网站| 1024人妻无码中文字幕| 九九黄色网| 色五月天综合| 婷婷综合久久| 亚洲天堂啪啪| 婷婷在线中文字幕| 中美日韩成人在线| 五月婷亚洲精品| 婷婷狠狠久久| 亚洲操操| 亲子乱AV一区二区三区下载| 久久丁香婷婷五月| 午夜激情四射影院| 99热网精品| 99热这里只有精品2| 日韩精品二三区| 这里只有精9| 99热日| 色综合综合综合| 婷婷五月天精品| 777色色色| 色五月天天| 婷婷五月香蕉| 久久婷婷综合基地| 粉嫩av蜜桃av蜜臀av| 色色综合热| 日日干四虎| 色偷偷五月天| 天天日天天操心| 欧美久久网| 五月婷婷婷婷网| sewuyuejiqingwang| 全亚洲最大的婷婷五月天网站COM| 六月色丁香婷婷| 91狠狠色丁香婷婷综合久久| 日本综合色图| 疯狂做受XXXX高潮A片| 亚洲天堂色色| 婷婷五月天基地| 久久久精品色色色| 婷婷色五月丁香六月欧美啪| 婷婷爱五月天| www.五月天社区| 丰满人妻一区三区三区| 伊人久久五月天| 丁香五月婷婷亚洲综合精品在线| 情五月亚洲婷婷| 丁香丁香激情网| 五月丁香婷婷成人版| 97在线视频 欧美| 国产操B| 久久桃花网色婷婷| 91精品久| 91疯狂操操操操| 99丁香五月婷婷在线| 9热在线视频| 玖色色综合| 久久国产高清| 97啪啪| 超碰在线91| 久思思久视频| 欧美视频在线观看噜噜| 91成人性爱视频| 色五月婷婷九月| 丁香六月婷婷综合| 久久久精品色| 99热爆在线| 男人的天堂在线婷婷 | 日本成人综合| 影音先锋色色色资源色资源色| 九玖视频这里只有精品| 五月丁香六月花| 激情五月视频在线婷婷| 97视频久久| 大香蕉综合在线| 中文字幕乱码亚洲精品一区 | 五月激情开心婷婷| 丁香色五月婷婷| 婷婷五月丁香欧洲| 天天插天天干| 九色1区视频在线| 97人人看一| 色狠狠综合| 九九免费精品在线视频| 激情五月狠狠| 67194国产| 欧美槡BBBB槡BBB少妇| 亚洲精品色| 强辱丰满人妻HD中文字幕| 日本久碰| 六月丁香久久| 婷婷瑟瑟五月天| 超碰人人干| 色色色网站| 91久久久久久| 黄色短视频在线观看| 日韩精品超碰在线观看| 五月天久久成人| 五月丁香六月激情在线| 熟妇人妻中文字幕无码老熟妇| 日日操天堂| 182TV大香蕉| 色视频2025| 日本va欧美va欧美va| 九九re精品视频在线观看| 人妻久热| 日韩在线视频9色| 久久婷视频| 极品人妻videosss人妻| 五月天大香蕉| 丁香五月婷婷综合91| 久久婷五月天| 人人干人人看| 婷婷在线网| 97涩婷婷| 婷婷伊人无码| 色五月激情综合| 少妇性BBB搡BBB爽爽爽视頻| 91欧美| 亭亭五月天成人| 丁香五月色| 超碰97色| 蜜臀嫩草| 精品一二三区久久AAA片 | 大香蕉伊人久久| 亚洲 欧洲 国产 伦综合| 婷激情五月天视频导航| www.99久| www.日韩国产| 婷婷天天色| 麻豆AV一区二区三区| 丁香五月综合婷婷| 五月丁香婷婷深深爱| 亚洲在线免费成人| 99九九视频精彩在线| 色综合久久天天综合网| 色播综合| www.婷婷五月天,com| 丁香五月成人网| 色五月,com| 激情综合自拍五月婷婷色五月| jiZZdr| www.婷婷久久五月天| 99热只有精品在线播放| 9久久精品| 久久精品五月| 九九视频在线观看| 丁香熟女乱| 五月婷婷中文网| 婷婷五月在线观看| jiujiu热在线视频| 狠狠色丁香| 任你操精品免费| 五月婷婷六月丁香在线视频| 97成人丁香| 99热综合在线观看| 99久操视频| 深爱激情网噜噜色| 婷婷久综合| 亚洲天堂AAA| 超碰碰碰碰| 《诡秘之主》在线观看| 99亚洲天堂| www。五月天激情| 久久婷婷亚洲| 亚洲思思热久| 五月丁香综合激情| 五月丁香六月欧美综合| 九九99久久精品| 五月天婷婷自拍图片在线观看| 日日干日日色| 亚洲深喉AV| 五月婷婷色播网| 精品夜夜澡人妻无码AV| 九九色图| 五月色丁香激情| 久久人人做人人妻人人玩精品va| 天天爽夜夜爽| 中文字幕五月久久婷婷| 丁香五月色五月| 九九爱激情| 五月天综合区| WWW.久久99| 丁香婷婷色五月激情综合| 91刘玥视频在线观看| 色婷婷丁香五月天在线观看| 欧洲精品爱爱| 色播五月网| 夜夜爽天天| 国产精品天天狠天天看| 九九99一区| 黄色五月婷| 超碰在线观看9| 五月婷婷色| 黑人糟蹋人妻HD中文字幕| 色婷婷AV五月天| 91在线看片| 看片视频在线免费日产在线看| 激情五月婷婷啪啪| 玖玖色综合| 99久久国产宗和精品1上映| 白人荫道BBWBBB大荫道| 热99在线| 激情久久久| 亚洲精品V天堂中文字幕| 99色热综合| 亚洲成人网站在线| 婷婷五月天伊人| 日韩综合大黄| 一起草无码| 九九热最新地址| 亚洲中文字幕AV| 五月天激情视频| 色9月| 久热九九| 99精品无码网站| www.久久久久久久久久.com| 婷婷六月色开| 婷婷五月婷婷五月| 五月婷婷中文字幕| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 99久超碰| 成人必爱视| 五月婷性爱| 丁香五月天啪啪激情综和网| 六月婷婷开心| www.五月婷婷.com| 操日视频| 内射丰满人妻| 91人人操人人爱| 色五月激情五月| 激情综合五月婷婷| 婷婷五月天免费| 日本高清久| 91精品激情9| 婷婷的色色五月天| 激情综合网址| 激情五月六月丁香| 97av在线视频| 婷婷 丁香 久久| 超碰人人色| 色色性爱视频| 五月婷婷这里都是精品| 日本99在线| 激情5月婷婷| 色五月婷婷综合| 婷婷激情丁五月| 精品久久9| 久久久久久久久久久jjjj| 色欲天天综合| 九九婷婷网五月天| 久久九九大香蕉电院| 色婷婷丁香五月| 五月婷综合激情| 国产精品久久久久久久久久久久| 色综合综合色| 久热这里只有| 色欲久久久久| 欧美色色色| 五月婷婷综合网| 久久色情| 超碰人人操| 色婷婷丁香五月综合| 久婷婷五月激情| 五月天丁香婷| 色色九九五月天 | 99热免费看| 婷婷色系婷色| 色宗合,宗合网| 五月婷婷无码| 中文字幕在线资源| 日韩av在线电影| 永久热91| 蜜桃婷婷狠狠久久综合| 真实熟女-91九色| 操碰色一区就去操| 国产美女无遮挡裸体毛片A片| 综合狠狠干| 丁香五月婷婷深五月| 亚洲成人AV在线播放| A1片久久| 99草视频在线观看| www.久9| 草榴视频黄色网| 日韩二区搞逼插逼毛片| 五月日韩中文字幕| 美女久久婷婷| 婷婷色综合网日韩国产| 色色色色色日韩午夜激情| 超碰人人摸人人操| 97大香蕉五月天| 4399啪啪视频| 99热免费18| 97涩婷婷婷婷基地| 久热久操久热久草国产91| 青青色com久久| 丁香五月色色婷| 色婷婷影视99| 色综合偷拍| 免费AV在线| 99色中文| 丁香五月婷婷无码AV| 久青青久| 蜜臀九九九九| 五月婷婷六月丁香色| 天天干夜夜想| 激情深愛五月視頻| 六月色色综合| 久久性爰视频这里只有精品| 成人精品亚洲性爱| ww久久| 99热思思| 色欲AVV| 色射7856五月天激情四射| 久久超级碰视频| 琪琪色五月天| 亚洲在线激情婷婷五月| 天天xxxxxx天天日| 婷婷五月激情的图片| 香蕉婷婷| 91妻人人爽人人看片| 久久婷五月影院| CAoub青青超碰| 99免费热视频在线| 色五月婷婷亚洲| 99热九九在线| 99ri久久| 狠狠久久婷五月综合色| 骚货艹网站视频| 婷婷激情六月| 天天干一干| 婷婷五月天久草在线| 一操久久| 亚州激情网站无码| 亚州色色色| 婷综合| 成人短视频在线免费观看| 99热国产精品| 亚洲黄网AV| 婷婷久久伊人| 五月伊人视频在线看| www.99热视频| 五月丁香啪| 五月婷婷先锋| 久久婷婷青草五月天| 伊人大香蕉毛片| 99热大香蕉| 久久婷婷操| 中文字幕av在线播放| 国产99久久久国产精品免费看| 99色在线观看视频者| 久操福利| 色色综合视频| 婷香五月激情视频| 狠狠色狠狠爱| xxx综合在线| 成人五月天丁香婷| 97综合视频在线| 激情丁香社区| 九九婷婷网五月天| 99国产精品久久久久久久久久久| 偷拍91九色| 26uuu亚洲色| 国产操碰| 91色碰| 五月婷婷中文网| 99综合| 色情五月| 婷婷五月天综合色| 久久婷婷五月天| 熟女91九色| 精品久久久久久久久久久久人妻| 久久激情五月婷婷| 婷婷五月丁香91| 人妻VideOssS人妻高清| 最近中文字幕大全免费版在线| 天天插天天射天天干| 色婷婷在线视频综合| 天天干天天操天天爽| 国内久久亭亭| 丁香婷婷成人网| 久九男女天堂| 五月综合婷婷开心网| 久久久WWW| 婷婷性爱视频在线| 婷婷色5月激情网| 色欲天天综合| 激情98色婷婷五| 亚洲色色图片| 操一区| 伊九九三级区| 欧美va视频| 丁香五月婷婷Av| 久久久久人妻网址| 色情五月天导航| 婷婷亚洲色| 九九无码AV| 色婷婷成人在线| 99综合网| 色婷婷中文字母五月丁香| 四虎成人精品永久免费AV九九| 久激情| 99视频在线精品免费观看2| www.91av.com| 久久一二三视频| AA片在线观看视频在线播放| 五月激情另类| 欧美性猛交 XXXX 乱大交| 亚洲激情亚洲激情 | 爱久久小说下载网| 婷婷亚洲丁香五月| 国产无套精品一区二区| 99热精品一区| 新激情婷婷| 怡红院精品视频久久久久久久久| 99噜噜噜在线播放| 人妻操操色| 久久黄色片| 99热很操老逼| 色在线99| AV在线观看网站| 日韩亚洲视频| 色很很96| 五月丁香综合网| 婷婷五月激情基地| 超碰日韩人妻在线| 久99热| 色天堂操| 亚洲精品亚洲人成人网| 婷婷丁香五月天婷婷| 色婷婷丁香五月| 五月丁色AV| 午夜天堂一区人妻| 色五月亚洲开心网| 中文av在线观看| 激情AV在线| 玖玖视频福利| 性按摩玩人妻HD中文字幕| 另类小说婷婷色| 内射 无码 伊人| 五月丁香六月婷婷激情视频在线观看免费| 婷婷五月色情| 丁香在线视频| 天天操天天日天天操| 99re青青草| 久久HD| 精热在线综合网| 久久久久久久久久久久久9| 天天色激情| 色玖玖综合| 五月天开心网| 99热免费精品| 国产激情综合五月久久| 国产看真人毛片爱做A片| 操逼棍操逼| 噜噜色五月| 丁香五月激情婷婷| av五月天婷婷丁香| 99啪啪视频| 色五月色综合| 五月丁香婷婷色色| 日韩色情亚洲五月天婷婷| 超碰人人99| 婷婷五月丁香五月| 人人干av| 九九热九九热精品| 狠狠色丁香婷婷五月| 色色色色热| 五月深爱激情网| 大香蕉综合| 婷婷五月丁香亚洲| 99综合网| 色婷婷久久综合中文久久一本| 色色日韩| 亚洲 欧洲 国产 伦综合| 色99在线| 久99热在线观看| 天天综合干| 日韩欧美成人片| 爱99干99| 五月天另类视频| 五月婷婷 激情五月| 色综合色综合婷婷热| 9一精品视频观看| 精品国产AV色一区二区深夜久久| 五月婷婷婷丁香播| 久久在线人妻| 丁香五月天色综合| 久99在线视频| 色婷婷精| 午夜天堂一区人妻| 东京热免费视频| 激情五月婷婷丁香| 五月天婷婷色小说| 夫妇交换刺激做爰| √天堂资源在线人妻熟女| 丁香五月天激情网| 婷婷五月天无码视频| 99久扒热| 日本天堂久久| 久久综合66| 婷婷五月天成人网| 九九热在线99| av在线激情| 五月丁香在线观看| 国产资源91在线| 在线五月色播| 五月婷婷另类| 久久激情五月婷婷| a片在线免费观看一区| 激情AV网| 青柠影视免费高清电视剧| 人妻久久久久久久 | 另类综合激情| 99久精品视频| 日韩视频女神99| 亚洲区1| 91嫩草国产线观看亚洲一区二区| 激情五月天婷婷视频| 欧美色色色色色色色色色色影视| 日夜操B| 日良久久| 大香蕉久艹| 色域五月婷婷丁香| 91狠狠色色丁香婷婷综合久久| 97偷拍在线视频| 伊人狼人干| 国产操B| 五月天开心色色网| 日本操B视频| 99热99艹在线观看| 香蕉久操| 丁香五月亚洲综合丝袜| se色婷婷视频| Aaa久久| 91久女| 超碰2021| txt五月激情四射网综合俺也来了 五月天婷婷丁香人人操91 | 日日干综合| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 五六月婷婷久久| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 亚洲色久| 最近中文字幕2019视频1| 免费视频WWW在线观看网站| 国产精品国产成人国产三级| 日本欧美成人片AAAA| 丁香五月花| a性生活久久无| 婷婷五月天大香蕉在线视频观看| www.久久99精品| 伊人大蕉香| www一起操| 香蕉综合在线| A一级操| 五月婷婷无码专区| 五月天天爽| 激情五月综合网| 五月婷婷av| 丰满人妻一区二区三区| 亚洲精品久久久无码| 99日热在线视频| 婷婷五月中文字幕| 91精品婷婷国产综合久久| 丁香五月婷婷五月天在线| 色婷丨日丨天丨综合久久| 色色色色网色色网色色| 99成人| 99视频精品在线| 嫩草AV久久伊人妇女超级A| 狠狠色综合图片| 久久大香蕉视频| 五月婷婷激情四季| 天天五月情| 色在线99| 天天操夜夜操| www99xxxx五月丁| 色色激情网| 色欲日日躁| 日本婷婷色日| 婷香五月激情视频| 67194线路二在线观看| 五月婷婷色啪| 99爱这里只有精品| 五月亭亭六月天| 99综合网| 色亭亭九月| 538任你爽| 欧美黑人巨大猛烈cuckold| 婷婷五月另类网站| 深爱五月激情| 99精品手机在线视频| 色停停香蕉视频| 俺去也在线官网| 五月丁香好婷婷A片网| 99热在线观看| 1024成人在线观看| 激情婷婷丁香色五月综合| 久久丁香综合| 九九99九九精品免费 | 日本丁香五月| 丁香激情网| 丁香五月婷婷色偷偷| www。狠狠干。com| 色色亚洲五月天| 丁香久久| 丁香五月色五月| 综合久久五月| 婷婷色五月天在线| 五月色婷丁香| 欧美日韓成人亚洲精品另类| 天天干天天操天天射| 无码激情AAAAA片-区区| 91婷婷色五月| 另类激情五月天| 日本一级一级一级一级| 特级操b片| 色丁香五月综合网| 欧美久热| 亚洲一级色电影| 天天情色综合网| 五月婷婷激情综合| 乱码操操| 婷婷五月天国产在线播放| 丰满老熟妇BBBBB搡BBB| 色99视频| 五月丁香啪| 精品自拍99| 色婷婷在线视频久| 婷婷五月天堂| 久人人操| 九九综合久久| 色色三级视频| 亚州激情网站无码| 国产成人99久久亚洲综合精品| 丁香五月九九| 色综合射婷婷| AV成人在线网站| 色色色视频| 激情五月婷婷| 久久婷婷五月综合精品蜜芽| 亚洲五月花| 免费碰碰视频久| 丁香花五月天| 色综合五月天| 99视频这里只有免费精品| 五月综合丁香婷婷| 婷婷六月综合基地| 五月婷婷六月丁香综合在线| 91狼友视频在线观看| 亚洲AAAA网| 99国产精品久久久久久久久久久| 6月丁香婷婷| 九九人人操| PORNY九色9l自拍视频成人| 99精品在线| 婷五月天丁香婷五月| 日本操B视频| 奇米影视在线视频| 久久婷婷激情视频| www.久久久久久久久久.com| 99热这里只有精品无码| 超碰婷婷色| 五月丁香六月停停| 婷婷五月久久| 婷婷五月激情在线| 99精品视频播放| 欧洲第一久色| 中文字幕精品推荐免费在线观| 久久九九大香蕉电院| 六月色丁香婷婷| 婷婷五月天在婷| av五月天婷婷丁香| 五月婷导航| 超级碰碰视频无码| 日日噜噜夜夜狠狠久久丁香五月| 综合激情在线观看| 丁香婷婷色情| 日本天堂爱爱| 婷婷伊人中文字幕| 久久综合丁香五月| 精品国产AV色一区二区深夜久久| 精品综合久久久久久五月天| 亚洲精品白浆高清久久久久久 | 亚洲日韩一页精品发布| 成人网站免费sxj| 91九色超碰| 妻久久人久久| 激情啪啪五月| 日日夜夜天天综合| 91热er| 热久综合| 色停停五月,在线观看| 丁香久久综合| 亚洲综合五月| 婷婷五月丁香激情色情| 丁香婷婷六月| 丁香五月综合激情性爱| 久9热| 青青草视频免费观看| www色五月天| www.色九月| 开心激情综合| 亚洲人妻一区二区| 综合亚洲AV| 亭亭五月色男人| 日日操,日日爽| 丁香五月婷婷高清| 99ri精品视频在线观看| 亚洲小说五月婷婷| 亚洲av另类在线观看| 四月婷婷五月丁香| 色色热99| 草久私拍| 九月婷婷久久久| 激情校园 亚洲| 欧美久人人| 欧美性爱五月天| 激情五月天www| 亚洲旡码| 成人龟情网丁香五月| 九九热视频在线观看| 在线观看熟女少妇| 久久精99| 九九热精品视频| 久久久久人妻中文| av色婷婷| 色色婷婷综合| 色综合丁香| 一级A片天天操夜夜操| 色婷婷久久综| 国产AV国片偷人妻麻豆| 色爱综合网| 丁香六月婷婷综合麻豆| 婷婷综合色网| 无码激情AAAAA片-区区| 午夜爱爱网站| 六月丁香激情综合| 99精品自拍视频| 亚洲av电影网站| 丁香六月欧美| 婷婷五月激情视频在线| av婷婷丁香 六月| 91色在线 | 日韩| 情欲禁地| 五月天丁香网| 99re思思热久久| 五月天 综合 在线| 婷婷99热| 91九九热| 人妻丰满精品一区二区A片| 97性视频| 五月丁香欧美在线| WWW·天天操·视频?| www久久久久| 精品无码久久久久久久久| 色五月激情| 性日本精品| www.激情五月天.com| 99久久精品国产色欲| 91嫩草国产线观看亚洲一区二区| 玖玖热视频| 婷婷爱五月| 99热精品免费在线观看| 亚洲第一色色色色| 综合婷婷久久| 第四色网婷婷| 五月做爱| 香蕉97碰碰碰欧美| 这里只有精品久久| 久草A片| 色色色热| 伊人五月成人| 蜜乳A√| 婷婷六月丁香在线| 天天搡日日搡aaaaⅩ| 一级七香蕉| 97luluse| 亚洲日韩乱码一区二区三区四区| 99无码黄色视频| 991国产精选视频在线播放下载| 99热这里只有精品在线播放| 婷婷五月天AV激情| 激情宗合哪里能看| 久久99久久99精品免视看婷婷| 中文字幕激情综合| 婷婷五月丁香人妻无码高清| 婷婷五月天99综合网站| 国产欧美精品AAAAAA片| 亚洲九区| 亚洲综合色色色| 婷婷综合激情| 九九操操| 色婷婷在线播放| 9热视频在线观看| 人妻久久人妻久久第一区| www天天爽| 激情五月婷婷色| 99热色在线精品| 99精品久久久久久久婷婷久久| 色青青五月| 婷婷亚洲丁香五月| 怡红院院久久| 婷婷五月天激情视频| 天天拍夜夜爽日日| 东北婷婷五月天| 人妻操操色| 丁香五月婷婷欧美成人色图| 天天肏天天爽夜夜爽| 日日激情网| 婷婷五月天综合小说网| 99re热视频这里只精品| 天天精品视频免费观看| 激情网五月| 9九色首页| 激情久久肏屄视频| 久激情网| 五月婷在线| 国产亚洲精品久久久久久郑州| 天天干天天干天天干| 99国产精品久久久久久久久久久 | 亚洲综合色丁香五月天| 六月丁香婷婷色69| 操操操AV| 97碰碰视频| 丁香色色网| 欧美日韩99| 中文字幕丰满孑伦无码专区| 日韩ww| 99热精品网| 91视频一起草| 五月丁香日本一抹本| 好好日激情五月天| 操啊操av| 色丁香五月婷婷| 超碰99在线观看| h在线看免费版在线看| 国产在线激情视频| 五月天社区| 亚洲人成网亚洲欧洲无码久久| 色婷婷丁香五月天在线观看| 丁香婷婷偷拍| 99无码免费视频| 99热福利| 婷婷六月综合基地| 中文字幕精品无码一区二区| 99热一区| 疯狂做受XXXX高潮A片| 婷婷最新地址| 激情婷婷网| 人人摸人人操人人爱| 午夜激情久久| 久久激情五月天| 日韩黄黄| 激情五月天色婷婷| 久久久99免费视频| 久久精彩免费视频| 99精品综合在线| 九九色综合网| 五月天欧美 另类小说| 丁香五月播播| 99免费热视频在线| 玖玖婷婷免费| 丁香六月激情| 亚洲综合色丁香五月天| 色色色热| 国产69久久久欧美黑人A片 | 天天拍久久| 婷婷丁香在线| 99色中文| 五月婷六月| 丁香五月成人丝袜| 婷婷成人av| 五月丁小婷婷激情四射| 国产精品色| 99精品在线| 色99在线| 五月婷婷啪啪| 26uuu精品一区二区| www九九热| 久9热| 成人在线不卡| 五月婷婷人人人操| 影音先锋偷偷色男人站| 99热这里只有精品5| 婷婷性爱五月天| 婷婷va| 欧美五月婷婷| 婷婷射丁香| www.99热视频| 天天做天天爱天天玩| 久久久婷婷五月亚洲97号色| 婷婷久久综合| 激情综合网址| 婷婷视频网| 亚洲色五月天| 五月婷婷六月色| 少妇人妻人伦A片| 成人国产欧美大片一区| 95精品区一区二| 激情精品久久| 超碰色女人| 伊人超碰| 色色色777| 久久综合伊人综合在线| 五月丁香婷婷婷婷综合网| 欧美激情五月| XX色综合| 99A级片| 色色色色综合| 99ER热精品视频| 99久热视频在线| 日本人妻操| 久9久9久9久9久9久9| 97亚洲色 torrent magnet| 狠狠色丁香久久婷婷综合五月| 五月天色不卡| 极品少妇XXXX精品少妇偷拍| 偷偷与邻居做爰完整视频| 久久99最新地址| 四川操逼站| 久久久91| 开心五月激情站| 久狠日av| 亚欧州精品视频| 天天日天天舔| 国产毛片操B| 99热狠狠操| 这里只有精彩小视频视频网站| 人色五月天婷婷| 五月天婷婷色综合| 欧美人妻一区二区| 俺来也狠狠| 99热在线资源| 亚洲avjiujiur91| 26uuu| 五月天婷婷久久视频| 激情五月天。| 97人人操在线| 丁香五月天无码| 九热免费视频| 丰满人妻妇伦又伦精品国产| 天天网曰日曰夜夜综合永久免费| 超碰在线看| 97色婷婷五月天| 久热无码| 日日操夜夜操不卡| 91ncom.色| 丁香婷婷成人在线播放| 久久婷.com| 五月婷婷很很色| 色哟哟精品| 精品色色色| 五月婷婷五月| 人妻操日日| 丁香婷婷免费| 9999三级片| 久久婷婷五月综合色丁香花| 97资源欧美日韩大香蕉超碰一区| 欧美天天性| 婷婷九月丁香| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 婷婷色五月天色色| 熟女激情网| 激情六月天| WwW色婷婷| 99热精品在线播放| 九九99久久| 免看黄大片AA | 久久99网站| 夜夜爱网站| 丁香色婷婷色手机免费在线| 日本综合久| 婷婷色操| 97操碰在线97| 激情婷婷综合| www婷婷| 六月丁香激情| 99er6热在线观看精品6| 丁香五月天堂| 久草 天堂| 日日干夜夜干| 亚洲人成播放网站| 激情伊人六| 色综合天天综合成人网| 激情视频91| www.99热这里精品| 欧美日本国产| 六月丁香综合网| 这里只有精品视频| 欧美A级网站| 六月婷婷激情图片| 色玖玖玖| 日本在线va| 色综合久久8| 亚洲第一视频 久久| 人妻熟女一区二区AV| 99热精品在线播放观看| 亚洲九九视频| 91狠狠色| 天天操无码| 久久九九玖玖| 91色逼| 大香蕉婷婷久久| 九九热99熟女| 日韩在线观看亚洲| 久久精彩视频| 人橾人| 欧美大香蕉视频| 五月丁香久人妻中文| 久久婷婷91| 丁香婷婷六月天| 久久久8| 大香蕉五月天| 狠狠干狠狠色| 综合婷婷| 成人va在线播放| 天天五月香欧美| 久久激情视频| 激情网 五月天| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 亚洲av日韩无码| 97操在线视频| 色综合久久久久|