1. 從“概述”開始為什么第一章決定了你的計網(wǎng)復習成敗每次翻開《計算機網(wǎng)絡》教材第一章“概述”總是那個最容易被跳過的部分。很多同學包括當年的我都覺得這些概念性的東西“太虛”不如直接去看TCP/IP協(xié)議、去研究路由算法來得實在。結果呢往往是學到后面發(fā)現(xiàn)各種協(xié)議、分層、服務模型攪在一起腦子里一團亂麻回頭再看才發(fā)現(xiàn)第一章里那些看似簡單的定義和框架才是理清所有脈絡的“總綱”。我花了十多年時間從學生到從業(yè)者再到帶新人、做項目越來越深刻地體會到對計算機網(wǎng)絡的理解深度幾乎就取決于你對這個“概述”的消化程度。它不是什么“序言”而是整座知識大廈的基石和設計藍圖。今天我就以一個過來人的身份帶你重新、徹底地啃下這第一章。我們不談空泛的理論而是結合真實的網(wǎng)絡世界把每一個抽象概念都落到具體的場景和選擇上讓你不僅記住更能理解其背后的“為什么”。無論你是正在備考的學生還是希望夯實基礎的開發(fā)者這篇文章都會幫你把計網(wǎng)的“地基”打牢。2. 核心脈絡拆解一張圖看懂計算機網(wǎng)絡的骨架在深入細節(jié)之前我們必須先建立起一個頂層的認知框架。計算機網(wǎng)絡的體系結構可以類比為建造一棟大樓。你不可能一上來就研究怎么砌磚具體協(xié)議的數(shù)據(jù)格式而是要先看建筑設計圖體系結構理解大樓分為幾層分層思想每層是干什么的層功能以及層與層之間如何協(xié)作服務與接口。2.1 分層思想的精髓化繁為簡的工程智慧網(wǎng)絡通信復雜無比涉及硬件鏈路、信號編碼、尋址、路由、可靠傳輸、會話管理、數(shù)據(jù)格式等等。分層模型的核心思想就是“分而治之”。它將龐大的通信任務分解成一系列較小、功能相對獨立的層級。為什么必須分層想象一下如果讓一個軟件工程師去操心網(wǎng)卡芯片如何調制電信號或者讓硬件工程師去思考HTTP報文里的Cookie怎么解析這將是災難性的。分層明確了責任邊界每一層只關心自己層面的問題比如物理層只關心如何在媒介上傳輸比特流不管這些比特代表什么應用層只關心為用戶提供郵件、網(wǎng)頁等服務不管數(shù)據(jù)是通過光纖還是衛(wèi)星傳送的。層與層之間通過定義良好的接口交互下層為上層提供服務上層使用下層的服務。這就像快遞你應用層把包裹交給快遞員傳輸層你不需要知道快遞員是開汽車還是騎電動車網(wǎng)絡層更不需要知道高速公路數(shù)據(jù)鏈路層和柏油路物理層是怎么修的。你只關心包裹是否安全、準時送達。帶來的核心好處易于理解和實現(xiàn)復雜的系統(tǒng)被分解可以集中精力攻克單一層次的問題。標準化各層可以獨立地制定標準協(xié)議只要接口不變層內(nèi)部的實現(xiàn)可以自由演進。比如從以太網(wǎng)升級到Wi-Fi只要它們向上提供給網(wǎng)絡層的服務一致傳遞數(shù)據(jù)報上層的TCP/IP協(xié)議棧就無需改動。靈活性某一層技術的更新?lián)Q代不會波及其他層。我們在4G、5G時代依然使用HTTP/1.1、HTTP/2協(xié)議就是最好的例子。2.2 兩大經(jīng)典模型OSI與TCP/IP的對比與抉擇談到分層就繞不開兩個模型理論上的“完美模型”O(jiān)SI七層模型和實踐中的“事實標準”TCP/IP四層模型。理解它們的異同和關系是打通任督二脈的關鍵。OSI參考模型教科書式的理想國國際標準化組織ISO提出的這個七層模型是一個理論框架旨在為全球互連提供一個完整的標準體系。物理層比特流的透明傳輸。關心接口特性、電壓標準、傳輸速率、電纜引腳定義等。比如RJ-45接口、RS-232規(guī)范都屬于這一層。數(shù)據(jù)鏈路層在相鄰節(jié)點同一網(wǎng)段內(nèi)間提供可靠的數(shù)據(jù)幀傳輸。負責幀定界從哪里開始到哪里結束、差錯控制CRC校驗、流量控制防止快發(fā)慢收和介質訪問控制MAC解決誰先用共享信道的問題。交換機Switch是這一層的典型設備。網(wǎng)絡層為分組交換網(wǎng)上的不同主機提供通信服務。其核心功能是路由選擇通過路由協(xié)議為數(shù)據(jù)包選擇最佳路徑和分組轉發(fā)。路由器Router工作在這一層。IP協(xié)議是這一層的核心。傳輸層負責主機中兩個進程之間的通信。網(wǎng)絡層只把數(shù)據(jù)送到目標主機而傳輸層負責將數(shù)據(jù)交給主機上正確的應用程序。它提供端到端的通信服務。關鍵協(xié)議是TCP可靠、面向連接和UDP不可靠、無連接。會話層管理不同主機上進程間的對話會話。負責建立、管理、終止會話以及會話同步在數(shù)據(jù)流中插入檢查點。表示層處理兩個通信系統(tǒng)中交換信息的表示方式。包括數(shù)據(jù)格式變換如編碼轉換、數(shù)據(jù)加密解密、數(shù)據(jù)壓縮恢復等?？梢岳斫鉃椤胺g官”。應用層為用戶的應用進程如電子郵件、文件傳輸提供網(wǎng)絡服務接口。HTTP、FTP、SMTP、DNS等協(xié)議都在這一層。TCP/IP模型互聯(lián)網(wǎng)的實戰(zhàn)派這是在實際互聯(lián)網(wǎng)中發(fā)展和使用的模型更側重于實用性和簡潔性。網(wǎng)絡接口層對應OSI的物理層和數(shù)據(jù)鏈路層。涵蓋了所有能使主機接入網(wǎng)絡的硬件和協(xié)議細節(jié)如以太網(wǎng)、Wi-Fi等。網(wǎng)際層對應OSI的網(wǎng)絡層。核心協(xié)議是IPInternet Protocol負責將數(shù)據(jù)包從源主機路由到目標主機。傳輸層與OSI的傳輸層功能完全對應。核心協(xié)議是TCP和UDP。應用層對應OSI的會話層、表示層和應用層的集合。所有的高層協(xié)議如HTTP、FTP、DNS、SMTP都歸于此處。兩者的融合與學習策略在實際學習和工程中我們通常采用一種五層折中模型來理解問題它融合了兩者的優(yōu)點層次清晰便于教學和實際抓包分析物理層數(shù)據(jù)鏈路層網(wǎng)絡層傳輸層應用層實操心得不要死記硬背OSI七層的名字。我的方法是在分析任何網(wǎng)絡問題時都從這五層模型出發(fā)自頂向下思考。例如網(wǎng)頁打不開是應用層DNS解析失敗HTTP請求錯誤的問題還是傳輸層TCP連接無法建立或者是網(wǎng)絡層IP路由不通。這個思維習慣能極大提升你排查問題的效率。2.3 核心概念辨析協(xié)議、服務與接口這是第一章里最容易混淆的一組概念但理解它們的關系至關重要。協(xié)議對等實體例如兩臺主機的傳輸層之間之間通信規(guī)則的集合。它定義了所交換報文的格式、順序以及發(fā)送/接收報文應采取的動作。協(xié)議是“水平”的是同一層不同實體間的約定。TCP、IP、HTTP都是協(xié)議。服務下層為上層提供的功能集合。服務是“垂直”的通過層間的接口提供。下層是服務的提供者上層是服務的使用者。例如網(wǎng)絡層為傳輸層提供“盡力而為”的數(shù)據(jù)報傳送服務。接口也稱為服務訪問點 SAP相鄰兩層之間交換信息的連接點。上層通過接口使用下層的服務。在軟件中接口通常體現(xiàn)為一組系統(tǒng)調用API。例如Socket API就是應用層使用傳輸層服務的接口。一個生動的類比 想象你應用層要去銀行下層存錢。協(xié)議是你和銀行柜員對等實體之間溝通的規(guī)則。你們都說中文報文格式你先說“我要存錢”報文順序柜員回復“請?zhí)顔巫印眲幼鳌＿@套約定就是“協(xié)議”。服務銀行為你提供的“存款”這個功能就是服務。接口銀行的柜臺窗口就是你使用“存款”服務的地方。你通過這個窗口接口遞交存單和現(xiàn)金服務原語獲得回單服務結果。服務原語上層使用下層服務時進行的操作。通常有四種類型請求上層請求下層完成某項工作。指示下層通知上層發(fā)生了某個事件。響應上層對下層“指示”的回應。證實下層向上層報告“請求”的執(zhí)行結果。理解這三者的關系就能明白協(xié)議是實現(xiàn)服務的手段。下層實體通過內(nèi)部運行協(xié)議對外向上層表現(xiàn)為提供了某種服務。3. 網(wǎng)絡世界的度量衡性能指標與關鍵參數(shù)學網(wǎng)絡不能只懂概念還得會“算”。這些性能指標是評估、設計和診斷網(wǎng)絡的硬性標準。3.1 速率、帶寬與吞吐量別再把它們混為一談這三個詞在日?？谡Z中經(jīng)?；煊玫诩夹g上它們有嚴格區(qū)別。速率數(shù)據(jù)率/比特率指主機在數(shù)字信道上傳輸數(shù)據(jù)的額定速度。單位是 bit/sbps。我們常說的“百兆寬帶”、“千兆網(wǎng)卡”這里的“兆”指的就是額定速率例如 100Mbps。它是一個理論上的、標稱的值。帶寬在模擬信號領域指信道允許通過的信號頻率范圍單位是赫茲Hz。在數(shù)字網(wǎng)絡語境下帶寬通常被借用來指代信道的最大理論速率即信道能達到的最高數(shù)據(jù)率。所以很多時候“帶寬”和“速率”被等同使用但要注意其原始含義。吞吐量單位時間內(nèi)實際通過某個網(wǎng)絡鏈路或接口的數(shù)據(jù)量。單位也是bps。吞吐量受限于路徑上速率最低的鏈路瓶頸鏈路并且永遠小于或等于該鏈路的速率。例如你有一個100Mbps的寬帶但從某個網(wǎng)站下載文件時實際速度可能只有30Mbps這30Mbps就是此刻的吞吐量。計算公式與示例 假設你要下載一個大小為 100 MB 的文件。你的寬帶套餐速率帶寬是 100 Mbps。但實際下載時由于服務器限速、網(wǎng)絡擁塞等原因平均吞吐量是 50 Mbps。 那么理論最快下載時間 文件大小 / 速率 (100 * 8 Mb) / 100 Mbps 8 秒。 實際下載時間 ≈ (100 * 8 Mb) / 50 Mbps 16 秒。3.2 時延影響用戶體驗的隱形殺手數(shù)據(jù)從網(wǎng)絡的一端傳送到另一端所經(jīng)歷的時間就是時延。它由四個部分組成發(fā)送時延主機或路由器將數(shù)據(jù)幀的所有比特推向發(fā)送到鏈路所需的時間。計算公式發(fā)送時延 數(shù)據(jù)幀長度比特 / 信道帶寬bps例如發(fā)送一個 1500 字節(jié)12000 比特的數(shù)據(jù)幀通過 100 Mbps 的鏈路發(fā)送時延 12000 / (100 * 10^6) 0.00012 秒 0.12 毫秒。關鍵點發(fā)送時延發(fā)生在機器內(nèi)部與傳輸距離無關。傳播時延電磁波在信道中傳播一定距離所需的時間。計算公式傳播時延 信道長度米 / 電磁波在介質中的傳播速率米/秒電磁波在光纖或電纜中的傳播速率約為 2 * 10^8 米/秒真空中光速的2/3。例如數(shù)據(jù)在 1000 公里長的光纖中傳播傳播時延 (1000 * 1000) / (2 * 10^8) 0.005 秒 5 毫秒。關鍵點傳播時延取決于物理距離和介質與數(shù)據(jù)幀長度或帶寬無關。處理時延主機或路由器收到分組后進行存儲轉發(fā)、分析首部、查找路由、差錯檢驗等處理所花費的時間。排隊時延分組在路由器輸入輸出隊列中排隊等待處理的時間。這部分時延取決于網(wǎng)絡的擁塞程度變化最大?？倳r延 發(fā)送時延 傳播時延 處理時延 排隊時延注意事項對于高速網(wǎng)絡鏈路我們提高的僅僅是帶寬即降低了發(fā)送時延而傳播時延由光速和距離決定是無法通過提高帶寬來減少的。這就是為什么跨洲際通信如中美之間即使帶寬再高延遲主要是傳播時延也至少需要幾十毫秒的原因。在理解“低延遲”需求時如在線游戲、高頻交易首先要關注的是傳播距離。3.3 時延帶寬積與往返時間RTT時延帶寬積傳播時延和帶寬的乘積。計算公式時延帶寬積 傳播時延 * 帶寬單位是比特。它表示從發(fā)送端發(fā)出數(shù)據(jù)直至接收端收到為止鏈路上最多能容納的比特數(shù)量?？梢岳斫鉃椤肮艿廊萘俊?。這個參數(shù)對于TCP的滑動窗口大小設置非常重要理想的發(fā)送窗口應約等于時延帶寬積才能充分利用鏈路。往返時間RTT從發(fā)送方發(fā)送數(shù)據(jù)開始到發(fā)送方收到來自接收方的確認接收方收到數(shù)據(jù)后立即發(fā)送確認總共經(jīng)歷的時間。RTT 包括了數(shù)據(jù)包的傳播時延去 數(shù)據(jù)包的發(fā)送時延去 接收方的處理時延 確認包的發(fā)送時延回 確認包的傳播時延回。在忽略處理時延和排隊時延且確認包很短發(fā)送時延可忽略的情況下RTT ≈ 2 * 傳播時延。RTT 是TCP進行超時重傳、擁塞控制的核心依據(jù)。通過ping命令可以粗略測量到某個主機的RTT。利用率分為信道利用率和網(wǎng)絡利用率。信道利用率指某信道有百分之幾的時間是被數(shù)據(jù)利用的。網(wǎng)絡利用率則是全網(wǎng)絡所有信道利用率的加權平均值。根據(jù)排隊論網(wǎng)絡利用率并非越高越好當利用率接近1時排隊時延會急劇增加導致網(wǎng)絡性能惡化。這就像高速公路車流量達到設計容量時任何小事故都會導致嚴重擁堵。4. 網(wǎng)絡形態(tài)面面觀分類、拓撲與交換技術了解了骨架和指標我們來看看網(wǎng)絡有哪些不同的“長相”和“工作方式”。4.1 按作用范圍分類從身邊到全球個人區(qū)域網(wǎng)圍繞個人設備通常10米以內(nèi)。如藍牙連接手機和耳機Wi-Fi Direct傳輸文件。局域網(wǎng)覆蓋范圍較小1公里左右如公司、學校、家庭的內(nèi)部網(wǎng)絡。特點是高帶寬、低時延、低誤碼率、拓撲規(guī)整多采用星形、總線形。以太網(wǎng)和Wi-Fi是主流技術。城域網(wǎng)覆蓋一個城市作用范圍在5-50公里?？梢钥醋魇菍⒍鄠€局域網(wǎng)互聯(lián)起來的骨干網(wǎng)絡?，F(xiàn)在常被廣域網(wǎng)技術所替代。廣域網(wǎng)覆蓋國家、大洲乃至全球。核心任務是遠距離通信和路由選擇。特點是帶寬相對較低、時延高、誤碼率較高、拓撲復雜不規(guī)則。互聯(lián)網(wǎng)是最大的廣域網(wǎng)。4.2 網(wǎng)絡拓撲設備如何連接拓撲結構決定了網(wǎng)絡的物理或邏輯布局影響其可靠性、性能和成本。星形拓撲所有節(jié)點都連接到一個中心節(jié)點如交換機。優(yōu)點結構簡單易于管理和擴展單個節(jié)點故障不影響全網(wǎng)。缺點中心節(jié)點是單點故障源一旦故障全網(wǎng)癱瘓。總線形拓撲所有節(jié)點連接到一條共享的總線如同軸電纜。優(yōu)點布線簡單成本低。缺點故障診斷困難總線斷裂則全網(wǎng)癱瘓且存在信道爭用問題CSMA/CD機制就是為此而生。傳統(tǒng)以太網(wǎng)采用此結構。環(huán)形拓撲節(jié)點連接成閉合環(huán)。數(shù)據(jù)沿環(huán)單向或雙向傳輸。優(yōu)點沒有路徑選擇問題傳輸時間固定。缺點環(huán)上任一點故障都會導致全網(wǎng)癱瘓擴展性差。令牌環(huán)網(wǎng)絡采用此結構。網(wǎng)狀拓撲節(jié)點間有多條路徑相連。優(yōu)點可靠性極高容錯能力強存在多條冗余路徑。缺點結構復雜成本高昂管理和布線困難。廣域網(wǎng)的核心部分常采用網(wǎng)狀拓撲以提高可靠性。4.3 交換技術數(shù)據(jù)如何被轉發(fā)網(wǎng)絡中的交換方式?jīng)Q定了數(shù)據(jù)單元是如何從源到達目的地的。電路交換在通信開始前先建立一條專用的物理通路通信期間獨占該路徑的所有資源通信結束后釋放。典型例子傳統(tǒng)電話網(wǎng)絡。優(yōu)點傳輸時延小數(shù)據(jù)順序有保證。缺點建立連接時間長線路利用率低即使不說話也占著線路。報文交換以整個報文要發(fā)送的完整數(shù)據(jù)塊為交換單位采用“存儲-轉發(fā)”機制。每個節(jié)點接收整個報文檢查無誤后根據(jù)目的地址為它選擇下一跳路徑。優(yōu)點無需建立連接線路利用率高。缺點對節(jié)點存儲空間要求高時延大且不確定。早期電報網(wǎng)絡使用。分組交換將報文分割成若干個較小的、長度固定的“分組”或“包”每個分組獨立路由采用“存儲-轉發(fā)”機制。這是互聯(lián)網(wǎng)的基石。優(yōu)點高效動態(tài)分配帶寬逐段占用鏈路。靈活每個分組獨立選擇路由對故障適應能力強。迅速無需建立連接減少了建立連接的時延。可靠完善的網(wǎng)絡協(xié)議如TCP保證了可靠性。缺點分組在各節(jié)點存儲轉發(fā)會產(chǎn)生排隊時延且需要攜帶首部信息開銷。分組交換的兩種服務數(shù)據(jù)報服務網(wǎng)絡層向上傳輸層提供簡單靈活的、無連接的、盡最大努力交付的服務。每個分組獨立傳送不保證順序不保證可靠。IP協(xié)議提供的就是這種服務。它更簡單、更健壯。虛電路服務網(wǎng)絡層提供面向連接的、可靠的數(shù)據(jù)傳輸服務。通信前先建立一條邏輯上的連接虛電路所有分組沿同一條路徑傳送保證順序。通信結束后拆除連接。X.25、幀中繼、ATM網(wǎng)絡采用此模式。它更接近電路交換的體驗。實操心得理解分組交換是理解互聯(lián)網(wǎng)一切特性的起點?；ヂ?lián)網(wǎng)的“彈性”、“可擴展性”和“容錯性”都源于分組交換和“盡力而為”的IP服務。這也解釋了為什么我們需要TCP在傳輸層來彌補IP服務的不足如亂序、丟失從而為應用層提供可靠的字節(jié)流服務。5. 互聯(lián)網(wǎng)的組成與結構最后我們俯瞰一下整個互聯(lián)網(wǎng)的宏觀結構。互聯(lián)網(wǎng)從其工作方式上可以劃分為兩大塊5.1 邊緣部分資源子網(wǎng)由所有連接在互聯(lián)網(wǎng)上的主機端系統(tǒng)組成。這部分是用戶直接使用的用來進行通信傳輸數(shù)據(jù)、音頻視頻和資源共享。運行在主機上的程序之間的通信方式通常分為兩類客戶-服務器方式這是最經(jīng)典、最常用的方式。客戶是服務請求方服務器是服務提供方。服務器需要7x24小時運行擁有固定的IP地址通常位于數(shù)據(jù)中心。我們訪問網(wǎng)站、收發(fā)郵件都是這種模式。對等方式即P2P方式。通信雙方不區(qū)分客戶和服務器每個主機既可以是客戶也可以是服務器本質上是對等實體間的通信。這種方式可以充分利用網(wǎng)絡邊緣主機的資源計算、存儲、帶寬例如早期的BT下載、迅雷、以及一些視頻通話軟件。5.2 核心部分通信子網(wǎng)由大量路由器和連接這些路由器的高速鏈路組成。這部分為邊緣部分的主機提供連通性和數(shù)據(jù)交換服務其核心功能就是分組交換。數(shù)據(jù)在這里被高速轉發(fā)和路由?；ヂ?lián)網(wǎng)的層次化結構 今天的互聯(lián)網(wǎng)是一個極其復雜的網(wǎng)狀結構但并非完全無序。從運營角度它呈現(xiàn)出清晰的層次第一層 ISP國際或國家級骨干ISP它們之間通過高速鏈路直接互聯(lián)構成互聯(lián)網(wǎng)的“主干”。第二層 ISP區(qū)域性或國家級ISP它們通常是第一層ISP的客戶向更小的ISP或大公司出售帶寬。第三層 ISP本地ISP直接為最終用戶家庭、企業(yè)、學校提供接入服務。IXP互聯(lián)網(wǎng)交換點允許不同ISP的網(wǎng)絡在這里直接對等互聯(lián)交換流量而不必通過上層ISP繞行可以節(jié)省費用、降低時延。這種層次結構就像國家的公路系統(tǒng)有國家級高速第一層ISP省級公路第二層ISP縣鄉(xiāng)道路第三層ISP以及大型的交通樞紐IXP。數(shù)據(jù)包根據(jù)目的地址被路由器逐級轉發(fā)最終到達目的地。啃下第一章的“概述”就像是拿到了網(wǎng)絡世界的“地圖”和“語法規(guī)則”。它沒有教你具體的協(xié)議報文格式但它給了你理解所有協(xié)議的框架和視角。當你后續(xù)學習ARP如何工作、IP如何分片、TCP如何握手、HTTP如何請求時請時刻回想這張“地圖”它發(fā)生在哪一層它為上/下層提供了什么服務它使用的協(xié)議數(shù)據(jù)單元是什么它解決了什么問題帶著這些問題去學習你會發(fā)現(xiàn)計算機網(wǎng)絡不再是一堆枯燥的協(xié)議而是一個設計精巧、環(huán)環(huán)相扣的有機整體。這份從頂層構建起的理解將是你在后續(xù)深入細節(jié)、解決實際問題時最有力的武器。