99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Floodlight 控制器實(shí)戰(zhàn):從 PacketIn 到流表下發(fā)與排錯

Floodlight 控制器實(shí)戰(zhàn):從 PacketIn 到流表下發(fā)與排錯 簡介面向SDN初學(xué)者、網(wǎng)絡(luò)實(shí)驗(yàn)課程學(xué)習(xí)者以及需要搭建控制器環(huán)境的Java開發(fā)者這份資料圍繞開源SDN控制器Floodlight的安裝部署展開重點(diǎn)幫助讀者理解Floodlight在SDN網(wǎng)絡(luò)中的定位并完成基礎(chǔ)實(shí)驗(yàn)環(huán)境的準(zhǔn)備。壓縮包約64.72MB下載頁暫未提供具體文件總數(shù)與類型明細(xì)使用前可結(jié)合資源說明確認(rèn)內(nèi)容構(gòu)成。已有554人瀏覽學(xué)習(xí)說明其在SDN控制器入門與部署實(shí)踐方面具有一定參考價值。內(nèi)容圍繞安裝部署主題組織可幫助讀者在正式動手前建立環(huán)境準(zhǔn)備、依賴檢查與運(yùn)行驗(yàn)證的整體框架減少盲目嘗試。對于希望在Ubuntu等Linux環(huán)境中熟悉Floodlight部署流程、梳理安裝要點(diǎn)與常見問題的人而言可將其作為搭建實(shí)驗(yàn)平臺和后續(xù)配置練習(xí)的參考材料并為后續(xù)SDN實(shí)驗(yàn)與二次開發(fā)打下基礎(chǔ)。1. Floodlight 是什么一條 PacketIn 消息能幫你驗(yàn)證多少假設(shè)floodlight 進(jìn)場的時機(jī)通常很樸素你已經(jīng)能用 Mininet 拉起一堆虛擬交換機(jī)但不知道控制平面在背后做了什么想找個能改源碼、能掛自己模塊、還能用一條 curl 就把內(nèi)部狀態(tài)看清楚的 OpenFlow 控制器。Floodlight 就是這類工具里上手成本偏低的那個——純 Java、單進(jìn)程、自帶 REST 接口跑起來之后對外兩條主線一條面向交換機(jī)的 OpenFlow 通道一條面向人和腳本的 HTTP 接口。前者負(fù)責(zé)收 PacketIn、下 FlowMod后者負(fù)責(zé)讓你在不重啟進(jìn)程的前提下查看拓?fù)?、讀寫流表。它適合的讀者畫像很具體想把流表邏輯跑通一遍的網(wǎng)絡(luò)方向?qū)W生、要做控制器二次開發(fā)的工程師、需要給測試環(huán)境造一個可控控制平面的驗(yàn)證人員。它不承諾生產(chǎn)級高可用也不打算替你做集群選主但能把“我寫的轉(zhuǎn)發(fā)邏輯到底對不對”這件事壓縮到幾分鐘內(nèi)看到結(jié)果。下面從跑通、寫模塊、下發(fā)流表一路寫到排查按我自己搭環(huán)境的順序來。2. 從源碼到 8080 端口Floodlight 本地跑通的最小路徑2.1 構(gòu)建前的依賴清單JDK、Maven 與三個容易漏的環(huán)境項(xiàng)Floodlight 是 Maven 工程構(gòu)建鏈路上翻車最多的地方不在代碼在工具鏈版本。它多數(shù)分支的pom.xml把maven.compiler.source/target鎖在 1.8用 JDK 8 構(gòu)建最省事如果你機(jī)器上只有 JDK 11 以上會在編譯期撞到package javax.annotation is not declared這類錯誤原因是高版本 JDK 移除了部分 Java EE 模塊而老代碼還在直接引用。解決辦法兩條裝一個 JDK 8 并讓JAVA_HOME指過去或者手動往 pom 里補(bǔ)javax.annotation-api依賴。我一般選前者省得后面還有別的模塊踩同一個雷。Maven 這邊3.6.x 是比較穩(wěn)的選擇。3.8.1 之后默認(rèn)阻塞 HTTP 倉庫而一些老 pom 里的 repository 地址還寫著http://構(gòu)建時會直接報(bào)Blocked mirror for repositories。這不是網(wǎng)絡(luò)問題是 Maven 的策略變更。要么在settings.xml里給這個倉庫配一個放行規(guī)則要么把地址換成 HTTPS 鏡像。別急著重裝 Maven先看報(bào)錯里那行 URL 的協(xié)議頭。# 1. 確認(rèn) JDK 版本1.8 開頭最穩(wěn) java -version javac -version # 2. 確認(rèn) Maven 版本3.6.x 優(yōu)先 mvn -v # 3. 顯式指定 JDK 8避免 shell 里殘留的 JAVA_HOME 干擾 export JAVA_HOME/path/to/jdk8 export PATH$JAVA_HOME/bin:$PATH # 4. 跳過測試打包第一次構(gòu)建不建議跑全量單測 mvn clean package -DskipTests # 5. 產(chǎn)物確認(rèn)正常會生成 target/floodlight.jar ls -lh target/*.jar這段命令的邏輯是“先鎖版本、再打包、最后確認(rèn)產(chǎn)物”。第三步的JAVA_HOME覆蓋很關(guān)鍵很多人java -version看到的是 8但 Maven 用的是另一套 JDK因?yàn)閙vn腳本會讀JAVA_HOME而不是PATH里的java。第五步如果只看到original-floodlight.jar而沒有floodlight.jar說明 shade 或 assembly 插件沒跑完通常是依賴下載中斷刪掉本地倉庫里對應(yīng)的.lastUpdated文件重來。提示第一次構(gòu)建會拉大量依賴網(wǎng)絡(luò)不穩(wěn)時容易出現(xiàn)“編譯到一半缺包”的假成功。構(gòu)建完先看一眼 jar 體積幾百 KB 的量級基本意味著依賴沒打進(jìn)去。2.2 啟動命令與配置文件-cf 改的是哪幾個值Floodlight 啟動時靠一個 properties 文件驅(qū)動默認(rèn)讀 classpath 里的floodlightdefault.properties。想改端口、改加載模塊列表用-cf指定自己的配置文件別去改 jar 里的那份。啟動成功的標(biāo)志是日志里出現(xiàn) OpenFlow 監(jiān)聽端口的行和 REST 服務(wù)的啟動行這兩行沒出現(xiàn)后面所有操作都免談。配置項(xiàng)作用什么時候必須改net.floodlightcontroller.core.FloodlightProvider.openFlowPort交換機(jī)接入端口端口被占用或要和 Mininet 的--controller對齊net.floodlightcontroller.restserver.RestApiServer.portREST 服務(wù)端口8080 被別的服務(wù)占了floodlight.modules啟動時加載的模塊列表加了自己寫的模塊必須顯式登記net.floodlightcontroller.core.FloodlightProvider.keyStoreTLS 證書路徑只做明文本地實(shí)驗(yàn)時建議去掉相關(guān)配置# 用自定義配置啟動前臺運(yùn)行方便看日志 java -jar target/floodlight.jar -cf ./my-floodlight.properties # 后臺跑并留日志排查時用這個 nohup java -jar target/floodlight.jar -cf ./my-floodlight.properties \ floodlight.log 21 # 起來了沒有返回 [] 說明控制器活著但還沒有交換機(jī)接入 curl -s http://127.0.0.1:8080/wm/core/controller/switches/json-cf后面的路徑建議用絕對路徑相對路徑在nohup場景下會因?yàn)楣ぷ髂夸涀兓x不到。第二條命令里21不能省Floodlight 的異常棧大多打在 stderr只重定向 stdout 會讓你在日志里看到一片空白卻查不出原因。第三條 curl 是最輕量的存活探針?biāo)灰蕾嚾魏文K業(yè)務(wù)邏輯只要 REST 服務(wù)起來就有響應(yīng)返回空數(shù)組是正常狀態(tài)返回連接拒絕才是真出問題。2.3 第一次握手Mininet 建拓?fù)浜蟠_認(rèn)交換機(jī)真的上線了控制器空轉(zhuǎn)沒意義得讓它接上交換機(jī)。本地最省事的做法是用 Mininet 起一個線性拓?fù)浒?controller 指到本機(jī)。這里有兩個參數(shù)必須對齊端口和 OpenFlow 版本??刂破鞅O(jiān)聽 6653Mininet 就得連 6653控制器按 1.3 解析消息交換機(jī)就得用protocolsOpenFlow13起。這兩個對不上握手階段就會失敗日志里刷的是解析異常而不是連接拒絕容易被誤判成網(wǎng)絡(luò)不通。# 起一個 3 節(jié)點(diǎn)的線性拓?fù)浣粨Q機(jī)用 OpenFlow 1.3 sudo mn --controllerremote,ip127.0.0.1,port6653 \ --switchovsk,protocolsOpenFlow13 \ --topolinear,3 # 另一個終端里確認(rèn)交換機(jī)是否上線正常會返回 DPID 列表 curl -s http://127.0.0.1:8080/wm/core/controller/switches/json | python -m json.tool # 看某個交換機(jī)的流表把 dpid 換成上一步返回的值 curl -s http://127.0.0.1:8080/wm/core/switch/dpid/flow/json | python -m json.tool--controllerremote表示不啟動 Mininet 自帶的控制器ip和port指向你剛起的那個進(jìn)程。protocolsOpenFlow13是給ovsk交換機(jī)傳的不寫這個部分版本默認(rèn)按 1.0 建鏈。第二條命令返回的數(shù)組長度應(yīng)該等于拓?fù)淅锏慕粨Q機(jī)數(shù)量少一臺就去floodlight.log里搜那臺交換機(jī)的連接記錄。第三條命令是第一手調(diào)試手段流表里能看到priority、match、instructions三個字段后面所有下發(fā)動作的效果都要回到這里驗(yàn)證不要只看 ping 通沒通。3. 模塊機(jī)制為什么你的自定義模塊收不到 PacketIn3.1 IFloodlightModule 六個方法的職責(zé)邊界Floodlight 的功能全部由模塊拼起來一個類要實(shí)現(xiàn)IFloodlightModule就得回答六個問題。這套接口設(shè)計(jì)的好處是加載順序由容器管你只需要聲明“我依賴誰”不用操心誰先 new。壞處是錯一個方法就可能靜默不生效——不報(bào)錯但你的代碼就是不會被調(diào)用。方法容器什么時候調(diào)常見寫錯的地方getModuleServices掃描階段登記本模塊對外提供的服務(wù)返回 null 和返回空集合語義不同前者表示不提供服務(wù)getServiceImpls同上返回接口到實(shí)例的映射提供了服務(wù)卻沒在這里注冊實(shí)現(xiàn)類getModuleDependencies加載排序前聲明依賴的服務(wù)接口只寫了接口類名忘了 import 或?qū)戝e泛型init依賴就緒后拿context.getServiceImpl取服務(wù)在構(gòu)造器里取服務(wù)此時容器還沒注入startUpinit之后注冊監(jiān)聽器、啟動線程監(jiān)聽器注冊在這里最穩(wěn)不要放 initshutdown進(jìn)程退出前釋放資源起了線程池卻沒關(guān)熱重啟會殘留最容易出問題的是init和startUp的分工。init只做“取服務(wù)、存字段”不要在里面注冊消息監(jiān)聽器startUp才是注冊監(jiān)聽的正確時機(jī)因?yàn)榇藭r依賴的模塊已經(jīng)完成初始化順序有保證。我見過把a(bǔ)ddOFMessageListener寫在init里的寫法表現(xiàn)是模塊時好時壞取決于哪個模塊先加載這種時序問題排查起來很麻煩。3.2 寫一個最小 PacketIn 記錄模塊并掛上去目標(biāo)很小交換機(jī)發(fā)來的每個 PacketIn打印源 MAC、目的 MAC 和入端口。這段代碼不長但每一行都對應(yīng)上面表格里的一個方法可以當(dāng)作模板改。package net.floodlightcontroller.packetlogger; import java.util.Collection; import java.util.Collections; import java.util.Map; import net.floodlightcontroller.core.FloodlightContext; import net.floodlightcontroller.core.IFloodlightProviderService; import net.floodlightcontroller.core.IOFMessageListener; import net.floodlightcontroller.core.IOFSwitch; import net.floodlightcontroller.core.module.FloodlightModuleContext; import net.floodlightcontroller.core.module.FloodlightModuleException; import net.floodlightcontroller.core.module.IFloodlightModule; import net.floodlightcontroller.core.module.IFloodlightService; import net.floodlightcontroller.packet.Ethernet; import org.projectfloodlight.openflow.protocol.OFMessage; import org.projectfloodlight.openflow.protocol.OFPacketIn; import org.projectfloodlight.openflow.protocol.OFType; import org.projectfloodlight.openflow.types.OFPort; public class PacketLogger implements IFloodlightModule, IOFMessageListener { private IFloodlightProviderService provider; // 本模塊不對外提供服務(wù)返回 null 即可 Override public CollectionClass? extends IFloodlightService getModuleServices() { return null; } Override public MapClass? extends IFloodlightService, IFloodlightService getServiceImpls() { return null; } // 聲明依賴容器保證 init 之前 provider 已經(jīng)就緒 Override public CollectionClass? extends IFloodlightService getModuleDependencies() { return Collections.Class? extends IFloodlightServicesingletonList( IFloodlightProviderService.class); } Override public void init(FloodlightModuleContext context) throws FloodlightModuleException { this.provider context.getServiceImpl(IFloodlightProviderService.class); } Override public void startUp(FloodlightModuleContext context) { // 注冊監(jiān)聽放在 startUp依賴已完成初始化 this.provider.addOFMessageListener(OFType.PACKET_IN, this); } Override public void shutdown() { // 沒有線程池留空 } Override public String getName() { return PacketLogger; } Override public Command receive(IOFSwitch sw, OFMessage msg, FloodlightContext ctx) { OFPacketIn pi (OFPacketIn) msg; // 從上下文里取已解析的以太幀避免自己再解析一遍 Ethernet eth IFloodlightProviderService.bcStore.get( ctx, IFloodlightProviderService.CONTEXT_PI_PAYLOAD); OFPort inPort pi.getMatch().get(MatchField.IN_PORT); if (eth ! null) { System.out.println([PacketLogger] dpid sw.getId() in inPort src eth.getSourceMACAddress() dst eth.getDestinationMACAddress()); } // CONTINUE 表示交給后續(xù)監(jiān)聽器STOP 表示到此為止 return Command.CONTINUE; } Override public boolean isCallbackOrderingPrereq(OFType type, String name) { return false; } Override public boolean isCallbackOrderingPostreq(OFType type, String name) { return false; } }邏輯上有三處必須說清。第一receive里沒有自己去調(diào)parse解析字節(jié)流而是用bcStore取上下文里已經(jīng)解析好的Ethernet這樣性能和正確性都由框架保證第二返回值選Command.CONTINUE而不是STOP因?yàn)槲疫€想讓默認(rèn)的轉(zhuǎn)發(fā)模塊繼續(xù)處理這些包一旦返回STOP這個 PacketIn 就到此為止網(wǎng)絡(luò)會直接不通第三isCallbackOrderingPrereq和isCallbackOrderingPostreq都返回 false表示不干預(yù)和其他監(jiān)聽器的相對順序?qū)砣绻阋鶕?jù)流表判斷、必須跑在轉(zhuǎn)發(fā)模塊之前就要在這里對forwarding這個名字返回 true。注意pi.getMatch().get(MatchField.IN_PORT)需要 importorg.projectfloodlight.openflow.protocol.match.MatchField漏了這個 import 編譯期會報(bào)泛型推斷失敗報(bào)錯信息看著像類型問題實(shí)際只是少了一行。3.3 依賴聲明與加載順序模塊沒生效的三個原因代碼寫完了重啟控制器日志里一條[PacketLogger]都沒有。這是新手最常卡住的地方原因基本逃不出三種。第一種模塊沒登記。Floodlight 不會自動掃描 classpath 下的所有IFloodlightModule實(shí)現(xiàn)必須把類名寫進(jìn)配置文件的floodlight.modules列表用逗號分隔。加了新模塊卻沒改這行等于沒寫。第二種登記了但加載失敗。日志里會有一行加載異常但它往往被埋在幾千行 DEBUG 里。把日志級別臨時調(diào)高到 INFO或者直接grep -i PacketLogger floodlight.log能快速定位是構(gòu)造失敗還是依賴沒找到。第三種類沒打進(jìn) jar。這在自己加源碼、用mvn package重新構(gòu)建的場景下很常見——你改的是 IDE 里的源碼目錄跑的還是上一次構(gòu)建的 jar。判斷方式很簡單unzip -l target/floodlight.jar | grep PacketLogger看不到類文件就說明構(gòu)建沒帶上你。# 配置文件里顯式登記追加在原有模塊列表后面 # floodlight.modules ...,net.floodlightcontroller.packetlogger.PacketLogger # 構(gòu)建后確認(rèn)類真的進(jìn)了 jar unzip -l target/floodlight.jar | grep -i packetlogger # 啟動后確認(rèn)模塊被加載 grep -i PacketLogger floodlight.log | head -20這三條命令的順序就是排查順序先確認(rèn)配置登記再確認(rèn)產(chǎn)物包含最后確認(rèn)運(yùn)行時加載。跳過任何一步都可能白折騰半小時。4. 流表下發(fā)從 PacketIn 到 FlowMod 的完整閉環(huán)4.1 PacketIn 到達(dá)后你有三種處理方式交換機(jī)遇到匹配不上的包默認(rèn)動作是把它整個或頭部加一段發(fā)給控制器這就是 PacketIn。控制器收到之后有三個選擇選哪個決定了這條流量后面怎么走。第一種是泛洪也就是讓包從除入端口外的所有端口發(fā)出去適用于你還不知道目的端在哪的場景學(xué)習(xí)型交換機(jī)的初始行為就是這個。第二種是丟棄直接不回適合做策略阻斷。第三種是下發(fā)一條 FlowMod把“以后遇到同類型的包該怎么辦”寫進(jìn)交換機(jī)后續(xù)同流量的包不再上送控制器。第三種是真正把控制平面用起來的方式前兩種更像是調(diào)試手段。這里有個容易忽略的細(xì)節(jié)PacketIn 可能攜帶 buffer_id表示交換機(jī)把原始包暫存在本地緩沖區(qū)了。如果你下發(fā)的 FlowMod 帶上了同一個 buffer_id交換機(jī)會直接把緩存里那個包按新流表轉(zhuǎn)發(fā)出去不需要你重發(fā)如果帶的是OFP_NO_BUFFER那個包就丟了得等重傳。首包丟失在 TCP 場景下表現(xiàn)為建連慢半拍很容易被誤認(rèn)為“流表沒生效”。4.2 用 Java 構(gòu)造一條 FlowModMatch、Instructions、buffer_id下面這段代碼完成的事收到 PacketIn 后按“入端口 IPv4”匹配下發(fā)一條 30 秒空閑過期的流動作為從指定端口輸出。這是一個最小可用的轉(zhuǎn)發(fā)邏輯改匹配字段就能擴(kuò)展成別的策略。// 在 receive 方法內(nèi)部拿到 pi 之后 private void installFlow(IOFSwitch sw, OFPacketIn pi, OFPort outPort) { // 用交換機(jī)自己的 OFFactory保證版本和協(xié)商結(jié)果一致 OFFactory factory sw.getOFFactory(); Match.Builder mb factory.buildMatch(); // 精確匹配入端口避免影響其他端口進(jìn)來的同目的流量 mb.setExact(MatchField.IN_PORT, pi.getMatch().get(MatchField.IN_PORT)); // 只對 IPv4 生效ARP 等二層流量交給默認(rèn)邏輯 mb.setExact(MatchField.ETH_TYPE, EthType.IPv4); // 動作從指定端口輸出 OFAction output factory.actions().buildOutput() .setPort(outPort) .setMaxLen(0) // 0 表示不截?cái)?.build(); // 指令立即執(zhí)行上面的動作 OFInstruction applyActions factory.instructions().buildActions() .setAction(output) .build(); OFFlowMod flowMod factory.buildFlowAdd() .setMatch(mb.build()) .setPriority(32768) // 高于 table-miss 的 0 .setIdleTimeout((short) 30) // 30 秒無流量即刪除 .setHardTimeout((short) 0) // 0 表示不設(shè)絕對過期 .setBufferId(pi.getBufferId()) // 復(fù)用交換機(jī)緩存的原始包 .setInstructions(Collections.singletonList(applyActions)) .build(); sw.write(flowMod); }關(guān)鍵在sw.getOFFactory()這一行。不要用全局靜態(tài)的 factory也不要用按 OpenFlow 1.0 構(gòu)造的 builder 去給 1.3 交換機(jī)下發(fā)版本字段對不上會導(dǎo)致交換機(jī)回一個錯誤消息而控制器側(cè)只看到流表沒增加很容易誤判。setBufferId(pi.getBufferId())是首包不丟的關(guān)鍵pi.getBufferId()在交換機(jī)不緩存時會返回OFP_NO_BUFFER這時行為等同于不指定屬于安全寫法。setMaxLen(0)表示輸出完整包如果你在做抓包分析、只關(guān)心頭部可以設(shè)成 128 之類的小值來降低帶寬。4.3 用靜態(tài)流表 REST 接口手工下發(fā)curl 與字段對照不想每次改邏輯都重啟控制器就用 REST 的靜態(tài)流表接口。它是排查和驗(yàn)證流表字段的最快通道也是把“控制器邏輯”和“流表內(nèi)容”分開驗(yàn)證的好辦法。注意接口路徑在不同分支之間變過/wm/staticflowpusher和/wm/staticentrypusher兩種前綴都出現(xiàn)過先探一下哪個有響應(yīng)再發(fā)數(shù)據(jù)。# 先探測路徑返回 200 說明這個前綴可用 curl -s -o /dev/null -w %{http_code}\n \ http://127.0.0.1:8080/wm/staticflowpusher/json # 下發(fā)一條 IPv4 轉(zhuǎn)發(fā)流actions 里的 output2 表示從 2 號端口出去 curl -s -X POST \ -d { switch: 00:00:00:00:00:00:00:01, name: f-ipv4-01, eth_type: 0x0800, ipv4_src: 10.0.0.1, ipv4_dst: 10.0.0.2, priority: 32768, idle_timeout: 30, active: true, actions: output2 } \ http://127.0.0.1:8080/wm/staticflowpusher/json # 查已下發(fā)的靜態(tài)流確認(rèn)字段沒被吞 curl -s http://127.0.0.1:8080/wm/staticflowpusher/list/00:00:00:00:00:00:00:01/json \ | python -m json.tool # 用完刪掉避免殘留影響后續(xù)實(shí)驗(yàn) curl -s -X DELETE \ -d {name:f-ipv4-01,switch:00:00:00:00:00:00:00:01} \ http://127.0.0.1:8080/wm/staticflowpusher/json字段對照關(guān)系要記牢switch是交換機(jī)的 DPID也就是dpid的十六進(jìn)制形式name是這條流的唯一標(biāo)識刪除時必須帶active是字符串true而不是布爾值寫成布爾會被靜默忽略actions是一段用逗號分隔的動作串outputN里的 N 是交換機(jī)端口號不是主機(jī)編號。返回體里如果是status:Entry pushed就說明成功如果是could not be pushed先檢查字段名拼寫——1.0 和 1.3 的匹配字段名不通用。4.4 優(yōu)先級、idle_timeout、buffer_id 三個必調(diào)參數(shù)參數(shù)取值范圍設(shè)錯的典型后果我一般怎么設(shè)priority0 到 32768比已有流低導(dǎo)致永不命中業(yè)務(wù)流 32768table-miss 固定 0idle_timeout秒0 表示永不過期設(shè)太短導(dǎo)致流反復(fù)重建、控制器 CPU 高實(shí)驗(yàn)環(huán)境 30演示環(huán)境 300buffer_id交換機(jī)分配或OFP_NO_BUFFER用錯導(dǎo)致首包丟失、TCP 建連慢直接用 PacketIn 攜帶的值priority的坑在于它是全局比較而不是按表比較在單表場景下一條 priority 為 100 的寬匹配流會擋住后面所有 priority 更低的精確流。table-miss 那條流必須保持 priority 0、match 為空它決定的是“沒命中任何流轉(zhuǎn)發(fā)控制器”這個兜底行為刪了它交換機(jī)遇到未知包會直接丟表現(xiàn)為新連接全部失敗但已有連接正常非常具有迷惑性。idle_timeout的坑在于它是空閑計(jì)時不是生存計(jì)時。有人設(shè) 5 秒想“快速回收資源”結(jié)果低頻心跳流量每小時才來一次流表里那條記錄反復(fù)被刪了重建控制器側(cè)日志刷得飛快。實(shí)驗(yàn)環(huán)境下 30 秒足夠演示環(huán)境建議 300 以上寧可多留一會也別讓它頻繁抖動。buffer_id的坑上面提過這里補(bǔ)一個排查技巧如果懷疑是首包丟失導(dǎo)致的建連慢先在receive里打印pi.getBufferId()和pi.getTotalLen()交換機(jī)不緩存時會明確給出OFP_NO_BUFFER這種情況你只能靠重傳不是代碼寫錯了。5. 排查交換機(jī)連不上、流表不生效的六個坑5.1 連接層的三個坑端口、版本與加密坑一交換機(jī)一直重連日志里是握手失敗?,F(xiàn)象是 Mininet 起來后pingall全丟控制器日志里反復(fù)出現(xiàn)連接建立又?jǐn)嚅_的記錄但沒有任何業(yè)務(wù)日志。原因通常是 OpenFlow 版本不匹配Mininet 的交換機(jī)默認(rèn)按 1.0 建鏈而控制器這邊按 1.3 解析雙方在 hello 階段商量不出共同版本直接斷開。解決是給 Mininet 顯式加protocolsOpenFlow13或者在控制器配置里允許 1.0。判斷依據(jù)很簡單看斷開前的最后一條日志里有沒有版本號字段??佣丝趯戝e連的是沒人監(jiān)聽的地址?,F(xiàn)象比坑一更安靜Mininet 側(cè)沒有任何報(bào)錯控制器側(cè)連一條連接記錄都沒有。原因是--controllerremote,ip...,port...里的端口和配置文件里的openFlowPort不一致常見組合是 6633 和 6653 混用。老版本默認(rèn) 6633新版本默認(rèn) 6653Mininet 不同發(fā)行版的默認(rèn)值也不一樣。解決是先ss -lntp | grep java確認(rèn)進(jìn)程真實(shí)監(jiān)聽的端口再把這個數(shù)字抄到 Mininet 參數(shù)里不要憑記憶。坑三控制器要加密連接交換機(jī)只會明文?,F(xiàn)象是 TCP 能連上但握手階段立刻斷開日志里出現(xiàn)證書或 TLS 相關(guān)字樣。原因是默認(rèn)配置里帶了 keyStore 路徑控制器啟動時生成了自簽證書并要求加密通道而 Mininet 的交換機(jī)默認(rèn)走明文。解決是在自己的配置文件里把 keyStore 相關(guān)項(xiàng)刪掉或置空重啟控制器。這個坑的隱蔽之處在于TLS 失敗和版本失敗的表面現(xiàn)象很像都是連上就斷只能靠日志里的關(guān)鍵字區(qū)分。5.2 轉(zhuǎn)發(fā)層的三個坑table-miss、ARP 與殘留流坑四流表查得到但 ping 就是不通?,F(xiàn)象是 REST 接口能查到剛下發(fā)的那條流match和instructions都正確但流量不命中。原因多半是 table-miss 那條兜底流被刪了或者 priority 被改過導(dǎo)致交換機(jī)遇到需要上送控制器的包直接丟棄ARP 請求根本到不了控制器自然也就沒有后續(xù)的流表下發(fā)。解決是確認(rèn) table-miss 存在且 priority 為 0或者干脆重啟控制器讓它重新下發(fā)默認(rèn)流。排查時先看 ARP 通不通再看 IP順序反了會浪費(fèi)很多時間。坑五IP 流表寫了但 ARP 沒人管主機(jī)學(xué)不到 MAC?,F(xiàn)象是流表里 IPv4 轉(zhuǎn)發(fā)規(guī)則齊全但主機(jī)側(cè) ARP 表一直是 incompleteping 直接報(bào)“目的主機(jī)不可達(dá)”。原因是你的模塊只處理了 IPv4 的 PacketIn把 ARP 的包也一并STOP掉了或者沒有讓默認(rèn)轉(zhuǎn)發(fā)模塊接手。解決是把receive的返回值按包類型區(qū)分非 IPv4 的包一律返回CONTINUE讓默認(rèn)邏輯去泛洪。這個坑的典型特征是“流表看起來完美網(wǎng)絡(luò)就是不通”??恿牧诉壿嬛貑⑴f流表還在新邏輯不生效?,F(xiàn)象是代碼改了、jar 換了、進(jìn)程重啟了行為卻和改之前一模一樣。原因是流表存在交換機(jī)側(cè)控制器重啟不會清空它們舊的高優(yōu)先級流還在生效新下發(fā)的流因?yàn)閮?yōu)先級相同或更低永遠(yuǎn)不會被匹配到。解決是重啟后先對每臺交換機(jī)做一次全量清流再驗(yàn)證新邏輯。清流之后建議先pingall跑一遍確認(rèn)兜底路徑正常再去看具體策略。# 清空某臺交換機(jī)的全部流表謹(jǐn)慎使用會短暫中斷該交換機(jī)上的所有轉(zhuǎn)發(fā) curl -s -X GET http://127.0.0.1:8080/wm/core/switch/00:00:00:00:00:00:00:01/flow/clear/json # 確認(rèn)流表已空 curl -s http://127.0.0.1:8080/wm/core/switch/00:00:00:00:00:00:00:01/flow/json \ | python -m json.tool清流這個動作要養(yǎng)成習(xí)慣它相當(dāng)于給自己留了一顆后悔藥任何“改了不生效”的懷疑先用它排除交換機(jī)側(cè)殘留再去查代碼。跳過這一步直接讀代碼經(jīng)常是讀了兩小時發(fā)現(xiàn)邏輯沒錯只是舊流沒刪。6. 進(jìn)階把 REST 接口串成回歸腳本驗(yàn)證下發(fā)是否真的生效手工 curl 在驗(yàn)證階段夠用但當(dāng)你開始反復(fù)改模塊邏輯就需要一個能一鍵回答“這次改動有沒有破壞原有行為”的腳本。我的做法是用 Python 寫一個小回歸器只做三件事下發(fā)前清流、下發(fā)后輪詢流表確認(rèn)條目存在、跑一次連通性檢查。它不追求覆蓋所有場景但能把“看起來成功了”和“真的成功了”區(qū)分開。import json import time import requests BASE http://127.0.0.1:8080 DPID 00:00:00:00:00:00:00:01 def clear_flows(): # 清空指定交換機(jī)的流表避免上一輪殘留干擾 requests.get(f{BASE}/wm/core/switch/{DPID}/flow/clear/json, timeout3) def flow_exists(cookie_prefix): # 輪詢交換機(jī)流表按 cookie 前綴匹配確認(rèn)下發(fā)的流真的落地 for _ in range(10): resp requests.get(f{BASE}/wm/core/switch/{DPID}/flow/json, timeout3) flows json.loads(resp.text).get(DPID, {}).get(flows, []) for f in flows: if f.get(cookie, ).startswith(cookie_prefix): return True time.sleep(0.5) # 交換機(jī)寫入有延遲別只查一次 return False if __name__ __main__: clear_flows() time.sleep(1) # 這里換成你自己的下發(fā)邏輯或者直接走靜態(tài)流表接口 print(flow landed:, flow_exists(0x0))腳本里有兩個細(xì)節(jié)值得說。一是time.sleep(0.5)加輪詢而不是查一次就下結(jié)論交換機(jī)寫入流表到 REST 接口能查到之間有毫秒級延遲單次查詢會偶發(fā)誤判這種偶發(fā)失敗最消耗排查時間。二是按 cookie 前綴匹配而不是按名字因?yàn)殪o態(tài)流表接口和模塊下發(fā)的流在字段上不完全一致cookie 是兩邊都能設(shè)且不參與匹配的字段適合當(dāng)標(biāo)記位。三種驗(yàn)證手段的取舍可以對著下表選手段能看到什么開銷適合階段控制器日志打印模塊是否被調(diào)用、參數(shù)是什么低但需要改代碼開發(fā)期定位邏輯分支REST 查流表交換機(jī)側(cè)實(shí)際生效的條目低無需改代碼每次下發(fā)后的必查項(xiàng)端到端連通性測試數(shù)據(jù)面是否真的通中要起拓?fù)涮峤磺暗淖罱K確認(rèn)我踩過最貴的一次坑是只看了日志就認(rèn)為功能正常——日志里模塊確實(shí)被調(diào)用了參數(shù)也對但下發(fā)的那條流因?yàn)閮?yōu)先級和已有的 table-miss 撞了交換機(jī)根本沒執(zhí)行。日志是控制器的視角流表是交換機(jī)的視角這兩個視角不一致的時候永遠(yuǎn)以交換機(jī)為準(zhǔn)。后來我給自己定了個規(guī)矩任何涉及流表的改動必須同時有日志、流表、連通性三樣證據(jù)缺一樣就先別提交。希望這些步驟能幫你在自己機(jī)器上把這套東西跑順少走幾段我走過的回頭路。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色婷婷电影网| 欧美A级成人婬片免费看理论| 色婷婷影视99| 五月噜噜| 亚洲超碰在线| 丁香五月激情欧美| 江苏少妇性BBB搡BBB爽爽爽| 99热.com| 97在线刺激| 欧美视频在线观看噜噜| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | www.久久综合| 91综合视频在线| 另类视频五月天| 日韩黄色网络| 五月丁香综合啪啪| 国产亚洲色婷婷久久99精品91| 色五月天.con| 91丨九色丨白浆秘| 狠狠爱婷婷丁香| 九九热免费视频| 日韩色色视频| 69午夜成人影片| 美女被操一区二区| 97色色色| 丁香五月首页| 成人综合AV| 五月婷六月丁香| 大香久久综合网| 婷婷五月在线视频| 欧美在线| 少妇出轨做爰高潮A片| 97色色综合| 九九热只有这里是精品| 77799热| 久久综合婷婷五月| 激情綜合網址| 欧美 日韩 成人 在线| 婷婷视频在线| 丁香五月天BBw| 九九国产精视频| 青青草视频免费观看| 国产激情综合| 亚洲激情另类| 国产亚洲精品久久久久久郑州| 色婷视频| 六月色婷婷| 另类 在线| 久久人妻www| www.minyis.com【JT】币址百万U预算可预付QQ2101460746 | 狠狠干在线| 成人AV在线中文版| 免费观看日韩成人av| 婷婷五月天成人| 成人精品在线观看| 亚洲成人综合在线| 亚洲亚洲人成综合网络| A片天天| 很很干五月天| 天天久综合| 日韩在线aaa| 激情小说之五月| 五月综合在线婷婷图片| 99久久久国产精品免费蜜乳tv| 亚洲欧洲自拍图片专区五月天| 99er这里只有精品| 婷婷综合激情五月综合| 丁香欧美| 色色色热| 激情婷婷五月| 激情人妻蜜夜系列区| 六月成人网| 天天揷综合网| g00d人体西西| 他改变了拜占庭| 99热99ai| 激情五月,色播五月| 九九色院| 99久久丝| 五月丁香在线看| 99色性爰网络| 五月丁香综合| 五月丁香六月停停停| 中文在线视频久9| 一级二级色大片| 亚洲激情综| 激情婷婷综合网| 碰碰人人漕| 五月色网| 99亚洲无码| 婷婷五月综合体验看| 色99视频| 99网| 9精品视频在线| 亚洲另类婷婷综合| 日日操,天天操| 五月婷婷丁香狠狠撸久久| 亚洲VA在线| 欧美黄色AA片哗啦啦啦| 五月丁香色色网| 色五月,com| 狠狠九九婷婷韩| 九月婷婷久久| 日本久久爱| 婷婷欧美综合| 九九色中文| 九九色综合网| 五月天激情视频网站| 欧美性爱五月天| 深夜激情网| 亚洲这里只有精品| 91婷婷在线| 五月婷婷综合网| 婷婷五月激情四射手| 99色免费| 色五月婷婷婷婷| 久久五月天色婷婷| 国产SUV精品一区二区883| 超碰2021| 国产精品国产VA片国产| 91婷婷色五月| 综合激情在线观看| 婷婷丁香五月天在线| 成人婷婷| 青青草婷婷久久| www.激情在线| 色综合综合色| 爱iii做iiii日| 综合网色| 91青娱乐青青草| 99这里只有精彩视频| 狠狠爱综合| 91在线观看九区| 99久久久| 六月丁香啪啪啪| 激情五月影院| 欧美 日韩 成人 在线| 热99只有精品| 精品无码久久久久久久久| 丁香六月av| 狠狠干总合| 色玖玖综合网| 吊色AV男人的天堂| 色播五月婷婷| 久久九九婷婷| 色噜噜五月天| 69人人操人人爽| 婷婷五月天国产手机在线视频观看| 99性感视频| 五月婷婷在线免费观看| 伊人青草成人| 久久婷婷色色| 欧美25p| 色综合爽| 婷婷丁香成人网址| 看片视频在线免费日产在线看| 婷婷之六月丁香| 五月丁香婷婷婷婷综合网| 综合久色五月| 色婷婷五月亚洲| 五月丁香天天| 色婷婷社区| 99精品久久久久| 国精产品一区一区三区有限公司杨 | 91无码视频| 久久99热久久99精品| 欧美爆乳一区二区三区| 激情五月丁香亭亭 | 丁香五月婷婷久久综合激情网 | 大陆极品少妇内射AAAAAA| 天天插天天干| 亚洲成人综合网在线免费观看| 丁香五月天亚洲综合| 思思热视频在线观看| 丁香5月啪啪| 五月色网| 国产成人+综合亚洲+天堂| 人人摸人人干| 国产精品视频网| 精品99在线| 综合亚洲六月婷婷在线| 99热9| 亚洲日韩欧美综合VA| 亚洲六月色婷婷| 中文字幕人妻熟女在线| 婷婷综合一二三| 日日噜人人人做人| 婷婷六月丁香五月| 丁香五月天啪啪| 色哟哟精品| 九九热在线视频,| 色五月婷婷天天操夜夜操| 99A级片| 超碰人妻在线| www91在线| 亚城区在线| 综合五月天| 成人五月天。COM| 久久婷婷五月天蜜桃| 久热视频这里只有精品68| 99性视频| 超碰人人妻| 99热主页日本| 色99日韩| www.综合久久.com| 五月情色天| 亚洲无AV在线中文字幕| 伊人网欧美在线男人天堂五月丁香 | 久色成人| 成片免费播放| 久热一本| 色五月首页| 精国产品一区二区三区A片| 婷婷99中文字幕| 亚洲欧美成人在线| 99热精品在线| 天天AV导航网| 丁香婷婷基地| 97av在线视频| 久久九九综合| 色色色色热热| 亚洲日本三级片| 丁香五月天在线| 色五月婷婷在线观看第一页舔| 六月丁香婷啪射| 国产亚洲精品AAAA片APP| 91婷婷丁香五月天免费视频网站| AA片在线观看视频在线播放 | 五月色丁香激情| 丁香六月啪啪| 丁香婷五月| 天天插天天射| 26uuu视频欧美| 色婷婷丁香五月天| 天天色情站| 六月色婷婷| 五月天色婷婷伊人网| 婷婷五月天免费99| 999热在线视频| 操一区| 日本二级毛片二级毛片| 激情综合网五月婷婷| 久久一级片| 最新va在线播放| 成人精品在线观看| 色婷婷四虎| 怡红院视频| 青草激情在线| 久久永久网址| 美国天天操无码| 中文字幕永久免费| 五月丁香婷婷久久| 伊人玖玖网| 深爱激情AV| 一级操逼大片| 操一区| 九九無妻| 久久精品亚洲热| 丁香五月婷婷深五月| 97超级碰碰碰| 99碰在线视频| 丁香五月激情综合| 玖玖综合网| 欧洲一区二区| 婷婷激情九月| 九九色黄色| 噜噜视频| 96丁香六月婷婷蜜桃综合久久| 99er国产| 五月天天丁香婷婷在线中| 丁香久久九九99| 久久五月天精品视频| 性爱久久| 婷婷97狠狠成人网站| 激情丁香五月| 五月婷丁香花| 日韩无码人妻一区二区三区综合| 青青草蜜臀| 五月天久久婷婷| 国产免费一区二区三州老师F1F1……| 日本视频久久| 色色com| 伊人五月综合网| 天天日天天舔| 成人视屏在线观看| 99热这里只有精品22| 开心五月深爱五月| 美欧成人视频| 色色色网站| 新97人人上人人| 五月丁香啪啪| 成人做爰高潮A片免费视频| 能看的av网站| 免费观看18视频网站| 婷婷五月丁香91| 大香人妻| 99热这里都是精品| 深爱激情小说五月婷婷| 色在线视频网2025| 男人的天堂五月丁香| 五月丁香婷婷成人网| 激情五月色播五月| 九九精品免费| 日韩AV无码影片| 九九伦子片| 第四色网婷婷| 亚洲艹网| 丁香五月婷婷综合精品素人| 久久五月天综合| 噼里啪啦在线观看免费完整版视频| 中文字幕精品无码一区二区| 視频福利乱色| 五月大香蕉| 亚洲色激情| 超碰免费人人| 婷婷五月综合社区在线| 99热思思久| 狠狠色婷婷7| 丁香五月激情啪啪| 色哟呦av| 婷婷五月天av| 噜啊噜在线| 丁香五月影院| 久久久九九九 99| 婷婷丁香熟妇综合网| 五月丁香亚洲婷婷| 中字幕视频在线永久在线观看免费| 色九月综合| 97人妻碰碰中文无码久热丝袜| 另类五月婷婷| 天堂网色色| α久久| 婷色五月天| 婷婷伊人綜合| 五月情色天| 精品无码久久久久久久久| 精品九九婷婷| 激情五月丁香六月综合AVXXXX| 天天插天天插| 久久五月天综合视频网站| 激情五月婷婷开心网| 开心激情站| 激情久久 婷婷| 精品无码99| 日韩免费视频| 五月色情婷婷开心五月色情| 天天天干夜夜夜操| AV动漫不卡无码免费| 婷婷五月天黄色小说| 婷婷字幕在线| 激情五月天开心| 五月停亭久久电影| www激情婷婷com| 久久久全国免费视频| 成人色五婷婷| 国产 亚洲 在线| 99精品久久久久久久婷婷| 日本毛片内射| 91丨九色丨白浆| 婷婷色在线视频| 91超碰在线观看| 婷婷伊人网| 开心五月深爱五月| 天天色天天噜| 五月丁香亭亭AV女优| 综合色激情| 天天肏视频| 99 r热| 久/久精品99看9| 五月丁香五月丁香| 久久久全国免费视频| 婷婷五月丁香网| 中文字幕97超级碰| 99热精品在线在线| 五月天婷婷亚洲| 五月 激情视频| 亚洲热视频在线| 亚洲色爽| 激情综合九月| 亚洲天堂AV综合网| 婷婷五月情| 啪啪啪啪五月天| 久久婷婷综合五月| 色色操| 情婷婷五月天| 成人片在线播放| 成人午夜天| www99热| 亚洲操操| 日本久久婷婷| 日本色色影院| 久久免片| 日韩五月丁香| site:wpjngj.com| 国内自拍1区| 色综合99| 91色久| 夜夜操夜夜操| 色综色五月天婷婷| 欧美丁香六月在线观看视频| 久久五月天色婷婷| 一本到不卡高清DVD| 婷婷五月六月丁香| ww久久| 亚洲妇女熟BBW| √天堂资源在线人妻熟女| 桃色激情婷婷伊人网| 大香蕉五月天| 碰超99| 99色免费| 影音先锋91男人资源在线播放| 国产精产国品一二三在观看| 男同91 | 在线成人网址| 色五月婷婷少妇人妻| 99热爱爱干干日| 9久热在线视频| 久热免费视频| 五月天婷婷青青草| 国产乱人偷精品人妻A片| 亚洲六月综合激情久久下卡| 丁香六月天| 国产精品成人在线| 狠狠干综合| 欧美99| 91久操| 丁香婷婷五月| 欧美日韩成人在线| 久久婷婷五月丁香蜜桃网| 亚洲第一综合| 26uuu色五月| 国产婷婷五月| 丁香激情久久| WWW五月天| 亚洲五月天伊人| 开心五月婷婷激情网| 久久人妻视步| 超碰二区| 日本熟妇乱妇熟色A片蜜桃| 99在线观看免费精品视频| 久久 婷婷 五月天| 国产26uuu视频| 99热日韩| 久久久这里有精品| 99亚洲精品| 婷婷丁香五月天综合在线日韩| 91色碰| 开心婷婷五| 五月丁香婷婷综合激情基地| 色婷婷五月视频| 久久久五月天| 免费无码毛片一区二区A片| 狠狠狠狠狠狠| 丁香五月婷婷亚洲另类| 五月激情五月丁香| 99热这里只有精品3| 色色五月天激情| bukadeavzaixian| 五月天色色色| 婷婷五月天激情免费在线观看| 人人干99| 男同色五月开心五月激情五月| 99热这里在线精品| 丁香色五月天| 色色网站免费观看| 成人av免费观看| 亚洲电影中文字幕| 激情五月天www| 丁香五月天堂网| 91色噜噜狠狠狠狠色综合| 国产激情久久久| 五月婷婷|欧美| 九九视频这里只有精彩| 丁香六月激情| 无人区码一码二码三码医生系列| 99re在线视频| 《蜘蛛女》梁铮1995| 婷婷五月天成人网| 成人操呦av| 久久五月综合| 人人叉久| 99国产精品久久久久久久久久久 | 狠狠操综合| 香蕉久久av一区二区三区| 丁香五月婷婷亚洲色图| 婷婷六月色开| 国产伊人大香蕉| 五月综合激情视频| 亚洲色99综合天堂| 99热九九在线| 久久99免费视频| 综合色五月亭亭| www.五月天婷婷姐姐| 色综合丁香| 99热加勒比| 精品婷婷| 天天爽夜夜爽夜夜爽精| 538在线精品| 五月丁香色五月| 成人做爰A片免费看网站找不到了| 人人爱干人人爱草| AA片在线观看视频在线播放| 久久激情五月网| 91 久热| 亚洲免费av在线| 色色五月婷婷| 国产毛片欧美毛片久久久| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 亚洲乱啪| 亚洲成人免费在线| 丁香五月天激情小说| 婷婷伊人综合| 中文字幕 码精品视频网站| 五月丁香综合网| 99re思思| 91美女啪啪| av在线中文| www.激情| 99思思热只有在这里看| 在线观看的av| 丁香五月婷婷综合啪啪| 丁香久久综合| 六月丁香婷婷亚洲中文玖玖| 色九九综合色| 婷婷色五月激情强奸四射| 亚洲婷婷五月天在线激情综合网| 97超级碰| 亚洲操B| 激情六月天| 婷婷五月天激情在线观看 | 久久99精品久| 婷婷99视频在线| 婷婷综合| 在线中文av| 色噜噜在线| 91九色丨国产丨爆乳| 任你搞免费视频观看| 日本人妻A片成人免费看片| 快色t v在线入口| 亚洲av免费在线| 亚洲xx在线| 亭亭五月激情亚洲在线| 久久xx| 666555。COm毛片| 超碰亚洲天堂| 可以免费观看的AV| 天天色综合网1| 情五月亚洲婷婷| 欧美精产国品一二三区| 婷婷爱爱蜜臀天天操| 五月婷av| 久久久九九视频精品18| 91打屁股免费看| 婷婷四色五月| 丁香六月婷婷色XXXXX| 五月婷婷激情中文字幕| 日韩在线观看亚洲| 五月婷婷激情| 久久色婷婷| 99精品免费| 久久ab| 99免费视频网| 激情久久久久久久久久久| 五月婷婷丁香综合| 99热在线观看免费| 五月婷狠狠| 丰滿爆乳一区二区三区| 丁香操逼| 五月婷婷激情日本| 色色综合五月| 综合精品99| 婷婷五月天激情综合| AV五月丁香| 色色色综合色| 狠狠干狠狠色| 五月花综合| 五月在线婷色| 九色视频这里只有精品| 丁香五月天视频在线播放| 九九亚洲小视频| 欧美性爱5月天天天看| 成人操呦av| 天天综合图片| 婷婷激情六月视频| 开心五月婷婷| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | AAAA网站| 99免费在线| 国产精品久久久久久久久久免费| CAoub青青超碰| 97人妻碰碰碰碰碰久久久久久| 99久久久久久| 九九人人操| 亚洲婷婷综合视频| 4438激情网| 婷婷丁香五月天综合网| 国产操碰| 亚洲视频在线观看区| 99色视频| 五月丁香在线观看| 能看的av| 综合网狠狠| 国在线激情网| 丁香五月激情综合| av在线免费播放观看| 大香网伊人久久综合| www,婷婷五月天,com| 丁香五月手机在线| 丁香五月婷婷亚洲色图| 激情婷婷综合五月少妇| 天天爽天天| 日韩无码人妻一区二区| 久久人妻久久| 婷婷婷狠狠| 婷婷成人网五月天| 4399在线日本A片| 97色色色| 老妇操B| 操草草草| 丁香花五月天| 91呦呦呦| 欧美黄色AA片哗啦啦啦| 五婷婷综合网| 五月色丁香国产在线视频| 久久五月激情| 丁香五月香蕉| 操一区| 午夜丁香综合婷婷| 亚洲网视屏| 男人天堂99| 丁香五月六月综合激情| 中文字幕综合| 久热这里只有精品6| 九月婷婷综合| 人妻久久婷婷| 99亚洲天堂| 久久五月天婷婷| www.日韩国产| 天天久久狠狠色综合| 五月婷婷中文字幕| 激情综合五| 97色婷婷| 色婷婷激情视频| 99热免费18| 另类激情五月在线视频欧美| 91av无码| 五月天桃色深爱网| 一区二区三区四区五区| AV亚洲在线| 亚洲色激情| 丁香五月 性爱| 91视频五月丁香| 思思热天天看| 99视频日韩| 激情丁香九九五月综合网| 五月丁香综合激情| 麻豆雪千夏| 97人人草| 九九在线91| 六月亭亭久久综合激情| 亚洲激情五月| 色五月成人| 天天更新天天亚洲| 99亚洲视频| 亚洲经典三级| 98色花堂98t.R| 五月大香蕉| 久久久久人妻精选| 永久思思热在线| 9久热精品在线视频| 五月丁香婷中文| 亚州精品久久久久AV无码| 秋霞A V毛片| 韩国中文字幕91| 99热| 综合激情网激情五月。| 婷丁香五月天| 色婷婷影视| 亚洲啪啪网| 亚洲亚洲人成综合网络| 久久狠狠干| 色 色 色综合com| 天天综合亚洲综合| 99热在线爱| 激情文学第四色婷婷丁香五月| 91妻人人爽人人看片| www.色婷婷| 97干在线观看视频| 婷婷色片| 欧美日韩成人在线网| 吉澤明步Av一區二區| 琪琪色网址| 天天插天天射| 狠狠草在线观看| 久久99热 这里有精品| 中国女人做爰A片| 99爱精品| 国产国产乱老熟女视频网站97| 激情99| 婷婷在线中文字幕| 狠狠草狠狠草| 色色色综合网| 色色a| 超碰在线观看9| 欧美啪啪9| 99色色网| 色婷五月天| 99国产er热视频| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 精品人妻一区| 狠狠摸狠狠摸| 高清无码视频网址| 在线另类| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 97视频91| 免費亭亭成人| 日本系列_4页_777FP| 99热线观看9| 天天综合网91| 波多野结衣AV无码Porn| 91在线日本| 午夜日日| 中文字幕日韩成人| sisi热国产| 天天色综合综合| 噜噜吧天天爱| 99爱爱| 色色色色色色色五月| www.99热这里精品| 久久3p| 久久婷婷成人| 这里只有精品99视频| 婷婷五月天激情综合深爱激情| 激情五月婷婷综合| 精品无码久久久久久久久| 成人精品视频99在线观看免费| 中文字幕不卡网站| 久久永久网址| 人人干av| 成人五月天综合网| 色五月婷婷激情综合网| 亚洲婷婷免费| 天天弄天天操| 在线五月婷婷小电影| 97丁香视频| 亚洲免费99| 无码色色| 婷婷五月天影院| 亚洲成人在线在线| 性色人人爽| 色色色热| 丁香五月 激情文学| 婷婷色五月天第7色| 二色AV| 亚洲超级碰| 久久综合天天综合| 怡红院视频| 午夜九九九九九九九九九九九九九| 五月天黄色激情小说| 超碰人人摸人人操| 五月婷婷成人w| 97人人干| 五月婷久久| 成人电影丁香六月天| 在线观看日韩12345区| 三十路磁力链接| 色五月综合网| 涩涩涩婷婷| 五月婷婷激情综合| 99精品视频在线6| 亚洲爆乳无码精品AAA片蜜桃| 午夜大香蕉| 婷婷综合激情| 五月激情开心婷婷| 国产黄色在线观看| 亚洲热久久| 日韩啪图| 五月婷婷综合视频| Www.久久| 婷婷五月草| 婷婷五月天堂| 色情综合网| 综合激情深爱| 黄色五月婷| 影视av久久久噜噜噜噜噜三级| 天堂中文国产| 色婷婷成人做爰A片免费看网站| 婷婷五月精品在线| 99热在线播放精品| 婷婷亚洲综合| va婷婷在线| 九一牛视频探花| 五月丁香久人妻中文| WWW,五月天| 影音先锋AV资源男人站| 9 1超碰九色| XXXX岛国| 91九九热| 色5月婷婷| 丁香六月久久| \\五月天婷婷激情| 97精品自拍| 中文超碰视在线| 狠狠做婷婷| 九九精品视频在线观看| 九九色中文| 色婷婷av综合网| 狠狠干天天日| 色情五月婷| 五月天婷婷深深爱| 99资源在线视频| 深爱激情五月天| 五月色天情| 久鲁鲁色网 | 国产在线aaa片一区二区99| 五月天婷婷AV| 婷婷五月天堂一本在线| 天天综合久久| 色热久资源| 久久天堂加勒比| 91色五月在线观看| 九九99九九精品免费 | 一本久道综合色婷婷五月| 天天综合网、天天综合色| 丁香五月欧美婷婷| 超碰成人黄色网| 国精产品一区一区三区免费视频| 天天色天天日| 99在线热视频| 久久最新色色色| 天天爽天天摸| 9久久精品| 色欲五月丁香| 香蕉AV777XXX色综合一区| 丁香五月香蕉| 开心五月婷婷激情| 国产avapp 网| 激情床戏| 狠狠爱综合网| 丁香五月婷婷影院| 狠狠干无码| 大香蕉五月天婷婷| www.夜夜操| 久久精品99国产精品日本| 婷婷久久色| 丁香五月婷婷基地| 欧美va欧美va差| 久久五月激情网| 激情精品久久| 九色 在线| 日本三级中文字幕| 丁香五月综合高清在线| 九九色色色| 香蕉久久国产AV一区二区| 超级碰人人操人人干| 色99免费视频中文| www.com任你艹| 丁香婷婷五月综合| 久久婷.com| 99玖玖视频| 密臀av无码人妻精品| 欧美月久久| 97伊人综合婷婷| 99在线视频观看| 成人无码免费一区二区中文| 97在线观视频免费观看| 99视频35精品视频在线观看| 噜噜噜噜婷婷五月天| 天天操,夜夜骑| 色五月激情五月| 青草五月天| 丁香综合日产精品久久| 99九九99九九九视频精品| AA久久| 丁香五月亚洲无码| 五月 激情视频| 在线观看免费人成视频无码| 亚洲综合另类| 色婷婷成人网| 五月丁香六月停停| 五月天开心激情综合网| 三级黄网站| 九九色婷婷Av| 欧美成人无码一区二区三区| 久久久99精品| 久久精品人妻| 97超级碰人人| 插插插色综合网| 久久婷婷亚洲| 婷婷丁香成人五月天| www婷婷色情网| 国产精品久久..4399| 91超级碰碰碰| 人人操人| 久狠日av| 97色干| 强壮公让我夜夜高潮A片视频| 色狠狠综合网| 综合激情在线观看| 五月六月激情| 色五天综合| 日木狠狠干| WWW.17C亚洲精品| 婷婷热色| 无码99| 午夜av网| 色五月婷婷大香蕉| 97色色综合| 人人人舔人人人操人人人摸人人人97| 丁香五月婷婷影院| 91久久综合亚洲噜噜成人在线| 人人爽欧美婷婷久久久五月丁香| 成人做爰A片免费看网站找不到了| www.久久爱.com| 婷婷五月综合激情| 色情五月天小说| 99爱视频| 五月久久五月激情| 99热这里只有精品中文字幕| 激情综合网激情五月婷婷| 婷婷激情区| 色色色色色色色色色影院| www.操逼comm| 国产黄色大片| 色深爱五月| 激情啪啪五月| 婷婷丁香色情| 天天婷婷综合| 7EzOBIhNq85TO| 丁香六月婷婷| 情色婷婷五月天| 色色色无码| 欧美人人操| 婷婷五月天在线观看| 婷婷无码视频| 日韩av在线电影| 丰满少妇乱A片无码| 99热777| 日韩AV在线免费| 99久久网站| 色五月av伊人| 婷婷欧美激情综合| 激情开心五月天| 五月婷婷丁香啪啪| 99国产精品白浆在线观看免费| 午夜丁香婷婷| 婷婷丁香午夜综合影视| 1024国产在线| 伊人色综合久久久| 五月色欧洲| 久草免费福利视频| 色~性~乱~伦~噜| 色婷婷五月天不卡| 色吧五月| 丁香五月激情网| 精品欧美性爱超级爽| 九九综合九九| AV成人在线播放| 丁香五月六月久久综合 | 特级西西4444www无码| 久久婷婷激情五月天一区二区| 99爱视频| 六月激情网| www.久久爱.com| 天天做天天爱天天爽| 日本天天综合| 天天爽成人综合网站| a在线观看| 激情综合国产| 亚洲精品字幕| 国产精品人人做人人爽人人添| 五月丁香AV在线| 五月婷婷激情69| 中文字幕日韩无码制服诱或| 五月激情丁香五月| 99色色爰| 五月婷婷丁香六月| 色99在线视频| 91久久久久久久| 少妇激情五月天| 五月丁香婷婷综合网| 99色一| 色天天综合成人网| 五月天色婷婷激情综合| 这里只有精品日韩| 丁香色六月婷婷| 五月丁香六月色情网欧美| 久久老码第一| 婷婷性爱网| 99草视频在线观看| 婷婷色啪| 久久精品4| 丁香五月婷婷婷婷欧美综合| 99re久热只有精品6在线直播.com| 婷婷五月丁香色综合| 这里只有精彩视频| 国产成人一区二区三区在线观看| 五月婷婷色在线| 亲子乱AV-区二区三区| 91se在线观看| 亚洲婷婷五月天在线激情综合网| 天天激情综合| 九九综合久久| 欧美久久网| 国产毛片精品一区二区色欲黄A片| 欧美性生交xXxX久久久| 丁香五月天日韩无码| 五月丁香激情四射| 久久久久综合激动五月天| se99视频| www.狠狠| 伊人热婷婷| 五月丁香婷婷无码中文| 99久久玖玖| www.婷婷六月天| AⅤ在线播放网| 天天插天天插天天操| 五月天成人在线播放丁香| 五月丁香成人| 人妻少妇色综合| 五月丁香趴趴| 欧美丁香六月在线观看视频| 韩国激情五月天综合网| 97精品自拍| 久久五月丁香综合| 五月激情五月丁香| 2020日日干| 色欲五月丁香| 五月丁香婷婷在线综合蜜桃| av国产精品偷| jiqingliuyuetian| 久久综合激情| 成人一级片| 五月六月伦理| 五月天另类图片| 少妇性BBB搡BBB爽爽爽视頻| 成人在线精品| 天天色天天| 无码人妻少妇色欲AV一区二区| 久久久99视频| 丁香五月天亚洲视频| 久久婷婷超碰| 五月天婷婷香蕉狠狠超碰综合| 欧美情色一区| 五月天激情播播网| 久久曰曰| 久99综合婷婷| 久99久热| 香蕉国产2013| 五月婷婷久久大香蕉| 五月天色站| 久久精品亚洲一级牲爱综合| 开心五月婷婷| 大香网伊人久久综合| 91丨九色丨高潮丰满日本| 五月天婷婷AV| 国产午夜精品一区二区| 天堂综合久久| 伊人五月成人| 亚洲视频1区| 亚洲无码色| 97性视频| 97色在线观看视频| 碰碰碰91| 婷婷五月天成人综合网| 成人精品网站在线观看| 精品无码人妻一区| 亚洲成片在线观看| www.久久久久| 另类激情五月天。| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 九九人人看| 婷婷成人在线| 大香蕉综合视频在线| 狠狠操狠狠狠| 97成人在线视频| 橾逼网| 久久182| 26UUU欧美激情一区二区| 久久之人妻| 婷婷开心青青草| 伊人久久丁香狠狠婷婷综合香蕉| 天天射综合网夜夜操| 在线观看的av| 五月天婷婷综合网| 五月婷婷婷婷婷婷艺术| 亚洲成人综合在线| 五月天成人在线| 97超碰在线免费观看| 丁香六月婷婷| 婷婷五月天美女视频| 超碰在线免费9| 天天爱天天吃狠天天透| 另类激情综合| 99热10在线高清播放| 久久网日本| 狼人久草| 超碰在线免费观看3 9| 色中色综合| 五月天色裸体视频| 五月婷婷欲色| 99久在线观看| 中文字幕无线久必| 亚洲啪啪视频| 欧美成人无码一区二区三区| 久久丁香婷| 影音先锋一区| 婷婷丁香五月久久| 色婷婷在线播放| 丁香五月婷婷亚洲天堂| 天天操夜夜操| 五月婷婷草| 九九激情网| 99婷婷色| 激情五月六月婷婷| a69在线视频| 久久 婷婷 五月天| 日本在线wwww| 婷婷丁香五月在线观看91| 免费看欧美成人A片无码| 午夜丁香| 天天摸天天做天天爱天天爽| 亚洲综合另类| 亚洲AV日韩AV永久无码网站| 亚洲精品V天堂中文字幕 | 日本丁香五月| 精品激情| 亚洲操逼片| 五月天婷婷丁香导航| 天天插天天插天天插天天插| 九月婷婷久久| 爱操人妻| 久久久9久| 97在线视频 欧美| 丁香五月婷婷图片综合| 久热在线中文字幕色999舞 | 狠狠色婷婷| 97色婷婷成人综合在线观看| 永久免费一区二区三区| 色噜噜狠狠狠综合曰曰曰| 六月丁香五月激情网| 超碰精品手机在线| www.五月天。com| 九九九成人在线视频| 中文字幕永久在线| 丁香六月中文| 久噜久噜| 终合激情网| 精品人妻一区二区三区四区不卡在| 久久精品66| 毛片色五月| 六月婷婷av| 五月亭亭直播| 中文字幕AV在线播放| 丁香五月Av| av中文网| 日韩在线成人电影| www.av视频xx999.com| 五月四色色| 十一月婷婷激情四射| 丁香成人五月天| 99综合| 亚洲日韩乱码一区二区三区四区| 丁香花大香蕉婷婷综合| 欧美日韩国产一区| 五月天丁香久久综合| 狠狠狠激情网| 无码天天操| 色丁香五月婷婷综合久久| 色一情一乱一乱91Av| 丁香五月激情宗合| 开心五月婷| 五月婷婷激情久久| 婷婷五月无码| 天天五月丁香五月| 天天舔天天摸天天射| 五月丁香久久激情网| va亚洲中文在线| 五月天激情小说| 天天狠狠综合精区| 91人人超碰在线| 色五婷婷| 色婷五月婷婷| 亚洲天堂热| 性爱五月婷| 综合狠狠五月婷婷| 日韩九区| 偷拍91九色| 骚。com| 激情久久久| 婷婷五月天影院| 久久人妻精品| 男人的天堂婷婷色五月| 婷婷丁香五月91| 久久亚洲色导航| 久久丁香五月| 大香蕉久艹| 思思99热| 91九色超碰| 狠狠做六月爱婷婷综合aⅴ| 秋霞三及片| 综合久久99| 中文字幕婷婷五月天| 婷婷99狠狠| 99re这里只有精品国产99| 综合色色网| 激情五月综合网| 亚洲激情AV| 久久性爱视频| 日本色色色| 狠狠色婷婷在线| 9热精品| 91丨九色丨国产打屁股| 天天做天天要天天爽| 亚洲精品一区无码A片| 337p大胆噜噜噜噜噜91Av| 婷婷久久丁香| 激情久久五月天| 26uuu精品国产| 人妻中文在线| 亚洲乱码精品久久久久..| 丁香婷婷在线| 亚洲国产网站| 欧美黄色韩日网| 99在线视频操999| 天天玩夜夜操天天爽| 91九色|疯狂|高潮|对白|| 天天爽夜夜爽夜夜爽精品| 这里只有精品视频免费在线观看| 99re热| 三级片AAA久久久AAA久久久AAA | 91丨九色丨熟女|老版| 色九月国产| 九月色婷婷| 日本va欧美va欧美va| 亚洲成人综合网在线免费观看| 日本久久人人| 99精品国产在热久久婷婷| 国外亚洲成AV人片在线观看| 久久99热这里只有精品| 9九热视频| 极品少妇婷婷五月| 久久久久人妻精品| 六月婷婷七月丁香| 欧美A片在线视频免费观看| 人妻AV在线观看| 婷婷五月天改成什么了| 激情婷婷视频在线| 99热这里只有精| 91凹凸在线| 开心五月深爱五月丁香五月激情五月| 99ER热精品视频| 丁香六月婷婷综合激情欧美| 99热这里只有在线| 这里只有精品视频在线观看免费| 日韩无码亚欧无码| 日本九九九九| www.99精品在线| 亚洲欧美国产高清vA在线播放| 这里只精品| 性爱网五月天| 99操不停| 婷婷狠狠操| 久久综合干| 五月久久婷婷| 丁香五月婷婷偷拍|