99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

手寫迷你Tomcat:從報錯分層到Web容器原理

手寫迷你Tomcat:從報錯分層到Web容器原理 Tomcat 這玩意兒做 Java Web 的基本繞不開??涩F(xiàn)實里最常見的場景是本地跑得好好的一上服務(wù)器就報Address already in useIDEA 里點啟動控制臺刷出一屏紅字最后一行寫著could not obtain connection to query metadata項目部署上去訪問是 404日志里連個像樣的提示都沒有。多數(shù)人這時候的做法是百度關(guān)鍵詞找到一條差不多的答案復(fù)制粘貼重啟好了——但下次換個環(huán)境又炸因為壓根不知道這個報錯是從哪一層冒出來的。我這篇文章想干兩件事。第一件把 Tomcat 常見的報錯按出問題的層次重新梳理一遍從啟動腳本、端口、類加載、連接池一路到 SSL 配置講清楚每種報錯背后到底發(fā)生了什么為什么這么解。第二件也是我覺得更有意思的——手動寫一個能跑起來的迷你 Tomcat用ServerSocket加線程池自己解析 HTTP 報文、自己映射 Servlet、自己加載WEB-INF下的類。寫完之后你再回頭看那些報錯會發(fā)現(xiàn)它們的位置感一下子就清晰了ClassNotFoundException 是類加載層的事404 是映射層的事端口沖突是網(wǎng)絡(luò)層的事各歸各位。這篇內(nèi)容適合誰看正在被 Tomcat 報錯折磨的運維和后端同學、想搞明白 Web 容器內(nèi)部到底怎么回事的初中級開發(fā)者、以及準備給現(xiàn)有項目做容器替換或者調(diào)優(yōu)的人。代碼部分我會給完整可運行的版本但更重要的是每一步為什么這么設(shè)計——這才是我自己踩坑之后真正記住的東西。1. 先想清楚Tomcat 到底替我們接管了哪些活1.1 一個請求進來經(jīng)過了幾道手很多人對 Tomcat 的認知停留在放 war 包的地方。但你只要自己寫過一次最原始的 Socket 服務(wù)就會立刻明白它省掉了多少事。一個 HTTP 請求從瀏覽器發(fā)出到你的doGet方法被執(zhí)行中間至少經(jīng)歷了這些環(huán)節(jié)內(nèi)核把 TCP 連接交給監(jiān)聽端口的進程Tomcat 的 Acceptor 線程接住這個連接交給 Worker 線程Worker 從 socket 上讀字節(jié)流按 HTTP 協(xié)議切分出請求行、請求頭、請求體根據(jù)請求行里的 URI找到對應(yīng)的 Host、Context也就是你的應(yīng)用、Wrapper也就是那個具體的 Servlet構(gòu)造HttpServletRequest和HttpServletResponse兩個包裝對象調(diào)用Servlet.service()最后把響應(yīng)對象里的狀態(tài)行、響應(yīng)頭、響應(yīng)體按協(xié)議格式寫回 socket 并關(guān)閉連接。這里面每一環(huán)都可能出錯而且報錯信息分布在完全不同的地方。端口被占用是內(nèi)核層直接就拒絕了URI 找不到對應(yīng) Context 是映射層的問題Servlet 類加載不出來是類加載器的問題。你把這條鏈路在腦子里畫出來排查速度至少快一倍。1.2 為什么手寫一遍是最快的理解方式我在帶新人的時候有個固定動作讓對方用ServerSocket寫一個只返回 hello 的服務(wù)。寫完之后再問一句如果我要支持兩個不同的路徑返回不同內(nèi)容呢他就自然開始想路由表再問如果我要讓用戶自己寫類來處理請求呢他就自然想到接口和反射再問如果用戶把類打包成 jar 放在某個目錄下呢他就自然碰到類加載器。這就是手寫迷你 Tomcat 的價值——它把你平時當成黑盒的那一層拆成了幾個你能一手寫完的小模塊。而且這個過程不白費功夫Tomcat 本身的架構(gòu)也是這么分層的Server→Service→ConnectorEngine→Host→Context→Wrapper。你手寫的版本就是它的一根簡化骨架。1.3 報錯分類的底層邏輯我把常見報錯歸成五大類后面第 5 章會逐條展開報錯層次典型現(xiàn)象排查入口啟動腳本 / 環(huán)境雙擊閃退、JAVA_HOME not foundcatalina.bat、setclasspath.bat輸出網(wǎng)絡(luò) / 端口Address already in usenetstat、lsof、ps -ef部署 / 映射404、歡迎頁不對、應(yīng)用未加載logs/catalina.out、conf/server.xml類加載 / 依賴ClassNotFoundException、NoClassDefFoundErrorWEB-INF/lib、WEB-INF/classes資源 / 配置連接池拿不到連接、SSL 握手失敗、亂碼數(shù)據(jù)源配置、keystore、Connector編碼這張表你貼在工位上遇到紅字先定位它在哪一行比漫無目的地搜關(guān)鍵詞高效得多。2. 手動實現(xiàn)迷你 Tomcat 的整體設(shè)計2.1 拆成三層網(wǎng)絡(luò)層、協(xié)議層、容器層我在設(shè)計這個迷你容器的時候刻意做了嚴格分層因為分層本身就是為了讓報錯有歸屬。網(wǎng)絡(luò)層只干一件事綁定端口accept()阻塞等待連接把Socket丟給線程池。它完全不懂 HTTP也不懂你的業(yè)務(wù)。協(xié)議層負責把InputStream里的字節(jié)翻譯成結(jié)構(gòu)化的請求對象再把結(jié)構(gòu)化的響應(yīng)對象序列化回字節(jié)。容器層則負責路由、Servlet 生命周期、類加載。為什么非要這么分因為分完之后你要換實現(xiàn)的時候成本極低。比如網(wǎng)絡(luò)層從 BIO 換成 NIO容器層一行都不用改協(xié)議層要支持 HTTP/1.1 的chunked傳輸也只需要改動解析和寫出這兩個方法。Tomcat 的Connector和Container分離就是這個道理只不過它做得更極致。2.2 網(wǎng)絡(luò)模型為什么從 BIO 起步有人會說都什么年代了還寫 BIO。但對一個用來理解原理的迷你實現(xiàn)BIO 加線程池是最優(yōu)解原因有三點。第一代碼路徑清晰。一個請求一個線程你打斷點的時候能完整看到從accept到service的調(diào)用棧不會在 Selector 的事件循環(huán)里迷失。第二它足夠支撐中等規(guī)模場景。Tomcat 直到 8.5 才默認啟用 NIO此前長期使用的 APR 和 BIO 組合在生產(chǎn)環(huán)境跑了十幾年說明 BIO 加合理線程池并不是不能用。第三也是關(guān)鍵的一點——它讓你直觀感受到maxThreads這個參數(shù)到底限制的是什么。當你看到線程池滿了之后新連接全部堵在accept隊列里你就永遠不會再隨便把maxThreads調(diào)到 5000。提示迷你實現(xiàn)用 BIO 是為了理解生產(chǎn)上 Tomcat 8.5 以后默認就是 NIO 模式IO 多路復(fù)用在連接數(shù)上萬時優(yōu)勢明顯這一點不要混淆。2.3 目錄結(jié)構(gòu)與職責劃分我最終落地的結(jié)構(gòu)是這樣的mini-tomcat/ ├── src/main/java/com/example/mt/ │ ├── MiniTomcat.java // 啟動入口網(wǎng)絡(luò)層 │ ├── http/ │ │ ├── MiniRequest.java // 請求對象協(xié)議層 │ │ ├── MiniResponse.java // 響應(yīng)對象協(xié)議層 │ │ └── HttpParser.java // 報文解析 │ ├── container/ │ │ ├── MiniServlet.java // Servlet 接口 │ │ ├── ServletMapping.java // 路由表 │ │ └── WebXmlParser.java // 配置解析 │ └── loader/ │ └── WebappClassLoader.java └── webapps/ └── demo/ ├── WEB-INF/web.xml ├── WEB-INF/classes/ └── index.html每個包的邊界和前面說的三層嚴格對應(yīng)。MiniTomcat里的代碼不會出現(xiàn)Servlet字樣container包里的代碼不會出現(xiàn)Socket字樣。這個約束看起來很教條但你寫下去就會發(fā)現(xiàn)它逼著你在正確的層次上解決問題。比如 URL 解碼把%E4%B8%AD還原成中文它天然屬于協(xié)議層就該放在HttpParser里而不是散落在路由查找的代碼中。3. 核心細節(jié)拆解報文解析、路由映射與類加載3.1 HTTP 請求解析里最容易踩的三個坑第一個坑BufferedReader和請求體的沖突。新手最常見的寫法是new BufferedReader(new InputStreamReader(socket.getInputStream()))然后readLine()讀第一行得到請求行。這在純 GET 請求下沒問題因為 GET 沒有請求體。但一旦是 POST你再用同一個 reader 去讀 body就會讀到空——因為BufferedReader內(nèi)部做了緩沖已經(jīng)把一部分 body 吃進它自己的緩沖區(qū)了而你從InputStream直接再讀讀到的是緩沖區(qū)之后的內(nèi)容。正確做法是解析完請求頭和請求行之后根據(jù)Content-Length頭從原始的InputStream上精確讀取對應(yīng)字節(jié)數(shù)。這也是為什么 Tomcat 內(nèi)部對ServletInputStream有嚴格的狀態(tài)機管理——一旦你調(diào)用了getReader()再調(diào)getInputStream()就會拋IllegalStateException。它就是在防這種讀串了的情況。第二個坑請求頭的行結(jié)束符。HTTP 協(xié)議規(guī)定是\r\n但有些客戶端或者手寫的測試工具會只發(fā)\n。readLine()恰好能容忍這兩種所以手工解析時用它反而安全。但如果你自己用read()逐字節(jié)找\r\n就得考慮兼容。第三個坑URI 的編碼。請求行里的 URI 是經(jīng)過百分號編碼的中文參數(shù)、空格、特殊符號都會變成%XX形式。加上號在表單提交里代表空格這兩套規(guī)則混在一起很容易解析錯。我的處理順序是先按?切出 path 和 query再對 query 按切分、按切分最后對 key 和 value 分別做URLDecoder.decode(value, UTF-8)。注意URLDecoder會把也解成空格這在 query 場景下是符合規(guī)范的。3.2 響應(yīng)格式與狀態(tài)碼的封裝響應(yīng)寫出去的時候最容易忽略的是頭部順序和Content-Length。HTTP 響應(yīng)格式是HTTP/1.1 200 OK\r\n Content-Type: text/html;charsetUTF-8\r\n Content-Length: 128\r\n \r\n body我見過有人把Content-Length算錯結(jié)果是瀏覽器一直轉(zhuǎn)圈等數(shù)據(jù)直到超時。原因通常是用了Writer寫字符但在計算長度的時候算的是字符數(shù)而實際發(fā)出的是字節(jié)數(shù)。中文一個字符 UTF-8 下占三個字節(jié)這個差值會讓Content-Length偏小瀏覽器收到少于聲明長度的數(shù)據(jù)就會一直等。所以在迷你實現(xiàn)里我統(tǒng)一用ByteArrayOutputStream先在內(nèi)存里把響應(yīng)體字節(jié)攢好拿到真實的字節(jié)長度之后再寫Content-Length最后一次性刷出去。這個先攢后發(fā)的思路和 Tomcat 里OutputBuffer的設(shè)計是一致的。3.3 路由映射從 URI 到 Servlet 實例路由的本質(zhì)是一個查找表。我在實現(xiàn)時用了最簡單的方式MapString, MiniServletkey 是url-patternvalue 是單例的 Servlet 實例。這是為了簡化真實 Tomcat 里每個請求都會拿一個StandardWrapper它管理著 Servlet 實例的單例和生命周期。匹配規(guī)則上我先實現(xiàn)了精確匹配然后補了兩條匹配類型寫法例子精確匹配/user/list請求路徑完全相同才命中前綴匹配/user/*以/user/開頭都命中擴展名匹配*.do以.do結(jié)尾都命中默認匹配/兜底通常指向靜態(tài)資源處理優(yōu)先級是精確 前綴 擴展名 默認這一點必須和 Servlet 規(guī)范保持一致否則同一個項目從真正 Tomcat 遷移到你的迷你容器上行為就不一樣了。順便說一句這個優(yōu)先級順序是很多人配置DispatcherServlet時踩坑的來源——/*會覆蓋掉*.jsp的映射導(dǎo)致 JSP 直接變成下載文件。3.4 類加載器隔離Tomcat 最容易被誤解的一層WEB-INF/classes和WEB-INF/lib/*.jar是應(yīng)用私有的父加載器看不到它們這就是所謂的類加載隔離。為什么要隔離因為同一個 Tomcat 上可能跑十個應(yīng)用它們依賴的spring-core版本可能完全不同。如果不隔離第一個加載的版本就會覆蓋后面所有的應(yīng)用。Tomcat 的類加載順序和標準雙親委派是反的它先嘗試用WebappClassLoader自己加載加載不到才交給父加載器。這個打破雙親委派的行為正是很多ClassNotFoundException和LinkageError的根源。我在迷你實現(xiàn)里用URLClassLoader簡化了這件事public class WebappClassLoader extends URLClassLoader { public WebappClassLoader(File webappDir, ClassLoader parent) throws Exception { super(buildUrls(webappDir), parent); } private static URL[] buildUrls(File webappDir) throws Exception { ListURL urls new ArrayList(); File classes new File(webappDir, WEB-INF/classes); if (classes.exists()) { urls.add(classes.toURI().toURL()); } File lib new File(webappDir, WEB-INF/lib); File[] jars lib.listFiles((d, n) - n.endsWith(.jar)); if (jars ! null) { for (File jar : jars) { urls.add(jar.toURI().toURL()); } } return urls.toArray(new URL[0]); } }有了它你在 Servlet 里寫Class.forName(com.example.MyService)就能找到應(yīng)用私有的類而不會跑到系統(tǒng)的 classpath 里去找。理解了這幾十行代碼你再看 Tomcat 那些NoClassDefFoundError思路會清楚很多要么是 jar 沒進WEB-INF/lib要么是同一個類被兩個加載器加載了導(dǎo)致類型轉(zhuǎn)換失敗。4. 完整實操寫一個能跑靜態(tài)資源和 Servlet 的迷你容器4.1 環(huán)境準備與工程搭建我用的是 JDK 17 加 Maven 的極簡配置。為什么選 17 而不是 8因為URLClassLoader在 9 以后的模塊化環(huán)境下有一些限制但用于加載普通 jar 依然沒問題而且 17 的Socket和字符串處理 API 更順手。如果你所在的項目必須用 JDK 8代碼也能原樣跑只是readAllBytes這類方法要換成循環(huán)讀取。pom.xml里只有一個 JUnit其余全靠 JDK 自帶。這一點很重要——我刻意不引第三方 HTTP 庫就是為了讓你看清協(xié)議本身的處理過程。用 Netty 或者 Undertow 能更快跑起來但那就失去意義了。4.2 啟動類網(wǎng)絡(luò)層的核心二十行public class MiniTomcat { private final int port; private final ExecutorService pool Executors.newFixedThreadPool(50); private final ServletMapping mapping new ServletMapping(); public MiniTomcat(int port) { this.port port; } public void start() throws Exception { mapping.load(new File(webapps/demo)); try (ServerSocket server new ServerSocket(port)) { System.out.println(MiniTomcat started on port port); while (true) { Socket socket server.accept(); pool.execute(() - handle(socket)); } } } private void handle(Socket socket) { try (socket; InputStream in socket.getInputStream(); OutputStream out socket.getOutputStream()) { MiniRequest req HttpParser.parse(in); MiniResponse resp new MiniResponse(out); if (req null) { return; } if (!mapping.dispatch(req, resp)) { StaticResourceHandler.handle(req, resp); } resp.flush(); } catch (Exception e) { e.printStackTrace(); } } }這里有個細節(jié)值得說try (socket; in; out)這種寫法會在代碼塊結(jié)束時自動關(guān)閉所有資源。很多人手寫 HTTP 服務(wù)時忘了關(guān) Socket跑壓測的時候幾百個連接瞬間把文件句柄耗盡報Too many open files。生產(chǎn)上的 Tomcat 有連接池和空閑回收手寫版本就必須靠try-with-resources兜底。線程池固定 50 個線程也是一種取舍。真實場景應(yīng)該做成可配置并且要意識到accept到線程池之后如果池子滿了任務(wù)會進無界隊列連接會一直堆著不處理。生產(chǎn)上更穩(wěn)妥的做法是給隊列設(shè)個上限滿了就快速返回 503這也是 Tomcat 的acceptCount在干的事。4.3 請求與響應(yīng)對象的實現(xiàn)要點public class MiniRequest { private String method; private String uri; private String path; private String protocol; private final MapString, String headers new HashMap(); private final MapString, String params new HashMap(); private byte[] body; public String getParameter(String name) { return params.get(name); } public String getHeader(String name) { return headers.get(name.toLowerCase()); } public String getMethod() { return method; } public String getPath() { return path; } // 省略 setter }MiniResponse我給了它三個核心方法setStatus、setHeader、write。write把字節(jié)寫進內(nèi)存緩沖flush負責拼裝成完整報文寫出去。這里再強調(diào)一遍前面提過的順序問題一定要在flush里現(xiàn)算Content-Length不要提前寫死。public void flush() throws IOException { byte[] data buffer.toByteArray(); StringBuilder head new StringBuilder(); head.append(HTTP/1.1 ).append(status).append(\r\n); if (!headers.containsKey(content-type)) { headers.put(Content-Type, text/html;charsetUTF-8); } headers.put(Content-Length, String.valueOf(data.length)); headers.forEach((k, v) - head.append(k).append(: ).append(v).append(\r\n)); head.append(\r\n); out.write(head.toString().getBytes(StandardCharsets.ISO_8859_1)); out.write(data); out.flush(); }注意響應(yīng)頭我用ISO_8859_1編碼寫出去。這不是筆誤HTTP 頭部按規(guī)范只允許 ASCII 字符用ISO_8859_1保證每個字節(jié)原樣傳輸。如果用 UTF-8 編碼頭部遇到非 ASCII 字符會變成多字節(jié)客戶端解析頭部就會錯位。4.4 靜態(tài)資源處理與 404 兜底靜態(tài)資源處理的價值在于它讓整個容器看起來像個真東西你可以在webapps/demo下丟一個index.html瀏覽器訪問就能看到頁面。public class StaticResourceHandler { public static void handle(MiniRequest req, MiniResponse resp) throws IOException { String path req.getPath(); if (/.equals(path)) { path /index.html; } File file new File(webapps/demo, path); if (!file.exists() || file.isDirectory()) { resp.setStatus(404); resp.write(h1404 Not Found/h1.getBytes(StandardCharsets.UTF_8)); return; } String name file.getName().toLowerCase(); resp.setHeader(Content-Type, MimeTypes.of(name)); resp.write(Files.readAllBytes(file.toPath())); } }有一個安全問題必須在手寫版本里就養(yǎng)成習慣路徑穿越。如果用戶請求/../../etc/passwd直接拼接路徑就會讀到系統(tǒng)文件。真實 Tomcat 通過canonicalPath校驗來解決。我在迷你版里加了一句規(guī)范化檢查這對理解 Tomcat 的安全加固很有幫助。順便說 JSP。我最初也想在迷你版里跑 JSP但真正的 JSP 需要先編譯成 Servlet 再加載執(zhí)行工作量翻倍。我選擇的做法是把 JSP 的編譯產(chǎn)物手動放到WEB-INF/classes下當成普通 Servlet 來跑。這也順帶解釋了熱詞里那個操作——web 項目配置 tomcat 后查看 jsp 編譯后的 java 類你在 Tomcat 的work/Catalina/localhost/應(yīng)用名/org/apache/jsp/目錄下就能看到這些中間產(chǎn)物。項目莫名其妙報 JSP 相關(guān)錯誤的時候去那個目錄看生成的 Java 文件比盯著 JSP 源碼猜快得多。4.5 啟動驗證與目錄約定把MiniTomcat跑起來控制臺輸出MiniTomcat started on port 8080然后瀏覽器訪問localhost:8080/index.html看到頁面訪問localhost:8080/hello看到 Servlet 返回的內(nèi)容整個鏈路就通了。驗證順序我建議這樣走先靜態(tài)資源再精確匹配的 Servlet再帶參數(shù)的 POST最后中文參數(shù)。每一步都通過再往下走出問題的時候定位范圍就很小。我當初第一次寫的時候POST 中文參數(shù)一路亂碼最后發(fā)現(xiàn)是Content-Length用的是字符數(shù)而不是解碼后的字節(jié)數(shù)導(dǎo)致 body 讀少了一半UTF-8 多字節(jié)字符被截斷。這類問題在真正的 Tomcat 里之所以不常見就是因為它的OutputBuffer和編碼器已經(jīng)處理好了這些邊界。5. Tomcat 常見報錯逐條排查實錄5.1 啟動類報錯端口、環(huán)境變量與腳本問題java.net.BindException: Address already in use是出現(xiàn)頻率最高的一條。它的意思非常字面端口已經(jīng)被別的進程占了。Linux 下排查用lsof -i:8080或者netstat -tunlp | grep 8080Windows 下用netstat -ano | findstr 8080拿到 PID再去任務(wù)管理器或者taskkill /PID xxx /F處理。有時候你確認沒有 Java 進程占著那就要考慮是不是之前的 Tomcat 沒殺干凈用ps -ef | grep tomcat過一遍再用kill -9清理。還有一種隱蔽情況TIME_WAIT狀態(tài)的連接還在占用端口這時候要么等一會兒要么在Connector上配SO_REUSEADDR。Neither the JAVA_HOME nor the JRE_HOME environment variable is defined這條出現(xiàn)在 Windows 下雙擊startup.bat閃退的場景。原因是setclasspath.bat在啟動時找不到 JDK 路徑。解決方式是設(shè)好JAVA_HOME環(huán)境變量指向 JDK 根目錄而不是bin目錄。如果你機器上有多個 JDK想讓 Tomcat 用指定的那個比如 JDK 17 而系統(tǒng)默認是 8可以在setclasspath.bat開頭顯式加一行set JAVA_HOMED:\jdk-17這樣只影響這個 Tomcat 實例不動全局環(huán)境變量多個 Tomcat 并存時特別有用。注意JAVA_HOME指的是 JDK 安裝目錄含bin/java的那一層不是 JRE 目錄也不是bin目錄本身。這一條看著簡單但我見過太多人在這里多寫一層或者少寫一層。5.2 部署與映射類報錯404 與歡迎頁404 的成因太多我一般按這個順序排查先看logs/catalina.out里有沒有應(yīng)用的啟動日志如果連 Deployment of web application archive 這種字樣的日志都沒有說明 war 包根本沒被掃描到檢查webapps目錄權(quán)限和conf/server.xml里的appBase配置如果有啟動日志但訪問還是 404那大概率是 context path 對不上你在server.xml里配了Context path/myapp瀏覽器就得訪問/myapp/xxx少一段多一段都不行。歡迎頁配置也是個高頻坑。web.xml里的welcome-file-list決定了訪問目錄路徑時默認返回哪個文件。如果列表里配了index.html但目錄下只有index.jspTomcat 不會自動幫你找直接 404。而且歡迎頁的查找是順序匹配的列表越靠前的優(yōu)先級越高把index.html放在index.jsp前面會導(dǎo)致 JSP 永遠不生效——明明文件在就是不顯示。打包方式也影響結(jié)果。war 包放進去 Tomcat 會自動解壓但如果你同時保留了舊的解壓目錄Tomcat 可能用的是舊目錄里的內(nèi)容。我踩過的坑是更新 war 包忘了刪對應(yīng)的解壓目錄改了半天代碼發(fā)現(xiàn)沒生效最后發(fā)現(xiàn)跑的是老目錄。穩(wěn)妥做法是停掉服務(wù)、刪掉 war 包和解壓目錄、再放新包。5.3 類加載與依賴類報錯java.lang.ClassNotFoundException和NoClassDefFoundError看著像含義不同。前者是主動加載時沒找到通常是Class.forName或者容器掃描時拋的后者是編譯期存在、運行期找不到常常意味著類在加載過程中失敗了比如靜態(tài)代碼塊拋了異常或者類被兩個不同的加載器加載了。排查的第一個動作是確認 jar 的位置。項目依賴必須是WEB-INF/lib下的 jar或者WEB-INF/classes下的 class 文件放在 Tomcat 的lib目錄里雖然也能用但那是容器級別的類加載器多個應(yīng)用會互相干擾強烈不建議。第二個動作是看有沒有版本沖突。兩個不同版本的同一個包同時出現(xiàn)在WEB-INF/lib里Tomcat 按文件名排序加載先加載的生效行為就變得不可預(yù)期。我整理過一個快速判斷表現(xiàn)象大概率原因處理方式啟動時立刻報 CNFEjar 缺失或路徑不對檢查WEB-INF/lib運行到某個功能才報反射加載的類名拼寫錯誤核對全限定類名報 NoClassDefFoundError 且?guī)?Cause靜態(tài)初始化失敗看異常鏈最底層類型轉(zhuǎn)換失敗 ClassCastException同類被雙加載器加載統(tǒng)一依賴來源5.4 資源與連接類報錯連接池拿不到連接熱詞里那條could not obtain connection to query metadata : cannot create我特別想展開講因為它太典型了。這個報錯通常出現(xiàn)在應(yīng)用啟動階段連接池Druid、HikariCP、DBCP 都可能嘗試建立第一條物理連接時失敗了。報錯信息本身只說了拿不到連接真正的原因藏在異常鏈里往往是下面幾種之一。其一是 JDBC 驅(qū)動和數(shù)據(jù)庫版本不匹配。比如數(shù)據(jù)庫是較新的版本驅(qū)動還是老版本握手階段就會失敗現(xiàn)象是cannot create后面跟著一個具體的握手異常。解決方式很直接換成匹配版本的驅(qū)動并且確認驅(qū)動 jar 在WEB-INF/lib下而不是只在你本地 IDEA 的庫路徑里。其二是應(yīng)用啟動時數(shù)據(jù)庫還沒準備好。容器編排場景下這很常見數(shù)據(jù)庫容器起來比應(yīng)用慢幾秒。連接池初始化就失敗整個應(yīng)用啟動中斷。我的做法是把initialSize設(shè)成 0 或者很小的值讓它懶加載同時配好connectionTimeout和失敗重試別讓啟動階段的一次失敗把應(yīng)用整個拖死。其三是賬號權(quán)限或者網(wǎng)絡(luò)不通這類用telnet或者數(shù)據(jù)庫客戶端從 Tomcat 所在機器上連一次就能確認。配好之后建議加一條validationQuery讓連接池在借出連接前做一次探活。這一步帶來的開銷很小但能擋住大量連接已被服務(wù)端關(guān)閉的詭異報錯。# Druid 參考配置 initialSize0 minIdle1 maxActive20 validationQuerySELECT 1 testWhileIdletrue connectionTimeout3000提示maxActive不要拍腦袋設(shè)大。數(shù)據(jù)庫端有最大連接數(shù)限制應(yīng)用側(cè)配得再大超過數(shù)據(jù)庫限制照樣連不上而且會掩蓋真正的慢 SQL 問題。5.5 編碼、SSL 與安全加固相關(guān)報錯中文亂碼分三種位置處理方式完全不同。請求參數(shù)亂碼看Connector上的URIEncodingTomcat 8 以后默認就是 UTF-8如果被顯式改成了ISO-8859-1中文參數(shù)就會亂同時確認conf/server.xml里 Connector 的useBodyEncodingForURI設(shè)置它決定 POST body 的編碼是否也應(yīng)用到 URI 上。響應(yīng)亂碼看Content-Type里的charset或者response.setCharacterEncoding??刂婆_和日志亂碼看 JVM 啟動參數(shù)里的-Dfile.encodingUTF-8以及conf/logging.properties的編碼設(shè)置。三處都對上中文才不會到處出問題。SSL 相關(guān)的報錯集中在握手階段。java.io.IOException: keystore password was incorrect是最直白的——密碼錯了。更隱蔽的是unable to find valid certification path to requested target這出現(xiàn)在雙向認證場景服務(wù)端要求客戶端提供證書而客戶端沒有或者證書鏈不完整。雙向認證需要服務(wù)端配keystoreFile和keystorePass同時配truststoreFile和truststorePass來校驗客戶端證書還要把clientAuth設(shè)成true。少配任何一個握手都會失敗而且不同配置錯誤對應(yīng)的報錯信息差別很大建議一項一項對照著配。如果項目對加密算法有特定合規(guī)要求通常需要引入對應(yīng)的加密套件實現(xiàn)并調(diào)整 Connector 的協(xié)議配置這部分建議照著中間件廠商的官方文檔逐項核對不要憑經(jīng)驗猜。關(guān)于安全加固有三件事值得每年做一次把 Tomcat 升到當前維護的最新穩(wěn)定版刪掉webapps下所有用不到的默認應(yīng)用尤其是管理端把管理端口的訪問來源限制在可信網(wǎng)段。這些動作成本極低但能擋掉絕大多數(shù)自動化掃描。6. 調(diào)優(yōu)要點與容器替換的取舍6.1 Connector 與 JVM 的關(guān)鍵參數(shù)Connector上真正需要關(guān)注的參數(shù)不多我列幾個最常動的參數(shù)作用參考值maxThreads處理請求的最大線程數(shù)200 起步按壓測調(diào)acceptCount隊列滿后的等待隊列長度100maxConnections允許的最大連接數(shù)10000connectionTimeout連接超時毫秒20000compression是否壓縮響應(yīng)on僅對小文本有效調(diào)maxThreads的正確方式是壓測不是抄別人的數(shù)字。線程數(shù)加大的收益是有上限的因為下游的數(shù)據(jù)庫連接池、外部接口都有承載極限。我見過把maxThreads調(diào)到 2000 結(jié)果數(shù)據(jù)庫連接池只有 50最后瓶口全卡在數(shù)據(jù)庫上線程全在等連接內(nèi)存反而被線程棧撐爆。JVM 層面堆大小建議-Xms和-Xmx設(shè)成一樣避免運行期擴容帶來的停頓。元空間設(shè)個上限-XX:MetaspaceSize256m -XX:MaxMetaspaceSize512m防止動態(tài)生成類太多把內(nèi)存吃光。垃圾回收器在 JDK 8 上可以用 G1JDK 17 上直接用默認的就行沒必要折騰。部署時在setenv.shLinux或者setenv.batWindows里配置這些參數(shù)這樣升級 Tomcat 的時候參數(shù)不會丟。6.2 內(nèi)嵌容器的替換思路現(xiàn)在越來越多項目用 Spring Boot 內(nèi)嵌容器不再單獨部署 war。內(nèi)嵌場景下?lián)Q容器比傳統(tǒng)部署簡單得多本質(zhì)上就是換一個 starter 依賴。比如要換成 Undertow先在 web starter 里排掉 Tomcat再引 Undertowdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId exclusions exclusion groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-tomcat/artifactId /exclusion /exclusions /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-undertow/artifactId /dependency換 Jetty 也是同樣的套路把 artifactId 換成spring-boot-starter-jetty即可。需要注意的坑有兩個一是有些代碼直接依賴了 Tomcat 特有的類比如org.apache.catalina.*下的工具類換容器后編譯不過得先清理掉二是配置屬性的前綴會變從server.tomcat.*變成server.undertow.*參數(shù)名也不一樣遷移時要逐項對應(yīng)。如果項目有使用其他中間件產(chǎn)品的需求替換思路類似——多數(shù)商業(yè)中間件都會提供適配 Spring Boot 的 starter 或者遷移文檔關(guān)鍵是先確認它對 Servlet 規(guī)范的兼容程度以及是否有用到的 Tomcat 私有 API。這類替換我建議先在測試環(huán)境完整跑一遍回歸不要上來就改生產(chǎn)因為容器差異往往體現(xiàn)在一些邊緣行為上比如 Cookie 的默認屬性、URL 編碼的處理細節(jié)、靜態(tài)資源的緩存頭這些平時不顯眼的地方最容易出事。6.3 我踩過的幾個坑第一個是 IDEA 里配置 Tomcat 運行配置。不同版本的菜單路徑會變但核心永遠是三件事指定 JDK、指定服務(wù)器安裝目錄、在 Deployment 里添加 Artifact。如果啟動后報 404八成是 Artifact 的上下文路徑配的是/還是/項目名沒對上去看運行配置里的 Application context 那一欄。另外新版 IDEA 里有些配置項挪到了Settings的Build Tools下找不到的時候直接在設(shè)置里搜 Tomcat 比翻菜單快。第二個是熱部署的錯覺。改了 Java 代碼點重新部署有時候改動沒生效原因是 classes 沒有重新編譯或者輸出目錄指向了舊的路徑。最穩(wěn)的做法是 Build 之后再 Run不要依賴 IDE 的自動編譯。第三個是日志級別。排查問題時把conf/logging.properties里的級別從INFO調(diào)到FINE能看到大量內(nèi)部狀態(tài)信息比如類加載過程、URL 匹配過程。問題解決后記得調(diào)回來否則日志文件會迅速膨脹磁盤被寫滿又是另一個故障。我個人在實際操作中的體會是Tomcat 的問題十有八九不是 Tomcat 本身的問題而是環(huán)境、依賴、配置這三者之間的錯位。所以排查時別急著改配置先把報錯鏈條完整讀一遍找到它落在哪一層再動手。手寫一遍迷你容器之后我對這條鏈路的感知明顯變強了——現(xiàn)在看到報錯第一反應(yīng)不再是搜關(guān)鍵詞而是先問自己這是網(wǎng)絡(luò)層、協(xié)議層還是容器層的事
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲色综合| 99精品综合在线| 激情六月五月婷婷综合网| 97超级啪啪在线观看| www婷婷亚洲| 亚洲成人日韩无码精品| 99无码精品| 开心激情综合| 五月丁香花婷婷玉莉AV| 丁香六月婷婷高清| 开心五月六月婷婷| 久青操| 婷婷五月丁香五月| 开心五月激情网| www,99热| 久久免费视频62| 一逼色综合| 婷婷亚洲在线| 色狠狠色噜噜AV天堂五区| 人妻久久久久久久| 啪到高潮激情丁香五月| 色婷婷五月天激情综合| 袁子仪视频观看| 九九色院| 日韩在线观看亚洲| 97五月综合网| AVV黄| 国产真实乱了老女人视频 | 粉嫩AV久久一区二区三区| 狠狠狠狠狠狠| 99热这里只有精品首页| 丁香六月情| 伊人五月久久| 激情www.98com| 99re这里只有精品99| 婷婷之玖玖| 亚洲欧洲中文日韩久久AV乱码| 五月激情综合网| 色综合色香蕉网| 激情小说婷婷| 激情五月天视频| 黄网免费看| 天天情色综合网| 伊人大香五月天| 久热黄色| 久久9视频| 国产4P视频精品五区| 人人妖人人97| 五他月天啪啪啪| 亚洲字幕AV一区二区三区四区| 日韩无码成人电影| 天天日日夜夜| 20253AV| 99精品成人无码A片观看金桔| 狠狠综合久久| 久久思思热| 亚洲超碰在线| 在线只有精品| 嫩BBB搡BBBB榛BBBB| 丁香五月激情综合| 97在线观视频免费观看| 噢美99| 丁香五月婷婷社区| 日韩无码性爱| 色五月婷婷天堂| 久9视频免费播放| 婷婷五月中文在线视频| 九九婷婷网五月天| 91精品无码| 久9视频| 99久re热视频精品98| 伊人久久大香网| 亚洲成人在线免费| 五月天激情国产综合婷婷婷| 久久久日韩特色特黄AAAA| 婷婷性爱五月天丁香网| 婷婷欧美激情综合| 久久在这里有精品| 午夜丁香五月天综合| 激情五月天色婷婷| 亚洲另类婷婷综合| 三十熟女| 2013AV天堂| av在线激情| 综合激情五月丁香| 五月花丁香婷婷| 国产欧美第五十五页| 五月天色图| 性做爰A片免费视频A片直播| 91综合视频在线| 91窝窝| 久久久免费图片视频| 冬月かえでAV无码播放| 伊人五月天综合网| 五月婷婷综合色啪首页| 一区二区三区四区牛| 欧美婷婷综合网| 丁香五月天亚洲综合| 99碰在线视频| 激情综合婷婷五月| 五月天婷婷视频小说| 日韩AV大全| 九九色综合网| 国外亚洲成AV人片在线观看| 99热精品网| 99啪啪网| 色综合色色色色色| 久热 91| 色五月激情婷婷| 色综合色| 欧美日韩五月婷婷| 男人综合网| 激情五月天伊人av| 极品少妇高潮啪啪AV无码| 狠狠婷婷色综合| 97成人超碰免| 99热这里只有精品13| 这里只有精品免费视频| 操碰97| 婷婷五月乱交换| 久久婷婷伊人| 婷婷淫淫狠狠六月| 六月色丁香婷婷| 一起草无码| 思思热99er在线视频| 五月天精品视频| 天天色综网| 97碰碰草| 天天弄天天爽| 伊人久久婷婷| 九九久久99| 中字幕视频在线永久在线观看免费| 99热97美女| 婷婷91| 激情五月丁香六月| 97超碰,人人舔,人人操,人人摸| 操久久精| 五月丁香六月激情欧美综合| 性做久久久久久久免费看| 久久国产高清| 性99网站| 精品人妻午夜一区二区三区四区| 97人人操人人干| 天天日,天天射,天天舔| 色.五月综合网| 五月间天堂综合| 色综久久久| 大香蕉九操| 欧美色必爱| 五月天激情综合在线| www.henhengan| 亚洲乱码日产精品BD| 91婷婷伊人牛牛| 激情六月婷| 中文字幕在线观看视频www| 97操碰人人| 伊人五月久久| 精品无码久久久久久久久| 日本久久人| www色综合| 少妇熟女视频一区二区三区| 包操45分钟网站| 激情av在线| 色五月 五月婷婷| 亚洲国产精品二二三三区| 五月伊人网| 五月丁香婷婷综合视频| 艹天天射| 婷婷五月丁香啪啪| 97狠狠色| 热九九精品| 97在线视频人妻九色| 天天摸天天舔| 99在线视频精品| 婷婷五月天狠狠色| 日本丰满久久| 五月婷婷色五月| 伊人在线大香蕉网| 日欧大屏操| 99综合成人视频在线观看| site:feetmall.com| 国产又黄又爽又色的免费| 五月五婷婷网| 国产FREESEXVIDEOS性中国| 天天插天天狠| 午夜少妇在线观看视频| 色情·com| 久热免费视频| 丁香五月天天高清在线| 色五月大| 综合久久99| 伊人五月天综合网| 久久综合久色欧美综合狠狠| 啄木鸟丝袜美女福利视频| 亚洲无码色| 婷婷五月永远18免费久久久| 北条麻妃伊人 | 激情综合网激情五月天| 五月婷婷六月丁香激情综合网| 91操人| 屁股翘好撅高迎合跪趴| 天天干天天色天天干| 五月天婷婷色播综合在线| 秋霞影音91人妻久久| 日日操天堂| 天天婷婷| 丁香丁婷五月激情| 无码免费人妻A片AAA毛片西瓜| 色色色视频| 久久婷婷午夜| 婷婷六月色开 | 色热久资源| 人妻人人操| 婷婷六月插屄激情| 日本天堂久久| 人人爱人人草| 五月丁香天堂网| 91日韩美女被插视频| 91人操人人人操人| 久久久久综合激动五月天| 高潮毛片又色又爽免费| 天天肏高清在线| 精品思思久久| 五月婷婷久久爱| 99九九视频| www.狠狠| 久热9热| AV在线免费网站| 婷婷六月丁香综合| 综合久久丁丁香婷| 欧美噜噜久久久XXX| 内射干少妇亚洲69XXX| 婷婷丁香综合成人| 中文字幕在线资源| 99在线看片| 大香蕉啪啪| 就99这里只有精品| 婷婷色吧| 亚洲人成播放网站| 五月丁香综合啪啪| 色99色| 色综合爱综合| 欧美综合五月丁香六月婷| 激情久久久| 99热在线只有精品| 婷婷色系婷色| 婷婷亚洲天堂| 操碰久| 欧洲电影在线观看免费版英语版| 色综合久久88色综合天天99| 婷婷五月花丁香| 成人精品在线观看| 国产激情av| 无码AV久久久久久久久| 丁香色婷婷| 可以直接看的AV| 五月天激情站| 狠狠搞五月天| 精品在线网站| 欧美久人人| 99婷婷狠狠成为人免费视频| 丁香六月综合激情| 亚洲AV综合网| 丁香五月天婷婷中文字幕| 欧美激情Va| 五月亭亭色| 精品一二三区久久AAA片| 97色啪| 婷婷五月天激情综合深爱激情| 婷婷开心深爱五月天| 超碰伊人碰婷婷五月| 少妇性BBB搡BBB爽爽爽视頻| 亚洲操操| 婷婷综合五月| 久久激情网| 日本一毛片| 婷婷五月天成人综合网| 五月开心婷婷| 婷婷性爱无码视频| 日日干夜夜撸夜夜骑| 91艹人| 奇米四色五月天| 欧美顶级少妇做爰HD | www.狠狠操.co m| 先锋资源91| 超91热| 亚洲欧洲中文日韩久久AV乱码| 婷婷深爱五月| 日韩十国产极品久久| 九九综合精品| 五月天另类综合网| 99爱免费视频在线观看| 亚洲综合色五月| 九九草热在线观看| 婷婷五月天色综合翘| 综合色久| 电影蜘蛛女| 超碰免费在线| 五月天婷婷久久日| 亚洲综合色丁香五月天| 久久国产成人9999久久久久| 国产偷人爽久久久久久老妇APP| 九九色逼| aV直接看| 欧美A片在线视频免费观看| 年轻的妺妺伦理HD中文| 99热99艹在线观看| 淫五月停停| 国产69久久久欧美黑人A片 | 色爱五月天| 五月网网站| 色婷婷激情视频| 精品色色网| 色狠狠色狠狠| 九九婷婷网五月天| 婷婷五月丁香91| 视频一二区| 丁香激情五月| 五月天激情综合| 丁香五月天啪啪| 久久久久久人妻| 婷婷五月天av| 婷婷桃色网| 婷婷99丁香| 丁香婷婷色色| 久久婷婷成人视频| 综合五月激情网| A久网| 综合色播| 五月亭亭六月天| 日韩1区2区| 久久婷五月婷| 亚洲乱码日产精品BD| 91 影音先锋| 色婷婷AV久久| 丁香五月,开心五月,成人婷婷 | 婷婷丁香色情五月天| 可以看的AV| 91视频一起草| 中字幕视频在线永久在线观看免费 | 亚洲性爱电影| 婷婷婷色五月| 成功精品影院| 久久婷婷五月天| 色婷婷综合久久| 18久久| 深夜男女福利刺激影院一区完整| 丁香婷婷射| 婷婷六月花| 偷拍91九色| 激情深爱综合| www.激情五月| 亚洲操操操| 伊人激情综合| 丁香五月色情| 狠狠五月激情丁香六月| 五月丁香六月欧美综合网站| 久久密臀婷婷| 伊人婷婷青青cao| 欧洲高清免费久久| 亚洲操b| 任你躁XXXXX麻豆精品| 大胆伊人久久| 五月激情婷婷色| 天天狠狠夜夜狠狠2023| 四川女人毛多水多A片| 婷婷中文字幕在线| 婷婷五六日| 无码动漫av| 亚洲精品V天堂中文字幕 | 亚洲精品成人| 久久六月综合| 亚洲色婷婷99一9|| 婷婷五月无码| 国产婷婷久久| 天天爽夜夜爽夜爽精品| 激情五月天网站| 激情淫乱男女| 五月花婷婷最新| 久久九九爽| 操逼亚洲天堂| 好吊丝aV| XX色综合| 日本在线视频www色| 这里只有精品69| 色五月天电影| 90色免费视频| 婷婷五月天成人导航| 中文av网| 丁香五月婷婷少妇| 五月丁香婷婷伊人| 99视频在线精品| 丁香五月婷婷久久久| 久久99婷婷| 婷婷婷婷色| 粉嫩AV久久一区二区三区| 91ncm视频| 停停五月天激情网| 久久无码成人| 99热这里精| 六月丁香五月婷婷| 婷婷 久综合| 婷婷五月综合久久中文字幕| 九九热9| 五月婷婷久久激情| 久色网| 99热只有这里有精品| 久久区区一二三av| 婷婷色五月色| 丁香五月97视频| 蜜桃婷婷丁香五月天狠狠久久综合| 色色色色综合网| 4399在线观看免费毛片| 久久玖玖综合| 99碰网站| 殴美日比视频| 久99视频在线观看| 97色婷| 婷婷五月电影| 99精品国产热久久91色欲| 大香蕉人人网| 99综合网| 另类精品视频在线观看| 欧美精品999| 六月丁香av| 91大神操美女| 日本人妻A片成人免费看片| 亚洲免费av在线| 99在线热视频| 婷婷五月天AV| 蜜桃婷婷五月| 亚洲视频在线观看| 色婷婷六月丁香综合欲精品| 久Se视频在线观看| 午夜丁香婷婷| 狠狠狠人妻| 97成人丁香| 日日天天干| www99精品| 99亚洲天堂| 婷婷丁香五月天在线视频| 福利视频在线播放| 人人爽欧美婷婷久久久五月丁香| 9视频1在线| 91操片| 欧美黑人大吊| 狠狠精品干练久久久无码中文字幕 | 亚洲瑟瑟精品在线| 1024在线视频| 激情99| 亚洲精品视频在线播放| 激情的五月婷婷蜜桃| WWW.桔色成人.COM| 99热费观看| 热99久| 婷婷五月天AV| 五月天中文字幕在线婷婷| 青青色com久久| 五月久久婷婷丁香| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 99re思思热在线视频| 国产真实乱对白精彩| 五月丁香777| 国产韩日亚洲美州欧亚综合在线| 9热在线| 99热e| 夜夜骑日日夜夜| 99啪在线| 最近免费中文字幕大全高清大全1| 久久99激情丁香婷婷小说网| 免费国产VA国产免费| AV在线免费观看不卡| 综合激情在线视频| 思思热热久久| 激情婷婷丁香五月天小说| 色综合激情图区| 欧洲亚洲午夜| 天天檫天天爽| 色婷婷五月天激情| 97碰人人操| 欧美精品在线观看| 色色色综合网| 网站免费一站二站| 热99只有精品| 这里只有精品偷拍| 97黑人精品区| 丁香五月婷婷影视先锋| 久热无码| 九九aV| 久久久A级视频| h在线看免费版在线看| 日日夜夜久| 婷婷另类开心| 色婷婷五月天中文字幕| 欧美乱码国产一级A片| 岛国在线观看91| 九九热免费| 五月婷在线观看| 美女激情婷婷| www..com色爱| 综合五月草| w婷婷五月婷婷w| 婷婷五月综合基地| 伊人热在线大香蕉| 五月婷婷六月丁香| 婷婷深爱五月天| 五月天狠狠色| 五月丁香影视| 十一月婷婷激情四射| 伊人狠狠干| 玖玖在线资源视频| 色婷五月婷婷| 欧美婷婷六月丁香综合色| 欧美啪啪9| 丁香熟女乱| 97人人操人人插| 久久精品国产一区二区三区四区| 中文字幕在线免费观看视频| 91成人性爱视频| 中文字幕精品在线观看| 色婷婷综合影院| 另类激情五月天| 丁香五月婷婷亚洲另类| 丁香五月婷婷色五月| 色婷婷五月天激情| 天天搡日日搡aaaaⅩ| 国产熟女日日骚五月丁香爱| 丁香六月婷婷色XXXXX| 国产色视频网站2| www.久操| 五月丁香六月婷婷激情四射| 殴美97色| 色婷婷88| 超碰人人超碰| 久操大香蕉| 人妻AV在线观看| 97干欧美| 九九亚洲视频| 996er热| 久久99精品视频| 成人看片网站| 极品人妻VIDEOSSS人妻| 337久久| 激情精品久久| 亚洲一级AV在线免费播放| 婷婷五月天你懂的| 一区二区免费看| 免费婷婷| 小视频aaa久久久| www天天干| 性生活久久人妻| 玖玖资源站蜜臀| 五月天婷婷视频小说| 国产精品爽爽久久久久久| 五月婷婷色| 色五月天丁香| 亚洲中文字幕在线观看| 天天日色情| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 婷婷激情五月| 婷婷五月情色| 色欲色香综合网| 精品人妻在线| 91九色精品熟女内射| 久久久99精品免费观看| 奇米四色五月天| 欧日韩成人| 精品人妻伦| 在热视频精品| 色99日韩| 狠狠色噜噜狠| 色婷婷情片| 久久九九爽| 就爱操www com| 婷婷成人五月天成人文学小说| 国产精品色婷婷99久久精品| 丰满老熟妇BBBBB搡BBB| 激情综合婷婷久久| 亚洲综合在线伊人婷| 天天综合天天玩夜夜玩天天玩夜夜玩| 五月天.com| 一起草av| 99色免费在线观看| 成人五月天在线观看| 婷婷五亚洲| 九九青青草成人| 互月天综合| 91操网| 亚洲狠狠终合停停终合| 99在线精品视频| 狠狠久久婷五月综合色| 久久人人九| 欧美精品中文字幕亚洲专区| 国产成人AV在线播放| 色婷婷五月天激情在线播放| 久久婷婷五月天激情| 乱精品一区字幕二区| 五月婷婷日| 丁香五月婷婷色综合基地| 久久激情五月婷婷| 亚洲精品无人区| 五月婷婷偷拍| VfJxEwPH| 久久小说| 99色激| 色婷婷五月天视频网站| 狠狠精品干练久久久无码中文字幕| 99超碰人人| 丁香5月啪啪| 五月天成人综合| 综合色七七| 那里有AV网址| 9l视频自拍九色9l视频在线观看| 色和综合网| 欧美激情丁香五月| 99国产精品久久久久久久久久久| 一级内射毛片| 久久AAAA片一区二区| 日韩精品999| 在线不卡的视频| 婷婷五月天色综合翘| 大香蕉婷婷丁香天堂AV| 啪精品| 色欲资源网| 一点色成人网| 都市激情久久| 五月丁香久久| 激情另类综合| 日本美女上人| 欧美性爱一区| 五月婷婷开心网| 操逼电影免费看| 五月色情网| 99久久婷婷| 日韩无码专区| 91热久久| 国产欧美第五十五页| 激情小说婷婷| 五月婷婷亚洲综合在线 | 91色在线| 亚洲激情久久| 五月丁香六月婷婷的女人| 91伦| 五月丁香六月婷婷综合网缴情| 成人做爰A片免费看视频| 天天艹天天综合网| 激情综合五| 久久激情网| 4399在线日本A片| 亚洲免费观看高清完整版AV线| www.婷婷.com| 天堂网色色| 丁香五月天电影| 亚洲精品成人片在线播| 色色色色色网| 久久婷婷丁香| 大香蕉婷婷色| 免费九九热| 涩五月婷婷| 婷婷久久五月天| 久久这里只有精品热在99| 五月五婷婷网| 疯狂做受XXXX高潮A片| 色97综合婷婷天天色| 91精品久久久久久综合五月天| 狠狠色婷婷在线| 粉嫩AV久久一区二区三区| 天天成人五月天| 91男女视频在线观看| 久久人妻系列| 97伊人综合婷婷| 中文资源在线a| 六月婷婷激情图片| 91久久久久久| 欧美性色五月天| 97色综合视频| 色情五月天丁香社区| 伊人久久大香网| 五月天综合视频| 中文人妻主播久久| 婷婷五月天av小说| AV成人在线播放| 久久激情网| 五月丁香六月激情| 婷婷在线免费| 91丁香五月| 五月天激情网图片| 久久96热| 日韩99视频| 99在线免费观看| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | 成人αV视频免费观看| 九九精品视频在线观看| 99在线视频资源| 亚洲无码色| 开心综合激情综合| 婷婷激情人妻| 婷婷久久综合| 中文在线视频久1| 九九九九国产| 综合99在线| 婷婷五月综合社区在线| 六月婷婷av| 色欲丁香久久| 色婷婷国产精品综合在线观看| 色婷婷五月综合| 婷婷五月丁香久久| A片一曲| 中文字幕有多少字| 国产成人AV在线播放| 九九sese| 人人干女人| 欧美日韩欧美| 中文字幕AV网址| 五月婷婷香蕉| 成人婷婷| 久9综合| 婷婷在线免费| 婷婷丁香色情| 丁香五月综合久久八| 性爱五月婷| 精品久热| 狠狠爱婷婷| 丁香六月亚洲综合| 色婷婷综合久色AV五色最新| 色色色色色色五月婷婷| 国产AV一区二区三区最新精品| 女人被男人吃奶到高潮| 色久五月| 色五月激情视频在线综合| 99视频在线看| 夜夜嗨一区二区三区直播内容 | 999热在线视频| 天天舔天天插天天爱| 久久五月情| 九九99九九精品免费| 婷婷五月天久久| 色婷婷基地| 五月婷婷久久爱| 超碰91在线| 99精品偷拍视频| 风流少妇A片一区二区蜜桃| 亭亭色网| 免费观看的婷婷五月视频在线| 久久黄色网扯| 九九色中文| 久久天堂| 色色五月丁香婷婷综合| www五月婷婷88导航| 免费精品99| 美欧日韩国产成人在战| 五月丁香六月婷婷操操操| 9久热这里只有精品视频| se99高清无码| 91性高潮久久久久久久久| 99综合熟女| 欲求不满的人妻| 久久婷婷五月综合色丁香花| 99热精品在线| 亚洲天堂久久| 五月婷婷综合在线| 久久黄色免费视频| 激情五月综合色| 中文字幕视频在线播放| 婷婷五月综合网| 久人操| 婷婷五月18永久免费网站| 五月婷狠狠| 日本操B视频| 成人综合网站| 无码AV久久久久久久久| 成人视频网| 噜噜噜狠狠色综合| 激情小说五月天| 91婷婷| 九九在线视频| 内射人妻视频国内| 国产成人一区二区三区在线观看| 激情综合久久| 嫩草AV久久伊人妇女超级A| 九九黄色网| AA片在线观看视频在线播放| 亚洲亚洲人成综合网络| 日本熟妇乱妇熟色A片蜜桃| 欧美在线| 五月婷婷爽爽爽| 99视频综合| 丁香五月玖玖| 婷婷丁香综合| 丁香六月婷婷综合欧美| 五月婷网| 久月丁香爱婷婷综合| 婷婷五月天激情在线观看 | 9超碰在线| 一本久道综合99| 亲子乱AV一区二区三区下载| 99精品久久| 99热这里只有精品国产免费| 日韩狠狠色婷婷| 五月婷婷深爱六月| 99热网站| 99在线精品视频| 夜夜爱网站| 搡BBBB搡BBB搡五十| 91无码一起草| www.久9| 粉嫩av蜜桃av蜜臀av| 精品五月视频婷婷在线观看| 婷婷综合网在线| 伊人五月天婷婷| 久久久久人妻| 激情小说视频图片| 久久99热网| 久久性爱激情| 丁香激情网| 亚洲AV激情五月综合网| 欧美色五月天| caop在线视频| 日本乱子人伦在线视频| 婷婷综合在线视频| www九九热| 九九这里精品| 99热久| 婷婷五月天电影网| 97luluse| 综合久久97| 日日鲁鲁夜夜爽爽| 狠狠干在线| 激情五月六月婷婷| 婷婷天堂伊人| 久久激情五月| 激情九九这里只有精品| AV在线大香蕉| 亚洲综合网在线| 九九综合网色全集 | 热久久思思热思思| 婷婷五月六月丁香| 色综合婷婷| 91碰九色| 亚洲色婷婷色| 欧美狠狠色| 99热这里只有精品9| 肏日网在线看| 69堂午夜视频最新地址| www,天天干| 超碰99在线| 亚洲无码黄色| 婷婷五月天手机版视频| 六月丁香啪啪啪| 五月婷婷 婷婷五月 一区二区 久久久 | 99视频久久| 色五婷婷| 久久五月视频| 色欧美影院| 欧美丁香六月激情视频| www色五月| 就爱日五月天| 五月婷婷激情四季| 97超碰在线免费观看| 丁香五月婷婷欧美性爱| 丁香五月影院| 丁香婷婷激情| 在线观看日韩12345区| 婷婷五月天免费小说| 免费视频99| A片试看120分钟做受图片| 激情综合九月| 色五月在线观看| 成 久久| 91人妻人人做人碰人人爽九色| 操日本99| 99在线观看这里都是精品| 色五月欧美| 九九视频在线观看视频在线播放69| 婷婷激情五月天7| 久草性爱| 久久99三级在线视频| www激情网| 97香蕉碰碰人妻国产欧美| 91人人操人人爱| 噜噜色婷婷| 国产成人综合亚洲| 色播五月婷婷综合| 亚洲AV免费在线| 日韩成人电影在线播放| 精品久久久人妻| 亚洲日比视频| 久热这里只有精品66| 99热这里只有精| 日韩成人精品中文字幕| 人妻久久婷婷| 黄色一级影片| 丁香婷婷基地| 国内在线99视频| 色婷婷裸体色性在线| 日本一级淫| 激情五月天无码| 超碰av在线| 狠狠艹狠狠艹| 婷婷网五月天| 99热精品在线| 99日本视频| 99re在线免费视频| 色一情一乱一乱91Av| 色你久久| 97人人草| 狠狠操天天操天天操| 五月丁香婷婷成人综合网| 久久婷青青草原| 婷婷五月丁香久久| 超碰人人插| 99热久久这里只有精品2010| 超级碰 久久9| 国产精品VA在线| 日韩一级网站| 玖玖婷婷五月| 久9久9热久热| 色日本五月天| 五月网激情| 国产精品第一国产精品| 综合色天天| 婷婷最新地址| 激情色视频| 久久久人人操A V| 五月天综合色| 91成人电影| 色五月激情综合网| 欧亚色色| 99在线精品免费视频| 狠狠操天天日| 玖玖九九9999在线观看视频精品| 五月天婷婷综合免费| 性热视频99精品| 97操碰视频| 婷婷六月丁香激情| 成人免费120分钟啪啪| 五月综合激情视频| 亚洲色图啪啪| 殴美日比视频| 婷婷五月天日本国产| 丁香五月影| 色噜噜五月天| 国产成人网站在线观看| 91婷婷| 丁香5月婷婷| 日亚二欧美| 热99这就是精品视频| 深爱激情四射| 久久182| 婷婷丁香在线| 天天艹天天色| 久久精品99久久久久久久久| 综合AV在线| 亚洲色婷婷网站| 久久激情婷婷| 欧美在线视频99| 激情黄色五月天| 久热伊人在91| 丁香六月啪啪| 婷婷丁香人妻久久在线观看| 丁香五月停停基地| 涩五月婷婷| 涩五月色婷婷| 五月激情综合网| www,999日本色| 日本色五月| 天天狠天天狠| 久碰久| 丁香五月欧美| 丁香婷婷婷五月| 99热婷婷| 996黄色片| 天天日综合| 开心婷婷五月天激情网| 九九精品网站| 精品视频网| 青青草五月天| 激情五月天在线视频| 99热欧美在线观看| 久久机热探花| 午夜少妇在线观看视频| 丁香五月成人婷婷| 亚洲 激情 中文| 久9热视频在线观看| 先锋影音av色五月天资源站| www..999热久| 丁香网五月天激情| 99热 这里只有精品 国产 日韩| www.com久久久久久久久久久久久久久久久| 九九re精品视频在线观看| 亚洲六月婷| 91久久| 欧美一黄一色一乱一伦| 色9999日韩国产| 色五月五月婷婷| 青青草六月丁香| 九九日本视频| 黑人熟妇一区二区三区| 91色呦哟| 狠狠干,狠狠操| 丁香六月婷婷色播| 久久机热思思热| 日日噜狠狠色综| 丁香五月欧美色综合| 亚州男人天堂婷婷五月| 日本九九九九| 五月丁香久久网| 天天骑天天操| 天天操天天日天天爽| 婷婷五月在线免费| 91|九色|动漫| 丁香六月天婷婷| 超碰免费人| 欧美激情综合| 色色射| 国产综合婷婷| 婷婷色激情五月天| 白天AV月月| 99在线观看亚洲| 丁香五月六月综合激情| 五月婷综合激情| 男同色五月开心五月激情五月| 99九九精品| 丁香五月电影| 影音先锋噜一噜| 丁香五月欧美午夜视频| 婷婷激情社区| 国产婷婷五月天| 婷婷丁香亚洲五月天| WWW色综合| 婷婷成人综合| 五月丁香婷婷综合网| www.综合久久.com| 六月激情丁香一道本7777| 99爱在线| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 96精品久久久久久久久| 丁香五月天狠狠| 深爱激情综合网| 婷婷五月天偷拍| 色色综合视频| 婷婷十月丁香| 武汉美女啪啪视频免费一级片| 99综合视频| 色很很96| 久久久久久99日本| 天天搞天天色综合| 五月色亭丁香| 日韩精品在线观看9| 免费婷婷| 色插综合网| 开心五月婷婷婷美女| 五月综合丁香婷婷| 麻豆AV一区二区三区| 五月婷婷六月丁香综合| 五月丁香啪啪网| yazhoujiqingav| 国自产拍偷拍精品啪啪一区二区| 婷婷成人视频| 久99热| av亚洲国产小电影| 人人色人人弄人人操| 色婷婷五月综合激情中文字幕| 超碰日韩人妻在线| 99久久天堂婷婷| 色综合av超碰| 97碰| 欧美狠狠一在草| 337p午夜影院| 99热精品免费在线观看| 综合五月婷婷| 欧美日韩成人一区二区| 亚洲精品99| www九九热| 天堂伊人干| 狠狠色狠狠色综合日日91| 97婷婷狠狠久久综合9色| 婷婷五月天Av| 欧洲永久精品| 久久人妻情侣| 五月六月婷| 成人AV在线网站| 五月婷婷激情| 久久人人添人人爽添人人片αV| 超碰在线资源| 成人婷婷| 天天日天天摸天天| 99热在线成人网站| 色婷婷影音| 大天天伊人| 日韩成人中文| 亚洲黄色影视| 五月婷婷激情| 中文字幕 中文字幕明步| 五月开心六月婷婷在线播放网站| 91肏| 亚洲六月综合激情久久下卡| 激情久久网| 丁香五月婷婷激情小说| 色性日本| 激情六月天婷婷| 久久思思热| 亚洲国产另类av| 久热伊人| 久久久久久丁香五月| www.婷婷,com| 亚洲精品V天堂中文字幕| 久久爱综合| 久久婷婷青草五月天| 婷婷视频在线| 中文字幕在线资源| 婷婷六月丁香五月图区| 免费国产视频| 人人射av| 超碰三级片| 成人做爰黄A片免费看直播室男男 久草热8精品视频在线观看 | 97视频久久| 婷婷综合五月色播| 激情综合网五月丁香| 大伊香蕉精品视频在线| 色婷婷五月天成人网| 日韩欧美四五区| 激情婷婷久久| 婷婷综合性爱网| 97狠狠色| 日日日日操| 欧洲色| 久草五月婷| 丁香婷婷久久激情| 丁香 久久| wwwav大香蕉| 99操视频| 这里只有精品在线视频在线观看| 91婷婷| 婷婷五月天AV在线| 色婷婷狠狠久久综合五月| 大香蕉婷婷色| 激情五月天婷婷丁香| www.sd-xiangsu.cpm| 日本欧美国产| 奇米色大香蕉| 99在线观看免费精品视频| 99亚洲视频| 婷婷婷婷午夜| 99热免费精品热久久66| 久久久久婷| 丁香婷婷影院| 五夜丁香| 99综合| 狠狠va| 婷婷五月天男人影院色色网| www,婷婷| 一起草无码| 99精品在这里| 亚洲精品V天堂中文字幕| 大香蕉AV电影在线| 大香蕉人人网| 成人AV在线电影| 日韩99色| 5月婷婷五月天| 超碰在线综合| 开心激情网五月天| 精品一二三区久久AAA片| 97操碰在线97| 欧美综合五月丁香六月婷| 久久久思思热| 九九热这里只有精品一| 美女五月狠狠| 99在线小视频| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 婷婷五月天你懂的| 91综合在线| 亚洲精品五月| 久久人人九| 婷婷综合色图| 婷婷99狠| 五月天色视频| 狠狠色中色| 麻豆AV一区二区三区| 天天人人综合| 在线成人网站| 久久久久久久97| 99久在线精品| 久久色五月| 97热在线精品| 97极品在线| www.五月丁香| 成人av观看| 婷婷亚洲综合| 亚洲成人av在线播放| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 丁香五月综合婷婷| 青青草tp| 亚洲综合视频在线| 五月天操逼网| 五月丁香六月成人| 97人人搞| 99re视频在线播放| 中文无码婷婷| 五月丁香婷婷在线| 五月婷在线| 99久久久| 操操啪| 欧美色播综合在线观看| 国产精品久久久久久亚洲毛片| 天天干,噜噜色,狠狠色| 国产真人做爰视频免费| 丁香五月天激情小说| 性色九九| 99热免| 无码髙清| 五月丁香激情啪啪| 人人干天天舔| 国产精产国品一二三在观看| 日韩乱玛久久| 人人妻人人澡人人爽| av在线激情| 99热这里只有精品268| 色999亚洲人成色| 日逼免费视频| 久久99日本精品视频免费观看| 久久婷婷亚洲| 色综合色| 无码AV久久久久久久久| 人妻精品久久久久久久| 五月天久草| 91丨九色丨熟女|新版| 婷婷亚洲日本| 91.www综合| 五月天亭亭俺也| 久操热线| 免费无码毛片一区二区A片| 五月丁香无码| 操逼三区| 婷婷丁香五月综合| 婷婷丁香五月,狠狠综合| 日本黄色精品| 国产无套精品一区二区| 亚洲婷婷丁香五月亚洲| 超碰自拍天堂| 色综合com| 99热这里只有精品69| 日韩无码性爱| 很很干天天干| 日日懆天天懆| 久久久久久99精品无码| 久久久久久久人妻| 色久激情在线| 欧美五月婷婷| 99热在线观看| 天天综合久久| 亚洲一色色色色色色色色| 奇米影视在线视频| 99啪啪| A网在线欧洲| 亚洲天堂爱爱| 五月丁香婷婷钟和色图| 91大神操美女| 五月综合亚洲婷婷| 97色热| 日韩ww| 九九激情综合| 午夜婷婷六月天| 丁香六月婷婷综合| 久久密臀婷婷| 五月丁香影视|