99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

手寫迷你Tomcat:從報錯分層到Web容器原理

手寫迷你Tomcat:從報錯分層到Web容器原理 Tomcat 這玩意兒做 Java Web 的基本繞不開??涩F(xiàn)實里最常見的場景是本地跑得好好的一上服務(wù)器就報Address already in useIDEA 里點啟動控制臺刷出一屏紅字最后一行寫著could not obtain connection to query metadata項目部署上去訪問是 404日志里連個像樣的提示都沒有。多數(shù)人這時候的做法是百度關(guān)鍵詞找到一條差不多的答案復(fù)制粘貼重啟好了——但下次換個環(huán)境又炸因為壓根不知道這個報錯是從哪一層冒出來的。我這篇文章想干兩件事。第一件把 Tomcat 常見的報錯按出問題的層次重新梳理一遍從啟動腳本、端口、類加載、連接池一路到 SSL 配置講清楚每種報錯背后到底發(fā)生了什么為什么這么解。第二件也是我覺得更有意思的——手動寫一個能跑起來的迷你 Tomcat用ServerSocket加線程池自己解析 HTTP 報文、自己映射 Servlet、自己加載WEB-INF下的類。寫完之后你再回頭看那些報錯會發(fā)現(xiàn)它們的位置感一下子就清晰了ClassNotFoundException 是類加載層的事404 是映射層的事端口沖突是網(wǎng)絡(luò)層的事各歸各位。這篇內(nèi)容適合誰看正在被 Tomcat 報錯折磨的運維和后端同學、想搞明白 Web 容器內(nèi)部到底怎么回事的初中級開發(fā)者、以及準備給現(xiàn)有項目做容器替換或者調(diào)優(yōu)的人。代碼部分我會給完整可運行的版本但更重要的是每一步為什么這么設(shè)計——這才是我自己踩坑之后真正記住的東西。1. 先想清楚Tomcat 到底替我們接管了哪些活1.1 一個請求進來經(jīng)過了幾道手很多人對 Tomcat 的認知停留在放 war 包的地方。但你只要自己寫過一次最原始的 Socket 服務(wù)就會立刻明白它省掉了多少事。一個 HTTP 請求從瀏覽器發(fā)出到你的doGet方法被執(zhí)行中間至少經(jīng)歷了這些環(huán)節(jié)內(nèi)核把 TCP 連接交給監(jiān)聽端口的進程Tomcat 的 Acceptor 線程接住這個連接交給 Worker 線程Worker 從 socket 上讀字節(jié)流按 HTTP 協(xié)議切分出請求行、請求頭、請求體根據(jù)請求行里的 URI找到對應(yīng)的 Host、Context也就是你的應(yīng)用、Wrapper也就是那個具體的 Servlet構(gòu)造HttpServletRequest和HttpServletResponse兩個包裝對象調(diào)用Servlet.service()最后把響應(yīng)對象里的狀態(tài)行、響應(yīng)頭、響應(yīng)體按協(xié)議格式寫回 socket 并關(guān)閉連接。這里面每一環(huán)都可能出錯而且報錯信息分布在完全不同的地方。端口被占用是內(nèi)核層直接就拒絕了URI 找不到對應(yīng) Context 是映射層的問題Servlet 類加載不出來是類加載器的問題。你把這條鏈路在腦子里畫出來排查速度至少快一倍。1.2 為什么手寫一遍是最快的理解方式我在帶新人的時候有個固定動作讓對方用ServerSocket寫一個只返回 hello 的服務(wù)。寫完之后再問一句如果我要支持兩個不同的路徑返回不同內(nèi)容呢他就自然開始想路由表再問如果我要讓用戶自己寫類來處理請求呢他就自然想到接口和反射再問如果用戶把類打包成 jar 放在某個目錄下呢他就自然碰到類加載器。這就是手寫迷你 Tomcat 的價值——它把你平時當成黑盒的那一層拆成了幾個你能一手寫完的小模塊。而且這個過程不白費功夫Tomcat 本身的架構(gòu)也是這么分層的Server→Service→ConnectorEngine→Host→Context→Wrapper。你手寫的版本就是它的一根簡化骨架。1.3 報錯分類的底層邏輯我把常見報錯歸成五大類后面第 5 章會逐條展開報錯層次典型現(xiàn)象排查入口啟動腳本 / 環(huán)境雙擊閃退、JAVA_HOME not foundcatalina.bat、setclasspath.bat輸出網(wǎng)絡(luò) / 端口Address already in usenetstat、lsof、ps -ef部署 / 映射404、歡迎頁不對、應(yīng)用未加載logs/catalina.out、conf/server.xml類加載 / 依賴ClassNotFoundException、NoClassDefFoundErrorWEB-INF/lib、WEB-INF/classes資源 / 配置連接池拿不到連接、SSL 握手失敗、亂碼數(shù)據(jù)源配置、keystore、Connector編碼這張表你貼在工位上遇到紅字先定位它在哪一行比漫無目的地搜關(guān)鍵詞高效得多。2. 手動實現(xiàn)迷你 Tomcat 的整體設(shè)計2.1 拆成三層網(wǎng)絡(luò)層、協(xié)議層、容器層我在設(shè)計這個迷你容器的時候刻意做了嚴格分層因為分層本身就是為了讓報錯有歸屬。網(wǎng)絡(luò)層只干一件事綁定端口accept()阻塞等待連接把Socket丟給線程池。它完全不懂 HTTP也不懂你的業(yè)務(wù)。協(xié)議層負責把InputStream里的字節(jié)翻譯成結(jié)構(gòu)化的請求對象再把結(jié)構(gòu)化的響應(yīng)對象序列化回字節(jié)。容器層則負責路由、Servlet 生命周期、類加載。為什么非要這么分因為分完之后你要換實現(xiàn)的時候成本極低。比如網(wǎng)絡(luò)層從 BIO 換成 NIO容器層一行都不用改協(xié)議層要支持 HTTP/1.1 的chunked傳輸也只需要改動解析和寫出這兩個方法。Tomcat 的Connector和Container分離就是這個道理只不過它做得更極致。2.2 網(wǎng)絡(luò)模型為什么從 BIO 起步有人會說都什么年代了還寫 BIO。但對一個用來理解原理的迷你實現(xiàn)BIO 加線程池是最優(yōu)解原因有三點。第一代碼路徑清晰。一個請求一個線程你打斷點的時候能完整看到從accept到service的調(diào)用棧不會在 Selector 的事件循環(huán)里迷失。第二它足夠支撐中等規(guī)模場景。Tomcat 直到 8.5 才默認啟用 NIO此前長期使用的 APR 和 BIO 組合在生產(chǎn)環(huán)境跑了十幾年說明 BIO 加合理線程池并不是不能用。第三也是關(guān)鍵的一點——它讓你直觀感受到maxThreads這個參數(shù)到底限制的是什么。當你看到線程池滿了之后新連接全部堵在accept隊列里你就永遠不會再隨便把maxThreads調(diào)到 5000。提示迷你實現(xiàn)用 BIO 是為了理解生產(chǎn)上 Tomcat 8.5 以后默認就是 NIO 模式IO 多路復(fù)用在連接數(shù)上萬時優(yōu)勢明顯這一點不要混淆。2.3 目錄結(jié)構(gòu)與職責劃分我最終落地的結(jié)構(gòu)是這樣的mini-tomcat/ ├── src/main/java/com/example/mt/ │ ├── MiniTomcat.java // 啟動入口網(wǎng)絡(luò)層 │ ├── http/ │ │ ├── MiniRequest.java // 請求對象協(xié)議層 │ │ ├── MiniResponse.java // 響應(yīng)對象協(xié)議層 │ │ └── HttpParser.java // 報文解析 │ ├── container/ │ │ ├── MiniServlet.java // Servlet 接口 │ │ ├── ServletMapping.java // 路由表 │ │ └── WebXmlParser.java // 配置解析 │ └── loader/ │ └── WebappClassLoader.java └── webapps/ └── demo/ ├── WEB-INF/web.xml ├── WEB-INF/classes/ └── index.html每個包的邊界和前面說的三層嚴格對應(yīng)。MiniTomcat里的代碼不會出現(xiàn)Servlet字樣container包里的代碼不會出現(xiàn)Socket字樣。這個約束看起來很教條但你寫下去就會發(fā)現(xiàn)它逼著你在正確的層次上解決問題。比如 URL 解碼把%E4%B8%AD還原成中文它天然屬于協(xié)議層就該放在HttpParser里而不是散落在路由查找的代碼中。3. 核心細節(jié)拆解報文解析、路由映射與類加載3.1 HTTP 請求解析里最容易踩的三個坑第一個坑BufferedReader和請求體的沖突。新手最常見的寫法是new BufferedReader(new InputStreamReader(socket.getInputStream()))然后readLine()讀第一行得到請求行。這在純 GET 請求下沒問題因為 GET 沒有請求體。但一旦是 POST你再用同一個 reader 去讀 body就會讀到空——因為BufferedReader內(nèi)部做了緩沖已經(jīng)把一部分 body 吃進它自己的緩沖區(qū)了而你從InputStream直接再讀讀到的是緩沖區(qū)之后的內(nèi)容。正確做法是解析完請求頭和請求行之后根據(jù)Content-Length頭從原始的InputStream上精確讀取對應(yīng)字節(jié)數(shù)。這也是為什么 Tomcat 內(nèi)部對ServletInputStream有嚴格的狀態(tài)機管理——一旦你調(diào)用了getReader()再調(diào)getInputStream()就會拋IllegalStateException。它就是在防這種讀串了的情況。第二個坑請求頭的行結(jié)束符。HTTP 協(xié)議規(guī)定是\r\n但有些客戶端或者手寫的測試工具會只發(fā)\n。readLine()恰好能容忍這兩種所以手工解析時用它反而安全。但如果你自己用read()逐字節(jié)找\r\n就得考慮兼容。第三個坑URI 的編碼。請求行里的 URI 是經(jīng)過百分號編碼的中文參數(shù)、空格、特殊符號都會變成%XX形式。加上號在表單提交里代表空格這兩套規(guī)則混在一起很容易解析錯。我的處理順序是先按?切出 path 和 query再對 query 按切分、按切分最后對 key 和 value 分別做URLDecoder.decode(value, UTF-8)。注意URLDecoder會把也解成空格這在 query 場景下是符合規(guī)范的。3.2 響應(yīng)格式與狀態(tài)碼的封裝響應(yīng)寫出去的時候最容易忽略的是頭部順序和Content-Length。HTTP 響應(yīng)格式是HTTP/1.1 200 OK\r\n Content-Type: text/html;charsetUTF-8\r\n Content-Length: 128\r\n \r\n body我見過有人把Content-Length算錯結(jié)果是瀏覽器一直轉(zhuǎn)圈等數(shù)據(jù)直到超時。原因通常是用了Writer寫字符但在計算長度的時候算的是字符數(shù)而實際發(fā)出的是字節(jié)數(shù)。中文一個字符 UTF-8 下占三個字節(jié)這個差值會讓Content-Length偏小瀏覽器收到少于聲明長度的數(shù)據(jù)就會一直等。所以在迷你實現(xiàn)里我統(tǒng)一用ByteArrayOutputStream先在內(nèi)存里把響應(yīng)體字節(jié)攢好拿到真實的字節(jié)長度之后再寫Content-Length最后一次性刷出去。這個先攢后發(fā)的思路和 Tomcat 里OutputBuffer的設(shè)計是一致的。3.3 路由映射從 URI 到 Servlet 實例路由的本質(zhì)是一個查找表。我在實現(xiàn)時用了最簡單的方式MapString, MiniServletkey 是url-patternvalue 是單例的 Servlet 實例。這是為了簡化真實 Tomcat 里每個請求都會拿一個StandardWrapper它管理著 Servlet 實例的單例和生命周期。匹配規(guī)則上我先實現(xiàn)了精確匹配然后補了兩條匹配類型寫法例子精確匹配/user/list請求路徑完全相同才命中前綴匹配/user/*以/user/開頭都命中擴展名匹配*.do以.do結(jié)尾都命中默認匹配/兜底通常指向靜態(tài)資源處理優(yōu)先級是精確 前綴 擴展名 默認這一點必須和 Servlet 規(guī)范保持一致否則同一個項目從真正 Tomcat 遷移到你的迷你容器上行為就不一樣了。順便說一句這個優(yōu)先級順序是很多人配置DispatcherServlet時踩坑的來源——/*會覆蓋掉*.jsp的映射導(dǎo)致 JSP 直接變成下載文件。3.4 類加載器隔離Tomcat 最容易被誤解的一層WEB-INF/classes和WEB-INF/lib/*.jar是應(yīng)用私有的父加載器看不到它們這就是所謂的類加載隔離。為什么要隔離因為同一個 Tomcat 上可能跑十個應(yīng)用它們依賴的spring-core版本可能完全不同。如果不隔離第一個加載的版本就會覆蓋后面所有的應(yīng)用。Tomcat 的類加載順序和標準雙親委派是反的它先嘗試用WebappClassLoader自己加載加載不到才交給父加載器。這個打破雙親委派的行為正是很多ClassNotFoundException和LinkageError的根源。我在迷你實現(xiàn)里用URLClassLoader簡化了這件事public class WebappClassLoader extends URLClassLoader { public WebappClassLoader(File webappDir, ClassLoader parent) throws Exception { super(buildUrls(webappDir), parent); } private static URL[] buildUrls(File webappDir) throws Exception { ListURL urls new ArrayList(); File classes new File(webappDir, WEB-INF/classes); if (classes.exists()) { urls.add(classes.toURI().toURL()); } File lib new File(webappDir, WEB-INF/lib); File[] jars lib.listFiles((d, n) - n.endsWith(.jar)); if (jars ! null) { for (File jar : jars) { urls.add(jar.toURI().toURL()); } } return urls.toArray(new URL[0]); } }有了它你在 Servlet 里寫Class.forName(com.example.MyService)就能找到應(yīng)用私有的類而不會跑到系統(tǒng)的 classpath 里去找。理解了這幾十行代碼你再看 Tomcat 那些NoClassDefFoundError思路會清楚很多要么是 jar 沒進WEB-INF/lib要么是同一個類被兩個加載器加載了導(dǎo)致類型轉(zhuǎn)換失敗。4. 完整實操寫一個能跑靜態(tài)資源和 Servlet 的迷你容器4.1 環(huán)境準備與工程搭建我用的是 JDK 17 加 Maven 的極簡配置。為什么選 17 而不是 8因為URLClassLoader在 9 以后的模塊化環(huán)境下有一些限制但用于加載普通 jar 依然沒問題而且 17 的Socket和字符串處理 API 更順手。如果你所在的項目必須用 JDK 8代碼也能原樣跑只是readAllBytes這類方法要換成循環(huán)讀取。pom.xml里只有一個 JUnit其余全靠 JDK 自帶。這一點很重要——我刻意不引第三方 HTTP 庫就是為了讓你看清協(xié)議本身的處理過程。用 Netty 或者 Undertow 能更快跑起來但那就失去意義了。4.2 啟動類網(wǎng)絡(luò)層的核心二十行public class MiniTomcat { private final int port; private final ExecutorService pool Executors.newFixedThreadPool(50); private final ServletMapping mapping new ServletMapping(); public MiniTomcat(int port) { this.port port; } public void start() throws Exception { mapping.load(new File(webapps/demo)); try (ServerSocket server new ServerSocket(port)) { System.out.println(MiniTomcat started on port port); while (true) { Socket socket server.accept(); pool.execute(() - handle(socket)); } } } private void handle(Socket socket) { try (socket; InputStream in socket.getInputStream(); OutputStream out socket.getOutputStream()) { MiniRequest req HttpParser.parse(in); MiniResponse resp new MiniResponse(out); if (req null) { return; } if (!mapping.dispatch(req, resp)) { StaticResourceHandler.handle(req, resp); } resp.flush(); } catch (Exception e) { e.printStackTrace(); } } }這里有個細節(jié)值得說try (socket; in; out)這種寫法會在代碼塊結(jié)束時自動關(guān)閉所有資源。很多人手寫 HTTP 服務(wù)時忘了關(guān) Socket跑壓測的時候幾百個連接瞬間把文件句柄耗盡報Too many open files。生產(chǎn)上的 Tomcat 有連接池和空閑回收手寫版本就必須靠try-with-resources兜底。線程池固定 50 個線程也是一種取舍。真實場景應(yīng)該做成可配置并且要意識到accept到線程池之后如果池子滿了任務(wù)會進無界隊列連接會一直堆著不處理。生產(chǎn)上更穩(wěn)妥的做法是給隊列設(shè)個上限滿了就快速返回 503這也是 Tomcat 的acceptCount在干的事。4.3 請求與響應(yīng)對象的實現(xiàn)要點public class MiniRequest { private String method; private String uri; private String path; private String protocol; private final MapString, String headers new HashMap(); private final MapString, String params new HashMap(); private byte[] body; public String getParameter(String name) { return params.get(name); } public String getHeader(String name) { return headers.get(name.toLowerCase()); } public String getMethod() { return method; } public String getPath() { return path; } // 省略 setter }MiniResponse我給了它三個核心方法setStatus、setHeader、write。write把字節(jié)寫進內(nèi)存緩沖flush負責拼裝成完整報文寫出去。這里再強調(diào)一遍前面提過的順序問題一定要在flush里現(xiàn)算Content-Length不要提前寫死。public void flush() throws IOException { byte[] data buffer.toByteArray(); StringBuilder head new StringBuilder(); head.append(HTTP/1.1 ).append(status).append(\r\n); if (!headers.containsKey(content-type)) { headers.put(Content-Type, text/html;charsetUTF-8); } headers.put(Content-Length, String.valueOf(data.length)); headers.forEach((k, v) - head.append(k).append(: ).append(v).append(\r\n)); head.append(\r\n); out.write(head.toString().getBytes(StandardCharsets.ISO_8859_1)); out.write(data); out.flush(); }注意響應(yīng)頭我用ISO_8859_1編碼寫出去。這不是筆誤HTTP 頭部按規(guī)范只允許 ASCII 字符用ISO_8859_1保證每個字節(jié)原樣傳輸。如果用 UTF-8 編碼頭部遇到非 ASCII 字符會變成多字節(jié)客戶端解析頭部就會錯位。4.4 靜態(tài)資源處理與 404 兜底靜態(tài)資源處理的價值在于它讓整個容器看起來像個真東西你可以在webapps/demo下丟一個index.html瀏覽器訪問就能看到頁面。public class StaticResourceHandler { public static void handle(MiniRequest req, MiniResponse resp) throws IOException { String path req.getPath(); if (/.equals(path)) { path /index.html; } File file new File(webapps/demo, path); if (!file.exists() || file.isDirectory()) { resp.setStatus(404); resp.write(h1404 Not Found/h1.getBytes(StandardCharsets.UTF_8)); return; } String name file.getName().toLowerCase(); resp.setHeader(Content-Type, MimeTypes.of(name)); resp.write(Files.readAllBytes(file.toPath())); } }有一個安全問題必須在手寫版本里就養(yǎng)成習慣路徑穿越。如果用戶請求/../../etc/passwd直接拼接路徑就會讀到系統(tǒng)文件。真實 Tomcat 通過canonicalPath校驗來解決。我在迷你版里加了一句規(guī)范化檢查這對理解 Tomcat 的安全加固很有幫助。順便說 JSP。我最初也想在迷你版里跑 JSP但真正的 JSP 需要先編譯成 Servlet 再加載執(zhí)行工作量翻倍。我選擇的做法是把 JSP 的編譯產(chǎn)物手動放到WEB-INF/classes下當成普通 Servlet 來跑。這也順帶解釋了熱詞里那個操作——web 項目配置 tomcat 后查看 jsp 編譯后的 java 類你在 Tomcat 的work/Catalina/localhost/應(yīng)用名/org/apache/jsp/目錄下就能看到這些中間產(chǎn)物。項目莫名其妙報 JSP 相關(guān)錯誤的時候去那個目錄看生成的 Java 文件比盯著 JSP 源碼猜快得多。4.5 啟動驗證與目錄約定把MiniTomcat跑起來控制臺輸出MiniTomcat started on port 8080然后瀏覽器訪問localhost:8080/index.html看到頁面訪問localhost:8080/hello看到 Servlet 返回的內(nèi)容整個鏈路就通了。驗證順序我建議這樣走先靜態(tài)資源再精確匹配的 Servlet再帶參數(shù)的 POST最后中文參數(shù)。每一步都通過再往下走出問題的時候定位范圍就很小。我當初第一次寫的時候POST 中文參數(shù)一路亂碼最后發(fā)現(xiàn)是Content-Length用的是字符數(shù)而不是解碼后的字節(jié)數(shù)導(dǎo)致 body 讀少了一半UTF-8 多字節(jié)字符被截斷。這類問題在真正的 Tomcat 里之所以不常見就是因為它的OutputBuffer和編碼器已經(jīng)處理好了這些邊界。5. Tomcat 常見報錯逐條排查實錄5.1 啟動類報錯端口、環(huán)境變量與腳本問題java.net.BindException: Address already in use是出現(xiàn)頻率最高的一條。它的意思非常字面端口已經(jīng)被別的進程占了。Linux 下排查用lsof -i:8080或者netstat -tunlp | grep 8080Windows 下用netstat -ano | findstr 8080拿到 PID再去任務(wù)管理器或者taskkill /PID xxx /F處理。有時候你確認沒有 Java 進程占著那就要考慮是不是之前的 Tomcat 沒殺干凈用ps -ef | grep tomcat過一遍再用kill -9清理。還有一種隱蔽情況TIME_WAIT狀態(tài)的連接還在占用端口這時候要么等一會兒要么在Connector上配SO_REUSEADDR。Neither the JAVA_HOME nor the JRE_HOME environment variable is defined這條出現(xiàn)在 Windows 下雙擊startup.bat閃退的場景。原因是setclasspath.bat在啟動時找不到 JDK 路徑。解決方式是設(shè)好JAVA_HOME環(huán)境變量指向 JDK 根目錄而不是bin目錄。如果你機器上有多個 JDK想讓 Tomcat 用指定的那個比如 JDK 17 而系統(tǒng)默認是 8可以在setclasspath.bat開頭顯式加一行set JAVA_HOMED:\jdk-17這樣只影響這個 Tomcat 實例不動全局環(huán)境變量多個 Tomcat 并存時特別有用。注意JAVA_HOME指的是 JDK 安裝目錄含bin/java的那一層不是 JRE 目錄也不是bin目錄本身。這一條看著簡單但我見過太多人在這里多寫一層或者少寫一層。5.2 部署與映射類報錯404 與歡迎頁404 的成因太多我一般按這個順序排查先看logs/catalina.out里有沒有應(yīng)用的啟動日志如果連 Deployment of web application archive 這種字樣的日志都沒有說明 war 包根本沒被掃描到檢查webapps目錄權(quán)限和conf/server.xml里的appBase配置如果有啟動日志但訪問還是 404那大概率是 context path 對不上你在server.xml里配了Context path/myapp瀏覽器就得訪問/myapp/xxx少一段多一段都不行。歡迎頁配置也是個高頻坑。web.xml里的welcome-file-list決定了訪問目錄路徑時默認返回哪個文件。如果列表里配了index.html但目錄下只有index.jspTomcat 不會自動幫你找直接 404。而且歡迎頁的查找是順序匹配的列表越靠前的優(yōu)先級越高把index.html放在index.jsp前面會導(dǎo)致 JSP 永遠不生效——明明文件在就是不顯示。打包方式也影響結(jié)果。war 包放進去 Tomcat 會自動解壓但如果你同時保留了舊的解壓目錄Tomcat 可能用的是舊目錄里的內(nèi)容。我踩過的坑是更新 war 包忘了刪對應(yīng)的解壓目錄改了半天代碼發(fā)現(xiàn)沒生效最后發(fā)現(xiàn)跑的是老目錄。穩(wěn)妥做法是停掉服務(wù)、刪掉 war 包和解壓目錄、再放新包。5.3 類加載與依賴類報錯java.lang.ClassNotFoundException和NoClassDefFoundError看著像含義不同。前者是主動加載時沒找到通常是Class.forName或者容器掃描時拋的后者是編譯期存在、運行期找不到常常意味著類在加載過程中失敗了比如靜態(tài)代碼塊拋了異常或者類被兩個不同的加載器加載了。排查的第一個動作是確認 jar 的位置。項目依賴必須是WEB-INF/lib下的 jar或者WEB-INF/classes下的 class 文件放在 Tomcat 的lib目錄里雖然也能用但那是容器級別的類加載器多個應(yīng)用會互相干擾強烈不建議。第二個動作是看有沒有版本沖突。兩個不同版本的同一個包同時出現(xiàn)在WEB-INF/lib里Tomcat 按文件名排序加載先加載的生效行為就變得不可預(yù)期。我整理過一個快速判斷表現(xiàn)象大概率原因處理方式啟動時立刻報 CNFEjar 缺失或路徑不對檢查WEB-INF/lib運行到某個功能才報反射加載的類名拼寫錯誤核對全限定類名報 NoClassDefFoundError 且?guī)?Cause靜態(tài)初始化失敗看異常鏈最底層類型轉(zhuǎn)換失敗 ClassCastException同類被雙加載器加載統(tǒng)一依賴來源5.4 資源與連接類報錯連接池拿不到連接熱詞里那條could not obtain connection to query metadata : cannot create我特別想展開講因為它太典型了。這個報錯通常出現(xiàn)在應(yīng)用啟動階段連接池Druid、HikariCP、DBCP 都可能嘗試建立第一條物理連接時失敗了。報錯信息本身只說了拿不到連接真正的原因藏在異常鏈里往往是下面幾種之一。其一是 JDBC 驅(qū)動和數(shù)據(jù)庫版本不匹配。比如數(shù)據(jù)庫是較新的版本驅(qū)動還是老版本握手階段就會失敗現(xiàn)象是cannot create后面跟著一個具體的握手異常。解決方式很直接換成匹配版本的驅(qū)動并且確認驅(qū)動 jar 在WEB-INF/lib下而不是只在你本地 IDEA 的庫路徑里。其二是應(yīng)用啟動時數(shù)據(jù)庫還沒準備好。容器編排場景下這很常見數(shù)據(jù)庫容器起來比應(yīng)用慢幾秒。連接池初始化就失敗整個應(yīng)用啟動中斷。我的做法是把initialSize設(shè)成 0 或者很小的值讓它懶加載同時配好connectionTimeout和失敗重試別讓啟動階段的一次失敗把應(yīng)用整個拖死。其三是賬號權(quán)限或者網(wǎng)絡(luò)不通這類用telnet或者數(shù)據(jù)庫客戶端從 Tomcat 所在機器上連一次就能確認。配好之后建議加一條validationQuery讓連接池在借出連接前做一次探活。這一步帶來的開銷很小但能擋住大量連接已被服務(wù)端關(guān)閉的詭異報錯。# Druid 參考配置 initialSize0 minIdle1 maxActive20 validationQuerySELECT 1 testWhileIdletrue connectionTimeout3000提示maxActive不要拍腦袋設(shè)大。數(shù)據(jù)庫端有最大連接數(shù)限制應(yīng)用側(cè)配得再大超過數(shù)據(jù)庫限制照樣連不上而且會掩蓋真正的慢 SQL 問題。5.5 編碼、SSL 與安全加固相關(guān)報錯中文亂碼分三種位置處理方式完全不同。請求參數(shù)亂碼看Connector上的URIEncodingTomcat 8 以后默認就是 UTF-8如果被顯式改成了ISO-8859-1中文參數(shù)就會亂同時確認conf/server.xml里 Connector 的useBodyEncodingForURI設(shè)置它決定 POST body 的編碼是否也應(yīng)用到 URI 上。響應(yīng)亂碼看Content-Type里的charset或者response.setCharacterEncoding??刂婆_和日志亂碼看 JVM 啟動參數(shù)里的-Dfile.encodingUTF-8以及conf/logging.properties的編碼設(shè)置。三處都對上中文才不會到處出問題。SSL 相關(guān)的報錯集中在握手階段。java.io.IOException: keystore password was incorrect是最直白的——密碼錯了。更隱蔽的是unable to find valid certification path to requested target這出現(xiàn)在雙向認證場景服務(wù)端要求客戶端提供證書而客戶端沒有或者證書鏈不完整。雙向認證需要服務(wù)端配keystoreFile和keystorePass同時配truststoreFile和truststorePass來校驗客戶端證書還要把clientAuth設(shè)成true。少配任何一個握手都會失敗而且不同配置錯誤對應(yīng)的報錯信息差別很大建議一項一項對照著配。如果項目對加密算法有特定合規(guī)要求通常需要引入對應(yīng)的加密套件實現(xiàn)并調(diào)整 Connector 的協(xié)議配置這部分建議照著中間件廠商的官方文檔逐項核對不要憑經(jīng)驗猜。關(guān)于安全加固有三件事值得每年做一次把 Tomcat 升到當前維護的最新穩(wěn)定版刪掉webapps下所有用不到的默認應(yīng)用尤其是管理端把管理端口的訪問來源限制在可信網(wǎng)段。這些動作成本極低但能擋掉絕大多數(shù)自動化掃描。6. 調(diào)優(yōu)要點與容器替換的取舍6.1 Connector 與 JVM 的關(guān)鍵參數(shù)Connector上真正需要關(guān)注的參數(shù)不多我列幾個最常動的參數(shù)作用參考值maxThreads處理請求的最大線程數(shù)200 起步按壓測調(diào)acceptCount隊列滿后的等待隊列長度100maxConnections允許的最大連接數(shù)10000connectionTimeout連接超時毫秒20000compression是否壓縮響應(yīng)on僅對小文本有效調(diào)maxThreads的正確方式是壓測不是抄別人的數(shù)字。線程數(shù)加大的收益是有上限的因為下游的數(shù)據(jù)庫連接池、外部接口都有承載極限。我見過把maxThreads調(diào)到 2000 結(jié)果數(shù)據(jù)庫連接池只有 50最后瓶口全卡在數(shù)據(jù)庫上線程全在等連接內(nèi)存反而被線程棧撐爆。JVM 層面堆大小建議-Xms和-Xmx設(shè)成一樣避免運行期擴容帶來的停頓。元空間設(shè)個上限-XX:MetaspaceSize256m -XX:MaxMetaspaceSize512m防止動態(tài)生成類太多把內(nèi)存吃光。垃圾回收器在 JDK 8 上可以用 G1JDK 17 上直接用默認的就行沒必要折騰。部署時在setenv.shLinux或者setenv.batWindows里配置這些參數(shù)這樣升級 Tomcat 的時候參數(shù)不會丟。6.2 內(nèi)嵌容器的替換思路現(xiàn)在越來越多項目用 Spring Boot 內(nèi)嵌容器不再單獨部署 war。內(nèi)嵌場景下?lián)Q容器比傳統(tǒng)部署簡單得多本質(zhì)上就是換一個 starter 依賴。比如要換成 Undertow先在 web starter 里排掉 Tomcat再引 Undertowdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId exclusions exclusion groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-tomcat/artifactId /exclusion /exclusions /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-undertow/artifactId /dependency換 Jetty 也是同樣的套路把 artifactId 換成spring-boot-starter-jetty即可。需要注意的坑有兩個一是有些代碼直接依賴了 Tomcat 特有的類比如org.apache.catalina.*下的工具類換容器后編譯不過得先清理掉二是配置屬性的前綴會變從server.tomcat.*變成server.undertow.*參數(shù)名也不一樣遷移時要逐項對應(yīng)。如果項目有使用其他中間件產(chǎn)品的需求替換思路類似——多數(shù)商業(yè)中間件都會提供適配 Spring Boot 的 starter 或者遷移文檔關(guān)鍵是先確認它對 Servlet 規(guī)范的兼容程度以及是否有用到的 Tomcat 私有 API。這類替換我建議先在測試環(huán)境完整跑一遍回歸不要上來就改生產(chǎn)因為容器差異往往體現(xiàn)在一些邊緣行為上比如 Cookie 的默認屬性、URL 編碼的處理細節(jié)、靜態(tài)資源的緩存頭這些平時不顯眼的地方最容易出事。6.3 我踩過的幾個坑第一個是 IDEA 里配置 Tomcat 運行配置。不同版本的菜單路徑會變但核心永遠是三件事指定 JDK、指定服務(wù)器安裝目錄、在 Deployment 里添加 Artifact。如果啟動后報 404八成是 Artifact 的上下文路徑配的是/還是/項目名沒對上去看運行配置里的 Application context 那一欄。另外新版 IDEA 里有些配置項挪到了Settings的Build Tools下找不到的時候直接在設(shè)置里搜 Tomcat 比翻菜單快。第二個是熱部署的錯覺。改了 Java 代碼點重新部署有時候改動沒生效原因是 classes 沒有重新編譯或者輸出目錄指向了舊的路徑。最穩(wěn)的做法是 Build 之后再 Run不要依賴 IDE 的自動編譯。第三個是日志級別。排查問題時把conf/logging.properties里的級別從INFO調(diào)到FINE能看到大量內(nèi)部狀態(tài)信息比如類加載過程、URL 匹配過程。問題解決后記得調(diào)回來否則日志文件會迅速膨脹磁盤被寫滿又是另一個故障。我個人在實際操作中的體會是Tomcat 的問題十有八九不是 Tomcat 本身的問題而是環(huán)境、依賴、配置這三者之間的錯位。所以排查時別急著改配置先把報錯鏈條完整讀一遍找到它落在哪一層再動手。手寫一遍迷你容器之后我對這條鏈路的感知明顯變強了——現(xiàn)在看到報錯第一反應(yīng)不再是搜關(guān)鍵詞而是先問自己這是網(wǎng)絡(luò)層、協(xié)議層還是容器層的事
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
91色在线/日韩| 色五月丁香六月婷婷| 无码操B| 丁香五月综合久久八| 亚洲九区| 综合成人小说婷婷| 五月草影视| 亚洲、欧美、国产另类笫二区| 人妻22p| 婷婷五月天成人网站| 九色PORNY自拍成人精彩视频| 国产欧美日韩综合精品一区二区| 色噜噜综合网| 天天舔天天爽| www.99情趣网| 99热中文字幕久久| 成人精品99| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 思思 热 99| 国产精品社区| 久久久精品AV| 婷婷色九月| 丁香社92视频| 夜色综合网| 亚洲亚洲人成综合网络| 天天操综合网| 国产成人精品一区二三区熟女在线| 久久免费操| 五月久久丁香| 婷婷五月在线播放| 高清无码视频网址| 91视频五月丁香| 中文字幕色色| 婷婷丁香五月网| 婷婷五月天论坛| 色五月丁香六月资源站| 欧洲亚洲免费视频区| 99热在线观看精品| 五月天婷婷一起草| 影音先锋 91工厂| eeuus五月婷| 五月丁香啪啪婷婷| 伊人五月婷婷| 丁香五月乱中文字幕| 色吧五月婷婷六月丁香| 激情色情五月天| 激情 婷婷 插| 婷婷日欧美在线观看| 五月成人网站| 熟女激情网| 天天在线XXX| 五月天婷婷在线播放| 婷婷五月骚厕所| 99在线视频在线观看| 79亚洲精品少妇| 中海油常州环保涂料有限公司| 成人在线精品| 色综合性视频| 激情婷婷五月| 国产成人99久久亚洲综合精品| 国産精品| 中国丰满熟女A片免费观| 久久精品99国产精品日本| 久久久久久久人妻| 1024欧美看片| www.99久| 激情开心五月亚洲| pom538精品视频| 五月天伊人| 婷婷五月另类网站| 99精品在线观看视频| 狠狠色婷婷7777久| 91丁香婷婷综合资源| 天堂爱啪啪| 日本一毛片| 五月色网| 蜜臀嫩草| 国产亚洲色婷婷久久99精品91| 99热人人| 射满了还射免费在线观看 -午夜版全集-新视觉影院| 99久精品| 99碰碰| 97人妻碰碰中文无码久热丝袜| aaa丁香五月天| 99极品视频| 狠狠操.COM| 婷婷精品性视频| 婷婷九月亚洲| 五月婷婷先锋| 久久狠狠高潮亚洲精品 天天摸夜夜摸夜夜狠狠摸| 性一交一乱一交A片久| 婷婷五月丁香图片人人操| 超碰操日| 综合激情开心五月| 猫咪伊人久久| 亚洲狠狠色丁香婷婷综合久久| 天天综合色99| www.五月天婷婷姐姐| 九九热99热| 91se在线视频| 99视频在线观看视频| 丁香激情四射| 亚洲精品国产精品乱码视99| 日韩中文字幕| 狠狠色五月激情| 六月丁香激情网| www久久99| 亚洲精品第一色色色色色色| 99 r热| 79色色色色| 五月婷色色| 三级av在线| 久久久久久99精品无码| 色永久| 国产无套精品一区二区| 九九人人自拍| 久久久久久人妻| 激情五月天婷婷| 久久九九99桃花视频| 五月丁香六月婷婷综合免| 天天做天天爱天天要| 精品人妻伦一二三区久久| 综合 蜜月 婷婷| 五月激情六月| 69精品人人人人| 精品网站:999WWW| m色激情网| 天天日天天插| 91精品熟女| 伦乱天堂| 色五月综合激情| 午夜丁香婷婷| 久热婷婷在线视频| 九九热在线精品视频| 玖玖九九超碰| 日日操天天| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 色色丁香婷婷| 丁香五月色色| 五月天色色色| 五月天激情图片| 六月婷婷久久| 成人丁香婷婷五月天| 99性爱视频| 欧美婷婷| 丁香五月激情综合| 伊人五月久久| 大香蕉人妻| 91超碰在线观看| 狠狠爱五月婷婷| 日本三日本三级少妇三级66| 99视频在线精品| 婷色天堂| 九九亚洲视频| 在线观看免费狠狠色丁香香综合| 9久久婷婷国产综合精品性色| 国产中文字幕在线视频免费观看| 久9热视频| 成人在线视频一区| 久久丁香五月天| 99re热视频这里只有综合亚洲| 五月丁香婷婷成人版| 丁香五月天激情视频| 999热这里只有美国精品| 色青青视频| 国产精产国品一二三在观看| 婷婷日日夜夜| 丁香九月激情| 九九九九九999999| 精品99在线| 香蕉久久六月| 国产人妻人伦精品一区二区| 丁香五月六月婷婷怡红院| 伊人喵咪a V| 久久久久久人妻| 五月激情婷婷综合| 亚洲综合网在线| 天天爽天天透天天爱| 丁香狠狠色婷婷久久无码视频| 亚洲激情网站| 99爱爱| 国产精品扒开腿做爽爽爽A片唱戏| 女性自慰系列第五页| 天天舔天天爽| 色五月成人| 特级西西4444www无码| 日本综合久久| 五月婷婷 自拍| 婷婷99狠狠| 色99视频| 九九热99精品| 亚洲激情av| 九九热在线视频,| 99色嘟嘟精品网站| 男女99免费视频| 夜夜躁狠狠| 国产av天天插天天操天天爽| 国产激情综合| 色五月婷婷久久| 午夜色婷婷| 激情内射人妻1区2区3区| 色综合色色色色色| 五月婷婷开心深| 97超喷视频在线观看| 九九热这里只有精品6| 成人在线不卡| 九九久久污| 五月婷婷激情久久| 天天色天天日天天舔| 亚洲人妻AV| 日韩人妻在线播放| 色九区| 狠狠干思思热| 色婷婷婷婷成人网| 伊人啪啪网| 视色综合| 丁香婷婷免费| 人妻人人操| 成熟妇人A片免费看网站| 天天摸天天透天天舔| 色综合色综合婷婷热| 97日日碰碰| 少妇大叫太大太粗太爽了A片| 五月丁香六月激情在线| 第四色五月天| 啄木鸟丝袜美女福利视频| 天天做天天爱天天爽夜夜揉| 99热99在线| 99九九免费精品| 婷婷五月成人| 激情婷婷五月天| 亚洲婷婷五月天| 婷婷激情五月综合基地| 99久久综合狠狠综合久久| 六月丁香五月天| 久久久久这里只有精品| 99热这里有精力| 天天爱天天做天天舔| 碰碰女| 久久机热探花| 人妻中文av| 丁香婷婷六月| 日本英国美国欧美亚洲国产精亚洲日韩精品在线观看 | 激情色色| AAA久久| 色五月琪琪| 亚洲免费婷婷| 色色色色色网| 丝袜激情网| 亚洲成人在线五月天| 五月天婷亚洲综合在线嫩草网| 五月婷婷丁香大陆免费| 9久久久久| 婷婷久久内射| 六月婷婷综合| 亚洲人人96@| 成人五月天综合网| 99riav 亚洲| 婷婷久久综合| 精品99*| 性色九九| 伊人五月综合网| 91碰操| 综合在线观看99| 国产成人精品123区免费视频| 色情综合| 久久ri精品| 欧美一级a | 五月婷婷丁香色播网| 2020久久婷婷五月| 日本熟女内射| 国产精品电影网| 天天插天天干| 五月天大香蕉| 国产成人精品一区二三区熟女在线 | 日韩人妻在线观看| 国产在线6| 久一这里有精品国产| 六月丁香婷婷综合色播| 色情激情五月婷婷| 成人电影在线免费试看| 综合激情网五月激情| 七七九九色色| 99爱视频在线播放| 五月天婷婷基地| 激情丁香五月| 婷婷丁香www视频日本韩国| 人人插9| 五月天色图| 99精品这里只有免费视频 | 热九九精品| www.激情五月| 懂色av粉嫩AV蜜臀AV| 婷婷伊人视婷婷婷| 五月天色婷伊人| 婷婷五月精品中文字幕| 丁香婷婷五月色成人网站| 日本99热| 九九www| 天天色天天搡| 日韩黄色电影| 日本一级淫| www.久9| 99热色无码| 五月天婷婷乱| 五月花免费视频| 婷婷丁香五月综合激情小说| 99热老网站| 无码激情AAAAA片-区区| 91视频一起草| 婷婷五月天免费视频| 日夜操B| 国产乱子轮XXX农村| 第四色大香蕉| 天天色天天色天天色天天色天天色| 婷婷五月天AV在线| www.色欲丁香婷婷| 狠狠色官网| 天天肏高清在线| 色五月激情五月| 日韩精品一品二区三区的使用体验| 天天色爽| 99久久婷婷| 国产婷婷久久| 婷婷五月天激情综合深爱| 夜色综合网| 久久久精品婷婷五月天| 婷婷的五月天另类视频| 日韩视频99| 狠狠色婷婷丁香五月| 538在线| 婷婷久久欧美| 婷婷丁香熟妇综合网| 成人免费超碰| 国产成人va在线| 伊人婷婷大香蕉| 丁香六月婷婷色XXXXX| www.色99| 激情五月激情综合俺也去婷婷小说| 99久久99热这里只有精品| 991国产精选视频在线播放下载| 五月婷婷涩涩爱| 国产婷婷色五月| 久热只有精品| 久久久久98| 色婷婷社区| 熟女人妻一区二区三区免费看| 97影院一级片| 六月丁香综合| 六月丁香婷| 九月av| 丁香婷婷午夜| 精品99视频| 91久久精品视频| 婷婷五月天另类网站| 只有久久精品免费| 丁香五月婷婷天激情| 国产Va视频| 五月激情视频| 狠狠操狠狠狠| 另类图片五月天激情| 99色一| 风流少妇A片一区二区蜜桃| 五月婷婷在线丁香| 超碰国产在线| 五月丁综合在线观看| 免费看欧美成人A片无码| 九九Av| 99自拍视频在线| 97在线视频人妻九色| 亚欧州精品视频| 五月婷婷99热| 久久久天堂国产精品女人| 五月婷婷在线视频免费观看| 国产SUV精品一区二区6| 热99AV网站| 视频久久9| 狠狠久久婷五月| www.超碰在线| 97sese婷婷| 99在热线免费视频| 激情综合久久| 国产在线网| 婷婷五月天激情视频| 婷婷99视频在线| 亚洲成人人人操| 五月婷婷色啪| 大香网伊人久久综合| 天天更新天天亚洲| 伊人久热91| 色99日韩| 五月丁香六月色婷婷| AV变态另类一区二区| 天天骑天天操| av在线超清中文| 成人国产欧美大片一区| 丁香五月天社区| 婷婷色在线| 热热色色五月天婷婷| 色五月天成人| 丁香五月婷婷综合视频| 日韩精品无码AV| 久久久999精品| 琪琪理论片| 久色大香蕉| 99久在线精品99re8热| 色亚洲婷婷| 99色久| 狠狠色综合网| 激情噜噜噜| 热的国产99热| 91日日日| 婷婷五月,综合伊人| 欧美va在线观看| 伊人五月婷婷| 91久久综合亚洲鲁鲁五月天| 超碰熟女农村在线69| 99热偷拍| 九九热视| 天天精品视频在线观看视频| 久久99热这里| 婷婷五月深情丁香深爱日韩| 懂色av蜜臀av粉嫩av永陈冠希| 亚洲视频在线观看| 99热精品在线播放| 97性视频| 开心婷婷中文字幕| 深爱激情六月| 天天日夜夜夜操操操操| 五月丁香狠狠爱| 日本在线wwww| 婷婷操无码| 色五月激情五月| 五月丁香六月激情视频| 丁香五月婷婷激情中文| 思思色综合网站| 婷婷99狠狠| 9久久网| 色欲久久99精品久久久久久| 青草视频在线观看视频| 大香蕉九九| 9久久久久久久久久久| 天天日日爽| 99这里只有免费的小视频在线观看| 伊人综合色干| 久久久婷丁香五月天激情综合| 7777久久亚洲中文字幕| 丁香五月天日韩无码| 精品一二三区久久AAA片 | 亚洲成人AV在线播放| www.五月天激情| 六月色五月天天婷婷| 五月丁香六月激情综合网 | 精品人妻一区二区三区四区不卡在| 天天插天天插天天插天天插| 色婷婷AV久久久久久久| 天天撸天天干天天插| 亚洲mm色| 六月狠狠综合| 丁香婷婷五月基地| 五月婷婷丁香社区| 丁婷婷五月天在线播放| 婷婷另类小说| 99男人的天堂| 色情婷婷| 亚洲无码色| 五月天综合| 九九成人| 亚洲三级无码| 强奸幻女毛片| 日韩一级网站| 日本久热| 无码九九| 色婷婷影音| 丁香六月天婷婷开心综合| 五月丁香六月激情狠狠| 99热只有这里才是精品| 色欲一二三| 五月丁香婷婷婷激情爱爱| 五月天成人在线播放| 中文字幕AV网址| 在线成人网站| 另类少妇人与禽zOZZ0性伦| 免费视频WWW在线观看网站| 少妇被躁爽到高潮无码文 | 9九色首页| 棕合影院色色| 天天更新天天亚洲| 五月天综合视频| 色老久久| 无遮挡国产高潮视频免费观看| 超碰99热精品在线| 九九色院| 这里只有视频精品| 五月婷婷天| 色五月婷婷大香蕉| 九九成人| 日韩无码91| 99色天堂| 天天操天天爱天天玩| 九九性视频| 五月丁香婷婷色色色| 91丨九色丨东北熟女| 五月丁香激情综合| 久久婷中文字幕| 激情婷婷丁香五月天小说| 五月婷婷深爱六月| 五月丁香免费视频| 丁香五月婷婷五月基地| 99热婷婷| 色五月丁香五月| 九九精品热| www。五月,com| www.91.com黄| 天天操夜夜爽歪歪| 99精品在线观看| 久久精品五月| 激情五月天啪啪| 久久九九国产精品怡红院| 亚洲视频在线观看| 国产精品电影| 色婷婷在线视频| 国产全是老熟女太爽了| 最新久久网址| 91人人爽久久涩噜噜噜| 国产全是老熟女太爽了| 99综合在线| 99日这里只有精品| 99国产精品久久久久久久久久久| 五月丁香婷婷综合视频| 丁香五月在线观看完整版| 婷婷五月天亚洲| 艹天天射| 开心婷婷五月天激情网| 99久久国产宗和精品1上映| 日韩 mm 不卡| 91小黄书网址在线观看| 色九区| 六月婷婷九月丁香| 五月激情偷拍| 碰99在线| 99精品久久久久久久婷婷久久| 99操视频| 五月天婷婷基地综合网| 日日操日日撸| wwww.9免费视频| 26uuu亚洲欧美另类| 国产精品大香蕉| 婷婷伊人75| 五月婷婷丁香瑟瑟视频| www.韩日视频| 五月第四色| 久久久aaa| 色婷婷色五月色丁香| 成人丁香| 99re这里只有精品视频6| 综合色色网| 午夜成人网站在线观看| 日韩超碰在线| 一区视频网站| 激情五月综合网| 久操大| 伊人www22综合色| 婷婷色基地在线看| 色色亚洲五月天| www...com黄在线观看| 五月丁香直播| 操B视频在线播放| 天天看片日日夜夜| 国产高潮A片羞羞视频涩涩| 激情五月深爱五月| 人妻AV中文系列| 五月综合视频在线| 在线观看国产高清视频免费网站 | 色综合色色色| 香焦网五月天| 久久九九爽| 综合色色网| 九九碰九九爱97超碰| 丁香九月激情| 午夜69成人做爰视频| 青青草蜜臀| 亚洲av| 五月天俺去也| 大香蕉狼人久久| 欧日韩成人| 九月丁香婷婷| 色狠狠色噜噜AV天堂五区| 日日噜狠狠色综合久久| 玖玖爱导航| 日本三级中文字幕| 天天天操天天天爰| 超碰成人影视| 99热99干| 97色色色色色色色色色色色色色| 色九九九综合| 91狠狠综合久久| 一区二区中文字幕| 日本网站久久| 九九色人| 99视频精品全部免费观看| 99草在线免费观看视频| 九九亚洲综合| 丁香五月狠狠综合欧美| 秋霞av不能| 久久久8| 九九视频精品这里只有| 五月婷婷先锋| 玖玖精品视频| 99精吕视频在线观看了| 欧亚洲在线高清视频| av免费在线看不卡无毒| 99re在线精品视频| 五月婷婷婷婷婷| 操人久久| 伊人久久大香线蕉精品| 99热免费精品| 婷婷五月天色综合| 日本一级一级一级一级| YW无码| 婷婷久久色| 99热费观看| 嫩草AV久久伊人妇女超级A| 婷婷亚洲在线| 亚洲激情av| 99综合视频| 色五月激情五月丁香五月婷婷啪啪综合 | 国产日韩av片| 91色呦哟| 九久9精品| 五月婷婷六月少妇激情| 丁香狠狠| 337p大胆噜噜噜噜噜91Av| 久久久精品婷婷五月天| 99∨VTV| 丁香婷婷情色五月天| 天天摸,天天爽| 国产婷婷综合| 99久久婷婷综合| 亚洲婷婷五月天| 婷婷六月天天| 婷婷丁香小说| 九九热这里只有精品31| 色在线五月天免费| 99热啪啪| 久天综合| 婷婷综合网性| 色婷婷香蕉丁丁网| 久久九网| 国产人妻777人伦精品HD| 中文字幕在线资源| 婷婷五月激情的图片| 色欲资源网| 五月天堂婷婷| 九九熱最新視頻| 五月开心久久| 夜色综合网| 九九精品少妇| 极品五月天| 影音先锋五月婷婷| 91无码色色| 欧美顶级少妇做爰HD| 九九这里只有精品| 精品五月天| 91丨九色丨高潮丰满日本| 欧美狠狠色| 五月天综合色| 色爱综合网| 五月婷婷影院| 久艹大香蕉| 丁香激情五月| 97干97色| 色色色色色色网| 天天操人人干| 亭亭五月丁香五月天激情| 99热国产| 婷婷色网| 成人国产欧美大片一区| 91无码色色| 五月天色色无码| 9热成人在线视频| 日本三级第一页| 久久99网| 人橾人| 成人一级片| 五月色婷| 天天爽日日搞| 久久人妻人人槡| 五月天婷婷在线播放| 99久在线精品99re8| 五月天色综合| 日韩成人精品中文字幕| 丁香激情网| 婷婷丁香五月天综合激情| 亚洲AV成人在线观看| 亚洲成人综合网在线免费观看| 精品九九网| 99热久草| 日韩99色| 日日夜夜久| 五月丁香久久| 五月激情六月丁香| 久久综合婷婷激情| 天天综合五月天| 五月欧美色播| 婷婷五月天激情丁香| 久婷五月| 99精品视频在线观看| 久热99狠| 色婷婷综合久久久久| 天天操夜夜夜夜爽| 天天操电影院色狼性av| 国产精品视频免费看| 丁香五月偷拍| 狠狠色噜噜狠狠狠777奇米| www一起操在线观看| 538午夜激情| 蜜臀嫩草| 丁香桃色网| 九久久九精品视频| 亚洲天堂爱爱| 日比网免费国产| 色九九综合热99| 五月香蕉婷婷| 伊人五月婷婷| 韩国不卡AC视频| 色婷婷亚洲婷婷| 丁香五月天成人| 狠狠干婷婷| 91色色色视频| 久久综合热17c| 狠狠干婷婷| 国产亚洲成AV人片在线观黄桃| 五月丁香六月婷婷久久肏| 五月天成人伊人| 9色在线视频| 性爱技巧五月| 九九热视频首页/这里只有精品| 久久激情五月婷婷| 国产精品涩涩涩视频网站| 91操在线视频| 热思思| 中文字幕人妻熟女在线| 欧美日比视频| 性日本精品| 丁香五月影院| 日本三级日本三级99| 丁香色五月婷婷| 色色网站毛片| 六月激情婷婷综合| 99热首页| 婷婷综合色色| 国产精品电影网| 婷婷久久婷婷色五月| 四色女婷婷| 丁香六月综合激情| 丁香五月激情婷婷视频| 丁香 久久| www.爱婷婷.com| 色5月婷婷| 99在线精品免费视频| 99精品视频免费在线播放| 玖玖色综合网| yellow视频在线观看91| 色天五月天在线观看视频| 综合色七七| 小视频一区| 久久9热好| 婷婷大美在线| 亚洲电影在线观看| 婷婷五月丁香第四色超碰在线| 九九家庭影院| a久久| 五月天天丁香婷婷在线中| 日本九九九九| 五月婷亚洲精品AV天堂| 啪啪激情综合| 色色色色五月天| av在线资源| 91天天操天天干天天射| 超碰在线看| 丁香五月久久| 97干在线视频| 99热欧| 一本色道久久88综合日韩精品| 婷婷日| 欧美S码亚洲码精品M码| 欧美婷婷五月激情| 免费无码毛片一区二区A片 | 五月丁香龟婷婷| 亚洲mm免费| 最新丁香六月婷婷| 亚洲综合另类| 男女99免费视频| www.粉嫩av.com| 中文成人在线| 99视频一区| 六月婷婷最新网址| 婷婷激情六月视频| 久热9| 久青草影院| 精品综合久久久久久五月天| 丁香狠狠干| 五月激激激情综合网| 美女天天爽| 国产免费一区二区三州老师F1F1| 香蕉婷婷| 深爱开心激情网| 激情六月婷婷啪啪| 欧美精品18| 久久人操| 99精品偷自拍| 色色色9| 色狠狠综合网| 午夜婷婷| 五月情涩综合婷婷| 97资源碰碰在线| 五月天综合在线| 色婷婷五月基地在线| ZpRSw| 99热这里只有精品1025| 亚洲色婷婷99一9|| 色久99| 99久在线精品99re8| 丁香六月天色婷婷| 日本99在线| 中文字幕丰满孑伦无码专区| 直接看的AV| 婷婷五月色情天| 色婷婷六月| 殴美激情综合网| 激情综合网亚洲色图| 丁香久久久| 91啪啪| 亚洲天天操| 综合欧美五月婷婷| 97爱综合| 国产精品国产成人国产三级| 综合网天天| 国产精品久久久久9999小说| 婷婷五月天天天| 中文字幕在线日亚州9| www婷婷亚洲| 婷婷丁香先锋资源网站| 激情五月天综合| 色婷婷成人五月| 97操操| 99热99| 成人做爰A片免费看视频| 婷婷久久丁香| 青青福利网| 五月色情婷婷| 丁香婷婷色九月| 色操综合| 99噜噜噜在线播放| 日韩成人中文字幕| www.99热这里精品| 亚洲最大成人综合网720P| 九九色欲网| 色五月综合激情| 欧美天天干五月丁香| 久草五月婷婷| 天堂亚洲 在线| 黄色录像网点| 99九九久久| 成人av免费观看| 国产无套精品一区二区| 色视五月天婷婷| 天天日天天舔天天摸| 大香久久伊人网| 色色欧美色色| 国产真人做爰视频免费| 色婷婷丁香五月| 国产67194| 五月激情网站| 色无码| 四色五月婷婷| 丁香六月婷婷激情| 激情综合网 激情五月天| 99无码免费视频| 九九热亚洲中文在线观看免费| 一本久道综合99| 欧美VA视频| 一起操 91N.com| 丁香五月停停av| 婷婷碰碰| 9久久狠狠的| 乱精品一区字幕二区| 色五月在线播放| 亚洲激情AV| 久久久香| 九九99精品| 91久久久久久久久18| 日韩综合久| 99热在线看片| 久久总和99| 丁香五月人妻| 五月婷婷六月天| 久热九九| www.99在线| 六月丁香啪啪| 办公室少妇激情呻吟A片在线观看| 狠狠干,狠狠操| 2w在线视频| 99.色| 五月丁香激情婷婷| 99色在线视频| 色噜噜狠狠色综合成人网| 中文字幕在线免费| 九九热在线观看视频| 久久女婷| 五月Huangsewang| 五月 婷 久| 97久操视频| 人妻AV在线观看| 激情五月天在线观看婷婷| 人妻系列久久久久久久久久久 | 99热99| 超碰97干| 这里都是精品99| renrencaoav| 九九视频这里有精品| 天天影视天天爽天天草| 色五月琪琪| 噼里啪啦在线观看免费完整版视频 | 婷婷综合五月天| 亚洲精品色| 日本色色影片| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 五月天操逼网| 日本女天天爽| 婷婷五月骚厕所| 精品99在线| 香蕉AV福利精品导航| 伊人超碰在线| 99久久婷婷国产综合精品草原| 亚洲综合网激情五月天| 日韩aaa| 97干在线视频| 成人 AV播放| 激情综合婷婷| 丁香婷婷十月| 日韩成人电影AV| 久久婷婷五月天大香蕉| 97影院一级片| 亚洲VA在线| 99九九热在线观看| 91干婷婷| 99碰碰| 色婷五月天综合网| 99热免费在线| 丁香五月天堂亚洲社区| 五月丁香久人妻中文| 激情婷婷色五月| 超碰人人草| 玖玖婷婷色| 久久 这里只有精品1| 五月婷婷六月天| 色天使色综合| 久久这里只有国产| 激情综合网激情五月天| 日本熟妇乱妇熟色A片蜜桃| 六月撸婷婷| 深爱激情网五月天| 超碰AV在线| 九九综合网色全集| 午夜激情五月| 日本三级日本三级99| 先锋资源婷婷| 五月婷婷色色爱| 18av天堂| 五月婷网| 伊人久热91| 襙比视频| 激情五月丁香五月| 日本3级片一区2区| 色婷婷综合网站| 欧美大片免费播放器| 久月婷婷| 狠狠操狠狠插| 国产性爱大片久久| 色综合爱综合| 六月丁香五月天| 婷婷精品综合| 天天插综合| 99视频综合| 丰满人妻一区三区三区| 五月丁香六月综合激情| 黄网免费看| 丁香五月天视频| 99久久高清视频| 91久久婷婷人人澡草 | 国产综合网在线| 99精品丁香五月| 婷婷色5月天在线。| 日本va欧美va国产激情| 久久久WWW| www.久久爱.com| 97五月天婷婷综合激情网| 这里有精品2| 97碰碰九九视频| 激情五月色综合国产精品| 精品一二三区久久AAA片| 色婷婷黄色网络| 欧美性爱五月天| 91色五月| 五月香婷婷| 久久婷狠狠色| 伊人久久婷| 五月色丁香| 婷婷久久五月丁香| 99精品自拍视频| 亚洲婷婷免费| 久久五月天精品视频| 五月激情天| 五月久久噜噜| 中文字幕中文有码在线| 久久机只有这里精品| www.色色色com| 天天综合网亚洲综合网| 伊人狼人干| 色99网站| 91肏| 五月丁香黄色视频| 丁香五月激情宗合网| 狠狠的日| 思思热国产视频| 狠狠色丁香| 538久久| 五月婷婷 婷婷五月 一区二区 久久久| 日韩黄在免| 国产精品蜜臀99| 丝袜熟女一区二区三区| 天天色天天爱天天爱天天爱y| 欧美婷婷丁香五月| 亚洲色碰| 婷婷五月俺要去| 五月天婷婷Av| 婷婷六月啪啪 | 九九九九九无码| 激情五月婷婷老师| 超碰无码318604| 久9视频免费播放| 激情综合亚洲| 成人做爰高潮A片免费视频| aaa日韩| 偷拍九九五月丁香婷婷| 丁香五月天色婷婷| 91啪级电影| 免费AV在线网址| 婷婷五月天AV| 天天日人人爽| 国产资源在线视频| 日韩成人免费电影| 五月天久久网站| 999热在线视频| 久久人妻熟女一区二区| 婷婷在线激情| 五月天狠狠网站| 在线观看日韩12345区| 免费啪啪亚州视频| 夜夜噜夜夜奇| 久久9热| 欧美性生交A片免费看| 精品久久艹| 婷婷五月花免费视频在线| 五月综合人妻| 狠狠香蕉| 99成人免费视频| 色五月综合激情| 丁香九月色| 五月天激情图片| 五月婷婷免费在线观看视频| 欧美黑人大吊| 国产第99页| 国产毛片欧美毛片久久久| 色播五月天激情| 婷婷丁香五月激情中文字幕版| 亚洲秘 无码一区二区三区妃光/1| 五月激情在线| 色呦呦美女| 热99只有里视频| 五月色婷婷在线观看| 丁香婷婷五月人体| 夫妇交换刺激做爰| 67194成I人在线观看线路1| 久草xx性爱视频| 六月丁香婷婷色狠狠久久| 99re免费视频| AA片在线观看视频在线播放| 操操天堂| 日本色色色| 婷婷丁香一月| 婷婷综合五月天| 超碰在线个人观看| 99热这里是精品| 婷婷五月天AV在线| 日日肏天天操| 99亚洲精品| 噜啊噜在线| 五月天基地| 五月丁香 久久久| 婷婷99| 区美毛片子| 日韩久久欧亚| 色六月 婷婷| 九九热精品| 99热播放| 九九亚洲| 日操夜撸| 2025天天爽天天摸| 五月丁婷香| 色吧五月婷婷| 国产综合久久久777777| 欧美综合激情| 欧美成人AAA片一区国产精品| 色情婷婷五月天| 97色婷婷成人综合在线观看| 久久激情五月| 四色五月婷婷在线观看| 久久这里只有精品无码| 免费色色色| 亚洲激情亚洲激情 | 五月婷婷丁香| 91欧美日韩综合| 99热综合网| 色婷婷五月天成人网| 激情婷婷五月天| 99热这里有精品| 丁香婷婷月| 啪啪六月婷婷| 亚州色色色| 激情小说婷婷五月| 色婷婷五月天小说| 岛国av电影网站| 激情五月天www| 九九色视频| 五月天激情网开心网| AAA亚洲AV| 久久这里有精品在线观看| 丁香五月六月激情| 天堂AV在线看| 成人五月天视频播放| 精品五月天| 激情综合五月开心狠狠| 思思热精品在线| 色五月亚洲| 亚洲精品国产setv| 久久婷婷亚洲| 另类小说色婷婷| 最近中文字幕大全免费版在线| 亚洲国产精品VA在线看黑人| 日本综合色图| 男同91| 丁J香六月首页| 中日韩狠狠色| 九月影院義母在线播放| 99色激| 操逼福利视频| 天天爽夜夜爽天天爽夜夜爽| 深爱婷婷丁香五月激情| 色色色9| 天天搞天天爽| 超碰免费99| 欧美在线视频99| 亚洲激情综合免费| 激情综合网激情五月天| 综合性爱网| 无码色色色| 久久婷婷五月综合色区| 99热九九在线| 久久婷婷五月综合97色一本| 丁香综合伊人AV| 天天爽夜爽| 中文字幕 中文字幕明步| 日本欧美成人片AAAA| 丁香亭亭激情四射| 色婷婷大香蕉| 久久性爱网站| 中文AV在线观看| 天天做天天爱天天高潮| 欧美日韩成人综合9| 91碰超| 天天干天天日日| 婷婷五月天成人小说| 久久99久久99精品免视看婷| 久久人妻视频| 中文字幕五月久久婷婷| 激情五婷精品网在线观看网址| 俺来也综合网精品一区| 内射 无码 伊人| 激情av在线| 五月香蕉婷婷| 99人妻碰碰碰久久久久视| 婷婷午夜| www99xxxx五月丁| 天天噜天天插| 五月婷婷六月丁香色| 激情五月天 婷婷| 丁香六月欧美| 蜘蛛女免费观看完整版高清电影| 五月婷婷色激情| 九九久久综合| 97久久五月丁香婷婷| 亚洲丁香五月天在线视频| 综合图片色色| 亚洲A片成人无码久久精品青桔| 婷婷天堂视频| 欧美综合五月丁香五月天| 天天日夜夜拍| 综合久久伊人| 丁香六月色情| 人人九色| 91人无码久久久久久| 日韩a热| 成人婷婷| 色色丁香婷婷五月天| 日日夜夜狠狠婷婷色| 伊人色综合网| 亚洲久久天堂| 99r久久这里只有精品| 九九九九综合| 丁香五月天堂网AV| 99在线国| 少妇熟女视频一区二区三区| 91色在线/日韩| 日日操日日撸| 婷婷黄色网| 森林影视大全,最好看的2019年视频 | 色五月激情五月| 99网址在线看| 五月丁香六月婷婷操操操| 色色欧美色色| 开心婷婷五月激情网小说| 婷婷五月天堂| 四季AV综合网| 亚洲成人黄色网| 香蕉97碰碰碰欧美| 五月天综合缴情网网站0| 久久五月网| 91久久九色| 丁香五月婷婷色| 亚洲熟妇AV乱码在线观看| 激情综合五月激情17| 日韩成人综合网| 99re免费精品视频| 99这里都是精品| cao久久| 婷婷久久色| 97人人操com| 天天碰夜夜爽| 神马久久五月天| 五月激情婷婷开心| 欧美色必爱| 这里只有精品9| www.9色色色| 婷婷五月天激情基地| 日韩小视频在线99| 亚洲色情在线| cao视频,现在观看| 婷婷婷婷色| 国内久久亭亭| 欧美在线操| 婷婷五月四狠狠| 伊人无码高清| 99精品爱|