99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java應(yīng)用Dockerfile編寫(xiě)指南:從鏡像構(gòu)建到生產(chǎn)級(jí)配置優(yōu)化

Java應(yīng)用Dockerfile編寫(xiě)指南:從鏡像構(gòu)建到生產(chǎn)級(jí)配置優(yōu)化 如果你的工作里經(jīng)常和 Java 服務(wù)打交道那 Dockerfile 幾乎是繞不開(kāi)的一關(guān)。這玩意兒看著簡(jiǎn)單不就是把 JAR 包塞進(jìn)鏡像里跑起來(lái)嗎可真到自己寫(xiě)的時(shí)候你會(huì)發(fā)現(xiàn)里頭全是講究基礎(chǔ)鏡像挑哪個(gè)、JVM 參數(shù)怎么傳、時(shí)區(qū)怎么處理、鏡像怎么越打越小、啟動(dòng)腳本寫(xiě)不好容器一重啟就掛……每一個(gè)細(xì)節(jié)都能讓人折騰半天。這篇文章我就把自己反復(fù)踩坑、反復(fù)優(yōu)化后沉淀下來(lái)的 Dockerfile 編寫(xiě)思路和打包流程完整梳理一遍。從最基礎(chǔ)的鏡像構(gòu)建講起到多階段構(gòu)建、JVM 適配、健康檢查、日志收集、常見(jiàn)問(wèn)題排查一路說(shuō)到可以直接拿來(lái)用的生產(chǎn)級(jí)配置。內(nèi)容適合剛接觸 Docker 的 Java 開(kāi)發(fā)者也適合那些已經(jīng)在用 Docker 但想優(yōu)化鏡像體積和穩(wěn)定性的團(tuán)隊(duì)。1. 先從整體想清楚Java 應(yīng)用鏡像到底要解決哪些問(wèn)題寫(xiě) Dockerfile 之前我建議你先別急著打開(kāi)編輯器?;◣追昼娤肭宄粋€(gè)問(wèn)題我到底想讓這個(gè)鏡像做到什么程度很多人第一次寫(xiě) Dockerfile 就是“能跑就行”把 JAR 包 COPY 進(jìn)去ENTRYPOINT 寫(xiě)個(gè)java -jar就完事了。這種鏡像在本地跑 demo 一點(diǎn)問(wèn)題沒(méi)有可一旦上了生產(chǎn)環(huán)境問(wèn)題就一件接一件冒出來(lái)。1.1 一個(gè) Java 鏡像的“及格線”和“優(yōu)秀線”我自己的經(jīng)驗(yàn)是Java 鏡像可以分成三個(gè)層次第一層能跑。JAR 包放進(jìn)去java -jar能啟動(dòng)端口能通。這是大多數(shù)教程停留在的地方。第二層能穩(wěn)定跑。解決了時(shí)區(qū)問(wèn)題、JVM 內(nèi)存識(shí)別問(wèn)題、優(yōu)雅停機(jī)問(wèn)題、日志持久化問(wèn)題。容器重啟不會(huì)莫名其妙掛掉內(nèi)存不會(huì)被宿主機(jī)器殺進(jìn)程日志不會(huì)丟。第三層能高效跑。鏡像體積小、構(gòu)建速度快、安全漏洞少、可觀測(cè)性好包含完整的健康檢查、監(jiān)控指標(biāo)暴露、非 root 用戶運(yùn)行等。這篇文章的目標(biāo)就是帶你走到第三層。每一層需要做的事情不同所用的 Dockerfile 寫(xiě)法也完全不同。后文的配置基本是按第二層和第三層的標(biāo)準(zhǔn)來(lái)組織的你可以在理解之后按需裁剪。1.2 使用 Docker 跑 Java 服務(wù)和傳統(tǒng)部署到底差在哪在寫(xiě) Dockerfile 之前得先理解 Java 程序放在容器里和放在虛擬機(jī)/物理機(jī)上有什么區(qū)別。核心差異其實(shí)就兩個(gè)差異一是運(yùn)行環(huán)境的隔離粒度。傳統(tǒng)部署里Java 進(jìn)程直接跑在操作系統(tǒng)上它能看到完整的 CPU、內(nèi)存、磁盤(pán)信息。容器里則不同Java 進(jìn)程跑在 CGroup 限制的環(huán)境中如果 JVM 不能正確感知到 CGroup 的限額就會(huì)出現(xiàn)一種很頭疼的情況JVM 啟動(dòng)時(shí)按宿主機(jī)內(nèi)存來(lái)分配堆內(nèi)存結(jié)果容器內(nèi)存限制只有 512MBJVM 實(shí)際可能申請(qǐng) 2GB 堆一運(yùn)行起來(lái)就被內(nèi)核 OOM Killer 干掉。差異二是進(jìn)程的生命周期管理。容器編排平臺(tái)比如 K8s是靠探針來(lái)管理容器生命周期的容器里只能跑一個(gè)主進(jìn)程。這意味著你的 Java 應(yīng)用需要正確處理 SIGTERM 信號(hào)做到優(yōu)雅停機(jī)。傳統(tǒng)部署里你可能從不關(guān)心進(jìn)程退出信號(hào)但在容器里這就是必須面對(duì)的事。這兩個(gè)差異直接決定了一個(gè)好的 Java Dockerfile 應(yīng)該長(zhǎng)什么樣不是簡(jiǎn)單“把 JAR 放進(jìn)去”而是要把 JVM 和容器環(huán)境之間的適配工作做完整。2. 從零編寫(xiě) Dockerfile單階段構(gòu)建先把地基打牢學(xué)習(xí)階段先從最直觀的單階段 Dockerfile 入手。雖然它構(gòu)建出來(lái)的鏡像很大但它能幫你理解最基本的工作原理后面再逐步優(yōu)化。2.1 第一個(gè)可運(yùn)行的 Dockerfile 長(zhǎng)什么樣假設(shè)你有一個(gè) Spring Boot 項(xiàng)目構(gòu)建產(chǎn)物是app.jar在target/目錄下。最原始的 Dockerfile 大概是這樣的FROM openjdk:8-jdk-alpine MAINTAINER yourname COPY target/app.jar /app.jar ENTRYPOINT [java, -jar, /app.jar]這段配置就能跑但問(wèn)題也是肉眼可見(jiàn)的。openjdk:8-jdk-alpine鏡像里包含完整 JDK不僅有運(yùn)行環(huán)境還有編譯器、調(diào)試器這些運(yùn)行時(shí)用不到的東西最終鏡像體積動(dòng)輒兩三百兆。另外它默認(rèn)時(shí)區(qū)是 UTC中國(guó)用戶跑起來(lái)日志時(shí)間差 8 個(gè)小時(shí)。再有就是沒(méi)有暴露端口沒(méi)有配置 JVM 參數(shù)沒(méi)有健康檢查機(jī)制。2.2 關(guān)鍵指令逐一拆解不要只照著抄要把 Dockerfile 寫(xiě)明白幾個(gè)核心指令的語(yǔ)義必須掌握扎實(shí)。FROM 指令是每一層的基礎(chǔ)。選擇基礎(chǔ)鏡像時(shí)要想清楚你是要 JDK 還是 JRE。運(yùn)行時(shí)只需要 JRE體積能小很多。編譯時(shí)才需要 JDK這一點(diǎn)正是后面多階段構(gòu)建的核心邏輯。COPY 和 ADD 的區(qū)別值得認(rèn)真理解。COPY 只做本地文件到鏡像的拷貝ADD 則在拷貝之外額外支持從 URL 下載和解壓 tar 包。這種額外的能力帶來(lái)了兩個(gè)問(wèn)題一是行為不容易預(yù)測(cè)二是鏡像層會(huì)變大。所以官方推薦能用 COPY 就別用 ADD。ENTRYPOINT 和 CMD 的區(qū)別是面試??鸵彩菍?shí)際寫(xiě) Dockerfile 最容易搞混的地方。簡(jiǎn)單說(shuō)ENTRYPOINT 定義的是容器啟動(dòng)后執(zhí)行的程序docker run 后面的參數(shù)會(huì)作為參數(shù)傳給 ENTRYPOINTCMD 則提供默認(rèn)參數(shù)可以被 docker run 傳入的命令覆蓋。一個(gè)常見(jiàn)套路是ENTRYPOINT 用 exec 形式寫(xiě)腳本腳本里做環(huán)境變量預(yù)處理最后用exec啟動(dòng) Java 進(jìn)程這樣能保證信號(hào)正確傳遞。2.3 給 JVM 設(shè)置內(nèi)存參數(shù)的正確姿勢(shì)容器里跑 JavaJVM 參數(shù)必須顯式聲明。我見(jiàn)過(guò)不少人直接在 Dockerfile 里寫(xiě)死-Xmx512m其實(shí)更好的做法是借助環(huán)境變量動(dòng)態(tài)配置。在 Dockerfile 里做一個(gè)默認(rèn)值運(yùn)行時(shí)再覆蓋ENV JAVA_OPTS-XX:MaxRAMPercentage75.0 -XX:InitialRAMPercentage50.0 ENTRYPOINT [sh, -c, java $JAVA_OPTS -jar /app.jar]用-XX:MaxRAMPercentage75.0而不是-Xmx指定固定值好處在于容器內(nèi)存調(diào)大調(diào)小時(shí) JVM 會(huì)自動(dòng)跟隨。比如容器限制 2GBJVM 堆就約 1.5GB改成 1GBJVM 堆就約 768MB不用改任何配置重新發(fā)布。如果你非要用固定值也強(qiáng)烈建議通過(guò)環(huán)境變量而非 Dockerfile 寫(xiě)死ENV JAVA_OPTS-Xmx512m -Xms256m然后運(yùn)行時(shí)這樣覆蓋docker run -e JAVA_OPTS-Xmx1g ...這種做法在需要臨時(shí)調(diào)優(yōu)時(shí)特別實(shí)用不用重新構(gòu)建鏡像改個(gè)環(huán)境變量就能重啟驗(yàn)證。3. 鏡像瘦身的關(guān)鍵手段多階段構(gòu)建單階段構(gòu)建最大的問(wèn)題是把編譯和運(yùn)行環(huán)境混在一起。你想想編譯一個(gè) Java 項(xiàng)目需要 Maven、JDK、全部依賴下載但運(yùn)行時(shí)真的只需要 JRE 和一個(gè) JAR 包。把兩者分開(kāi)就是多階段構(gòu)建的核心思路。3.1 多階段構(gòu)建的結(jié)構(gòu)與原理多階段構(gòu)建允許一個(gè) Dockerfile 里出現(xiàn)多個(gè) FROM。每段 FROM 是一個(gè)獨(dú)立的構(gòu)建階段前面的階段可以擁有完整的開(kāi)發(fā)工具鏈最后那個(gè)階段只保留運(yùn)行所需的最小環(huán)境。中間階段的文件可以通過(guò) COPY --from 指令拷貝到最終鏡像。比如這樣# 第一階段編譯 FROM maven:3.8-openjdk-11 AS builder WORKDIR /build COPY pom.xml . RUN mvn dependency:go-offline COPY src/ ./src/ RUN mvn clean package -DskipTests # 第二階段運(yùn)行 FROM openjdk:11-jre-slim WORKDIR /app COPY --frombuilder /build/target/app.jar ./app.jar EXPOSE 8080第一階段用 Maven 鏡像完成代碼編譯和打包第二階段只把 JAR 文件拷過(guò)去運(yùn)行時(shí)鏡像里完全沒(méi)有 Maven 和 JDK 源碼相關(guān)的無(wú)用文件。單階段鏡像可能 400MB多階段構(gòu)建往往能壓到 200MB 以下。3.2 利用構(gòu)建緩存加速打包很多人寫(xiě)多階段 Dockerfile 碰到一個(gè)問(wèn)題每次改一行 Java 代碼Maven 都要重新下載全部依賴構(gòu)建慢到懷疑人生。其實(shí)這是沒(méi)有正確利用層緩存導(dǎo)致的。Docker 構(gòu)建時(shí)每一行指令如果前后沒(méi)有變化就會(huì)復(fù)用本地緩存。依賴下載邏輯和源碼打包邏輯如果寫(xiě)在同一行那源碼一變依賴也得重新下。正確做法是把兩件事分離COPY pom.xml . RUN mvn dependency:go-offline COPY src/ ./src/ RUN mvn clean package -DskipTests第一行的COPY pom.xml .只拷貝 POM 文件然后單獨(dú)執(zhí)行依賴下載。只要 POM 不變這一層就不會(huì)失效后面三層直接復(fù)用緩存。我實(shí)測(cè)過(guò)項(xiàng)目幾百個(gè)依賴有緩存的情況下構(gòu)建只要十幾秒沒(méi)緩存要拉好幾分鐘。這里有個(gè)小細(xì)節(jié)mvn dependency:go-offline并不是所有插件都能覆蓋有的插件在后續(xù)打包階段還會(huì)在線下載。穩(wěn)妥起見(jiàn)可以加一個(gè)-Dmaven.repo.local指定本地倉(cāng)庫(kù)路徑或者使用mvn package后直接保留~(yú)/.m2目錄作為緩存掛載。生產(chǎn)環(huán)境如果用 CI 平臺(tái)比如某公司的流水線也可以設(shè)置 Docker BuildKit 的 cache mountRUN --mounttypecache,target/root/.m2 mvn clean package -DskipTests這種方式比單獨(dú)分層更高效因?yàn)樗话岩蕾嚧蜻M(jìn)鏡像層而是直接復(fù)用宿主機(jī)的緩存目錄速度更快。3.3 選擇基礎(chǔ)鏡像的思路Java 相關(guān)的基礎(chǔ)鏡像市面上主要見(jiàn)這幾類openjdk:8-jdk-alpine基于 Alpine Linux體積小但 Alpine 使用的 musl libc 在某些極端情況下會(huì)有兼容問(wèn)題比如一些原生庫(kù)。openjdk:11-jre-slim基于 Debian Slim體積適中兼容性比 Alpine 好。eclipse-temurin提供了 OpenJDK 的多種構(gòu)建版本社區(qū)活躍也是目前很多新項(xiàng)目的首選。amazoncorretto某云廠商維護(hù)的 OpenJDK 發(fā)行版長(zhǎng)期支持性能調(diào)優(yōu)到位。自定義基礎(chǔ)鏡像公司內(nèi)部統(tǒng)一維護(hù)基礎(chǔ) JDK 鏡像預(yù)置了證書(shū)、時(shí)區(qū)、監(jiān)控 agent 等適合規(guī)?;瘓F(tuán)隊(duì)。我的建議是追求最小體積可用 Alpine追求兼容性和穩(wěn)定性用 Slim 系列。JDK 版本建議跟本地開(kāi)發(fā)環(huán)境保持一致或者略高于生產(chǎn)要求的版本避免本地編譯出來(lái)的 class 在運(yùn)行時(shí)因版本過(guò)低而報(bào)UnsupportedClassVersionError。4. Java 應(yīng)用容器化適配JVM 參數(shù)、時(shí)區(qū)、健康檢查這一部分是最容易被忽略、但影響最大的環(huán)節(jié)。很多人鏡像能跑但運(yùn)行一段時(shí)間就出各種奇奇怪怪的問(wèn)題多數(shù)都出在這幾個(gè)點(diǎn)上。4.1 JVM 與 CGroup 內(nèi)存限制Java 8 及以前版本默認(rèn)不會(huì)自動(dòng)識(shí)別 CGroup 限制JVM 按宿主機(jī)的內(nèi)存來(lái)設(shè)置堆大小一超過(guò)容器內(nèi)存限制就會(huì)被內(nèi)核殺進(jìn)程。這個(gè)問(wèn)題在高版本 JDK 中已有改善但低版本依然存在。JVM 參數(shù)里推薦使用百分比配置參數(shù)含義-XX:InitialRAMPercentage50.0啟動(dòng)時(shí)堆初始大小占容器內(nèi)存的百分比-XX:MaxRAMPercentage75.0最大堆大小占容器內(nèi)存的百分比-XX:MinRAMPercentage50.0小內(nèi)存機(jī)器下的最小堆占比為什么不直接寫(xiě)-Xmx因?yàn)?Xmx是絕對(duì)值。容器內(nèi)存從 2GB 擴(kuò)容到 4GBJVM 堆不會(huì)跟著變。雖然 Kubernetes 可以重啟容器生效但每次配置變更都要走一次發(fā)布流程遠(yuǎn)不如百分比靈活。還有一點(diǎn)值得注意堆內(nèi)存不是 JVM 的全部?jī)?nèi)存。JVM 還包含元空間、線程棧、直接內(nèi)存、JIT 編譯器、GC 相關(guān)結(jié)構(gòu)等。即使設(shè)了MaxRAMPercentage75.0實(shí)際進(jìn)程占用也可能超過(guò)容器限制所以這個(gè)比例不宜設(shè)得太高。我習(xí)慣用 75% 作為大值但如果你有較多堆外內(nèi)存使用比如 Netty 的 direct buffer建議下調(diào)到 50%-60%。4.2 時(shí)區(qū)問(wèn)題為什么你看到的日志時(shí)間總差 8 小時(shí)Java 默認(rèn)時(shí)區(qū)跟隨系統(tǒng)。很多基礎(chǔ)鏡像的默認(rèn)時(shí)區(qū)是 UTC這在部署到國(guó)內(nèi)服務(wù)器時(shí)非常折磨人應(yīng)用日志時(shí)間全是 UTC和運(yùn)維平臺(tái)、監(jiān)控告警、數(shù)據(jù)庫(kù)記錄的時(shí)間對(duì)不上。最穩(wěn)妥的辦法是在 Dockerfile 里直接設(shè)置系統(tǒng)時(shí)區(qū)ENV TZAsia/Shanghai RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime echo $TZ /etc/timezoneAlpine 鏡像需要先安裝 tzdata 才能設(shè)置時(shí)區(qū)RUN apk add --no-cache tzdata \ cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime \ echo Asia/Shanghai /etc/timezone構(gòu)建時(shí)寫(xiě)好時(shí)區(qū)運(yùn)行時(shí)容器內(nèi) Java 進(jìn)程的TimeZone.getDefault()就會(huì)正確返回東八區(qū)。也可以在啟動(dòng)時(shí)通過(guò)-Duser.timezoneAsia/Shanghai強(qiáng)制指定 JVM 時(shí)區(qū)這個(gè)方法不依賴系統(tǒng)時(shí)區(qū)設(shè)置在調(diào)試時(shí)特別有效。4.3 容器健康檢查別等流量打到壞實(shí)例上才發(fā)現(xiàn)Kubernetes 提供了 liveness 和 readiness 探針但在沒(méi)有 K8s 的環(huán)境里比如 docker-compose 或裸 DockerDocker 自身的 HEALTHCHECK 指令也能提供類似能力。Spring Boot 自帶 Actuator 模塊暴露了/actuator/health端點(diǎn)這是最現(xiàn)成的健康檢查依據(jù)。Dockerfile 里可以這樣寫(xiě)HEALTHCHECK --interval30s --timeout5s --start-period60s --retries3 \ CMD wget -q -O - http://localhost:8080/actuator/health || exit 1各參數(shù)的含義--interval30s每 30 秒檢查一次。--timeout5s單次檢查超過(guò) 5 秒視為失敗。--start-period60s容器啟動(dòng)后 60 秒內(nèi)不檢查給應(yīng)用足夠的時(shí)間完成啟動(dòng)。--retries3連續(xù) 3 次失敗后容器被標(biāo)記為 unhealthy。注意 Alpine 鏡像里沒(méi)有 wget要改用 BusyBox 自帶的 wget 命令或者安裝 curl。Slim 系鏡像則要看是否預(yù)置了相關(guān)工具。HEALTHCHECK --interval30s --timeout5s --start-period60s --retries3 \ CMD curl -fs http://localhost:8080/actuator/health || exit 1如果走了網(wǎng)關(guān)鏈路健康檢查端點(diǎn)務(wù)必要繞過(guò)登錄鑒權(quán)否則探針?lè)祷?401容器永遠(yuǎn)不健康。這類問(wèn)題排查起來(lái)很隱蔽我踩過(guò)一次最后看容器日志才發(fā)現(xiàn)是鑒權(quán)攔截了 actuator 路徑。4.4 優(yōu)雅停機(jī)與信號(hào)處理Java 應(yīng)用收到 SIGTERM 信號(hào)時(shí)會(huì)觸發(fā) Shutdown Hook但這個(gè)行為依賴兩個(gè)前提信號(hào)是 SIGTERM 而不是 SIGKILL且 JVM 進(jìn)程是容器主進(jìn)程。如果用ENTRYPOINT [java, -jar, /app.jar]這種方式啟動(dòng)Java 本身就是 PID 1信號(hào)能被正確接收。但如果用了sh -c java -jar app.jar這種寫(xiě)法sh 是 PID 1Java 是子進(jìn)程信號(hào)到了 sh 這兒可能不會(huì)轉(zhuǎn)發(fā)給 Java導(dǎo)致 JVM 收不到停機(jī)信號(hào)無(wú)法觸發(fā)優(yōu)雅停機(jī)。正確寫(xiě)法是使用execENTRYPOINT [sh, -c, exec java $JAVA_OPTS -jar /app.jar]同理如果寫(xiě)啟動(dòng)腳本腳本里一定要以exec形式啟動(dòng) Java。這個(gè)細(xì)節(jié)我之前栽過(guò)跟頭Spring Boot 的優(yōu)雅停機(jī)已經(jīng)配置好了但容器 kill 時(shí)應(yīng)用還是直接退出根本沒(méi)走 Shutdown Hook最后排查到根因就是啟動(dòng)腳本少了exec。Spring Boot 還支持優(yōu)雅停機(jī)配置在application.yml里加上server: shutdown: graceful spring: lifecycle: timeout-per-shutdown-phase: 20s這樣應(yīng)用收到停機(jī)信號(hào)后會(huì)等待正在處理的請(qǐng)求完成或超時(shí)后再退出不會(huì)直接掐斷連接。5. 讓鏡像更實(shí)用日志處理、安全加固與運(yùn)維友好鏡像能跑、能穩(wěn)定跑之后就該考慮讓它“更好用”了。這個(gè)階段做的事情雖然不直接影響功能但對(duì)日常運(yùn)維和故障排查幫助極大。5.1 日志處理別讓容器日志撐爆磁盤(pán)容器里 Java 應(yīng)用寫(xiě)日志的方式直接決定了磁盤(pán)的使用情況。如果不做任何處理應(yīng)用的日志默認(rèn)寫(xiě)到容器可寫(xiě)層一旦容器被刪除日志全部丟失如果應(yīng)用的日志框架配置成按文件輸出不加以歸檔清理長(zhǎng)時(shí)間運(yùn)行會(huì)占滿磁盤(pán)。容器化場(chǎng)景下最推薦的方式日志走 stdout/stderr交給 Docker 的日志驅(qū)動(dòng)統(tǒng)一收集。Spring Boot 默認(rèn)就是輸出到 stdout 的所以基本不用改什么。Docker 默認(rèn)的日志驅(qū)動(dòng)是 json-file會(huì)保留所有日志在本地。需要配置輪轉(zhuǎn)限制在 docker-compose 或 daemon.json 里設(shè)置logging: driver: json-file options: max-size: 100m max-file: 3max-size設(shè)置單個(gè)日志文件的最大大小超過(guò)則輪轉(zhuǎn)max-file設(shè)置保留的日志文件數(shù)。有了這兩個(gè)配置日志永遠(yuǎn)不會(huì)無(wú)限增長(zhǎng)撐爆磁盤(pán)。如果應(yīng)用必須寫(xiě)日志文件那就要掛載卷持久化并在應(yīng)用層面配置好 logback/log4j2 的滾動(dòng)策略。日志文件和 stdout 雙寫(xiě)排查問(wèn)題時(shí)確實(shí)方便但日志量大了對(duì)性能有影響自己要權(quán)衡。5.2 非 root 用戶運(yùn)行容器默認(rèn)情況容器內(nèi)以 root 身份運(yùn)行 Java 進(jìn)程。這是一個(gè)安全風(fēng)險(xiǎn)萬(wàn)一應(yīng)用被攻破攻擊者拿到的是 root 權(quán)限宿主機(jī)如果掛載了目錄風(fēng)險(xiǎn)更大。在 Docker 官方的最佳實(shí)踐里明確建議容器運(yùn)行非 root 用戶。具體做法是RUN groupadd -r app useradd -r -g app app USER app或者用鏡像里自帶的低權(quán)限用戶比如很多發(fā)行版自帶nobody。我個(gè)人習(xí)慣創(chuàng)建專門(mén)的應(yīng)用用戶這樣日志目錄、配置目錄的權(quán)限控制更清晰。Spring Boot 3 的 Fat Jar 在只讀文件系統(tǒng)中也能運(yùn)行因?yàn)樗褍?nèi)部 JAR 解壓到了臨時(shí)目錄這也是它適合容器化的一個(gè)原因。非 root 用戶需要注意臨時(shí)目錄的寫(xiě)權(quán)限必要時(shí)掛載指定臨時(shí)目錄并設(shè)置-Djava.io.tmpdir/tmp為該用戶可寫(xiě)。5.3 鏡像元信息與暴露端口Dockerfile 中 LABEL 可以為鏡像添加元信息比如版本、文檔地址、維護(hù)者信息。這在鏡像多了之后尤其有用一看標(biāo)簽就知道這個(gè)鏡像是誰(shuí)打的、什么版本、對(duì)應(yīng)什么服務(wù)。LABEL org.opencontainers.image.title訂單服務(wù) LABEL org.opencontainers.image.version1.0.0 LABEL org.opencontainers.image.sourcehttps://example.com/order-serviceEXPOSE 指令本身不發(fā)布端口它只是聲明容器內(nèi)服務(wù)監(jiān)聽(tīng)哪些端口作為鏡像使用者查看端口的文檔依據(jù)。實(shí)際端口映射還是靠 docker run 的-p或 compose 里的 ports 配置。但寫(xiě)清楚 EXPOSE 是良好習(xí)慣別人拿到鏡像能快速知道該映射什么端口。5.4 鏡像體積再優(yōu)化JRE 精簡(jiǎn)與層合并多階段構(gòu)建已經(jīng)把鏡身體積降了很多但如果你的服務(wù)很多、存儲(chǔ)和帶寬成本敏感還有幾個(gè)手段可以再壓縮。手段一使用 JRE 而不是完整 JDK。openjdk:11-jre-slim比openjdk:11-jdk-slim小很多。多階段構(gòu)建中的構(gòu)建階段用 JDK運(yùn)行階段用 JRE 即可。注意某些需要?jiǎng)討B(tài)編譯或工具鏈支持的框架比如 Java Agent、Groovy 動(dòng)態(tài)編譯可能依賴 JDK 的某些類這種情況只能繼續(xù)用 JDK 鏡像要自己做驗(yàn)證。手段二合并 RUN 指令減少層數(shù)。每一條 RUN 指令都會(huì)生成一個(gè)新的鏡像層層數(shù)多了會(huì)浪費(fèi)空間。把一系列操作合成一條 RUN 并清理臨時(shí)文件RUN apt-get update \ apt-get install -y --no-install-recommends curl \ rm -rf /var/lib/apt/lists/*注意 Docker 鏡像層的機(jī)制層與層之間是疊加關(guān)系刪除某個(gè)文件只是在上一層做一個(gè) whiteout 標(biāo)記底層文件可能依然占用空間。所以在同一個(gè) RUN 里安裝再刪除是最有效的例如RUN apt-get update apt-get install -y curl \ curl -o app.jar https://... \ apt-get purge -y curl \ apt-get autoremove -y \ rm -rf /var/lib/apt/lists/*手段三使用更小的基礎(chǔ)鏡像。Alpine 的鏡像體積優(yōu)勢(shì)非常明顯但 musl libc 偶爾帶來(lái)兼容性問(wèn)題。使用前最好在本地完整跑一遍應(yīng)用的測(cè)試用例確認(rèn)沒(méi)有隱性問(wèn)題。5.5 給 JVM 開(kāi)啟監(jiān)控與診斷能力這部分是關(guān)于可觀測(cè)性的建議。容器環(huán)境里看不到 jstack、jmap 的圖形界面調(diào)試問(wèn)題全靠命令和監(jiān)控?cái)?shù)據(jù)。生產(chǎn)環(huán)境建議至少做兩件事第一通過(guò) JMX 暴露 JVM 指標(biāo)。注意 JMX 遠(yuǎn)程連接不建議直接暴露公網(wǎng)可以配合容器網(wǎng)絡(luò)或者在 K8s 里通過(guò) Sidecar 方式抓取指標(biāo)。ENV JAVA_TOOL_OPTIONS-Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port9090 -Dcom.sun.management.jmxremote.rmi.port9090 -Dcom.sun.management.jmxremote.authenticatefalse -Dcom.sun.management.jmxremote.sslfalse第二應(yīng)用側(cè)暴露監(jiān)控端點(diǎn)。Spring Boot Actuator 的/actuator/prometheus配合 Prometheus 抓取能把 JVM 內(nèi)存、GC、線程數(shù)等指標(biāo)全部接入監(jiān)控體系比 JMX 更便捷。這個(gè)端點(diǎn)也需要注意鑒權(quán)防止敏感信息泄露。如果應(yīng)用發(fā)生 OutOfMemoryError在 Dockerfile 里配置參數(shù)讓 JVM 在 OOM 時(shí)自動(dòng) dump 堆ENV JAVA_OPTS-XX:HeapDumpOnOutOfMemoryError -XX:HeapDumpPath/heap-dumps/然后給容器掛載一個(gè)卷存放 dump 文件出問(wèn)題時(shí)就能拿到完整的堆現(xiàn)場(chǎng)進(jìn)行離線分析。這個(gè)參數(shù)我強(qiáng)烈建議保留代價(jià)幾乎為零但在關(guān)鍵時(shí)刻能救整個(gè)團(tuán)隊(duì)于水火。6. 一個(gè)完整的生產(chǎn)級(jí) Dockerfile 模板前面講了那么多原理和注意事項(xiàng)是時(shí)候給出一個(gè)可以直接復(fù)用的完整模板了。以 Spring Boot 2.7.x JDK 11 為例。6.1 全量模板與逐行解讀# 語(yǔ)法版本建議顯式聲明防止未來(lái)默認(rèn)語(yǔ)法變化 # syntaxdocker/dockerfile:1.4 # 第一階段編譯打包 FROM maven:3.8-openjdk-11 AS builder WORKDIR /build # 先拷貝 pom.xml利用 Docker 緩存加速依賴下載 COPY pom.xml . RUN --mounttypecache,target/root/.m2 mvn dependency:go-offline # 再拷貝源代碼并打包 COPY src/ ./src/ RUN --mounttypecache,target/root/.m2 mvn clean package -DskipTests # 第二階段最小運(yùn)行環(huán)境 FROM openjdk:11-jre-slim # 創(chuàng)建應(yīng)用用戶避免 root 運(yùn)行 RUN groupadd -r app useradd -r -g app app # 設(shè)置時(shí)區(qū) RUN ln -snf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime \ echo Asia/Shanghai /etc/timezone WORKDIR /app # 從構(gòu)建階段拷貝 JAR 包 COPY --frombuilder /build/target/app.jar ./app.jar # 如果還需要其他文件比如配置文件、證書(shū)、字體等 # COPY --frombuilder /build/target/classes/*.yml ./config/ # 暴露端口 EXPOSE 8080 # 健康檢查 HEALTHCHECK --interval30s --timeout5s --start-period60s --retries3 \ CMD curl -fs http://localhost:8080/actuator/health || exit 1 # JVM 參數(shù)通過(guò)環(huán)境變量注入默認(rèn)按容器內(nèi)存百分比分配 ENV JAVA_OPTS-XX:MaxRAMPercentage75.0 -XX:InitialRAMPercentage40.0 -XX:UseContainerSupport -XX:HeapDumpOnOutOfMemoryError -XX:HeapDumpPath/heap-dumps/ # 切換用戶 USER app # 啟動(dòng)命令注意 exec 環(huán)境變量展開(kāi) ENTRYPOINT [sh, -c, exec java $JAVA_OPTS -jar /app.jar]這個(gè)模板里我把注釋寫(xiě)得很細(xì)你實(shí)際使用時(shí)把a(bǔ)pp.jar替換成你的打包產(chǎn)物名稱端口改成自己的服務(wù)端口健康檢查路徑根據(jù)項(xiàng)目實(shí)際情況調(diào)整即可。6.2 不同基線版本的適配要點(diǎn)JDK 8 場(chǎng)景基礎(chǔ)鏡像建議openjdk:8-jre-alpine或加入-XX:UseCGroupMemoryLimitForHeap參數(shù)JDK 8u191 可用讓 JVM 感知 CGroup 限制。再老一些的 8u131 前版本只能手動(dòng)指定-Xmx。JDK 8 移到eclipse-temurin:8-jre也是可行方案維護(hù)更活躍。JDK 11 場(chǎng)景openjdk:11-jre-slim或eclipse-temurin:11-jre均可。JDK 11 默認(rèn)啟用容器感知但建議顯式添加-XX:UseContainerSupport以保持行為明確。JDK 17 場(chǎng)景可以使用eclipse-temurin:17-jre或更小的17-jre-alpine。JDK 17 是當(dāng)前很多新項(xiàng)目的選擇啟動(dòng)性能、GC 表現(xiàn)、容器適配都比之前版本好不少。Spring Boot Fat Jar vs 解壓 JarFat Jar 的java -jar方式用起來(lái)簡(jiǎn)單但啟動(dòng)時(shí)要把 JAR 里的所有內(nèi)嵌包解壓到臨時(shí)目錄速度稍慢。如果對(duì)啟動(dòng)時(shí)間敏感可以在構(gòu)建階段先解壓RUN cd /build/target java -Djarmodelayertools -jar app.jar extract COPY --frombuilder /build/target/app/ /app/Spring Boot 官方文檔里把這種鏡像稱為分層鏡像Layered Jar它的另一個(gè)好處是每一層可以獨(dú)立利用 Docker 緩存依賴層不變的話鏡像構(gòu)建能省不少時(shí)間。6.3 實(shí)戰(zhàn)構(gòu)建與運(yùn)行驗(yàn)證Dockerfile 寫(xiě)完后構(gòu)建鏡像和運(yùn)行容器驗(yàn)證的基本流程如下# 構(gòu)建鏡像注意最后的上下文路徑 docker build -t order-service:1.0.0 . # 運(yùn)行容器映射端口、設(shè)置內(nèi)存限制、掛載日志目錄 docker run -d --name order-service \ -p 8080:8080 \ -m 1024m \ -e JAVA_OPTS-XX:MaxRAMPercentage75.0 \ -v /data/logs:/logs \ order-service:1.0.0進(jìn)入容器里驗(yàn)證進(jìn)程和環(huán)境docker exec -it order-service /bin/bash ps -ef java -version cat /etc/timezone jcmd pid VM.flagsjcmd是 JDK 自帶的診斷工具比jstack、jmap更全面。容器里如果只有 JRE 而沒(méi) JDK部分診斷工具會(huì)缺失。生產(chǎn)環(huán)境鏡像可以考慮加入較小的 JDK 構(gòu)建或者通過(guò)獨(dú)立的方式連接 JMX 獲取指標(biāo)。7. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄這一節(jié)專門(mén)用來(lái)記錄那些你會(huì)反復(fù)遇到、且網(wǎng)上資料分散的坑。每一個(gè)都是我用真金白銀的線上事故換來(lái)的經(jīng)驗(yàn)看到就是賺到。7.1 鏡像構(gòu)建階段的問(wèn)題問(wèn)題 1Maven 依賴反復(fù)下載構(gòu)建極慢現(xiàn)象每次構(gòu)建都重新拉幾萬(wàn)個(gè)小文件幾分鐘起步。排查發(fā)現(xiàn) pom.xml 和源碼分開(kāi)后仍然慢查看構(gòu)建緩存發(fā)現(xiàn) COPY src/ 這一步基礎(chǔ)鏡像已變化導(dǎo)致依賴緩存失效。解決辦法是上--mounttypecache,target/root/.m2對(duì) Maven 依賴做宿主機(jī)級(jí)緩存實(shí)測(cè)幾百個(gè)依賴的項(xiàng)目全量構(gòu)建從 8 分鐘降到 40 秒。問(wèn)題 2本地能打包Docker 里打包卻失敗常見(jiàn)原因有三構(gòu)建上下文里把 target/ 或 .git 目錄也傳進(jìn)去了體積大且可能包含敏感文件網(wǎng)絡(luò)不通導(dǎo)致依賴無(wú)法下載容器里 Maven 版本和本地不一致導(dǎo)致某些插件行為不同。建議在項(xiàng)目根目錄寫(xiě)一個(gè).dockerignoretarget/ .git/ .gitignore *.iml .idea/這個(gè)文件不僅加速構(gòu)建上下文傳輸也避免本地編譯產(chǎn)物污染構(gòu)建環(huán)境。問(wèn)題 3docker build 時(shí) COPY 找不到文件排查思路確認(rèn)文件在構(gòu)建上下文中不是在 .dockerignore 里被排除確認(rèn)路徑是相對(duì)于 Dockerfile 所在目錄的而不是相對(duì)于系統(tǒng)根目錄。如果用了多階段構(gòu)建確認(rèn) source 階段的路徑拼寫(xiě)是否正確。最有效的調(diào)試方式是在對(duì)應(yīng)階段臨時(shí)加一行RUN ls -la看目錄結(jié)構(gòu)。7.2 容器運(yùn)行階段的問(wèn)題問(wèn)題 4容器啟動(dòng)了但馬上退出看不到任何日志先用docker logs container查看輸出。如果是Error: Unable to access jarfile多半是 COPY 路徑不對(duì)。如果日志里沒(méi)有內(nèi)容檢查是不是啟動(dòng)腳本里用了后臺(tái)啟動(dòng)方式比如nohup ... Docker 要求前臺(tái)進(jìn)程占據(jù)主進(jìn)程后臺(tái)方式會(huì)導(dǎo)致容器立即退出。問(wèn)題 5應(yīng)用莫名被 kill 掉exit code 為 137137 表示容器被 SIGKILL通常是內(nèi)存超限。檢查方法docker inspect container看OomKilled字段是否為 truedocker stats看內(nèi)存趨勢(shì)。解決辦法調(diào)整容器內(nèi)存上限下調(diào)堆比例降低線程數(shù)或者給 JVM 加上-XX:ExitOnOutOfMemoryError讓問(wèn)題明確暴露而不是被直接殺進(jìn)程。問(wèn)題 6容器啟動(dòng)很慢卡在某個(gè)階段很久大概率是 JVM 啟動(dòng)時(shí)熵不足-Djava.security.egdfile:/dev/./urandom能加快 SecureRandom 初始化。我在容器化部署的時(shí)候固定會(huì)把這個(gè)參數(shù)加進(jìn) JAVA_OPTS實(shí)測(cè)啟動(dòng)時(shí)間可以明顯縮短。問(wèn)題 7時(shí)區(qū)不對(duì)日志時(shí)間差 8 小時(shí)解決方案在前面已經(jīng)講過(guò)了Dockerfile 里設(shè)置 TZ 環(huán)境變量或者/etc/localtime軟鏈。還有一種更隱蔽的情況宿主機(jī)的 /etc/localtime 是 UTC容器掛載了宿主機(jī)時(shí)區(qū)文件也會(huì)繼承錯(cuò)誤時(shí)區(qū)。所以設(shè)置時(shí)區(qū)時(shí)盡量在容器內(nèi)獨(dú)立設(shè)置而不要依賴宿主機(jī)。問(wèn)題 8健康檢查總是不通過(guò)關(guān)鍵排查鏈確認(rèn)健康端點(diǎn)路徑正確確認(rèn)端口暴露正確確認(rèn)容器內(nèi)能訪問(wèn) localhost 端口有些應(yīng)用監(jiān)聽(tīng)在 0.0.0.0 沒(méi)問(wèn)題但監(jiān)聽(tīng)在 127.0.0.1 可能導(dǎo)致容器外訪問(wèn)不到確認(rèn)沒(méi)有鑒權(quán)攔截。最后用docker inspect的Health字段查看檢查日志比盲猜快得多。7.3 安全與穩(wěn)定性檢查清單這部分是給要上生產(chǎn)環(huán)境的團(tuán)隊(duì)的清單我每發(fā)布一個(gè) Java 服務(wù)鏡像都會(huì)過(guò)一遍檢查項(xiàng)達(dá)標(biāo)標(biāo)準(zhǔn)運(yùn)行用戶非 root 用戶運(yùn)行基礎(chǔ)鏡像來(lái)源使用可信鏡像倉(cāng)庫(kù)固定版本 tag時(shí)區(qū)明確設(shè)置為應(yīng)用所在時(shí)區(qū)JVM 內(nèi)存配置 CGroup 感知或百分比參數(shù)優(yōu)雅停機(jī)啟動(dòng)命令使用 exec 形式應(yīng)用配置 graceful健康檢查有 HEALTHCHECK 或者 K8s 探針配合日志收集stdout 日志驅(qū)動(dòng)輪轉(zhuǎn)或掛載卷持久化敏感信息無(wú)密碼、密鑰等寫(xiě)入鏡像層文件權(quán)限掛載目錄正確設(shè)置屬主和權(quán)限構(gòu)建緩存上下文精簡(jiǎn)依賴層可復(fù)用7.4 優(yōu)化鏡像體積的實(shí)測(cè)收益用一個(gè)中等規(guī)模的 Spring Boot 項(xiàng)目做對(duì)照結(jié)果很直觀方案鏡像體積啟動(dòng)時(shí)間單階段 JDK 鏡像約 460MB約 8 秒多階段 JRE約 220MB約 7 秒多階段 分層 JAR Alpine約 150MB約 5 秒體積從 460MB 降到 150MB傳輸和部署成本的下降非常明顯。啟動(dòng)時(shí)間的差距主要來(lái)自 Fat Jar 的解壓邏輯Spring Boot 3 和分層技術(shù)的組合還能進(jìn)一步優(yōu)化。8. 更進(jìn)一步面向 K8s 環(huán)境的鏡像設(shè)計(jì)思路如果你的服務(wù)最終是部署在 Kubernetes 集群里的那 Dockerfile 的寫(xiě)法和裸 Docker 環(huán)境會(huì)有一些差異這里單獨(dú)講幾個(gè)關(guān)鍵點(diǎn)。8.1 探針策略與健康檢查的取舍K8s 環(huán)境里可以使用 livenessProbe 和 readinessProbe它們和 Docker HEALTHCHECK 的作用不同readinessProbe決定流量是否進(jìn)入 Pod失敗時(shí)會(huì)從 Service 的 Endpoint 中摘除。livenessProbe決定容器是否需要重啟失敗時(shí)會(huì)殺掉容器重新拉起。兩者不能混為一談。readinessProbe 應(yīng)該用業(yè)務(wù)相關(guān)的就緒指標(biāo)比如數(shù)據(jù)庫(kù)連接池初始化完成、緩存預(yù)熱完成livenessProbe 則用最基礎(chǔ)的 JVM 存活判斷比如/actuator/health。在 K8s 里一般不需要再寫(xiě) Docker HEALTHCHECK否則兩個(gè)機(jī)制疊加可能產(chǎn)生非預(yù)期行為比如容器狀態(tài) unhealthy 影響排查問(wèn)題的直觀性。Spring Boot Actuator 的/actuator/health會(huì)匯總所有健康指標(biāo)DB、Redis、磁盤(pán)等如果某個(gè)下游依賴不可用這個(gè)端點(diǎn)就返回 DOWN導(dǎo)致 readinessProbe 把 Pod 摘掉。有時(shí)候服務(wù)本身還能處理流量比如緩存失效但能降級(jí)卻被探針判定為不健康這就需要自定義健康指標(biāo)分組用單獨(dú)的端點(diǎn)做探針判定。8.2 鏡像 tag 策略生產(chǎn)環(huán)境不要使用latest作為部署 tag這是所有容器化實(shí)踐文檔里反復(fù)強(qiáng)調(diào)的一點(diǎn)。鏡像 tag 應(yīng)該與版本號(hào)對(duì)應(yīng)推薦形如order-service:1.2.3或者帶構(gòu)建號(hào)的order-service:1.2.3-b12。在 CI/CD 流水線里用 Git commit 的短 SHA 作為 tag 也是一種常見(jiàn)做法優(yōu)點(diǎn)是能精確對(duì)到代碼版本。多環(huán)境部署時(shí)我習(xí)慣構(gòu)建一次、到處運(yùn)行同一個(gè)鏡像 tag 部署到測(cè)試、預(yù)發(fā)、生產(chǎn)避免環(huán)境差異導(dǎo)致行為不一致。如果不同環(huán)境需要不同的配置通過(guò)環(huán)境變量或配置中心注入而不是重新構(gòu)建鏡像。8.3 Init 容器與前置依賴處理Java 服務(wù)經(jīng)常有前置依賴比如數(shù)據(jù)庫(kù)、配置中心、注冊(cè)中心。如果這些依賴還沒(méi)就緒應(yīng)用啟動(dòng)會(huì)報(bào)錯(cuò)退出。K8s 下可以用 Init 容器做依賴等待initContainers: - name: wait-for-db image: busybox:1.36 command: - sh - -c - |- until nc -z db-service 5432; do echo waiting for db... sleep 2 done但要注意這個(gè)方案等待的是 TCP 端口連通不保證數(shù)據(jù)庫(kù)真的完成了初始化。如果應(yīng)用自身具備重連機(jī)制其實(shí)不用 Init 容器把等待邏輯放在應(yīng)用啟動(dòng)階段更健壯。Spring Boot 的spring.datasource.hikari.connection-timeout和initialization-fail-timeout可以配成超時(shí)重試這就夠了。8.4 ConfigMap 與 Secret 注入配置容器的配置注入推薦用 K8s 的 ConfigMap 和 Secret 掛載到容器內(nèi)而不是把配置文件寫(xiě)進(jìn)鏡像。這樣鏡像本身是可復(fù)用的配置差異由編排層管理。apiVersion: v1 kind: ConfigMap metadata: name: order-service-config data: application.yml: | server: port: 8080 spring: profiles: active: prod --- apiVersion: apps/v1 kind: Deployment metadata: name: order-service spec: template: spec: containers: - name: order-service image: order-service:1.2.3 volumeMounts: - name: config mountPath: /app/config應(yīng)用啟動(dòng)時(shí)自動(dòng)加載/app/config/application.ymlSpring Boot 默認(rèn)會(huì)掃描/config目錄直接和本地開(kāi)發(fā)保持一致的加載規(guī)則。9. 回看一遍幾個(gè)讓我少走彎路的經(jīng)驗(yàn)也許文章太長(zhǎng)你已經(jīng)忘了細(xì)節(jié)最后再拎幾個(gè)我覺(jué)得最值得記住的經(jīng)驗(yàn)。第一個(gè)是容器里跑 Java內(nèi)存參數(shù)永遠(yuǎn)要比你以為的更嚴(yán)格。不管你是不是在云上不管你設(shè)置了多大的容器內(nèi)存只要沒(méi)有正確配置 JVM 的容器感知參數(shù)總有一個(gè)深夜會(huì)讓你從睡夢(mèng)中被叫醒。第二個(gè)是啟動(dòng)命令一定要用 exec 形式。那個(gè)sh -c里漏掉的exec就是容器優(yōu)雅停機(jī)失效的直接原因。寫(xiě) Dockerfile 的時(shí)候ENTRYPOINT永遠(yuǎn)考慮用 exec 形式需要環(huán)境變量展開(kāi)時(shí)再用sh -c exec ...。第三個(gè)是鏡像越小不只是省磁盤(pán)更是省每次發(fā)布的時(shí)間。多階段構(gòu)建帶來(lái)的好處不僅是體積還有構(gòu)建速度和可維護(hù)性。把編譯和運(yùn)行環(huán)境分離思路簡(jiǎn)單收益巨大。第四個(gè)是時(shí)區(qū)這個(gè)問(wèn)題應(yīng)該在 Dockerfile 里解決而不是在應(yīng)用代碼里寫(xiě)死。應(yīng)用代碼里加TimeZone.setDefault()屬于打補(bǔ)丁治標(biāo)不治本。容器里設(shè)置好系統(tǒng)時(shí)區(qū)應(yīng)用不做任何時(shí)區(qū)特殊處理行為才統(tǒng)一。最后再分享一個(gè)小技巧調(diào)試 Dockerfile 時(shí)用docker build --progressplain可以看到每一層執(zhí)行的完整輸出比默認(rèn)的交互式進(jìn)度視圖好用得多。遇到構(gòu)建失敗直接定位到失敗的那一行配合臨時(shí)加 RUN 命令查看環(huán)境狀態(tài)排查效率能翻倍。這些經(jīng)驗(yàn)是我斷斷續(xù)續(xù)踩了大半年坑才攢起來(lái)的。前面講的那些模板和參數(shù)建議你拿到真實(shí)項(xiàng)目里試試多跑幾個(gè)環(huán)境驗(yàn)證一下。等你自己把整套流程跑順了再來(lái)回看這篇文章相信會(huì)有更深的理解。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
农村熟妇高潮精品A片| 丁香久月| 色欲九区| 操日视频| 婷婷五月,偷窥偷拍网| 九色激情网| 九热久| 涩综合网| 五月丁香久久久日婷婷久久婷婷日| 一根材五月婷成人| 五月婷婷五月天在线| 伊人狠狠丁香婷婷综合尤物| 精品夜夜澡人妻无码AV| 97色射| 自拍视频在线观看9| 热久久色| AV堂狠狠干| 久久婷婷青草五月天| 激情婷婷丁香色五月综合| 丁香五月天BBw| 五月婷婷激情五月| 国产人妻人伦精品一区二区| 超碰在线94| 大香蕉99热| 国产免费av在线| 中文字幕在线日亚州9| 五月天激情在线视频| 9999热这里只有精品| 丁香六月天堂| 久婷五月| 国产精产国品一二三在观看 | 日本3级片一区2区| 五月婷婷涩涩爱| 以及AA大片看看| 伊人9草在线观看| 99在线公开视频| 琪琪秋霞| 综合XX网| 亚洲九九99精品视频在线播放| 91干99| 丁香花五月天激情| 五月丁香激情欧洲啪啪| 99在线免费视频| 婷婷色导航| 男人先锋久久| 亚洲中文字幕网| 米奇影视资源777狠狠色婷婷五月天激情网 | 欧美成人AAA片一区国产精品| 欧美久久久中文字幕| 在线中文字幕av| 日本在线免费中文com.| 久久多色| 综合超碰熟| 婷激情五月天视频导航| 日日夜夜天天| 九九爱激情| 色人久夂| 天天插综合| 日日干天天| 色婷婷狠狠| 五月婷婷操操| 人人爽人人射-美女久久久久久久久久-成人AV| 九九热99免费视频| 欧美va亚洲va在线播放| 成人短视频在线观看| 久久99精品久久久| 日韩精品色| 激情五月丁香社区| 色色色色色综合| 久久黄色网扯| 色五月婷婷av| 97在线日本| 久久五月婷婷电影| 婷婷中文无码| 99精品超在线播放| 婷婷五月天欧美| 色色丁香| 天天骑日日爽| 狠狠干狠狠色| 操久久网| 色婷婷五月在线| 色操综合| 极品五月天| 999热这里只有精品| 色开心五月丁香| 六月丁香成人| 人妻内射视频| 九九热在线观看6| 亚洲九九视频| 色色色婷婷| 综合五月天婷婷色| 狠狠ri| 国产噜一噜天天噜| 99精品免费视频| 伊人色五月| 久9综合| 国产成人网址| 色婷久| 真实的国产乱XXXX在线91| 婷婷五月天在线看| 国产欧洲欧洲精品久久| 日韩成人网址| 99re在线观看| 丁香五月天啪啪| 五月婷六月| 久久九九经典| 五月婷婷丁香婷婷| 丁香六月五月天| 少妇达人正片在线播放_ikun_福利吧| 欧美久久九九| 天天xxxxxx天天日| 亚洲AV久久久久久久久久久久久久久久| 五月天天天综合| 超碰在线国产| 五月丁欧美| 超碰超碰在线| 在线成人网站| 色五月激情五月天| 去干网av| 五月天精品| 大香蕉久操| 色导航色婷婷五月天在线观看| 久久se 综合网| 色色99色色| 色色色色色色网站| 五月天天天操天天爽夜夜操| 狠狠狠狠狠狠| 九月婷婷丁香| 久久婷婷五月综合色和| 丁香婷婷色| 伊人大香蕉爱聚| 深爱五月亚洲| 成人在线免费网址| 亚洲第一第二网站| 精品99在线| 亚洲天堂大香蕉| 国产精品人妻在线网址| 97碰在线视频| 99成人精品六| 婷婷五月综合基地| 五月婷婷|欧美| 91成人看| 色色丁香婷婷| 玖玖99福利| 任你草| 天天日夜夜高潮| 激情av| 丁香五月婷婷六月婷| 成人精品视频99在线观看免费| 五月婷成人网| 99亚洲精品综合在线| 激情五月五月五月婷婷| 亚洲成人无码免费| 国产成人AV在线| 大香蕉精品视频| 久热91| 美日韩成人| 思思热99热| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 婷婷五日b| 国产暴力强伦轩1区二区小说| 免费精品66| 欧洲MV日韩MV国产| 五月丁香六月婷婷色日| 久久久18| 九九伦子片| 亚洲美女网Va| 人妻性操逼中文字幕 国产| 欧美激情综合色综合啪啪五月| 激情五月黄色小说| 99视频日韩| 激情五月丁香六月| 亚洲人妻av| 日本人妻伦在线中文字幕| 亚洲国产成人裸舞| 性爱五月丁香| 国产精品久久久久久久久久久久| 99这里都是精品6| 91色在线| 亚洲精品白浆高清久久久久久| 97久久超碰| 99热官网| 男人的天堂99| 亚洲丁香花色| 人妻尝试久久久久久久久久久久| 九九热99视频在线| 成人做爰高潮A片免费视频| 新激情五月天色播| 91尤物九色在线| 久热免费| 色色色成人网| 免费无码毛片一区二区A片| SESE无码AV| 亭亭五月基地在线| 国产69久久久欧美黑人A片| 五月天激情啪啪| 久综合| 91操人| 九九99一区| 成年视频免费观看| 久久99国产综合精品免费| 99久在线精品99re8热| 亚洲另类婷婷综合| 精品9久| 色玖玖综合| 久久色五月天| 色欲婷婷五月天丁香| 久久亚洲婷婷| 韩国激情五月天综合网| 五月花成人网| 天天色图| www.99久久久久99| 老美AA片| 色综合色色| 成人超碰Av| 亚洲激情综合| 冬月かえでAV无码播放| 国产FREESEXVIDEOS性中国| 五月花免费视频| 99色在线观看免费| 天天干天天操天天射| 婷婷亚洲天堂| 久综合| 99亚洲大片精品永久在线观看| 九九青草热| 婷婷开心六月| 综合久久婷婷五月丁香| 色情婷婷。| 久久精品无码一区| 五月婷婷深深爱| 婷婷丁香五月综合| 亚洲色爱综合| 5月婷婷综合| 日韩欧美一道四区中文字幕| 婷婷9月天| 日日爽夜夜爽| 97在线精品视频| 怡红院精品视频久久久久久久久| 久久婷婷丁香五月一二三| 婷色视频| 91久久人人操| 610018岁成人视频| 五月天婷婷基地| 精品爆操| 丁香五月婷婷AV在线| 五月开心婷婷| 狠狠五月丁香色婷| www.激情五月天。com| 五月天基地| 大香蕉久久综合网| 一本大道熟女人妻中文字幕在线| 五月天亭亭俺也| 五月婷婷六月色| 五月婷导航| 色综合播放| 99在线热| 色综合大香蕉| 99狠狠操一| 97丁香视频| 中文字幕在线aⅴ免费观看| 久久五月婷| 成人五月天视频播放| 人人操Av| 安息电影在线观看完整版| 性高潮久久久久久-九九九九九九九九九九热-成人AV | 一起草AV| 色啪影院| 九九精品网站| 五月丁香激情综合网| 青青草婷婷久久| 九色视频九色九色91jiuseshipin| 日日噜狠狠| 成人在线视频男人的天堂4399| 九月丁香八月婷婷加勒比| 色婷婷综合网| 97碰在线视频| 五月丁香婷婷综合| 97色色网| 午夜天堂一区人妻| 久久人人妻| 日韩成人免费电影| 婷婷爱五月天| 开心五月激情网| 99精品综合| 久热9| 日本久久婷婷| 亚洲美女高潮久久久久久69| 伊人五月综合网| 婷婷六月丁香五月| 伊人玖玖婷婷| 黄色成人网站在线播放| 六月婷婷色色色| 99色视频| 六月激情婷婷| 激情综合国产| 色墦五月丁香| 色婷婷激情| 免费无码毛片一区二区A片 | 99热99久久| 五月丁香淫淫婷婷婷| av在线色五月丁香婷区久| 丁香激激情网| 这里只有精品1| 狠狠人人婷婷| av在线观看网站| 六月丁香综合| 丁香九月激情| 69超碰在线| 日韩av一区二区在线/日产精品久久久| 丁香婷婷综合激情五月色| anquye五月| 丁香五月六月激情| 亚洲另类视频| 色婷婷免费观看| 久久网日本| 成人在线视频网| 天天日夜夜拍| 丰满少妇乱A片无码| 狠狠爱深色婷婷综合| 影音先锋 萱萱| 亚洲中文字幕在线电影| 人妻视频在线| WWW.五月天9999| 五月婷深深爱激情网| 欧美成人精品老美女噜噜噜| 天堂久久性| 激情综合网五月丁香| 五月丁香婷婷六月| 韩日另类| 91操在线观看| 国产熟女一区二区三区五月婷| www.狠狠| 婷婷丁香五月天亚洲| 色色色色色色色色综合网| 66色在线日韩| 婷婷综合五月| 婷婷天堂站| 97在线刺激| 久久激情综合| 91狼友视频在线观看| www.夜夜爱.com| 懂色av蜜臀av粉嫩av永陈冠希| 激情久久网| 337p大胆噜噜噜噜噜91Av| 丁香久久五月婷综合| 婷婷激情五月天视频在线| 五月婷婷乱| 婷婷五月色天| 欧美性做爰大片免费看办公室| 婷婷五月激情欧美大胆视频| 五月久久网| 婷婷婷久久久| 涩涩五月天综合| 婷婷激情五月综合丁| 色色亚洲视频| 久久综合五月天| 九九Y精品热播| 久久久精品AV| 天天拍天天做视频| 天天日天天插| 少妇搡BBBB搡BBB搡毛茸茸| 伊人久热91网| 丁香五月婷婷啪| 婷婷丁香激情综合色情| 亚洲五月天激情| 中文字幕无码人妻少妇免费视频 | 开心四月婷婷在线色播播| 天天狠天天叉| 一本大道嫩草AV无码专区| 丁香五月激情图片婷婷| 开心六月丁香五月婷婷| 婷婷五月色惰| 182tv992tv人之初午夜免费观看| 亚洲精品乱码久久久久久按摩观| 激情五月综合亚洲另类| 极品精品一区二区三区在线| 五月天另类小说亚洲| 可以免费看的AV网站| 色五月婷婷网| 久久免费9| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 色色五月天丁香| 精品皮股午夜AV| 五月婷婷综合激情| 久激情| 另类图片激情五月天| 丁香激情五月| 亚洲色区17| 婷婷美女精品视频| 99这里都是精品6| 日本人妻操| 久久久区区一久久久久久| 丁香婷婷五月| 色综合中文色综合网| 婷婷五月天亚洲图片| 日韩aaa| 久9精品| 伊人婷婷五月天av| 国产小精品| 色情综合网| 蜜臀99精品| 日日操夜夜操不卡| 九九热九九热精品| 性综合网| 超碰人人99| 久热精品视频| 香蕉婷婷五月| 无码天天操| 综合激情站| 婷婷玖玖五月天| 五月婷婷开心激情六月蜜桃| 色优久久| 视频这里只有精品| 伊人激情| 91久久| 国产在这里只有精品| 激婷网| 五月天六月天| 色婷婷基地| 99热老网站| 五月婷婷丁香在线视频| 色吧婷婷五月亚洲| 99热这里有精品24| 婷婷色情 | 激情婷婷五六月天| 中国女人内射6XXXXX| 996热re视频精品视频| 六月婷婷色综合| 色五月激情问网站| 99热在线观看精品| 久99久视频精选| 丁香婷婷成人在线播放| 丁香五月婷婷啪啪视频| 五月天婷网| 久久久久亚洲AV综合| 无码中文一区二区三区| 2018国产大陆天天弄| 色婷丁香五月| 99热这里全都是精品| 色五月天激情| 熟女激情五月天| 99热最新| 99免费视频| 婷婷五月色播网| 91精品久久久久、久五月天| 久久精品夜色噜噜亚洲a∨| 深爱激情综合| 久久艹99| 婷婷五月天综合网| 色9色| 亚洲中文字幕在线观看| 我要看激情五月天| www. 五月. com| 丁香五月婷婷网| 涩涩婷婷五月| 99re在线观看| A一级操| 97干干干丁香| 亚洲99热| 免费97碰碰| 亚洲五月婷| 伊人色综合影院视频| 99无码超碰| 国产亚洲色婷婷久久99精品91| 国产成人99久久亚洲综合精品| 天天色天天搡| 女人被躁到高潮嗷嗷叫小| 婷婷五月丁香基| 久久R激情| 天天插AV丝袜中| 人人插9| 天堂综合久久| 人人爱干人人爱草| 黄色网址五月婷婷| 97五月天| 色婷五月婷婷| 一本到不卡高清DVD| 99热网站| 久久婷婷五月天激情新地址| 伊人五月婷| 五月在线| 日本系列_4页_777FP| 五月丁香综合激情| 亚洲AV成人无码久久精品老人法拉利| 色色日本欧美| 天天日天天爽| 五月婷六月婷婷| 另类视在线| 亚洲操人| 天天操,天天插| 99re视频在线| 九九RE视频在线精品| 婷婷网五月| 9999热在线免费观看| 五月天婷婷社区| 99热777| 99热日| 亚洲AV成人在线| 精品色情一区二区三区四区| 久久婷婷五月综合色和| 五月婷婷之综合激情| 一二三区视频韩国| 久久99精品久久久久久三级| 天天插天天插| 日本色爽| 五月丁香在线精品| 婷婷五月天综合久久| 色五月天婷婷| 99色精品| 五月天婷婷丁香花| 欧美日韩123| 青草视频在线播放| 婷婷深爱五月| 综合狠狠干| 色综合久久中文| 国产日产亚系列精品版优势| 亚洲成人网在线观看| 密乳视频| 99re热精品在线视频| 婷婷综合性爱网| 91精品无码| 伍月婷丁香花全集| 99免费热在线精品| 大香蕉免费9| 夜夜嗨一区二区三区直播内容 | 蜜桃五月天| 天天日天天舔天天摸| 久久丁香网| 色播五月婷婷| 综合激情五月天六月婷免费视频| 热热久久精品视频| 激情综合网五月丁香| 亚洲妇女熟BBW| 日韩操逼大片| 99这里是精品| 色五月开心五月激情五月| 99re在线免费视频| 国产日产亚系列精品版优势| 久久只有18视频| 久久婷婷欧美| 热中文字幕| 亚洲成人中文字幕| 这里只有精品96| 天天玩夜夜操| 久草五月婷婷| 婷婷狠狠干| 色综合色综合婷婷热| 97视频.干com| 五月天AV大香蕉| 日本婷婷激情四射中文字幕在线观看| 丁香五月成人| 婷婷丁香五月综合| AV成人在线播放| 色狠狠色综合| 亚州欧美国产久精国产99综合视频| 9色免费网| 久久九九激情五月天 | 久久一级片| 岛国在线观看91| 五月婷在线| 久热无码| 亚洲综合99| 一本色道久久综合狠狠躁小说| 色激情五月| 色婷婷AV在线| 国产精品色色| 丁香婷婷在线| 婷婷之六月丁香| 久久成人性爱| av在线超清中文| 国产欧美日韩性爱| 中文字幕欧美久久| 91无码高清| 欧美久久久久久久久中文字幕| 丰满少妇猛烈A片免费看观看| 亚洲热视频在线| 丁香五月婷婷色情综合| 狠狠色五月| 色欲色香伊人| 五月丁香六月婷婷在线| 开心综合激情综合| 婷婷五月天手机版视频| 婷婷色日本| 五月丁香少妇A| 91碰碰碰| 国产激情在线| 五月停停色色丁香| 亚洲啪啪啪啪| 亚洲婷婷视频| 色情·com| 五月天·www·com| 狠狠婷婷爱| 六月丁香婷啪射| www.色五月| 婷婷五月激情四月综合 | 激情婷婷啪啪| 九九色综合九九色| 精品久久这里热66| 亚洲精品在线视频| 激情五月天开心| 五月天 无码| 五月第四色| 色五月丁香婷婷在线观看| 99热99热不卡| 激情五月天婷婷丁香| 五月欧美丁香在线观看| 99久在线精品99re8热| 天天干 夜夜爽| 天天日天天舔| 4399成人黄A片| 综合另类视频| 色婷五月| 亚洲无码99| a久久| 国产午夜精品一区二区三区四区| 丁香五月AV| 超碰亚洲欧美| 天堂网操| 久久大香免费| 99热欧美| 狠狠色狠狠鲁| 99久久玖玖| 五月天狠狠草| 成年人看Va免费视频| 五月婷婷在线视频观看| 综合久| 九九热超碰| 久99婷婷色综合| 美国不卡视频| 97人人射| 天堂婷婷丁香六月网| 五月天婷婷激情在线色图| 99热新网址| 狠狠五月天| 99re在线播放| 亚洲第二AV| 成人在线精品| 西瓜美女a片| 婷婷丁香五月综合网上| 婷婷四色五月| 香蕉人妻AV久久久久天天| 九九99视频精品| 大香蕉天堂| 这里只有精品,日韩视频| 丁香五月第四色88| 亚洲操逼片| 欧美色综合天天久久综合精品| 不卡的AV网站| 久久九九@| 中文字幕在线观看视频www| 天天色天天搡| 五月开心深爱激情网| 91在线日| 丁香六月成人| 久久新| 天天婷婷综合| 亚洲色色图片| 色色色综合色| 北京熟妇搡BBBB搡BBBB| 欧美色必爱| 91久久综合| 一起草AV| 五月丁香啪啪综合| 色五月综合| 丁香99| 欧美色激情四射| www.久久久.com| 婷婷五月色丁香在线看| 96精品久久久久久久久| 色色婷婷综合| 婷婷精品| 五月婷婷在线视频| 国产AV一区二区三区最新精品| 91久久九久久九久久九久久九久久| 婷婷五月天激情在线观看| 亚洲熟妇无码乱子AV电影| 中文字幕精品无码一区二区| 99riAv1国产在线观看| 亚洲色欲AAAAAA| 五月丁香色| 九九亚洲| 色七七九九| 久久婷婷一级片| 丁香五月婷婷五月天| 亚洲视频综合网| 成人av免费观看| 丁香六月成人| 丁香五月五月婷婷欧美大香蕉| 人人叉久| 狠狠狠五月婷婷六月丁香| 久久婷婷成人综合色怡春院| 亚洲有码在线视频| 天天干天天射综合网| 久久狠狠干| 停停综合色色| 亚洲第一视频 久久| 五月色婷婷综合| 色播激情| 天天拍夜夜爽| 亚洲色综合| 91丨人妻丨国产丨丝袜| 色色亚卅| 婷婷五月天色| 丁香婷婷五月六月久久| 性爱视频99| 久久看九九90| 激情综合网激情五月网| 99视频这里有精品| 欧洲不卡视频| 色五月丁香网| 丁香五月激情啪啪综合| 操人无码| 丁香蜜臀黄色婷婷五月天| 五月天婷婷激情四射综合| 婷婷久久五月| 色婷婷视频在线| 激情图片婷婷| 久久久久久久久人妻| 五月天sesese| 激情影院免费视频婷婷五月天 | 激情五月www| 丁香五月综合| 丁香五月天啪啪| 97人人操人人| 五月综合色| 在线一起草av| 热热久久99| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 婷婷激情小说网| 99热久| 91主播在线| 国产日韩欧美性生活| 大香蕉婷婷五月天| 日本一级| 超碰超碰在线| 五月黄色婷婷| 五月婷婷啪啪啪啪| 欧在线一区| 五月丁香综合激情在线观看| 丁香五月激情五月| 思思热闹这里只有精品| 我去色色网五雨天| 99日精品视频| 天天操B| 97婷婷狠狠| 欧美三级欧美一级| 99热日韩| 天天精品视频免费观看| 成久综合视频| 六月婷婷五月丁香| 激情六月五月婷婷综合网| 深爱激情五月天| 精品99久久久久成人网站免费| 九九综合久久| 天天爽人人爽| 免费看欧美成人A片无码| 色色色色欧洲| 五月色网| 天天五月丁香五月| 亚洲视频在线观看| 色色日韩无码| 亚洲正能量欧美| 色优久久| 亚洲色色色| 欧美在线骚货| 性爱网五月婷婷| 五月天久久综合婷婷丁香| 人与禽A片啪啪| 婷婷无码视频| 内射人妻视频国内| 午夜色丁香| 日韩一级网站| 在线观看av网站| 久久精品五月| 激情欧美五月丁香| 大天天伊人| 99热色精品| 日良久久| 色婷婷超碰| 日木WWW视频| 五月天色官网| 丁香六月激情综合| 丁香色五月婷婷91桃色| 久久久天天啊| 超碰人人超碰| 五月天丁香网| 婷婷五月天直播| 婷婷六月香| 久久人人妻| 丁香五月久久| 九九综合| 永久的网站AAAA | 激情五月婷| 97啪啪| 小视频一区| WWW·色色色·COM| 五月天精品| 色偷偷狠狠| 99超碰人人| 来吧亚洲综合网| 99久久a线观| 另类国产欧美视频| 激情五月天视频| 色婷婷五月天成人网| 久久婷婷综合拍| 人人爽天天爽| 婷婷六月丁香色| 亚洲另类AV| 99热这里只有精品免费| 99综合婷婷五月| 99精品免费欧美小视频| 日日爽日日| 婷婷色情小说| 久久久久久18| 国产精品美女| 夜夜干天天干| www.91在线观看| 久久精品一区二区三区四区| 色色哒五月婷婷六月丁香| 性一交一乱一交A片久久四色| 色欧美一级| 国产免费一区二区三州老师F1F1| 玖玖在线资源视频| 亚洲AV无码成人精品电影| 丁香五月网址| 久久国产性爱A V| 婷婷中文网站| www.91在线观看| 在线色五月婷婷| 男男野外做爰全过程69| 激情四射网| 天天成人综合视频| 婷婷五月综合在线| 微拍92| 99精品视频在线观看| 丁香六月情| 久久99热这里| 97久人人| 丰满少妇乱A片无码| 天天天操天天天日| 婷婷五月激情六月丁香 | 婷婷 激情 五月| 色五月婷婷天堂| 99噜噜噜在线播放| 91色色色18| 五月婷婷我| 777色婷婷爱五月| 九月停停| 丁香五月影院| 丁香婷婷五色月| 婷婷五月丁香欧洲| 曰韩五月丁香色婷婷无码| 色色色在线观看| 日日狠狠久久偷偷四色综合免费| 97干欧美| 襙逼网| 激情小说五月天| 青青草婷婷久久| 99久久九九视频| 大香蕉精品视频| 婷婷伊人网| 日韩按摩二区| 日本不卡中文字幕| 久久婷婷六月综合综合| 中文幕无线码中文字蜜桃| 色欲av伊人久久大香线蕉影院| 影音先锋777xfplay色资源网站| 99激| 婷婷丁香五月天综合AV| 91在线精品一区二区| 激情开心五月天| 婷婷刺激综合| 自拍盗摄 另类| 五月丁香成人| 婷婷激情五月天网站| 99热加勒比| 色婷婷五月综合色婷婷| 六月丁香久久| 五月婷婷六月丁香| 五月丁香六月综合激情无码软件亮点| 超碰在线精品| 色综合香蕉| 99在线免费视频播放| 色情综合| 色色射| 亚洲色欲AAAAAA| 婷婷五月天在线综合导航| 99精品97| 在线伦子99热| 最新无毒无码AV| AV性爱网| 亚洲综合色色| 久久99性爱| 亚洲欧州色情在线观看| 热热久久精品视频| 99爱视频精品在线观看| 爆乳熟女一区二区三区爆乳| 久久精品99国产精品日本| 91九色首页| 亚洲综合五月天婷婷丁香| 久久深爱激情网| 婷婷夜夜夜夜| 我爱va亚洲va52| www.minyis.com【JT】实力收量可预付TG@LXSPSW8 | 丁香色婷婷色手机免费在线| 久久小说| 色五月激情五月| 一点色成人网| 专区无日本视频高清8| 天天干天天做| 操久久网| 九九久久综合| 人人九色| 亚洲av成人在线| 思思热久久爱| 无码色色| 婷婷涩涩五月天| 久久六月天| 五月丁香在线婷婷美女| 五月丁香六月婷婷综合网缴情| 五月婷婷色男女| 激情五月综合网| 99精品热视频只有精品10| 九玖视频这里只有精品| 五月丁香激情综合啪| 婷婷丁香色五月亚洲| 欧日韩AV| txt五月激情四射网综合俺也来了| 91人人妻人人操人人爽| 久久婷婷五月综合色天| 99免费青青蜜臀| 91在线操| 五月婷婷六月综合| 色色狼人综合| 日本久久网| 五月花综合网| 五月丁香六月婷婷综合网| 久久婷婷欧美| 亚洲看av的网站| 久狠日av| 深爱1激情网| 色天天综合成人网| 天天激情| 亚洲性爱电影| 五月婷av| 日本熟妇乱妇熟色A片蜜桃| 五月天婷婷狂暴白浆| 激情av网| 亚洲综合草草| 综合激情五月婷婷| 97资源欧美日韩大香蕉超碰一区| 黄色精品五月婷婷| 丁香色五月婷婷17C| 色五月天天在线观看资源站| 婷五月天| 婷婷少妇激情| 美女婷婷六月色| 五月激情偷拍婷婷| 色婷婷www| 粉嫩av蜜桃av蜜臀av| 超碰免费在线| 精品无码久久久久久久久| 狠狠爱丁香婷| 五月色网| 色五月婷婷视频| 五月丁香六月婷婷啪啪| 亚洲天天| 99热99日天天干| www.91AV.com| 久久久人妻久久久| 五月婷在线色视频| 综合色色色| 日日夜夜干| 天天色中文字幕女优AV| 丁香婷婷六月天| 丁香五月大香蕉| 牛牛碰免费| 婷婷伊人综合中文字幕| 亚洲乱码日产精品BD在线观看| 91/九色黑人| 91vip在线观看| 亚洲精| 久久精彩视频| 91一起操| 久久无意婷婷| 99国产在线精品视频| 丁香久久九九99| 99er这里只有精品视频| 日日狠狠久久偷偷四色综合免费| 丁香五月婷婷啪| 综合aV在线| 婷婷色九月| 激情综合另类| 久久综合丁香| 婷色综合| 色色无码日韩| 欧美性丁香色色五月天干干| 亚洲综合成人网| 婷婷久久伊人| 国产在线另类五月婷婷| 欧美人人操| 香蕉五月婷婷| 丁香六月婷婷五月天| 99∨VTV| 国产精品涩涩涩视频网站| 婷婷五月天丁香社区| 婷婷丁香五月天色区| 激情婷婷久久| 色爱综合网| 性生活视频98791| 俺去也在线www色官网| 激情色色| se婷97| 激情涩涩网| 亚洲综合色色色| 夜夜操狠狠操| 日本69日人视频| 六月婷婷影院| 天天做夜夜爽| 97操在线资源| 色五月丁香激情视频| 五月天色色色| 日韩精品无码AV| 思思热热久久| 中文字幕av在线播放| 婷婷五月天国产性感美女演员久久久久| 久久色五月| 99啪99| 美腿丝袜AV天堂网| 热久久66| 色婷婷丁香五月| 色色五月婷| 热久精品| 葵花AV在线| 五月婷婷丁香深深爱| 超碰三级片| 97色五月丁香婷婷| 很很操很很操| 91九色国产| 色五月婷婷伊人| 天天干天天色天天干| 日日日日日| 色热久| 激情图片五月天| 中文字幕综合色| 六月天无码网址| 婷婷五月天网| 武则天精品久久| 狠狠色成人影片| 97在线日本| 婷婷五月天成人动漫 | 91n网站cad入口在线观看| 天天干天天日天天插| A久久| 日韩精品999| 99精品久久久久| 97热久久| 99免费在线| 久久爱综合| 久久综合天天综合| www五月婷婷| 亚洲人妻一区二区| A片试看120分钟做受视频红杏| 激情五月激情综合俺也去婷婷小说| 91碰在线| 97视频.干com| 五月丁香色狠狠干大屄| 少妇2做爰HD韩国电影| 79精品在线视频| 99这里只有精| 第四色婷婷日本| 99爱视频在线观看| 久久宗合影| 综合网啪| 国产黄色一级片| 五月婷婷婷| 天堂色色色| 激情五月久久| 五月丁香九九| 99视频只有这里精品| 亚洲中文AV网站| 这里只有精品免费视频| 激情五月天福利| 免费在线观看欧美激情xx小视频| 丁香九色不卡aaa| 激情五月婷婷五月丁香五月开心五月 | 丁香婷色| 亚洲av成人在线| www.色五月.com| 亚洲精品大片| 久热人妻| 婷婷丁香九月| 91黄址| 超碰免费人人| 久热这里只有精品性色AV| 激情人妻综合| 全高清无码视頻| 久久久18| 九九精品视频免费在线| 久久98| 热99精品视频在线观看| 五月天激情综合| 插少妇综合网| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 欧美天堂久久| 六月丁香婷婷五月天| 思思热在线| 成人久久天天x资源站| 天堂久久丁香| 毛片毛片毛片毛片| 99人人操| 91欧美| 99'无码| 激情丁香五月婷婷| 五月天婷婷成人资源站| 七七久久综合| 久久久噜噜噜久久人妻| 99热天堂| 五月丁香婷婷啪啪| 26uuu淫色| 黄色三级毛片中字| 丁香五月天啪啪| 色啪影院| 99综合视频一体| 999热成人在线综合网| 精品自拍97| 无码操B| 伊人九九综合| www.丁香五月| 密乳视频| www91久久| 色婷婷69| 久久婷婷成人视频| 日韩久久系列| 五月丁香六月综合激情无码软件亮点| 婷婷九月亚洲| AAA久久| 色噜综| 婷婷 丁香 久久| 五月丁香婷婷色| 夜夜天天久久婷婷| 成年视频免费观看| 色色激情五月天| 五月天婷婷丁香蜜桃91| 日美三级| 色婷婷亚洲婷婷| 婷婷激情中文综合| 日日夜夜狠狠| 午夜AV网| 欧洲亚洲午夜| 这里只有精品视频视频在线观看| 亚洲精品一区中文字幕乱码| 婷婷五月天免费视频| 亚洲成人另类| 婷婷五月天av| 丁香色播五月天| 婷婷丁香综合| 天天天天干| 婷激情五月| 久久99久久99精品免视看婷| 日韩丰满少妇无码内射| 婷婷五月亚洲一本在线丁香| 俺也去婷婷五月天第五色| 亚洲六月色| 色噜噜97视频在线观看| 最新亚洲色色网| 久9精品视频在线| 日本一级一片免费视频| 午夜青草资源| 婷婷伊人综合| 免费视频99| 激情小说视频图片网| 91疯狂操操操操| 亚洲综合激情五月久久| 日本色婷婷| 亚洲日韩人妻操逼| 欧美性色视频| bbwcuckold精品熟妇| 久久电影五月天丁香电影| 99自拍视频在线观看| 一级操逼内射在线视频| 97人人操人人爽| 淫视馆av三区| 九九这里只有精品| 激情VA视频| 欧美图片丁香五月天| 日本不卡五月婷婷丁香| 直接看的AV| 99热天堂| 97精品综合久久| 噜噜在线| 成人综合网站| 成功精品影院| 97夫妻超碰| 国产激情在线| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 久热这里只有精品6| 夜夜干天天干| 日日激情网| 婷婷五月综合激情小说| 91肏| 1024欧美看片| 丁香六月天婷婷色| 激情丁香五月婷婷| 日韩狠狠色| 精品爆操| 性av| 玖玖婷婷色| 婷婷五月丁香色情| 国精产品一区一区三区免费视频| 日本一级大片| 99综合网| 久久思思热| 99热精品中文字幕| 色婷婷综合网| 九九视频在线观看| 亚洲精品国产成人AV在线| 色色五月婷婷久久| 99无码视频| ji'qi'luan'ren'lun| 丁香六月婷月91婷月| 蜜臀AV在线成人| 久久婷婷五月国产色综合激情| 亚洲永久四色| 丁香五月天AV在线| 色婷婷丁香五月| 玖玖综合色| 热99在线精品| 性爱网六月丁香| 亚洲视频国产一区| 丁香六月婷婷色播| 五月丁香毛片| 青996青| 日本天堂免费99| 婷婷五月色惰| 99伊人性爱在线影院| 婷婷丁香色情| 色婷婷伊人| 97久久人人| 天天艹天天综合网| VA婷婷| 夜夜操夜夜爽| 在线VA视频| 激情五月色综合国产精品| 这里只有精品久| 天天精品视频在线观看视频| 九九视频这里只有精品| 激情五月天网站| 婷婷九月丁香| 91操在线视频| 夜夜骑夜夜操| 亚洲色在线观看| 99免费在线视频| 狠狠狠狠狠干| 婷婷五月天桃花网| 人人操人人妻| 一起操 91N.com| 丁香激情五月| 丁香五月性爱| 久热这里这里有精品| 2050人人操免费工开爱| 97色五月天| 99re这里只有精品在线观看| www.henhengan| 九九人人精品| 免费黄色片子|