99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

PHP 接口壓力測(cè)試實(shí)戰(zhàn):用 wrk 從零搭建性能基線

PHP 接口壓力測(cè)試實(shí)戰(zhàn):用 wrk 從零搭建性能基線 很多同學(xué)第一次給 PHP 項(xiàng)目做壓力測(cè)試第一反應(yīng)都是找個(gè)工具把接口打爆看看會(huì)不會(huì)掛。我以前也這么想直到有次新功能上線前我用 wrk 隨手壓了一套接口發(fā)現(xiàn) QPS 連 200 都沒到RT 的 P99 卻已經(jīng)飆到 1.5 秒這才意識(shí)到一件事沒有一份可靠的 QPS、RT、CPU、內(nèi)存基線數(shù)據(jù)你根本沒法判斷系統(tǒng)是變好了還是變差了。這篇文章就把我從零開始用 wrk 對(duì) PHP 系統(tǒng)做壓測(cè)、記錄基線的完整過(guò)程寫下來(lái)適合完全沒碰過(guò)壓測(cè)的 PHP 開發(fā)同學(xué)照著操作也能幫想搭一套壓測(cè)流程的人省掉不少?gòu)澛贰?. 壓測(cè)前先想明白你測(cè)的不是極限是一份可用基線1.1 為什么選 wrk輕量、快、不折騰壓測(cè)工具不少常見的有 ab、JMeter、wrk、k6 這幾類。我給 PHP 項(xiàng)目做日常基線測(cè)試首選就是 wrk原因很簡(jiǎn)單它是一個(gè)單文件編譯的 C 語(yǔ)言工具沒有圖形界面沒有插件體系一條命令就能跑完一輪壓測(cè)。對(duì)比下來(lái)大概是這個(gè)樣子工具上手成本適合場(chǎng)景主要限制ab很低臨時(shí)快速看一眼接口吞吐高并發(fā)下線程模型不如 wrk數(shù)值容易偏低JMeter高復(fù)雜業(yè)務(wù)流程、分布式壓測(cè)、報(bào)告美化配置麻煩跑少量線程時(shí)本地資源占用就不小wrk低單接口/多接口的并發(fā)壓測(cè)、基線回歸玩法要靠 Lua 腳本層級(jí)報(bào)告需要自己整理我說(shuō)的不折騰是有實(shí)際體會(huì)的。之前我試過(guò)在兩臺(tái)測(cè)試機(jī)上各跑一套壓測(cè)一邊用 ab一邊用 wrk同樣打到同一個(gè) PHP 接口ab 的 QPS 明顯低于 wrk。原因是 wrk 基于非阻塞事件模型可以用少量線程維持大量并發(fā)連接壓測(cè)機(jī)自身的 CPU 消耗低很多。換句話說(shuō)wrk 更容易讓壓力真正落到被測(cè)的 PHP 服務(wù)上而不是先把自己的進(jìn)程拖垮。1.2 壓測(cè)要記錄的四個(gè)數(shù)字各自代表什么很多人把壓測(cè)等同于測(cè) QPS但一份合格的基線報(bào)告至少要有四個(gè)維度的數(shù)據(jù)QPS每秒請(qǐng)求數(shù)系統(tǒng)在特定并發(fā)下每秒鐘能處理多少個(gè)請(qǐng)求這是吞吐量指標(biāo)。RT響應(yīng)時(shí)間單個(gè)請(qǐng)求從發(fā)出到收到響應(yīng)的時(shí)間通??雌骄岛透叻种槐热?P99。CPU 使用率壓測(cè)期間這臺(tái)機(jī)器到底忙不忙是代碼計(jì)算密集還是空等 IO。內(nèi)存占用PHP-FPM 是常駐內(nèi)存的進(jìn)程池隨著并發(fā)上升worker 數(shù)量增加內(nèi)存曲線非常值得盯。這四個(gè)數(shù)字必須放在一起看缺一個(gè)都容易誤判。比如 QPS 高了但 CPU 已經(jīng) 95% 以上說(shuō)明系統(tǒng)到上限了QPS 沒漲內(nèi)存卻一直在漲可能是 PHP-FPM worker 在不斷創(chuàng)建或者測(cè)試接口本身有泄漏。只有四者對(duì)齊才能說(shuō)這條基線的水位是健康的。1.3 開始之前先確認(rèn)測(cè)試環(huán)境是干凈的這也是我第一次壓測(cè)踩過(guò)的坑。當(dāng)時(shí)我在本地開發(fā)環(huán)境上直接壓機(jī)器上還跑著編譯器、數(shù)據(jù)庫(kù)腳本、一堆開發(fā)工具測(cè)出來(lái)的 QPS 忽高忽低完全沒法當(dāng)參考?,F(xiàn)在我的習(xí)慣是壓測(cè)前必須確認(rèn)幾件事被測(cè)代碼是同一個(gè)穩(wěn)定分支并記錄 commit 號(hào)測(cè)試機(jī)只跑 nginx PHP-FPM 必要的數(shù)據(jù)庫(kù)后臺(tái)監(jiān)控進(jìn)程全部關(guān)掉壓測(cè)機(jī)的網(wǎng)絡(luò)和被測(cè)機(jī)之間沒有額外限速或代理PHP 的 opcache 保持與服務(wù)一致的開關(guān)狀態(tài)。寧可多花十分鐘清理環(huán)境也不要拿一份臟數(shù)據(jù)當(dāng)基線后面做優(yōu)化對(duì)比時(shí)你會(huì)感謝當(dāng)時(shí)的謹(jǐn)慎。2. 從零搭環(huán)境裝好 wrk準(zhǔn)備一個(gè)能壓的 PHP 接口2.1 安裝 wrk 的兩種常規(guī)姿勢(shì)如果你的測(cè)試機(jī)是 Linux 系統(tǒng)最簡(jiǎn)單的辦法是直接用包管理器裝。以常見的 Debian/Ubuntu 系為例sudo apt install -y wrk wrk --version安裝完直接驗(yàn)證版本能輸出 wrk 的版本號(hào)就說(shuō)明裝好了。有些發(fā)行版?zhèn)}庫(kù)里沒有這個(gè)包或者你想用最新版本可以走編譯安裝sudo apt install -y build-essential libssl-dev git clone wrk 官方源碼倉(cāng)庫(kù)地址 cd wrk make sudo cp wrk /usr/local/bin/編譯之前務(wù)必保證有 openssl 的開發(fā)頭文件wrk 默認(rèn)會(huì)編出支持 HTTPS 的版本如果缺了 libssl-devmake 階段會(huì)報(bào)錯(cuò)報(bào)錯(cuò)信息通常會(huì)直接指向 openssl 相關(guān)的頭文件。我第一次編譯時(shí)就在這卡過(guò)所以單獨(dú)提一句。這里多說(shuō)一句很多 PHP 項(xiàng)目部署時(shí)是 Windows 開發(fā)環(huán)境 Linux 生產(chǎn)環(huán)境如果你只在 Windows 上開發(fā)建議直接在 Linux 測(cè)試機(jī)上跑 wrk不要試圖在 Windows 下折騰編譯。wrk 本身的設(shè)計(jì)目標(biāo)就是 Linux/macOSWindows 下的兼容方案既費(fèi)時(shí)間又容易遇到網(wǎng)絡(luò)棧差異。2.2 一個(gè)足夠簡(jiǎn)單又不失真實(shí)的測(cè)試接口壓測(cè)接口選什么很有講究。我的做法是準(zhǔn)備兩層目標(biāo)第一層是一個(gè)最簡(jiǎn)單、不查數(shù)據(jù)庫(kù)、不調(diào)第三方接口的 JSON 返回接口用來(lái)測(cè)純 PHP 運(yùn)行時(shí) PHP-FPM 網(wǎng)絡(luò)棧的底子第二層再測(cè)真實(shí)業(yè)務(wù)接口比如帶一個(gè)簡(jiǎn)單的數(shù)據(jù)庫(kù)查詢觀察額外損耗。第一層接口可以長(zhǎng)這樣?php // test_api.php $data [ code 0, msg ok, data [ user_id 10086, time time(), ], ]; echo json_encode($data);為什么先拿這種接口打底因?yàn)閴簻y(cè)是為了定位瓶頸。如果連一個(gè)不查庫(kù)的接口 QPS 都很低那問(wèn)題大概率出在 PHP-FPM 配置、opcache、CPU 頻率或中間件上沒必要上來(lái)就懷疑 SQL。把這個(gè)底子摸清楚之后再去壓真實(shí)接口兩者對(duì)比就能算出業(yè)務(wù)邏輯本身消耗了多少吞吐量。部署上我建議走 nginx PHP-FPM 的標(biāo)準(zhǔn)組合監(jiān)聽 127.0.0.1:8080 這樣的內(nèi)網(wǎng)地址避免在壓測(cè)過(guò)程中被防火墻或路由影響。測(cè)試機(jī) IP 用 127.0.0.1 還是內(nèi)網(wǎng) IP 都行但如果你想讓壓測(cè)機(jī)和被測(cè)機(jī)分離就要用被測(cè)機(jī)的內(nèi)網(wǎng) IP 訪問(wèn)。2.3 第一條壓測(cè)命令和輸出解讀把接口部署好之后先用 curl 手動(dòng)確認(rèn)返回正常然后再上 wrk。第一條命令建議放低并發(fā)跑通流程wrk -t2 -c10 -d10s --latency http://127.0.0.1:8080/test_api.php其中-t2表示用 2 個(gè)線程-c10表示維持 10 個(gè)并發(fā)連接-d10s表示持續(xù) 10 秒--latency會(huì)在結(jié)束時(shí)輸出更完整的延遲分布。正常跑完會(huì)看到類似這樣的輸出Running 10s test http://127.0.0.1:8080/test_api.php 2 threads and 10 connections Thread Stats Avg Stdev Max /- Stdev Latency 4.82ms 2.31ms 45.12ms 86.18% Req/Sec 1.05k 102.34 1.41k 70.31% Latency Distribution 50% 4.50ms 75% 5.20ms 90% 6.80ms 99% 14.20ms 10520 requests in 10.01s, 2.03MB read Requests/sec: 1051.12 Transfer/sec: 207.43KB這里最容易被新手誤讀的地方是 Thread Stats 里的 Req/Sec 和最后的 Requests/sec。Thread Stats 的 Req/Sec 是每個(gè)線程自己的平均吞吐如果你的線程數(shù)是 4那么這個(gè)數(shù)值大致是總 QPS 分割后的水平而最后的Requests/sec才是整體 QPS也就是我們基線里要記的那個(gè)數(shù)字。把這兩行搞混的人不少我第一次看輸出時(shí)也愣了半天。3. 正式壓測(cè)并發(fā)要加梯度數(shù)據(jù)要取多輪3.1 從低并發(fā)起步找到吞吐量的拐點(diǎn)壓測(cè)不是一上來(lái)就-c500那樣你只能得到一個(gè)打爆了的結(jié)果卻不知道系統(tǒng)是從哪個(gè)并發(fā)開始扛不住的。我的標(biāo)準(zhǔn)操作是用一組并發(fā)梯度比如-c10、-c50、-c100、-c200、-c500每個(gè)梯度跑 30 秒記錄對(duì)應(yīng)的 QPS 和 RT。這個(gè)過(guò)程本質(zhì)上是尋找拐點(diǎn)一開始并發(fā)上升QPS 會(huì)跟著漲因?yàn)橥瑫r(shí)能處理的請(qǐng)求變多了到某個(gè)點(diǎn)之后再往上加并發(fā)QPS 不再明顯增長(zhǎng)甚至開始回落同時(shí) RT 快速拉高。這個(gè)拐點(diǎn)對(duì)應(yīng)的并發(fā)量就是系統(tǒng)當(dāng)前配置下的合理服務(wù)水位。舉個(gè)實(shí)際例子我之前壓一個(gè) PHP 8.2 opcache 的簡(jiǎn)單 JSON 接口-c10時(shí) QPS 約 1800-c50時(shí)漲到 4200-c100時(shí)是 5100-c200的時(shí)候只有 4600 了RT 的 P99 從 18ms 漲到 120ms。這就說(shuō)明 100 左右并發(fā)已經(jīng)接近這臺(tái)機(jī)器的服務(wù)上限繼續(xù)壓只會(huì)讓用戶體驗(yàn)變差。3.2 平均 RT 會(huì)欺騙你P99 才是真實(shí)用戶體驗(yàn)wrk 輸出里的 Latency 一欄Avg是平均響應(yīng)時(shí)間但平均值的迷惑性很大如果 90% 的請(qǐng)求都是 5ms剩下 10% 是 500ms平均值會(huì)被拉到一個(gè)看起來(lái)很溫和的數(shù)字。這也是為什么壓測(cè)一定要加--latency參數(shù)看延遲分布里的 50%、75%、90%、99% 分位。P99 的含義是99% 的請(qǐng)求都低于這個(gè)值剩下的 1% 是最慢的尾部請(qǐng)求。對(duì)線上服務(wù)來(lái)說(shuō)用戶體驗(yàn)往往由尾部延遲決定。我在做基線記錄時(shí)RT 這一欄至少記兩個(gè)數(shù)平均值和 P99。后續(xù)做優(yōu)化時(shí)如果平均值下降了但 P99 在上漲我會(huì)立刻警惕——這通常意味著某些慢請(qǐng)求變得更極端了可能存在于鎖競(jìng)爭(zhēng)或進(jìn)程池打滿的問(wèn)題。3.3 記錄多輪結(jié)果取穩(wěn)定而不是最高的一輪壓測(cè)數(shù)值天然有波動(dòng)尤其是 PHP-FPM 場(chǎng)景下進(jìn)程復(fù)用、opcache 冷熱、系統(tǒng)定時(shí)任務(wù)都可能讓某一輪結(jié)果偏高或偏低。我的做法是同一個(gè)并發(fā)梯度至少跑三輪每輪之間停 5 秒把三輪結(jié)果都記下來(lái)然后取中位數(shù)或者波動(dòng)最小的那一輪作為基線值。這里有個(gè)反直覺的點(diǎn)最高值往往不值得記錄。比如某輪跑到 5000 QPS下一輪只有 4100我會(huì)直接懷疑第一輪是不是正好命中了 opcache 預(yù)熱完成的窗口或者系統(tǒng) GC 還沒觸發(fā)。真正的基線應(yīng)該是可復(fù)現(xiàn)的那一組數(shù)字不是偶爾出現(xiàn)的峰值。如果接口需要 POST 請(qǐng)求wrk 也能通過(guò) Lua 腳本解決?;A(chǔ)寫法大概是這樣-- post.lua wrk.method POST wrk.headers[Content-Type] application/json wrk.body {user_id:10086,page:1}然后用wrk -t4 -c100 -d30s -s post.lua http://...啟動(dòng)即可。這個(gè)用法不難但注意腳本里的 body 是所有并發(fā)連接共用同一個(gè)請(qǐng)求體如果業(yè)務(wù)要求每個(gè)請(qǐng)求參數(shù)不同就得用 Lua 腳本在請(qǐng)求時(shí)動(dòng)態(tài)生成復(fù)雜度會(huì)高不少一般做基線時(shí)不需要一步到位。4. 壓測(cè)時(shí)盯服務(wù)器CPU 和內(nèi)存基線的采集方法4.1 壓測(cè)期間要開的幾個(gè)監(jiān)控命令wrk 跑起來(lái)只是整個(gè)壓測(cè)的一半另一半是被測(cè)服務(wù)器的資源狀態(tài)。我通常會(huì)在壓測(cè)開始前先在被測(cè)機(jī)上開一個(gè)后臺(tái)記錄腳本把壓測(cè)期間的數(shù)據(jù)落盤這樣壓測(cè)結(jié)束后可以回放當(dāng)時(shí)的資源曲線。最常用的命令有這幾個(gè)# 每2秒輸出一次系統(tǒng)概況共記錄30次 vmstat 2 30 # 每2秒輸出一次每個(gè)CPU核心的使用率 mpstat -P ALL 2 30 # 查看每個(gè)進(jìn)程的CPU和內(nèi)存占用 pidstat -u -r 2 30 # 內(nèi)存概況 free -m如果不想同時(shí)開這么多終端可以用一個(gè)簡(jiǎn)單的循環(huán)腳本把關(guān)鍵數(shù)據(jù)拼進(jìn)同一個(gè)日志文件#!/bin/bash # load_monitor.sh interval2 end$((SECONDS60)) while [ $SECONDS -lt $end ]; do echo $(date %F_%T) /tmp/load_test.log top -bn1 | head -15 /tmp/load_test.log free -m /tmp/load_test.log sleep $interval done注意pidstat這個(gè)命令來(lái)自 sysstat 工具包如果系統(tǒng)里沒有需要先apt install sysstat。mpstat 也一樣。另外這些監(jiān)控命令本身也會(huì)消耗少量 CPU在低配機(jī)器上可能影響測(cè)試結(jié)果所以記錄完后記得把這些進(jìn)程都?xì)⒌粼偃∽罱K數(shù)據(jù)。4.2 從監(jiān)控?cái)?shù)據(jù)反推瓶頸在哪個(gè)環(huán)節(jié)拿到資源數(shù)據(jù)后重點(diǎn)看三個(gè)地方一是 CPU 的 us/sy 比例。us高說(shuō)明用戶態(tài)代碼在忙比如 PHP 腳本邏輯復(fù)雜、循環(huán)密集sy高說(shuō)明系統(tǒng)態(tài)開銷大比如頻繁上下文切換、網(wǎng)絡(luò)包處理、系統(tǒng)調(diào)用太多。如果 sy 高于 us往往不是 PHP 代碼本身的問(wèn)題而是并發(fā)模型或網(wǎng)絡(luò)配置有瓶頸。二是 CPU idle 和等待 IO 的時(shí)間。vmstat里有個(gè) wa 列代表 IO 等待。wa 明顯偏高的時(shí)候QPS 上不去多半是磁盤拖后腿比如 nginx 訪問(wèn)日志瘋狂寫盤或者 PHP slowlog 開著。我之前確實(shí)遇到過(guò) CPU 只有 20%、QPS 卻卡在 800 的情況檢查后發(fā)現(xiàn)是訪問(wèn)日志寫到了普通機(jī)械盤上IO 等待直接打滿。三是內(nèi)存里 PHP-FPM 的占用。用ps aux --sort-%mem | head -20看看是否有 worker 進(jìn)程內(nèi)存漲得異常。PHP-FPM 的每個(gè) worker 在默認(rèn)配置下可能占用幾十到一兩百 MB如果并發(fā)開得高幾十個(gè) worker 同時(shí)駐留內(nèi)存很容易超預(yù)期。內(nèi)存基線就是用來(lái)記錄這個(gè)并發(fā)水位下FPM 進(jìn)程池到底吃掉了多少內(nèi)存。4.3 把服務(wù)端數(shù)據(jù)和 wrk 輸出對(duì)齊到同一時(shí)間線壓測(cè)結(jié)束后你會(huì)得到兩堆數(shù)據(jù)一堆來(lái)自 wrk 的匯總值一堆來(lái)自監(jiān)控日志的每秒采樣。很多人直接把這兩堆數(shù)字拼在一起寫報(bào)告實(shí)際上不對(duì)齊時(shí)間線的基線是沒法定位問(wèn)題的。我的做法是壓測(cè)開始前在監(jiān)控日志里手動(dòng)打一條標(biāo)記 start wrk 結(jié)束后再打一條 done 這樣壓測(cè)窗口內(nèi)的資源采樣就有明確的起止邊界。后續(xù)做對(duì)比時(shí)只看窗口內(nèi)的采樣平均值和峰值窗口外的數(shù)據(jù)直接丟棄。然后我習(xí)慣建一張映射表把每次壓測(cè)的命令參數(shù)、wrk 結(jié)果、資源監(jiān)控結(jié)果放在同一行這樣一旦某次基線異常可以立刻倒推是哪一層的變量發(fā)生了變化。5. 把基線寫成表格一份能長(zhǎng)期復(fù)用的記錄模板5.1 基線表該有哪些字段跑完一堆壓測(cè)之后如果只是把數(shù)字記在聊天軟件里過(guò)兩周就找不到了。我推薦用一張表格管理所有基線字段包括日期代碼版本測(cè)試接口并發(fā)QPSRT 均值RT P99CPU%內(nèi)存占用環(huán)境說(shuō)明2026-06-01某提交號(hào)test_api.php100510018ms46ms68%1.8Gopcache開啟FPM動(dòng)態(tài)10-802026-06-02某提交號(hào)test_api.php200460088ms120ms66%2.4G同上超負(fù)荷區(qū)間2026-06-03某提交號(hào)user_info.php5062076ms210ms35%2.1G帶一次DB查詢這張表里每一行就是一條基線。環(huán)境說(shuō)明這欄特別重要因?yàn)?opcache 開關(guān)、PHP 版本、FPM 參數(shù)都會(huì)直接影響結(jié)果不寫清楚三周后再看數(shù)據(jù)等于瞎猜。5.2 什么時(shí)機(jī)需要重新測(cè)基線基線不是測(cè)一次就永久有效的。按我的經(jīng)驗(yàn)以下變化發(fā)生時(shí)必須重新采集PHP 版本升級(jí)、框架或核心依賴有大版本變更、php-fpm 池配置調(diào)整pm.max_children、pm.start_servers、nginx 的 keepalive 或 gzip 策略變化、測(cè)試接口本身的代碼邏輯改動(dòng)、測(cè)試機(jī)硬件規(guī)格變化。如果出現(xiàn)同一接口、同一代碼版本QPS 卻和上周記錄差很多的情況我也會(huì)重新測(cè)一遍基線而且會(huì)特意檢查是不是監(jiān)控腳本在后臺(tái)偷跑、是否有人改了系統(tǒng)參數(shù)。這個(gè)習(xí)慣幫我排查過(guò)好幾次假象——有一次 QPS 突然掉了一半最后發(fā)現(xiàn)是某臺(tái)機(jī)器上被同事裝了定時(shí)任務(wù)壓測(cè)窗口正好撞上了大規(guī)模日志清理。5.3 用基線做容量預(yù)估的簡(jiǎn)單算法基線最有價(jià)值的用法不是看數(shù)字好看而是用來(lái)做容量預(yù)估。公式不復(fù)雜需要實(shí)例數(shù) (預(yù)估峰值 QPS × (1 冗余系數(shù))) / 單機(jī)基線 QPS舉個(gè)例子基線表里單機(jī)在 100 并發(fā)下 QPS 是 5000如果業(yè)務(wù)方預(yù)測(cè)大促峰值請(qǐng)求是 15000 QPS目標(biāo) CPU 水位控制在 70% 左右那么單機(jī)預(yù)留 30% 冗余最終需要的實(shí)例數(shù)就是15000 × 1.3 / 5000 ≈ 4臺(tái)。如果只按 QPS 峰值算而不留冗余一旦流量抖動(dòng)所有實(shí)例都會(huì)沖到 90% 以上的 CPU尾部延遲會(huì)很難看。需要注意的是這種線性預(yù)估只適用于無(wú)狀態(tài)、可水平擴(kuò)展的 PHP 接口。如果接口嚴(yán)重依賴數(shù)據(jù)庫(kù)或第三方服務(wù)那么數(shù)據(jù)庫(kù)側(cè)的連接數(shù)、負(fù)載也是容量邊界單純按單機(jī) QPS 算會(huì)低估風(fēng)險(xiǎn)。遇到這種情況我會(huì)同時(shí)把數(shù)據(jù)庫(kù)的 CPU、連接數(shù)也拉進(jìn)基線表。6. 實(shí)操中最容易翻車的五個(gè)坑6.1 壓測(cè)機(jī)先崩了測(cè)出來(lái)的數(shù)就不可信wrk 雖然很輕量但也不是無(wú)限跑。如果你用一臺(tái) 2 核小機(jī)器去壓一個(gè) 8 核的服務(wù)端很可能會(huì)出現(xiàn)壓測(cè)機(jī) CPU 先到 100%而服務(wù)端還很從容的情況。這時(shí)的 QPS 數(shù)字反映的是壓測(cè)機(jī)的上限不是被測(cè)系統(tǒng)的上限。判斷方法很簡(jiǎn)單壓完看壓測(cè)機(jī)的top如果 wrk 進(jìn)程吃滿了 CPU 或者系統(tǒng)出現(xiàn)大量 TCP 連接排隊(duì)就說(shuō)明壓力工具先到極限了。解決方式一是減少 wrk 線程數(shù)通常-t設(shè)置為壓測(cè)機(jī) CPU 核心數(shù)左右即可沒必要開太多二是把 wrk 放到另一臺(tái)閑置機(jī)器上跑讓壓測(cè)機(jī)和被測(cè)機(jī)分離。6.2 PHP-FPM 配置和 opcache 偷偷影響成績(jī)PHP 場(chǎng)景下最容易被忽略的兩個(gè)變量是 opcache 和 FPM 進(jìn)程池參數(shù)。opcache 關(guān)閉時(shí)每個(gè)請(qǐng)求都要重新編譯一遍 PHP 腳本CPU 消耗會(huì)明顯上升QPS 直接打折opcache 開啟后前幾個(gè)請(qǐng)求還會(huì)觸發(fā)編譯緩存所以正式壓測(cè)前一定要先打幾發(fā)請(qǐng)求做預(yù)熱。FPM 這邊pm.max_children如果設(shè)置太小并發(fā)一旦超過(guò)進(jìn)程池上限請(qǐng)求就開始排隊(duì)QPS 停滯、RT 暴漲如果設(shè)置太大內(nèi)存會(huì)被 worker 吃滿。我做基線時(shí)會(huì)把 FPM 配置快照寫進(jìn)環(huán)境說(shuō)明這樣后續(xù)調(diào)整參數(shù)后對(duì)比才公平。另外注意pm.max_requests它是讓 worker 處理多少請(qǐng)求后自動(dòng)回收的機(jī)制設(shè)得太小會(huì)導(dǎo)致進(jìn)程頻繁創(chuàng)建銷毀CPU 忽高忽低。6.3 長(zhǎng)連接與并發(fā)數(shù)設(shè)置會(huì)帶來(lái)假數(shù)據(jù)wrk 默認(rèn)使用 HTTP/1.1 keep-alive 長(zhǎng)連接這能大幅提高 QPS因?yàn)槭∪チ舜罅?TCP 握手開銷。但真實(shí)用戶往往不是這種訪問(wèn)模式連接會(huì)不斷建立和斷開。所以壓測(cè)結(jié)果必須注明是否 keep-alive。如果你想知道斷開連接場(chǎng)景下的表現(xiàn)可以在 wrk 里加一個(gè)請(qǐng)求頭wrk -t4 -c100 -d30s -H Connection: close http://127.0.0.1:8080/test_api.php你會(huì)看到 QPS 明顯下降這是正常的別慌。關(guān)鍵是基線表里要寫清楚當(dāng)時(shí)是哪種連接模式否則拿 keep-alive 的基線去對(duì)比短連接場(chǎng)景你會(huì)以為系統(tǒng)退化了。6.4 日志和磁盤 IO 拖垮整個(gè)壓測(cè)壓測(cè)期間nginx 的 access log 默認(rèn)每接收一個(gè)請(qǐng)求就寫一行。QPS 高的時(shí)候日志寫入本身就是巨大的磁盤壓力。更隱蔽的是 PHP-FPM 的 slowlog一旦觸發(fā)慢日志就會(huì)在請(qǐng)求處理路徑上產(chǎn)生額外 IORT 反而被日志拖得更慢。我的建議是做純性能基線時(shí)先把 access_log 臨時(shí)關(guān)閉或在配置里指向內(nèi)存盤壓測(cè)完再改回來(lái)。這個(gè)操作不算什么高級(jí)技巧但特別實(shí)用。我第一次壓測(cè) 2000 QPS 時(shí)就發(fā)現(xiàn)磁盤 wait 占到 40%所有并發(fā)一上去 CPU 就在等 IO關(guān)掉訪問(wèn)日志后 QPS 直接翻了一倍?;€測(cè)試測(cè)的是系統(tǒng)處理能力不應(yīng)該讓日志寫入變成隱形成本。6.5 壓完不收拾現(xiàn)場(chǎng)下一次基線直接失真壓測(cè)結(jié)束后的收尾工作同樣重要。需要做的包括停掉壓測(cè)期間的監(jiān)控腳本確認(rèn)沒有殘留的壓測(cè)進(jìn)程在跑清掉壓測(cè)產(chǎn)生的日志文件和臨時(shí)腳本如果臨時(shí)改過(guò) FPM 參數(shù)或 nginx 日志開關(guān)記得恢復(fù)原狀把壓測(cè)時(shí)記錄的代碼 commit 號(hào)和配置快照歸檔。這些看起來(lái)瑣碎但直接影響下一次壓測(cè)是否可信。我之前有一回壓完就撤了第二天再測(cè)時(shí)發(fā)現(xiàn)系統(tǒng)后臺(tái)還掛著監(jiān)控腳本測(cè)出來(lái)的 CPU 基線高了十幾個(gè)百分點(diǎn)白白排查了一下午。從那之后我就養(yǎng)成了壓測(cè)結(jié)束三分鐘收尾的習(xí)慣寧可慢一點(diǎn)也不能讓基線數(shù)據(jù)帶傷入庫(kù)。最后再分享一個(gè)經(jīng)驗(yàn)壓測(cè)基線不是給上級(jí)看的一張表它是你自己理解系統(tǒng)的一把尺子。同一個(gè)接口在不同并發(fā)下的表現(xiàn)、不同配置下的差異、代碼提交前后的吞吐變化都藏在基線的對(duì)比里。把這套流程跑順之后你會(huì)發(fā)現(xiàn)自己對(duì)系統(tǒng)到底能扛多少量這件事終于有了基于數(shù)據(jù)的底而不是靠猜。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99碰网站| 开心五月婷婷在线| 婷婷亚洲综合| 天天网站天天爽| 日日噜噜夜夜狠狠久久丁香六月| 另类图片激情五月| 5月婷婷综合| 青青操丝袜美腿| 色五月色情| 狠狠狠狠狠操| 日本97在线观看| 久9久9热久热| 国产成人+综合亚洲+天堂| 色播丁香婷婷五月激情| 99狠狠色| 日本三级网址| 色五月婷婷丁香凹凸| 色~性~乱~伦~噜| 可以免费观看的av网址| 久久曰曰| 九九热黄色| 啪啪操网| 超碰熟女农村在线69| 91丨九色丨东北熟女| 丁香六月婷婷综合麻豆| 五月丁香网视频| 99视频在线看| 天天综合天综合久久网| 丰满女老板BD高清A片| 欧洲亚洲午夜| av在线免费网站| 久久深爱激情网| 狠狠干五月天婷婷网| 999九九九久久久99HD| 九热免费视频| 2018国产大陆天天弄| 色色色777| 天天爽天天| 丁香久久AV| 色激情网| 97婷婷色| 久久久久久久久人妻| 婷婷五月天精品| 亚洲免费看片| 色婷婷六月丁香综合欲精品| 99无码黄色视频| 天天操天天爱天天玩| 《战争与艾拉》完整版| 超碰京东热av男人的天堂| 五月开心深爱激情网| 国产精品人妻在线网址| 少妇高潮呻吟A片免费看软件 | 成人在线精品| 婷激情五月| 久久五月丁香伊人青草| 日本熟妇人妻在线| 天天操天天谢| 婷婷丁香在线播放| 婷婷五月天视频| 五月天狠狠草| 激情婷婷六月天| www激情com| 色婷婷电影网| 五月婷婷伊人在线| 亚洲成人色五月婷婷综合| 五月久久丁香| 婷色五月天| 婷婷五月天综合蜜桃| 99热超碰人| 色色丁香婷婷| 五月综合激情视频在线| www.日日夜夜| 激情五月,色五月| 激情 久久 婷婷| 91九色精品熟女内射| 精品久久艹| 九九九九九九综合| 国产熟妇乱子伦hd| 色五月综合网| 色色色99| 狠狠婷婷色| 开心婷婷五月| 黄色国久久| 草久私拍| 91久久婷婷| 另类色网| 这里只有精品在线观看视频| 亚洲综合五月天婷婷丁香| 亚洲精品国产成人AV在线| 综合网亚洲| aaa丁香五月天| 91在线视频综合| 狠狠爱深色婷婷综合| 亚洲中文字幕网| 性生活视频98791| 久久这里只精品66| 性爱综合网| 一起草av在线观看| 亚洲成片在线观看| 婷婷五月天性爱视频| 久久丁香五月天| 日本婷婷| 大伊香蕉精品视频在线| 日本三级毛片| 操一区| 婷婷五月天com| 伊人五月天综合网| 久久婷婷五月综合97色一本| 蜜乳中文字| 九九久久综合网站| 大香蕉久操| 99综合视频| 艳妇野外情欲放荡HD| 岛国AAAV| 九九国产视频| 九九無妻| 久操欧美在线观看97| 丁J香六月首页| www.成人婷婷综合| 婷婷五月天免费99| 狠狠干五月| 国产做爰视频免费播放| 天天碰夜夜操| 欧美久久九九| 综合一啪| 91网站黄| 五月婷婷黄色| 玖玖在线资源视频| 五月丁香五月天现场视频| 久久久久久9热不雅视频| 香蕉伊人综合| 开心五月婷婷99| 欧美日韩123| 国产SUV精品一区二区6| 九九久久免费视频44| 色99在线视频| 九九热在线99| 99丁香婷婷综合网| 成人久久天天x资源站| 六月 丁香 视频| 亚洲激情综合| 色色色欧美| 综合网视频| 精品一二三区久久AAA片| 色色色五月| 婷婷丁香97| 色色97丁香婷婷五月天| 国产日韩av片| 激情婷婷丁香五月天小说| 色婷婷丁香五月| 亚洲成Av人片乱码色第1集| 99精品热视频| 九九热啪啪| 大香蕉在线99热| 国产又爽又猛又粗的视频A片| 亚洲精品又粗又大又爽A片| 国产欧美精品AAAAAA片| 久久9热综合| 亚洲操B视频| 99啪啪骑| 五月丁香综合啪啪| 激情五月天之六月婷婷| 99A片| www.狠狠操| 99啪99| 热99这里只有精品视频| 女人天堂AV| 亚洲av免费在线| 五月天玖玖狠狠色色| 婷婷五月天激情综合| 四虎婷婷五月天| 天天搞天天色综合| 久久伊人婷婷| 五月天婷婷丁香花| 丁香六月激情网C0W| 香蕉AV777XXX色综合一区 | 婷婷爱五月天人人爱| 色综合天天综合成人网| 国产精品成人网站| 婷婷五月色综合| 99热亚洲精品66| 婷婷五月天亚洲综合| 久久久免费精彩视频| 男女99免费视频| AA片在线观看视频在线播放| 天天综合天综合| 五月天激情四射| 殴美日比视频| 天天插天天狠| 26uuu在线观看| 日韩综合网络男女香蕉a片| 色欧美影院| 六月丁香停| 99无码视频| 婷婷色五月天色| 五月婷丁香亚洲| 日韩丁香涩| 色五月婷婷久久大| 亚洲AV无码影院| 伊人五月婷婷| 天天日夜夜B久久| 一点色成人网| 色婷婷亚洲五月天| 免费播放片大片| 色婷| 色综合爱综合| 人人操人人添人人摸97| 五月丁香婷婷色色色| 99视频35精品视频在线观看| 亚洲成人免费在线| yazhouzonghesese| 操人精品| 99热思思| 玖玖热视频| 国产精品国产| 97人人草| 9l视频自拍9l九色9l成人| 少妇大叫太大太粗太爽了A片| 久久超级碰视频| 色色亚洲无码| 免费观看日韩成人av| 影音先锋人妻出差| 婷婷五月无码| 亚洲AV无码久久精品色欲| aa久久| 五月天婷婷激情六月久久 | www.99视频| 丁香六月天婷婷| 狠狠五月天婷婷| 五月天丁香成人社| 午夜成人在线免费视频| 日韩99色99| 婷婷99狠狠| 婷婷永久在线| 91超碰在线播放| 免费观看高清无码| 热99re| 婷婷五月激情图片| 九月激情网| 五月丁香六月婷婷操操操| 青青草免费公开视频| 99自拍视频在线观看| 婷婷国产成人| 五月婷婷黄色毛片| AV操操操| 99久久新视频| 伊人激情影院| 岛国av电影网站| 综合色视频| 激情综合99| 亚洲综合色婷婷| 丁香五月天天高清在线| 免费色婷婷| 热的国产,热的综合,热的有码| 亚洲成人综合在线| 激情五月天啪啪| 久思思热视频在线观看| 一操久久| 五月九九综合| 国产精品成人AV在线观看春天| 青青草原伊人网| 五月丁香亚洲综合网| 美女黄频aⅴ视频| 色色五月婷婷网| 91中文在线| 天天精品视频免费观看| 99福利视频| 色五月开心婷婷| 97碰碰在线观看视频| 偷拍九九热| 大香蕉婷婷丁香天堂AV| 大香蕉久久| 97色色婷婷| 婷婷五月激情网| 99热免费精品| 色五月婷婷久久| 久热婷婷| 久久免费精彩视频| 欧美色播综合在线观看| AV片一区在线观看| 五月婷在线| 69精品人人人人| 99热在线中文字幕| 久操福利| 欧洲亚洲免费视频9| BT综合在线视频观看| www.97碰碰com| 大香蕉婷婷| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 深爱五月婷婷开心中文字幕| 欧美99热| 这里只有精品日韩| 五月天免费色| 丁香六月高清视频| 99精品久久| 99日在线视频| 婷婷六月色| 中文字幕在线日亚州9| 4438激情网| 爆乳熟妇一区二区三区爆乳照片| 超碰精品国产首页| 婷婷五月天丁香久久| 91超级碰在线视频| 色激情五月| 操国产人妻| 2025神马午夜福利| 五月婷婷六月丁香五月| 五月天婷综合网站| av电影在线播放| 男女免费视频999| 超碰碰碰碰| 亚洲经典三级| 色噜噜狠狠色综合日日| 激情 五月 婷婷 丁香| 亚洲欧美在线观看| 超碰人人干| 99热99在线| 综合色在线| 免费视频WWW在线观看网站| 国产精品久久..4399| 免费亚洲婷婷中文字幕| 天天干,夜夜爽| 激情五月丁香婷婷| 久久婷婷五月丁香蜜桃网| 激情影院69| 无码一区二区三区四区五区91c| 国产操逼网站| 翔田千里 50岁 无码| 91日本在线观看| 色久婷婷五月| 激情五月天婷婷五月天| 中文字幕在线免费观看视频| 色五月色情| 精品人妻在线| 爱久综合| 五月天婷婷色播| 开心五月综合| 中文无码婷婷| 国产欧美日韩综合精品一区二区| 97超碰9久热婷婷热| 9超碰在线| 9精品在线| 久草久青福利| 婷婷五月天高清无码| 天天舔天天爽| 国产精品人成A片一区二区| 一本婷婷丁香久久| 久久人操| 性 色 婷婷| 9久热这里只有精品| 亚洲激情另类| 被男人添B超爽视频| 五月开心深深爱激情综合 | 婷婷91| 亚洲视色| 国产精品久久久60086| 九九操操| 五月婷婷婷综合网| 婷婷激情五月天激情小说| 婷婷久草| 综合激情站| 天天草天天日| 99爱视频精品| 99九九中文字幕视频| 天天天天天天天干| 激情综合网 激情五月天| 天天干天天插| 国产成人综合亚洲| 黄涩毛片| 久久性操| 色婷婷丁香九月| 五月丁香综合色婷婷| 九九热精品视频| 激情网第四色| 超级碰碰碰97免费| 韩日AV片| 天天拍夜夜爽| 丁香五月五月婷婷| AV色婷婷| 婷婷色五月丁香六月欧美啪| 国产精品久久久久久久久久| 久99| 99.N在线视频| 激情久久久| 激情五月,激情综合网| 99色在线观看视频者| 国产 码在线成人网站| 九九五月天| 狠狠狠狠狠干| 亚洲色图45p| 夜夜操夜夜爽| 99热这里只有精品3| peg 2区三区四区的| 91精品久久久久久| 久久资源综合| 久久婷婷五月综合色天| 吾爱AV导航| 九九色网| 丁香激情五月天| 超碰cap| 91丨九色丨国产打屁股| 九月婷婷久久久| 97性视频| www.五月婷婷久久.com| 99热91| 天天色天天| 色婷五月天综合网| 丁香五月播播| 久久婷五月天| 狠狠色噜噜狠狠| 狠狠狠狠狠| 色综合久久天天综合网| 婷婷国产欧美97| 五月婷婷五月丁香| 久草婷妨| 亚洲欧洲色色| 99国产精品久久久久久久久久久 | 99热超碰在线| 99热大香蕉| 665566 无码| 成人AV综合在线| 九月激情婷婷丁香| 99久久終合| 操婷婷久久| 狠狠色婷婷7777久综合| 久久激情天堂| 九九热在线亚洲免费视频| 久久综合丁香五月| 五月丁香999| 五月天成人手机在线视频| 激情小说之五月| 丁香久久久| 日本五月婷| 99综合网| 99热综合| 色五月婷婷在线观看第一页舔| 久久全意婷婷| 成人毛片在线免费观看| 五月婷婷基地| 色五月婷婷五月久久| 区区欧美你爱| 婷婷五月天免费视频| 亚洲精品色| 九久9精品| 色婷网| 久久AAAA片一区二区| 日韩黄色中文字幕| 99久热精品在线| 日韩啪啪视频| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | www.婷婷五月天| 综合色播| 99热xx| 丁香五月婷婷天堂大香蕉| 99综合网| 97碰碰碰免费公开在线视频| Caoporn公开| www.五月婷婷久久.com| 毛片新网地| 99免费在线视频| 开心五月网 | 五月婷婷色色色| 五月香蕉婷婷| 就爱操www com| www.henhengan| 婷婷综合五月| 日本97人人| 久久综合中文| 丁香婷婷综合激情五月色| 婷婷丁香宗合888| 天天爽夜夜操| 麻豆精品| 丁香五月综合福利视频导航| 激情无码网| 嫩草AV久久伊人妇女超级A | 色婷婷AV五月天| 都市激情小说婷婷| 久久五月天婷婷| 免费一区二区三区| 五月婷婷新网站| 色色亚洲五月天| 久久丁香五月| 亚洲一区二区无遮挡A片| 欧美激情五月天在线观看| 婷婷激情图片| 丁香婷婷九月在线| 色婷婷五月天中文字幕| 日韩AAAAAAAAAAA片| 五月婷丁香| 色黄啪啪| 色就是色婷婷五月亚洲激情| 婷婷狠狠色| 五月花婷婷| 午夜天堂一区人妻| www.99色| 色五月天丁香婷婷| 亚洲传媒在线观看| 开心深爱五月天| 草五月| 99这里都是精品| 色99视| 插插插色综合网| www.91九色| 激情性爱婷婷| 性爱电影科技贸易有限公司| 婷婷五月天开心网| 色你久久| 五月丁香另类图片| 婷婷丁香综合网| 97色色色色| 五夜丁香| 婷婷娌伦网| 丁香五月中文字幕久色| 九九在线精点品| 色婷婷激情四射视频| 婷婷激情丁五月| 久久久久久人妻| 丁香婷婷色| 五月天婷婷激情在线色图| 国产无遮挡又黄又爽免费网站| 色欲久久综合| 91婷婷色| 色玖玖综合| 色五月婷婷丁香婷婷| 午夜婷婷| 97中文在线| 色五月大| 欧洲S级在线观看| 6080av| 大香蕉九九| 北京熟妇搡BBBB搡BBBB| 五月丁香综合激情在线观看| 色婷婷免费视频| 老司机日日夜夜青草| 欧美日韩123| 99热亚洲精品| 在线视频99| 色五月婷婷在线| 一区中文字幕电影| 99热6色| 久久久人妻| 欧美性爱一区| 色偷偷色婷婷| 人操人人| 开心激情婷婷| 五月婷婷成人| 97人人做| 六月色色| AV九九| 色五月之第四色| 综合久久婷婷| 天天干,天天舔| 色婷婷视频在线| 久久久人妻久久久| 亚洲精品久久久久久久久久吃药| 热九九在线| 激情小说五月天| 日本熟女视频一区二区| 依人大香蕉| 激情五月婷婷色综合| 桃色成人网| 婷婷中文字幕版| 婷婷六月花| 亚洲无AV在线中文字幕| 青青草婷婷综合五月| 99婷五月| 色播五月婷婷五月| 伊人狠狠丁香婷婷综合尤物| 精品人妻一区二区三区四区不卡在| 无码se| 色色色欧美| 婷婷丁香五月天哟啪| 色情成人五月天| 深爱五月天婷综合| 亚洲婷婷久久综合| 密臀av无码人妻精品| 成人在线免费网址| 亚洲成人免费电影| 日日噜噜夜夜狠狠久久丁香五月| 天天日天天操心| 丁香五月婷婷国产在线| 久久在线视频免费观看| 青青久在线视频免费观看| 影音先锋xfplay资源男人网| 婷婷五月天日本无码| 久热这里| 久久机热/这里只有精品| 色婷婷成人在线| 91九色精品| 深爱五月月天| 婷婷伊人| 婷婷五月天综合在线| 久久婷婷丁香| 伊人久久艹| w婷婷五月婷婷w| 美女视频图片久久91| 天天日狠狠| 日本女va| 天天综合色丁香| 99热国产免费| 免费无码毛片一区二区A片| 粉嫩AV久久一区二区三区| 玖玖@三月天天丁香婷婷| 欧美偷偷操| 五月丁香色婷婷色| 91九色国产| 成人五月天视频播放| 91色婷婷综合久久中文字幕二区| 久久人五月| 久久婷婷视频| 婷婷人人操| 五月深情久久| 色色色色色爱| 五月丁香啪啪网| 五月天综合在线| 蜜臀av无码久久久久久久久| 色色色综合色| 激情五月天婷婷丁香 | 五月激情小说| 182无码| 婷婷色婷婷亚洲成人| 婷婷五月天美女21p| 99视频在线9| 丁香五月婷婷88在线| 人妻久久婷婷| 久热精彩视频98| 五月天色婷婷基地| 久久精品视频99| 亚洲啪啪精品| 俺去也综合| 久久全色| 天天天添天天操| 国产精品18久久久| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 99re在线精品视频| 天天干天天操天天射| 五月婷婷精品| 婷婷 丁香 精品| 九九aV| 人妻久久做| 婷色五月| 91人人爽狠狠狠| 亚洲AV成人片无码网站| 99九精品| 六月婷婷色综合| 丁香五月AV| 色色五月婷婷丁香| 色五月婷婷激情基地| 九九视频在线| 粉嫩av懂色av蜜臀av熟妇| 婷婷精品性视频| 丁香五月天91| 中文色婷婷| 超碰国产在线观看| 婷婷五月天综合在线 | 婷婷五月色天| 婷婷五月激情图片| 色色五月丁香| www.91色| 日韩AV免费电影在线播放| 婷婷丁香六月影视| 亚洲精品色| 丁香六月天堂| 亭亭五月天黑人2014| 五月丁香A片| 五月天桃色深爱网| 九九热九九| 99在线免费视频播放| 色欲一二三| 婷婷伊人激情婷婷| 天天爽人人爽| 欧美人与性动交CCOO| 99热99色| 深爱激情综合网| 婷婷色播婷婷| 1024日韩| 丁香六月激情蜜桃| 色色色色色色色色五月先| 色色色com| 天天射影院| 亚洲五月天另类小说图片| 色婷婷亚洲| 97碰碰草| 激情综合五月婷婷丁香| 久久久99久久| 日本片日本片祼观看网站在线看中文版网页在线看 | 伊人三级激情| 一二线视频 另类| 五月丁香在线观看| 开心久久xxx色| 色婷久| 精品久热| 日韩久综合| 狼人婷婷综合| 五月丁香啪啪伦理电影| 丁香激情合作五月| www超碰| 丁香婷婷天堂| 1000部毛片A片免费观看| 亚洲午夜视频| 色婷婷国产精品综合在线观看| 色天天综合成人网| 婷婷五月天Av| 婷婷色五月综合丁香| 色五月天 丁香| 国精产品一区一区三区免费视频| 俺来也综合网精品一区| 婷婷久久爱| 中文字幕日产A片在线看| 狠狠搞狠狠操| 99热这里只有精品8| 丁香五月天婷婷中文| 亚洲激情 久久| 婷婷激情中文综合| 99综合自拍| 玖玖色综合色| 性生生活大片又黄又| 狠狠做深爱婷婷久久综合一区| 色婷婷五月天| 色婷另类| 五月丁香婷婷激情在线视频| 涩涩涩.com| xx久久| 五月丁香婷婷综合激情基地| 99在线免费视频| 婷婷爱五月天| 婷婷狠狠18禁久久| 中文字幕在线资源| 五月婷婷日| 五月天婷婷丁香六月| 五月天婷婷中文字幕在线播放| 免费试看小视频 99| 五月天婷a| 五月天婷婷丁香| 大香蕉网站,大香蕉综合| 淫视馆AV在线| 亚洲成人综合在线| 一级操逼大片| 欧美丁香五月| 日日噜噜久久婷婷五月天| 久久久久99精品成人网站| 五月丁香激情综合| 天天做天天干天天综合网| 97碰久久| 新97人人上人人| 激情欧美婷婷| 五月色婷婷在线观看| 久久婷婷五月综合成人d啪| 激情爱爱网站| 婷婷亚洲激情在线观看视频| 六月丁香成人网| 色色丁香婷婷综合| 少妇真实被内射视频三四区| 久久久免费图片视频| 综合网网欲色| 综合99在线| 色婷綜合网| 日本WWW九九九| 97人人操人人爽| 婷激情五月| 日韩无码专区| 大香蕉520| 五月婷婷日本| 3p日韩网站视频| 久久婷婷五月天蜜桃| 天天综合社区| 久久久激情视频| 人人操人人妻| 亚洲啪啪网| 99热这里有精品2| 丁香五月WWW| 伊人大香蕉毛片| 九九热10| 思思精品热在线| 色婷婷综合网站| 成人综合网站| xxxx五月天色色| 国产五月天激情小说| 婷婷五月丁香六月天亚洲综合| 婷婷色丁香五月| 丁香五月欧美婷婷| 超热久碰.com| 五月婷婷手机在线| 激情综合五月| 色五月婷婷777| 婷婷五月丁香综合亚洲| 激情开心五月亚洲| 亚洲激情综合| 亚洲免费视频网站| 中文字幕乱轮| 91日本在线观看| 色综合区| 99惹| 色综合天堂| 综合激情网五月激情| 激情五月丁香婷婷| 婷婷五月亚洲综合| AV色婷婷| 亚洲最大视频网站| 天天开心AV色综合婷婷五月天| 大香伊人婷婷| 丁香婷婷色| 在线不卡中文字幕| 婷婷成人视频| 九九热只有精品| 五月丁香亚洲校园欧美| 久久婷婷超碰| 噜噜噜噜综合在线| 激情婷婷五月在线合集| 精品思思久久| 婷婷九月激情| 91狠狠色| 51精品国内探花| 久久一热| 色婷婷六月| 丁香五月aV| 99热在这里只有精品| 99色天堂| 超碰人人操在线| 96丁香婷婷九月蜜桃综合久久| 日本啪啪天堂| 亚洲欧美成人在线| 97在线刺激| 欧美天堂久久| 五月天堂色色| 五月天婷婷在线观看| 婷婷久月| 亚洲视频1区| 色色欧美色色| 人人爽欧美婷婷久久久五月丁香| 婷婷在线视频| 日本丰满久久| 天天爽日日爽夜夜爽| 伊人无码高清| 五月丁香成人| 五月天丁香婷婷网| 天天爽日日搞| 天天射影院| 五月婷婷六月丁香激情综合网| 亚洲久久激情| ,99视频久久| 熟妇人妻中文字幕无码老熟妇 | 久久久久久久人妻| 一本久久亚洲五月婷婷| 99热免费18| 99热12| 国产综合81p| 超碰com| 九九免费精品在线视频| 粉嫩AV久久一区二区三区| 天天搞夜夜叫| 五月停性愛| 久久精热| 日本久久高清| 五月丁香成人网| 九九爱看亚洲| xxxx五月天色色| 99久在线视频| 精品在线| 99ER热精品视频| 色婷婷久久综合丁香五月| 色综合丁香婷婷| 另类在线| 一起草无码| 99视频这里只有免费精品| 嫩草哈哈操| 亚洲五月婷婷| 婷婷色基地| 欧美在线视频99| av电影在线播放| av狠狠操| 99视频在线观看视频| 微拍92| 色碰碰视频| 亚洲成人乱码av网站| 99狠狠操一| 国产精产国品一二三在观看| 久久婷婷网| 狠狠色综合无线观看| 色五月婷婷五月天| 五月婷婷开心网| 亚洲成人综合在线| 伊人影院久久网| 色综合久久综合中文综合网| 婷婷基地五月色| 丁香五月 性爱| 中文字幕永久在线| 日日色五月天| 亭亭玉立国色天香| 婷五月天六| 91窝窝| 99无码| 激情久久久久久| 欧美激情综合色综合| 99久热这里有精品| 久久婷婷色情7777网站| 2005天天干天天1| 777影视理论片大全在线观看| 日本三级日本三级99| 狠狠综合网| 亚洲午夜电影| 深爱激情五月婷婷| 丁香五月婷中字幕| 九色视频这里只有精品| 91啪级电影| 精品视频这里只有精品| 国产xxxxx在线观看| 婷五月天丁香婷五月| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 亚洲成人噜噜| 五月天久久婷婷婷| 久久这里只有精品无码| 深爱 五月天| 日日日,com| 久久精品4| 一本久道综合99| 五月婷婷导航| www.玖玖婷婷在线| 大香蕉五月婷婷丁香| 国产首页在线| 日韩有码一区| 中文字幕综合| 亚洲成人在线免费| 色婷婷丁香五月天在线视频 | 丁香色五月天| 国产激情视频在线观看| 操91| 激情婷婷丁香| 99久久久精品| www.com色播五月天| 激情综合99| jiujiu热在线视频| 六月丁香激情综合| 婷婷五月天免费视频| 色色色无码| 欧美经典片免费观看大全| 岛囯综合激情网| 9999三级片| 激情五月婷在线精品| 五月婷婷在线网站| 99亚洲精品| 丁香婷婷基地| 影音先锋AV男人站| 狠狠色噜噜狠狠狠狠综合| 热久久77777| 亚洲色无码| 色噜噜狠狠一区二区三区| 天天射网站| 香蕉网久久| 色色色激情| 开心五月色婷婷综合开心网| 五月天天天天天天天天天天天婷婷婷| 国产成人综合网| 天天日夜夜B久久| 九九人妻福利| 另类激情五月在线视频欧美| 色噜噜狠狠一区二区三区| 亚洲操B| www,99色| 婷婷综合激情五月综合| 玖玖爱综合网| 欧美色碰| 色婷婷色五月丁香| 亚洲色色图片| 婷婷五月天播播| 九色综合网| 99色热| 狠狠草狠狠草| 国产精品99久久久久久久女警| 婷婷国产欧美97| 婷婷五月天欧美图片在线播放电驴| 欧美久久婷婷| 91精品无码久久久久久五月天| 丁香婷婷人妻综合网| 五月婷在线观看| 色婷亚洲| 欧美25p| 曰韩五月丁香色婷婷无码| 丁香丁婷五月激情| 99久久网站| 99ri6在线视频| 夜夜做夜夜愛| 嫩BBB搡BBBB榛BBBB| 婷婷五月天,影院| 99视频| 激情五月婷婷网在线观看| 人妻22p| www.99热在线观看| 5月丁香啪啪啪| 人操91在线| 天堂草在线观看| 欧美槡BBBB槡BBB少妇| 思思热99在线视频| 婷婷五月丁香亚洲| 免费视频这里只有精品| 亚州在线中文字幕| 五月花婷婷最新| 久草热8精品视频在线观看| 99r这里只有精品哦| 久久er99热精品一区二区| 激情深爱婷婷网| 久在热99| 五月丁香六月婷婷国产视频| 成年视频免费观看| 五月丁香久久| 亚洲av免费在线| 婷婷五月天激情小说| 少妇丁香婷婷| 人人操人人妻| 激情五月婷婷丁香| 日本大逼91| 久久婷婷91| 丁香六月婷婷一区| 激情99| 激情五月天免费视频| 男人的天堂在线婷婷| 五月在线| 草操AV在线| 黄桃AV无码免费一区二区三区| 另类综合婷婷五月天欧美视频| 婷婷综合一二三| 婷婷爱五月天| 丁香婷婷激情网站| 天天日夜夜欢| 婷婷丁香日韩五月| 99在线观看精品视频| 色综合久久综合中文综合网| www夜夜| 日本五月视频| 欧美精品啪啪| 久777| 激情综合色| 午夜无码精品色综合久久| 91色涩| www久久久久久久久久久| 五月天婷婷丁香导航| 99色播| av在线中文| 少妇人妻丰满做爰XXX| 激情五月婷婷五月丁香五月开心五月| 只有精品在线观看| 97超碰在线观看免费| 丁香五月偷拍| 99re6久热只有精品6在线直播| 夜夜天天久久婷婷| 9久久久| 久久亭亭电影| 韩国不卡AC视频| 这里只有精品1| 久久久这里有精品| 激情五月天无码| 中文字幕不卡+婷婷五月| 综合色视频| 国产一二区爆乳_1国产日韩一区二区三-成人AV | 色九月国产| 密着浓厚中出乚交尾GvG935| 婷婷九月丁香| 任你操精品免费| xxx综合在线| 校园激情 亚洲| 亚洲国产精品五月天| 精品久久9| 婷婷视频网| www.yw色| 婷婷五月天综合AV| 97偷拍对白视频| av操逼网| 免费色婷婷| 综合网色| 黑人巨粗进入警花疼哭A片| 色9999日韩国产| 久色| 免费看欧美成人A片无码| 人人摸人人干| 99激情视频| 丁香五月欧美婷婷综合| 青柠影视免费高清电视剧| 国产又爽又猛又粗的视频A片| 日韩av一区二区在线/日产精品久久久 | 操逼棍操逼| 99性感视频| 婷婷开心六月| 草综合14| 五月天激情图片| 五月天成人综合| 中文字幕日产A片在线看| 久久97久久99久久综合欧美| 丁香婷婷五月天成人| 亚洲xx网| 五月丁香六月婷婷亚洲天堂网站| tingtingjiqingwuyue| 丁香久久五月天视频在线观看 | 超碰在线观看9| 欧美日韓成人亚洲精品另类| 99热99热| 超碰97干| 综合激情五月天| 超碰自拍天堂| 超碰91av| 五月天停停基地| 人妻视频在线| 成人精品视频99在线观看免费| 婷婷久久爱| 婷婷久久久久| 久久人妻系列| 国产精品色婷婷99久久精品| 九九热视频在线观看| av操逼网| 亚洲另类电影| 久久99热精品a片在线观看| 99乱视频| 国产亚洲成AV人片在线观黄桃| 刘玥精品一区| 五月婷婷丁香啪啪| 五月六月丁香激情| 五月婷婷丁香六月| 激情综合色婷婷啪啪六月天| 五月伊人综合| 精品人妻在线| 丁香亭亭激情四射| 久久久这里都是精品| 伊人网啪啪| 天天色中文字幕女优AV| 99成人网一区| 色偷偷五月天| 乱岳熟女50岁| 久婷婷| 国产综合婷婷| 国产av天天插天天操天天爽| 五月丁香六月婷婷精品| 97九色视频| 碰碰人人人| 色亚洲视频| 九九这里都是精品| 婷婷五月天久久综合88| 婷婷娱乐丁香综合网| 搡BBBB搡BBB搡18| 婷婷久草| 久婷婷| 久久婷色| 亚洲激情婷婷| 99热精品99| 天天干一干| aaa9区免费在线观看| 99热精品免费| 99热久久日本| 久久婷婷激情视频| 欧美人人草草| 岛国AV网| 色综合久久88| 丁香五月婷婷综合精品素人| 999久久久国产精品| 丁香五月激情婷婷婷婷在线观看| 玖玖99婷婷| 色在线视频网2025| WWW久久99久久99久久| 六月综合在线| 九九热99精品| 国产成人亚洲综合A∨婷婷| 狠狠综合色网| 久久玖玖综合| 日本美女上人| 婷婷金品综合视频| 婷婷丁香视频在线观看免费| 精品一二三区久久AAA片| 情欲综合网| 在线视频九色97| 色五月天成人| 91狠狠色丁香| 五月天婷婷伊人| 色吧综合网| 久99热| 婷婷五月AA五月在线| www,setingting| 色久九| 色婷五月天亚洲| 久久九久久| www.色综合.com| 五月综合在线婷婷图片| 超级碰碰碰久久网站视频| 久色大| 激情丰满熟妇五月| 亭亭玉月丁香| 婷婷五月婷婷| 婷婷成人五月天成人文学小说| 亚洲黄色精品| 一二线视频 另类| www.超碰在线| 欧美激情凹凸丁香网| 五月丁香六月婷婷久久肏| www99热| 激情综合五月婷婷六月丁香| 激情五月综合网| 色噜噜丁香| 婷婷久久丁香五月| 欧美婷婷五月天综合| 97人凄人人操人人爽| www.玖玖九| 五月丁香成人网| 五月丁香六月激情综合欧美| 婷婷丁香五月av| 激情中文在线| 2018夜夜草| 碰碰91| 婷婷五亚洲| 最新激情五月天| 丁香九九九九| 丁香五月婷婷激情蜜桃| 99免费在线视频| 五月丁香婷婷综合网| 婷色五月天| 亚洲综合婷婷六月丁香五月| 天天插天天射天天干| 精品操逼一区二区| 无码人妻丰满熟妇奶水区码| 日韩成人AV在线| 五月 丁香 欧美| 深爱五月综合网| 中文字幕在线免费观看视频| 久久精品五月| 久久精品无码一区| 久久色情| 六月丁香五月天| av色婷婷| 久久婷婷精品| 色三级色三级| 色婷婷免费观看| 成人午夜无码视频| 五月婷婷影| av在线免费网站 | 亚洲天堂碰碰婷婷| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 天天综合色丁香| 狠狠干在线| 一级二级色大片| 中美日韩成人在线| 婷婷六月视频| 欧美日比视频| 六月婷婷久久| 久久婷婷五月天懂色| 操97| 97色综合| 色色色婷婷| 色婷婷88| 操操啪| 热无码A∨| 天天日天天操天天干| 六月婷婷久久大全| 婷婷玖玖五月天| 人人爱操| 免费观看18视频网站| 国自产拍偷拍精品啪啪一区二区 | 永久精品| 99re在线视频| 九九伊人网| 亚洲国产精品SUV| 色拍九九九| 97碰碰在线看视频免费| 这里只有精品视频在线观看免费| 欧美熟女乱又伦| 99热这里只有精品3| AA丁香综合激情| 少妇出轨做爰高潮A片| 九月av在线| 亚洲精品操一操、噜一噜、摸一摸、爽 | 深爱五月激情|