99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Linux壓力測(cè)試工具stress實(shí)戰(zhàn):從安裝到拷機(jī)一條龍

Linux壓力測(cè)試工具stress實(shí)戰(zhàn):從安裝到拷機(jī)一條龍 簡(jiǎn)介L(zhǎng)inux壓力測(cè)試工具stress 1.0.1源碼資源包面向系統(tǒng)管理員、運(yùn)維工程師與嵌入式開(kāi)發(fā)者用于模擬CPU、內(nèi)存、線程/進(jìn)程等負(fù)載評(píng)估系統(tǒng)在極限場(chǎng)景下的穩(wěn)定性與性能表現(xiàn)。壓縮包整體約199KB共32個(gè)文件以C源碼、configure配置腳本、Makefile構(gòu)建文件為主兼有texinfo文檔、man手冊(cè)及ChangeLog等說(shuō)明材料目錄沿用標(biāo)準(zhǔn)GNU工程結(jié)構(gòu)便于編譯、安裝與二次開(kāi)發(fā)。該工具支持通過(guò)命令行靈活指定負(fù)載類型與線程數(shù)量可模擬計(jì)算密集、內(nèi)存緊張及高并發(fā)進(jìn)程創(chuàng)建等場(chǎng)景。目前已有3031人學(xué)習(xí)下載適合需要驗(yàn)證服務(wù)器承載力、排查資源瓶頸或開(kāi)展性能調(diào)優(yōu)的工程師。借助該包可收獲完整源碼與配套文檔既能直接用于壓測(cè)環(huán)境搭建也能深入研讀stress的核心實(shí)現(xiàn)為自行編寫輕量級(jí)負(fù)載工具提供參考。linux壓力測(cè)試工具stress實(shí)戰(zhàn)從裝庫(kù)到拷機(jī)一條龍做Linux運(yùn)維和系統(tǒng)性能驗(yàn)證的朋友一定繞不開(kāi)一個(gè)場(chǎng)景新買的服務(wù)器到了要驗(yàn)證硬件穩(wěn)不穩(wěn)內(nèi)核打了一個(gè)補(bǔ)丁要確認(rèn)系統(tǒng)不會(huì)跑著跑著就崩部署容器之前要看看資源隔離到底靠不靠譜。這些場(chǎng)景都有一個(gè)共同的底子需求——給系統(tǒng)施加一個(gè)可控的壓力然后在壓力下觀察它的表現(xiàn)。stress就是干這個(gè)的一個(gè)輕量、純粹、用來(lái)給Linux系統(tǒng)制造負(fù)載的小工具我用它做過(guò)不少次拷機(jī)和穩(wěn)定性驗(yàn)證這篇就來(lái)聊聊它的完整玩法。1. 工具選型與核心概念1.1 stress到底是個(gè)什么工具stress是Amos Waterland寫的一個(gè)C語(yǔ)言小工具它的設(shè)計(jì)目標(biāo)非常純粹通過(guò)fork出大量子進(jìn)程分別去消耗CPU、內(nèi)存、磁盤I/O和資源分配能力從而讓系統(tǒng)進(jìn)入一種可量化、可控的高負(fù)載狀態(tài)。說(shuō)人話就是——你告訴它“給我壓出8個(gè)滿負(fù)荷CPU的負(fù)載”它就老老實(shí)實(shí)fork出8個(gè)進(jìn)程每個(gè)進(jìn)程拼命算數(shù)學(xué)題把CPU時(shí)間吃滿。很多人會(huì)把stress和stress-ng搞混。stress-ng是它的加強(qiáng)版包含幾百種壓測(cè)方法功能更強(qiáng)但復(fù)雜度也高。而stress的特點(diǎn)是參數(shù)簡(jiǎn)單、行為直觀、結(jié)果容易判斷適合做快速驗(yàn)證和日??綑C(jī)。我個(gè)人的習(xí)慣是快速驗(yàn)證用stress深度專項(xiàng)壓測(cè)用stress-ng或sysbench但日常工作中stress出現(xiàn)的頻率其實(shí)更高因?yàn)樗銐蜉p量裝完即用不引入太多學(xué)習(xí)成本。1.2 為什么需要給系統(tǒng)制造壓力很多人會(huì)有疑問(wèn)我的服務(wù)已經(jīng)在線上跑了為什么還要額外制造壓力這里有個(gè)概念要分清線上跑業(yè)務(wù)是“實(shí)際負(fù)載”壓測(cè)工具制造的是“人工負(fù)載”。實(shí)際負(fù)載是隨機(jī)的、起伏的、不好控制的而人工負(fù)載是確定的、穩(wěn)定的、可調(diào)節(jié)的。做穩(wěn)定性驗(yàn)證時(shí)你不希望負(fù)載忽高忽低導(dǎo)致結(jié)果無(wú)法解釋你希望CPU穩(wěn)定在100%、內(nèi)存穩(wěn)定占用N個(gè)GB然后觀察系統(tǒng)在這種極端情況下是否還能正常工作。stress的價(jià)值就在這里它把負(fù)載變成了一個(gè)有刻度的儀器讓你能夠在“系統(tǒng)扛不住之前”就掌握系統(tǒng)的邊界在哪里。比如一臺(tái)8核機(jī)器先壓6個(gè)CPU看看是否穩(wěn)定再壓8個(gè)再壓10個(gè)超賣觀察不同負(fù)載級(jí)別下的系統(tǒng)行為。這種測(cè)試在硬件驗(yàn)收、性能基線采集、容器限制驗(yàn)證中都屬于必備環(huán)節(jié)。1.3 適用場(chǎng)景梳理從我實(shí)際接觸過(guò)的使用場(chǎng)景來(lái)看stress主要適合以下幾種情況硬件拷機(jī)新裝機(jī)或購(gòu)買二手服務(wù)器后用CPU和內(nèi)存壓力驗(yàn)證硬件是否有隱性故障。內(nèi)核與驅(qū)動(dòng)驗(yàn)證打了補(bǔ)丁、升級(jí)了內(nèi)核、更換了驅(qū)動(dòng)需要在負(fù)載下確認(rèn)系統(tǒng)不會(huì)panic或死鎖。性能調(diào)優(yōu)前后對(duì)比調(diào)整內(nèi)核參數(shù)、CPU調(diào)頻策略之前和之后用同樣的壓力對(duì)比系統(tǒng)表現(xiàn)。容器與虛擬化資源限制驗(yàn)證確認(rèn)cgroup的CPU限制、內(nèi)存限制是否真正生效。教學(xué)和技術(shù)測(cè)試演示系統(tǒng)負(fù)載、觀察調(diào)度行為時(shí)stress是干凈利落的負(fù)載制造工具。2. 安裝部署與環(huán)境準(zhǔn)備2.1 各主流發(fā)行版的安裝方法stress的安裝非常簡(jiǎn)單官方源里基本都有現(xiàn)成的包。以最常見(jiàn)的幾個(gè)發(fā)行版為例# Debian / Ubuntu sudo apt-get install stress # CentOS / RHEL 7/8/9 sudo yum install stress # Fedora sudo dnf install stress # Arch Linux sudo pacman -S stress如果你用的是極其精簡(jiǎn)的發(fā)行版或者沒(méi)有現(xiàn)成包也可以從源碼編譯安裝。stress的源碼包很小編譯過(guò)程依賴也很少wget https://downloads.your.org/stress/stress-1.0.7.tar.gz tar -xzf stress-1.0.7.tar.gz cd stress-1.0.7 ./configure make sudo make install安裝完成之后驗(yàn)證一下是否成功stress --version能輸出版本號(hào)就說(shuō)明OK了。我在編譯安裝時(shí)踩過(guò)一次坑某些精簡(jiǎn)系統(tǒng)上缺少make和gcc需要先用包管理器裝好基礎(chǔ)編譯工具鏈再執(zhí)行configure。2.2 壓測(cè)前的系統(tǒng)狀態(tài)確認(rèn)在做壓力測(cè)試之前有一件小事經(jīng)常被忽略確認(rèn)CPU調(diào)頻策略?,F(xiàn)在的CPU大多有自動(dòng)調(diào)頻功能空閑時(shí)降頻省電負(fù)載高時(shí)自動(dòng)升頻。如果你不做任何設(shè)置壓測(cè)過(guò)程中CPU頻率可能忽高忽低測(cè)試結(jié)果的一致性會(huì)受影響。建議在壓測(cè)前把CPU調(diào)到最大頻率或性能模式觀察一下當(dāng)前頻率運(yùn)行狀態(tài)# 查看當(dāng)前CPU頻率 cat /proc/cpuinfo | grep MHz # 使用cpupower工具設(shè)置性能模式需要root權(quán)限 cpupower frequency-set -g performance如果發(fā)行版沒(méi)有cpupower命令也可以裝linux-cpupowerDebian/Ubuntu或kernel-toolsCentOS包。當(dāng)然如果你測(cè)試的目的恰恰是要驗(yàn)證調(diào)頻策略本身的行為那就不需要這一步反而應(yīng)該保持默認(rèn)策略去壓具體取決于你的目標(biāo)。另外壓測(cè)前還要確認(rèn)系統(tǒng)負(fù)載基線是干凈的。最好在一臺(tái)沒(méi)有業(yè)務(wù)的機(jī)器上做壓測(cè)或者至少確認(rèn)當(dāng)前top顯示的load average不高避免把別人業(yè)務(wù)的負(fù)載誤算進(jìn)你的測(cè)試結(jié)果里。3. 壓測(cè)方案設(shè)計(jì)與核心參數(shù)3.1 CPU壓測(cè)--cpu參數(shù)詳解stress最常見(jiàn)的用法是CPU壓測(cè)命令格式如下stress --cpu 8這會(huì)在當(dāng)前終端前臺(tái)fork出8個(gè)子進(jìn)程每個(gè)進(jìn)程執(zhí)行一個(gè)計(jì)算平方根的死循環(huán)把CPU核心吃滿。根據(jù)我的實(shí)測(cè)每個(gè)--cpu進(jìn)程會(huì)跑在單核上8個(gè)進(jìn)程就能吃滿8個(gè)邏輯核心。機(jī)器有多少核心可以用nproc查看。這里有個(gè)決策點(diǎn)如果機(jī)器是超線程架構(gòu)8核16線程要壓滿所有邏輯核心應(yīng)該用--cpu 16還是只壓8個(gè)物理核心這取決于你的目的。如果你想驗(yàn)證整機(jī)散熱和供電是否扛得住那就壓滿16個(gè)線程讓所有邏輯處理器都進(jìn)入高負(fù)載狀態(tài)如果你想模擬“每個(gè)物理核心承載一個(gè)典型業(yè)務(wù)進(jìn)程”的場(chǎng)景壓8個(gè)可能更貼近實(shí)際。CPU壓測(cè)默認(rèn)會(huì)一直跑下去直到你按CtrlC終止。實(shí)際操作中通常需要限制時(shí)長(zhǎng)用--timeout參數(shù)# 壓8個(gè)CPU核心持續(xù)60秒后自動(dòng)退出 stress --cpu 8 --timeout 60s--timeout支持10s、1m、1h、1d這樣的時(shí)間后綴也支持純數(shù)字單位為秒。加上超時(shí)控制的最大好處是不用干等測(cè)試完自動(dòng)退出適合寫進(jìn)腳本里循環(huán)執(zhí)行。3.2 內(nèi)存壓測(cè)--vm參數(shù)詳解內(nèi)存壓測(cè)用到--vm系列的參數(shù)# 啟動(dòng)4個(gè)內(nèi)存壓測(cè)進(jìn)程每個(gè)分配512MB內(nèi)存 stress --vm 4 --vm-bytes 512M每個(gè)--vm進(jìn)程會(huì)調(diào)用malloc分配指定大小的內(nèi)存然后循環(huán)寫入數(shù)據(jù)確保內(nèi)存頁(yè)真實(shí)被觸達(dá)。這里我補(bǔ)充一個(gè)容易被忽視的細(xì)節(jié)malloc分配出來(lái)的內(nèi)存在沒(méi)有寫入之前只是虛擬內(nèi)存不會(huì)占據(jù)實(shí)際的物理內(nèi)存頁(yè)。stress內(nèi)部會(huì)通過(guò)寫入操作對(duì)這些內(nèi)存頁(yè)進(jìn)行實(shí)際觸達(dá)這也是它壓內(nèi)存比較有效的原因。實(shí)際壓測(cè)時(shí)內(nèi)存總量要算清楚。比如機(jī)器有8GB可用內(nèi)存你啟動(dòng)4個(gè)進(jìn)程每個(gè)分配2GB總量就是8GB。如果分配總量超過(guò)實(shí)際可用內(nèi)存系統(tǒng)會(huì)開(kāi)始使用swap性能會(huì)驟降如果超過(guò)物理內(nèi)存加swap的總量則可能觸發(fā)OOM Killer某個(gè)進(jìn)程被內(nèi)核殺掉測(cè)出來(lái)的結(jié)果就不具備參考意義。還有--vm-hang參數(shù)值得說(shuō)明。它會(huì)指示子進(jìn)程在分配并寫入內(nèi)存后掛起一段時(shí)間而不是反復(fù)隨機(jī)讀寫。比如stress --vm 2 --vm-bytes 1G --vm-hang 30兩個(gè)進(jìn)程各分配1GB內(nèi)存并保持30秒不釋放。這種模式適合測(cè)試“系統(tǒng)在內(nèi)存長(zhǎng)期以高占用率運(yùn)行時(shí)是否穩(wěn)定”貼近數(shù)據(jù)庫(kù)緩存、JVM堆內(nèi)存這類常駐內(nèi)存場(chǎng)景。3.3 磁盤和I/O壓測(cè)--io與--hdd磁盤I/O壓測(cè)主要有兩個(gè)參數(shù)--io和--hdd。# 啟動(dòng)4個(gè)I/O進(jìn)程每個(gè)進(jìn)程不斷執(zhí)行sync系統(tǒng)調(diào)用 stress --io 4--io的做法是不斷fork新進(jìn)程執(zhí)行sync()把文件系統(tǒng)緩沖區(qū)刷入磁盤產(chǎn)生系統(tǒng)調(diào)用和I/O調(diào)度壓力。不過(guò)說(shuō)實(shí)話這種壓測(cè)方式對(duì)現(xiàn)代SSD來(lái)說(shuō)壓力并不大它更多是壓內(nèi)核的I/O路徑和調(diào)度器不是直接壓磁盤帶寬。想要更直接的磁盤寫入壓力用--hdd# 啟動(dòng)2個(gè)寫盤進(jìn)程每個(gè)向文件中寫入1GB數(shù)據(jù) stress --hdd 2 --hdd-bytes 1G--hdd進(jìn)程會(huì)創(chuàng)建一個(gè)臨時(shí)文件默認(rèn)在/var/tmp目錄下然后反復(fù)寫數(shù)據(jù)進(jìn)去。這個(gè)測(cè)試會(huì)真實(shí)產(chǎn)生磁盤寫入流量可以用來(lái)驗(yàn)證磁盤的穩(wěn)定性和散熱。這里有一個(gè)我踩過(guò)的坑--hdd默認(rèn)會(huì)在/var/tmp下生成臨時(shí)文件對(duì)于容量小的根分區(qū)1GB甚至幾GB的寫入很容易把根分區(qū)磁盤占滿。所以在跑--hdd之前一定先看看磁盤剩余空間同時(shí)建議用--hdd-bytes限制單次寫入上限或者指定文件路徑。3.4 組合壓測(cè)模擬真實(shí)混合負(fù)載前面的參數(shù)都是單一維度的但生產(chǎn)環(huán)境的負(fù)載從來(lái)不會(huì)只消耗一種資源。stress允許同時(shí)指定多個(gè)維度一次壓測(cè)模擬混合負(fù)載# 8個(gè)CPU進(jìn)程 2個(gè)內(nèi)存進(jìn)程各1G 1個(gè)磁盤寫入進(jìn)程持續(xù)5分鐘 stress --cpu 8 --vm 2 --vm-bytes 1G --hdd 1 --hdd-bytes 1G --timeout 5m這種組合壓測(cè)更適合在真實(shí)服務(wù)器上做整體穩(wěn)定性驗(yàn)證。比如你新部署了一個(gè)生產(chǎn)環(huán)境想確認(rèn)在“CPU高負(fù)載、內(nèi)存大量占用、磁盤持續(xù)寫入”的場(chǎng)景下業(yè)務(wù)進(jìn)程還能不能穩(wěn)定響應(yīng)這種混合壓測(cè)就很有參考價(jià)值。我在實(shí)際做服務(wù)器驗(yàn)收時(shí)幾乎都是用組合參數(shù)跑30分鐘以上而不僅僅是單測(cè)一個(gè)維度。3.5 核心參數(shù)速查表參數(shù)作用常用搭配備注--cpu N啟動(dòng)N個(gè)CPU負(fù)載進(jìn)程--timeout每個(gè)進(jìn)程吃滿一個(gè)邏輯核心--vm N啟動(dòng)N個(gè)內(nèi)存負(fù)載進(jìn)程--vm-bytes每個(gè)進(jìn)程分配指定大小內(nèi)存--vm-bytes SIZE指定每個(gè)內(nèi)存進(jìn)程分配的大小--vm N支持K/M/G后綴--vm-hang N內(nèi)存分配后掛起N秒--vm模擬常駐內(nèi)存負(fù)載--io N啟動(dòng)N個(gè)I/O進(jìn)程--timeout不斷執(zhí)行sync系統(tǒng)調(diào)用--hdd N啟動(dòng)N個(gè)寫盤進(jìn)程--hdd-bytes真實(shí)產(chǎn)生磁盤寫入流量--timeout TIME指定總運(yùn)行時(shí)長(zhǎng)所有參數(shù)支持s/m/h/d后綴--verbose顯示詳細(xì)壓測(cè)日志任意配合調(diào)試使用4. 實(shí)操過(guò)程與數(shù)據(jù)觀察4.1 一個(gè)完整的壓測(cè)流程示例在真正壓測(cè)之前我先做一次基線采集也就是不做任何壓測(cè)時(shí)記錄系統(tǒng)初始狀態(tài)。這一步很重要因?yàn)楹罄m(xù)判斷異常都需要和基線對(duì)比uptime free -h df -hT /var/tmp mpstat -P ALL 1 3假設(shè)我現(xiàn)在拿到一臺(tái)8核16G的服務(wù)器要做一次硬件穩(wěn)定性驗(yàn)收壓測(cè)方案分三步走第一步跑CPU壓力10分鐘確認(rèn)所有邏輯核心都穩(wěn)定在100%負(fù)載stress --cpu 16 --timeout 10m第二步跑內(nèi)存壓力按70%內(nèi)存占用設(shè)計(jì)16G機(jī)器留出系統(tǒng)余量分配12G占用stress --vm 6 --vm-bytes 2G --timeout 10m第三步混合壓測(cè)30分鐘模擬真實(shí)業(yè)務(wù)的高負(fù)載場(chǎng)景stress --cpu 16 --vm 4 --vm-bytes 2G --hdd 4 --hdd-bytes 2G --timeout 30m三個(gè)步驟跑完如果沒(méi)有出現(xiàn)進(jìn)程被kill、系統(tǒng)死機(jī)、內(nèi)核報(bào)錯(cuò)等現(xiàn)象基本可以認(rèn)為這臺(tái)機(jī)器的硬件和系統(tǒng)在合理的負(fù)載范圍內(nèi)是穩(wěn)定的。4.2 壓測(cè)過(guò)程中的數(shù)據(jù)觀察方法壓測(cè)啟動(dòng)后記住一個(gè)原則不要只盯著黑色終端等結(jié)果要開(kāi)另一個(gè)終端去觀察系統(tǒng)狀態(tài)。我最常用的觀察工具組合如下top/htop看整體CPU使用率、load average、內(nèi)存占用判斷壓測(cè)進(jìn)程是否達(dá)到預(yù)期負(fù)載。mpstat -P ALL 1逐核查看CPU使用率。這個(gè)非常關(guān)鍵能看出壓力是否均勻分布在所有核心上如果只有部分核心為100%說(shuō)明壓測(cè)進(jìn)程數(shù)量少了或者存在中斷綁核等問(wèn)題。free -h查看內(nèi)存與swap使用情況。如果內(nèi)存壓測(cè)導(dǎo)致swap開(kāi)始大量增長(zhǎng)說(shuō)明壓測(cè)內(nèi)存分配過(guò)量不是理想狀態(tài)。iostat -x 1觀察磁盤使用率、吞吐量和I/O等待時(shí)間配合--hdd壓測(cè)使用。這里我舉個(gè)例子。用stress --cpu 8壓一臺(tái)8核機(jī)器在另一個(gè)終端跑mpstat -P ALL 1正常情況下每個(gè)CPU的%usr都接近100%。但如果發(fā)現(xiàn)其中某個(gè)CPU的%usr只有50%左右可能就是stress進(jìn)程被調(diào)度到了中斷處理較多的CPU上或者系統(tǒng)本身有綁核配置。這種細(xì)節(jié)在高精度壓測(cè)中值得排查。4.3 壓測(cè)時(shí)的安全注意事項(xiàng)壓測(cè)說(shuō)到底是在挑戰(zhàn)系統(tǒng)的極限所以要講究分寸。幾個(gè)我吃過(guò)虧的教訓(xùn)分享給你第一不要在遠(yuǎn)程連接的唯一會(huì)話里直接跑大壓力測(cè)試。如果你用的是SSH連服務(wù)器跑壓力測(cè)試壓力過(guò)大可能導(dǎo)致系統(tǒng)響應(yīng)變慢甚至假死你的SSH連接有可能斷掉然后你就失去了對(duì)機(jī)器的控制。建議用tmux或screen起一個(gè)會(huì)話跑壓測(cè)即使連接斷了壓測(cè)進(jìn)程還能繼續(xù)運(yùn)行重新連上后還能看到之前的輸出。第二內(nèi)存壓測(cè)總量一定要留余量。別把物理內(nèi)存壓到100%給系統(tǒng)內(nèi)核和基礎(chǔ)服務(wù)留出幾百M(fèi)B甚至更多的余量否則OOM Killer啟動(dòng)后可能把不該殺的系統(tǒng)服務(wù)給殺了測(cè)試結(jié)果會(huì)被嚴(yán)重污染。第三跑磁盤壓測(cè)前確認(rèn)磁盤空間和磨損程度。如果是機(jī)械硬盤或老舊SSD的機(jī)器長(zhǎng)時(shí)間--hdd壓測(cè)會(huì)加劇磁盤磨損。這種測(cè)試不是不能做但要有目的性不是為了測(cè)磁盤本身就沒(méi)必要長(zhǎng)時(shí)間跑。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 壓測(cè)以后系統(tǒng)負(fù)載降不下來(lái)這個(gè)問(wèn)題我遇到不只一次。明明按了CtrlC或者--timeout到了時(shí)間系統(tǒng)負(fù)載依然很高。排查步驟是這樣的先用top看是哪個(gè)進(jìn)程在消耗CPU如果是stress的殘留子進(jìn)程用pkill -f stress清理。注意stress的父進(jìn)程退出后某些子進(jìn)程可能會(huì)變成孤兒進(jìn)程繼續(xù)運(yùn)行。這時(shí)可以pgrep -l stress列出所有名字包含stress的進(jìn)程逐個(gè)確認(rèn)后清理pkill -9 stress另外如果CPU壓測(cè)跑完LOAD值依然很高但CPU使用率已經(jīng)降下來(lái)了那可能是系統(tǒng)在刷臟頁(yè)或等待I/O完成這時(shí)候耐心等一下就好通常不會(huì)持續(xù)太久。5.2 內(nèi)存壓測(cè)觸發(fā)OOM Killer內(nèi)存壓測(cè)時(shí)系統(tǒng)報(bào)錯(cuò)Out of memory: Kill process說(shuō)明壓測(cè)配置和機(jī)器實(shí)際內(nèi)存不匹配。比如一臺(tái)只有4G內(nèi)存的機(jī)器你直接跑stress --vm 8 --vm-bytes 1G8個(gè)進(jìn)程共需要8G內(nèi)存遠(yuǎn)超物理內(nèi)存OOM Killer就會(huì)出手。解決方案是精確計(jì)算內(nèi)存分配量。建議先看free -h確定可用內(nèi)存最多用70%到80%的可用內(nèi)存做壓測(cè)。假設(shè)機(jī)器有8G內(nèi)存系統(tǒng)已用2G可用約6G那壓測(cè)內(nèi)存量控制在4G到5G比較合適可以配置成stress --vm 4 --vm-bytes 1G還有一種情況你確實(shí)想壓到OOM看系統(tǒng)能不能正確殺掉內(nèi)存超限進(jìn)程從而保護(hù)主機(jī)不掛這種測(cè)試在容器環(huán)境驗(yàn)證時(shí)其實(shí)是有效的驗(yàn)證手段。但如果你的目標(biāo)是驗(yàn)證“系統(tǒng)在內(nèi)存高負(fù)載下穩(wěn)定運(yùn)行”那就要避開(kāi)OOM閾值。5.3 --hdd壓測(cè)后臨時(shí)文件沒(méi)清理干凈stress --hdd跑完后會(huì)在/var/tmp下留下臨時(shí)文件按我的經(jīng)驗(yàn)它會(huì)以類似stress.XXXXXX的命名方式寫入文件。如果不清理日積月累會(huì)占用不少磁盤空間。清理命令很簡(jiǎn)單ls /var/tmp/ rm -f /var/tmp/stress.*為了避免這個(gè)問(wèn)題更推薦的做法是在命令里就指定臨時(shí)文件路徑放到專門的測(cè)試目錄下測(cè)完直接刪目錄mkdir /tmp/stress-test stress --hdd 2 --hdd-bytes 1G --timeout 1m跑完以后刪除整個(gè)測(cè)試目錄干凈利落。5.4 壓測(cè)過(guò)程中SSH超時(shí)斷連這是一個(gè)很實(shí)際的運(yùn)維場(chǎng)景你通過(guò)SSH連接服務(wù)器跑長(zhǎng)時(shí)間壓測(cè)壓測(cè)到一半SSH連接斷了。排查思路是先確認(rèn)是不是網(wǎng)絡(luò)側(cè)的會(huì)話超時(shí)限制同時(shí)建議所有長(zhǎng)時(shí)間壓測(cè)都放進(jìn)tmux會(huì)話中執(zhí)行。我已經(jīng)養(yǎng)成習(xí)慣凡是超過(guò)10分鐘的壓測(cè)一律先建tmux會(huì)話tmux new -s stress-test stress --cpu 16 --timeout 1h # 按 CtrlB 再按 D 脫離會(huì)話連接斷了也不影響壓測(cè)進(jìn)程重新連接后用tmux attach -t stress-test回到壓測(cè)會(huì)話查看輸出情況。這個(gè)習(xí)慣幫我避免了多次遠(yuǎn)程壓測(cè)斷連后無(wú)法確認(rèn)結(jié)果的麻煩。5.5 壓測(cè)結(jié)果如何判斷是否成功最后聊一下怎么判斷壓測(cè)結(jié)果。stress本身不會(huì)輸出一個(gè)“通過(guò)/失敗”的結(jié)論你需要自己綜合判斷。我個(gè)人的判斷標(biāo)準(zhǔn)有三條壓測(cè)期間系統(tǒng)沒(méi)有出現(xiàn)嚴(yán)重錯(cuò)誤日志dmesg中沒(méi)有OOM、panic、硬件報(bào)錯(cuò)。壓測(cè)結(jié)束后SSH和基礎(chǔ)服務(wù)依然正常響應(yīng)負(fù)載能回落到正常水平。壓測(cè)期間業(yè)務(wù)進(jìn)程如果有沒(méi)有出現(xiàn)崩潰或者長(zhǎng)時(shí)間無(wú)響應(yīng)。這三條都滿足這臺(tái)機(jī)器基本可以認(rèn)定在當(dāng)前壓測(cè)配置下是穩(wěn)定的。如果再嚴(yán)格一點(diǎn)可以對(duì)比壓測(cè)前后/proc/cpuinfo和smartctl的磁盤健康狀態(tài)確認(rèn)沒(méi)有新增的硬件隱性故障。結(jié)尾我在實(shí)際使用stress過(guò)程中最大的體會(huì)是工具本身簡(jiǎn)單到不行真正的復(fù)雜度在于你怎么設(shè)計(jì)壓測(cè)方案和解讀壓測(cè)結(jié)果。壓測(cè)之前先想清楚要驗(yàn)證什么再動(dòng)手跑數(shù)據(jù)才有參考價(jià)值。最后分享一個(gè)小技巧如果你需要定期做壓力測(cè)試可以寫一個(gè)腳本把stress和stress-ng配合使用先用stress做快速冒煙驗(yàn)證確認(rèn)基本功能正常后再用stress-ng做專項(xiàng)深度壓測(cè)這樣兼顧了效率與深度我在多個(gè)項(xiàng)目的服務(wù)器驗(yàn)收中都是這么做的效果一直不錯(cuò)。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久99综合| 久久综合干| 大香蕉九九操| 99五月香婷婷丁香在线视频| 日日夜夜狠狠| 成人精品人妻| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 五月天伊人av| 99ri视频| AV在线免费播放| 午夜精品久久久久久久爽| 182TV大香蕉| 狠狠操天天日| 天天干天天干天天干天天干天天干天天| 97干在线观看| 丁香五月九九| 精品一区二区三区三区| 午夜]香婷婷深深爱| 五月天综合久久| 人人播| 日本婷婷网| AV在线大香蕉| 日韩一级A片黄色| 99久操视频| 欧美性丁香色色五月天干干| 玖玖资源在线视频| 99日韩| 人人色婷婷| 六月丁香婷婷开心综合基地| 婷婷精品在线| 三级大香蕉网| 丁香六月视频免费观看| www.人人操人人看人人想人人摸 人人人人操,COM | 丁香色色网| 国产性爱色| 热热色色五月天婷婷| 五月丁香六月婷婷啪啪| 成人电影一区| 极品少妇XXXX精品少妇偷拍| 亚洲五月天激情| 97人人看| 五月婷丁香| 97视频久久| 色婷婷久久综合中文久久一本| 色婷婷丁香五月丁香| 国产精品久久99| 超碰超碰在线| 激情丁香五月婷| 丁香婷婷性爱| 欧美激情五月天婷婷| 9久久精品| -91九色大屁股| 啪色综合| 久热超碰| 婷婷丁香久久五月综合| 五月激情基地| 99热这里只有精品8| 婷婷丁香色情| 黄色一级影片| 五月丁香久久| 亚洲啪啪自拍| www.婷婷,com| 丁香色六月| 婷婷99狠狠躁天天躁| 婷婷综合五月| 色插综合网| 丁香五月激情六月综合| 天天插天天插天天插天天插| 九九热99免费视频| 另类少妇人与禽zOZZ0性伦| 这里有精品| 激情五月天丁香| 婷婷中文字幕| 亚洲性爱AV| 超碰色天堂| 日韩精品成人在线| 日本五月婷婷久久久六月丁香| www..com色爱| 五月丁香六月玩女人| 日本一级一片免费视频| 在线观看免费视频| 丁香五月婷婷亚洲激情四射| 91丨九色丨国产打屁股| 99热这里有精品24| 久99热在线观看| 大香蕉综合网| 国内久久婷婷| 思思热这里只有精品视频666| 性色欲情 网站| 五月丁香在线国产| 一区视频网站| 99在线视频观看| 久久天堂加勒比| av色婷婷| 激情色视频| 少妇人妻人伦A片| 99综合网| 色播五月丁香综合| 狠狠色婷婷在线| 99久久思思| 天堂久久大香蕉| 婷婷午夜综合| 无码色色| 九九色色| 日韩在线视频中文字幕| 五月天综合影院| 亚洲99综合| 99ER热精品视频| 五月婷婷综合影院| 丁香五月中文字幕久色| 久久女婷| 久久九区| 天天干天天操天天射| 丁香五月激情综合| 久久总和99| wwccc久久久| 国产精品国产| 伊人大香蕉综合在线| 久久久久久久五月婷婷六月丁香综合,开心激情综合网 | 欧美色婷婷| 色九九中文字幕| 婷婷五月丁香久久| 婷婷五月天伊人| 国产精品第一国产精品| 国产成人在线精品| 九九视频在线观看| 婷婷视频在线| 婷婷激情六月综合| 久色激情| 日韩成人AV在线| 丁香五月婷久久| 26uuu欧美| 97热在线精品| 色五月偷偷| 开心五月丁香综合久久| 色五月激情网| 久久久999精品| 99日这里只有精品| 亚洲六月色| 九九黄色网| 丁香婷婷色五月| 精品久久99| 成人毛片在线免费观看| 这里只有精品视频在线| 超级碰碰视频无码| 婷婷五月激情天| 少妇AB又爽又紧无码网站| 成人av中文字幕| 久久婷婷五月天蜜桃| 欧美电影在线播放| 色婷婷最爱五月| 婷婷五月av| 天天综合91入口| 丁香五月六月欧美| 97成人丁香| 思思热久在线观看视频| 久久伊人大香蕉| 色婷五月天| 射久久丁香五月| 五月婷久草| www.热99热| 激情又色又爽又黄的A片| 久久这里这里有精品免费视频| 91久久电影| www.一起草av| 中文字幕成人影视| 欧洲亚洲免费视频9| 懂色av蜜臀av粉嫩av永陈冠希| 色婷婷丁香特级性爱视频| 综合色99| 丁香五月第九色| 五月色网| 五月婷在线色视频| 色婷婷影视99| 国产欧美va| 性爱五月婷| se影音资源在线观看| www.韩日视频| 久9无码视频| 色噜噜夜夜夜综合网| 色婷婷五月天成人网| 狠狠色狠狠爱| 婷婷丁香五月综合| 婷婷六月丁香激情综合| 欧美日韩国产成人在线| 成人在线视频一区| 久久综合丁香五月| 欧美五月停| 色婷婷色五月综合| 九九九九九九综合| 久热这里只有精品6| 青草青草久热这里只有精品| 六月婷婷综合| chaopeng在线人人| 久久九九@| 中美月韩免费A片| 99热99色| 五月丁香婷婷激激激综合网色播| 久久婷婷激情四射五月天| 丁香五月六月综合激情| 久久99免费视屏| 九九色色| 五月天婷婷乱论小说| 婷婷综合网性| 香蕉AV777XXX色综合一区 | 激情另类综合| 天天综合.com| 精品网站:999WWW| 丁香五月久久| 欧美亚洲婷婷五月| 婷婷五月丁香六月| 性天天中文网| 婷婷人人操| 久热这里只有| 激情五月,婷婷五月,丁香五月| www91久久| 九九激情网| 婷婷五月天xxx| 亚洲成人av中文| 久久久无码精品成人A片小说| 伊人久久大香网| 综合久久婷婷| 天天日天天舔| 天天碰天天插天天操| www.激情五月天.con| 玖玖爱综合网| 国产精品激情五月天色婷婷| 人妻人人操| 欧美S码亚洲码精品M码| 香蕉婷婷色五月| 婷婷五月天直播| 亚洲成人AV电影网| 国产欧美日韩综合精品一区二区| 成人一级片| 另类五月婷婷| 国产免费AV在线| 色呦精品| 色99视频| 五月丁香婷婷色色色| www.色婷婷。com| 亚洲无码www| 99精品无码| 99热这里只有精品99| 少妇激情五月婷婷| 狠狠色婷婷| 色99免费视频中文| 熟女强人妻一区二区三区四区无| 狠狠狠狠狠狠狠狠| 91艹人| 色婷婷丁香| 五月天久久婷婷| 色狠狠伊人久久五月丁香| 97色女人在线| 丁香五月性爱爱五月| 粉嫩AV久久一区二区三区| 色婷久久| 狠狠做深爱婷婷久久综合一区| 狠狠操狠狠色| 婷婷五月天福利| 色五月丁香网| 丁香五月综合| 五月天婷婷狂暴白浆| 很很干五月天| 婷婷的激情五月| 丁香密臀AV激情网| 9久久精品视频| 五月婷婷激情啪啪| 久9久视频精品| 婷婷色综合| 久久婷婷五月天懂色| 深爱五月激情| 亚洲欧美国产高清vA在线播放| 性小说五月天| 欧美激情xxxXX| 丁香色五月 97干| 久色激情| 97色在线视频| 在线不卡视频| 久久草人妻| 嫩模aV在线| 日本黄色精品| 99久精品视频| 铁牛TV人妻| 综合精品啪啪| 啪啪操操| 久久婷婷色| 人人人操| 色婷婷丁香网| 最新激情五月天| 久久视这里只有精品| 激情五月六月婷婷| 99网| 99热久| 亚洲无码99| www久| 日日干天天| 激情五月综合网| 色婷婷97| 久久九九99| 久久婷婷亚洲| www.色色色com| 亚洲狠狠爱婷婷| 色吧婷婷五月亚洲| 六月色 亚洲| www.久操| 五月婷婷色综图片| 26UUU一区二区| 激情四射五月天偷偷看婷婷| 狠狠va| 99在线视频在线观看| 色综合性视频| 日本色视| 丁香五月色| 狠狠操天天干| 丁香五月花影院| 丁香花综合永久入口| 一级性感毛片| 激情五月天色色| 色五月婷婷五月丁香五月激情五月视频| 五月婷婷丁香啪啪| 久8色色| 亚洲热视频在线| 色五月五月婷婷| 伊人激情啪啪| 国产亚洲精品久久久久苍井松| 激情婷婷丁香| 激情五月婷| 久操b网| 思思w99| 国产在线视频1234| 国产1区2区3区在线观| 色色色综合视频| 我要射综合| 日本狠狠网| 91狠狠色| 久久艹 五月天| 六月丁香成人| 五月色婷婷综合色| 色色色色网| 综合大香蕉| 开心激情婷婷| 99久精品| 国产五月婷| 丁香五月婷婷五月天| 99这里只有| 一本大道伊人AV久久综合| 亚洲国产网址| 九九九九九无码| 婷婷六月激情在线视频| 久久久噜噜噜久久人妻| 怡红院91a√| 五月天狠狠网站| 狠狠草综合网| 激情五月综合婷婷| 伊人五月天97| 6080av| 五月婷婷深深爱| 被强行糟蹋的女人A片| 久久精品天| 玖玖伦理电影| 天天肏在线观看| 97超碰婷婷五月天| 五月天亚洲图片婷婷| 丁香五月天激情网| 婷婷五月成人| 中美日韩成人在线| 亚欧州精品视频| 99re26视频| 色久影院| www.五月丁香| 第九色区AV在线| 久99视频| 精品网站:999WWW| 色色欧美。| 狠狠色狠狠| 伊人五月成人| 日本久久激情| 五月婷婷色综图片| 亚洲激情五月天| 中日韩狠狠色| 婷婷色狠狠| 国产精产国品一二三在观看 | 狠狠99| 六月婷婷综合网2| 思思99热这里只有精品| 久操综合| 色色五月天网站| 26uuuuuuuu国产| 噼里啪啦完整版中文在线观看| 色碰干| 九九性视频| 欧美大片免费观看| 婷婷丁香五另类网站| 色九九综合| 97成人在线视频精品| 国产精品久久久60086| 二色av| 久久婷婷伊人| 色五月丁香网| 久久这里都是精品免费| 婷婷激情小说| 99色视| 久久五月丁香| 婷婷五月色播网| 任你爽精品免费视频6| 日本少妇AA一级特黄大片| 色色网站免费观看| 亚洲一二三网| 久久精品视频在这里有| 久久综合五月| 久久激情天堂| 五月婷婷啪啪啪| 激情綜合網址| 97狠狠色| 99热官网| 另类图片五月天婷婷| 国产精品美女| 亚洲婷婷丁香五月亚洲| 激情久久伊人| 亚洲狠狠干| 开心久久网婷婷| 五月丁香六月婷婷综合网站| 日本九九网| 国产亚洲精品久久一区二区三区| 91九色|疯狂|高潮|对白|| 久久99精品久久久久久噜噜| 另类图片色五月| 亚洲AV成人在线| 五月丁香综合啪啪| 另类少妇人与禽zOZZ0性伦| 深爱 五月天| 成人综合网站| 丁香五月婷在线观看| 日本wwww在线| 操人久久| 91操色| 免看黄大片AA | 色宗合久久五月婷婷| 亚洲区在线| 99精品小视频| 亚洲色碰| 免费无码毛片一区二区A片| 青青草视频福利| 色色热日| 激情综合五月| 激情五月天婷婷视频| 噜噜色天天开心| 激情精品久久| 9久热视频| 夜夜爽77777妓女免费下载| 婷婷五月综激情| 色色色综合色| 天天噜| 激情六月天婷婷| 丁香激激情网| 丁香五月亚洲天堂| 久色国产| 丁香五月五月婷婷五月天激情四射| 丁香五月AV在线| 亚洲激情av| 五月天丁香婷| 香蕉综合在线| www.xtbsty.cn.com蜜乳AV| 色情久久久| www,com,五月色色| 亚洲色图45p| 秋霞AV淫| 久久99精品视频| 超碰人人操人人干| 亚洲夜五月| 337p大胆噜噜噜噜噜91Av| 色色色在线观看| 538任你爽视频不一样的| 久久99久久99www| 婷婷丁香五月天之开心少妇| 91热久| 超碰高清在线| 五月天啪啪| 色婷婷六月性| 韩国婷婷丁香五月| 色婷婷五月天视频网站| 人妻激情综合| 婷婷爱五月| 丰满少妇猛烈A片免费看观看| 全部老头和老太XXXXX| 亚洲欧洲中文日韩久久AV乱码| www.五月天| www.玖玖九| 欧美激情久| 97精品欧美91久久久久久久| 六月婷婷视频| 99A片| 无码人妻激情| 欧洲MV日韩MV国产| 成人资源在线| 欧美va视频不用播放器的va视频网| 3p日韩网站视频| 久久视频这里99| 狠狠爱婷婷丁香| 99爱视频在线观看这里只有精品| 香蕉网婷婷| 影音先锋 一区| 五月丁香婷婷基地| 五月天婷婷丁香视频| 日本色色视频| 午夜一区| 七月激情六月婷婷综合在线播放| 性爱先锋AV| 婷婷五月精品中文字幕| 超碰免费在线| 色婷婷成人久久| 婷婷五月丁香五月| 亚洲aV写真天天综合网久久| 激情综合网五月| 99久久超级| 亚洲婷婷91丁香| 久久这里只有精品网| 色99色| 国产精自产拍久久久久久蜜 | 天天搞天天色综合| 色婷婷五月天在线观看| 久啪欧美| 小视频一区| 日韩999| 精品九九久久| 日本精品。999| 五月丁香啪啪啪| 色五月婷婷777| 日韩成人av在线| 激情小说婷婷五月| 欧美性生交A片免费看| 婷婷伊人75| 婷婷五月久久| 婷婷在线视频| 97久久视频| 婷婷激情小说| 一级片无码| 久久五月丁香伊人青草| 日本三级黄色大片| 日韩99视频| 日日夜夜爽| 五月丁香啪啪网| 超碰97干| 成人在线日韩欧美| 婷婷激情综合色五月久久91| 天天插天天干天天舔| 成人看片网站| WWW.99热| 男女99免费视频| 伊人大香蕉在线视频| 成年人99热| 无码色| 开心婷婷中文字慕| 九九综合久久| 少妇激情基地| 狠狠干综合| 婷婷午夜丁香| 99热日本| 亭亭玉立国色天香| 色情综合| 六月丁香基地| 国产人妻人伦精品一区二区| 99热精品网| 天天艹夜夜艹| mmm1717.6dbm人人爱人人操| 色婷久久| 深爱婷婷色| 少妇被躁爽到高潮无码文| 怕怕視頻| 熟妇无码乱子成人精品| 五月天色综合服务平台| 色啪久| 一级二级香港秋霞欧美欧美秋霞| 337久久| 色婷婷六月丁香综合欲精品| 九九热婷婷| 97九色视频| 日本欧美国产| 久久久久人妻网址| 欧美激情丁香五月天久久婷婷一区| 天天做天天爱天天高潮| 大波美女VA网站| 屁股翘好撅高迎合跪趴| 婷婷爱五月天人人爱| 激情丁香五月综合| 91黄操| 婷婷五月天激情网址| 色情综合网| 这里只有精品99www| 超碰免费人人肏| 丁香五月婷婷在线观看| 五月丁香综合在线| 俺去也婷婷| 99色热综合| 丁香色五月AV在线| 亚洲天天| 久久丁香五月婷婷| 五月激情网站| 亚洲乱码日产精品BD在线观看| 天天综合亚洲综合| av在线免费网站 | 狠狠高潮精品亚洲1| 91视频一起草| 九九九激情综合| www.minyis.com【JT】实力收量可预付QQ2101460746 | 欧美性爱五月天| 色五月婷婷五月天| 四月丁香五月婷婷久久| 人人爽天天莫| 黄色av网站在线免费播放| 色婷婷综合影院| 综合欧美五月婷婷| 色很久综合| 五月丁香色| 天天免费日日夜夜夜夜| 色婷婷久久| 曰本久久女| 9l视频自拍九色9l视频自拍九色9l社区 | 欧美天堂久久| 九九九九精品精| 丁香六月婷| 综合狠狠干| 探花搜索结果 - 黄上黄| 丁香五月六月| 婷婷五月天美女21p| 亚洲 综合中文| 奇米四色五月天| 国产精品成人在线| 天堂色婷婷| 婷婷丁香人妻久久在线观看| 婷婷成人网五月天| 久久婷婷激情四射五月天| 亚洲日本韩国| www.99视频| 情趣视频66| 激情5月婷婷狠狠干| 五月丁香久久呀| 爱操天堂| 亚洲乱码日产精品BD| www.久久爱.com| 日本性激情色播| 欧美性二区| 香蕉乱插| 日本在线wwww| 亚洲xx在线| 色爱综合网| 欧美激情综合色综合啪啪五月| 亚洲、热| 天天艹夜夜爽| 777久久精品| 色欲婷婷五月天| 中文字幕亚洲-区久久99婷婷| 国产人妻人伦精品一区二区| 天天操婷婷| 殴美激情综合网| 国产综合网在线| 热久久视频99| 亚洲 无码 中文字幕 中出| 99无码精品| 亚洲综合婷婷五月| 夜夜做天天爽| 天天干天天日日| 天天天操天天天爰| 美女天天久久| 性色播| 激情五月开心五月在线视频| 婷婷大香蕉| 婷婷五月天激情小说| 婷婷丁香五月天影院 | 婷婷综合日本| www.五月天色色色| 在线观看免费狠狠色丁香香综合| 久re热视频| 人人爽欧美婷婷久久久五月丁香 | 日韩av网址大全| 大香蕉院线| 欧美性爱5月天天天看| 日日干干天天干| 五月天婷婷青青| 五月婷无码| 综合久久五月| 九九热视| 久热黄色| 精品人妻一区| 欧美成人AAA片一区国产精品| 五月综合激情网| 极品人妻VIDEOSSS人妻| 六月丁花香啪啪激情欧美| 色婷婷五月综合激情中文字幕| 成人草榴视频| 99啪在线| 久久停停超碰| 五月丁香直播| 婷婷情色激情| 婷婷婷久久久| 久99热| 色欧美一级| 五月色激情综合网| 97碰碰视频在线观看| 激情图片亚洲| 99免费视频精品| 五月六月伦理| 激情综合网五月激情| 精国产品一区二区三区A片| 丁香婷婷五月份| 黄色91在线观看| 六月婷婷激情| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇| http://www.sd-xiangsu.com/| 婷婷五月天视频| 五月天伊人| 99在线看视频| 97操操| 五月色丁香激情| 色女人久久| 欧美搡BBBBB摔BBBBB| 欧美色偷偷大香| 激情久久久| 色色色色色色综合| 五月丁香免费视频| 久久久久久久久月丁| 亚洲成人另类| 操操操操操电影网| 色婷婷狠狠18禁| 99精品国产乱码久久久人妻| 婷婷五月激情视频| 国产色色网站网址| 91九色精品| 久久婷婷五月综合色欧美| 色婷婷大香蕉| 深爱激情五月婷婷| 日韩抽插操逼| 超碰免费人妻| 五月天久久激情| 人妻丰满精品一区二区A片| 婷婷综合97| 激情五月天色婷婷| 色综合天天网| 日本99久久| 97在线干| 91色综合久久| 成人免费120分钟啪啪| 色六月婷婷| 色XX综合网| 精品福利911| 日韩欧美五月丁综合| 99久久.www| 大香蕉婷婷婷| 亚洲成人AV高清字幕| 亚洲色五月天| 九九激情综合| 99在线视频免费| 五月丁香六月婷婷综合网站 | 五月婷在线| 成人视频一区| 欧美天堂久久| 色婷婷的五月天| 丁香五月激情综合啪啪| 激情久久伊人| 天堂成人A片永久免费网站| 色五月成人| 精品人妻在线| 伊人激情影院| 天天草天天摸| 99热这里只有精品86| 色性日本| 色999;丁香五月| 婷婷六月插屄激情| 狠狠色丁香99| 激情的五月| 婷婷免费成人视频| 开心丁五月| 丁香五月天激情婷婷丁香六月 | 色综合色欲综合天天免费| 深爱婷婷基地| 五月天婷综合网站| 99热这里只有精品国产免费| 久久网站免费亚洲| 婷婷欧美偷拍综合| AⅤ在线播放网| 色五月婷婷在线视频| 91日韩在线| 亚洲精99| 色135综合网| 颜射 精品性爱av| 国产又爽又猛又粗的视频A片| 天天爱天天做天天舔| 国产精品VIDEOSSEX久久发布| 思思视频这里是精品| 思思热在线| 岛国av电影网站| 五月丁香龟婷婷| 丁香五月婷婷激情蜜桃| 亚洲精品国产精品乱码视99| 精品色色| 国产67194| 婷婷综合视频| 亚洲日本韩国| www九九免费视频| 日韩精品VIP| 五月天婷婷久草丁香| 婷婷五月综合色拍| 婷婷五月天成人导航| 玖玖在线资源视频| 操你av| 99热这里只有精品在线观看| 性色婷婷| 色色丁香| 久热re视频在线观看网站| 五月天婷婷涩涩| 色五月天丁香婷婷| 丁香婷婷五月天网站| 九九一综合精品| 99热精品在线播放| 国产精品社区| 五月丁香婷婷色| 天天爱天天天射AV| 综合色网站| 久久久妻人人人| 色射婷婷五月天| 色丁香五月婷婷| 99热免费观看| 色噜噜狠狠狠狠色综合久欧美| 日韩操女| 熟女激情网| 激情五月综合网最新| 噜噜操操| 亚洲爆乳无码精品AAA片蜜桃| 大香蕉视频婷| 第四色激情网| 色五月色五天色情网| 色七七九九| 天天人人综合| 婷婷射图| 色一情一乱一乱一区91Av| 亚洲激情精品| 丁香五月激情综合| 六月色 亚洲| 亚洲综合激情五月久久| Www.激情| caopeng超碰| 色五月婷婷激情基地| 成人做爰高潮A片免费视频| 俺去也综合| 成人五月天在线视频在线观看| 婷婷九色| 伊久大香蕉| 精品乱码久久久久| 婷婷久久色| 极品人妻videosss人妻| 日本精品99| 久热9热| 精品夜夜澡人妻无码AV| 91avse| 婷婷六月视频| 色婷婷精品小视频| 九九久久五月天| 9色在线视频精品观看| 欧美韩国日本| 六月丁香啪啪| 国产精品国产| 亚洲另类噜噜| 日韩按摩二区| 丁香六月婷婷综合色| 人人九色| 五月婷婷色白丝| 日韩综合成人| 99综合网| 婷婷五月六月丁香| 色五月婷婷在线| 激情五月综合婷婷| 伊人AV五月婷| 五月婷婷婷婷婷| 天天干夜夜b| VA五月激情在线| 91狠狠综合久久| 亚洲黄色精品| 激情啪啪五月| 色蜜婷婷| 久久天堂| 亚洲色色五月天| 九九99在线视频| 激情性爱网站| 色久99| 五月婷av| 丁香六月婷婷社区| 综合激情四射一theav| 亚洲成人电影在线免费观看| 日韩在线视频9色| 狠狠插.com| 婷婷丁香五月天综合在线日韩| 最近中文字幕大全免费版在线| 综合五月天| 另类在线| 日本人妻伦在线中文字幕| 性做久久久久久久免费看| 色婷婷在线视频| 国产成人精品一区二三区熟女在线| 五月香婷婷| 国产69久久久欧美黑人A片| 99热伊人| 爱久久小说下载网| 伊人香大香蕉视频| 色色色色色日韩午夜激情| 亚洲天堂碰碰婷婷| 另类亚洲视频| 97久久人人| 九九热这里有精品视频| 婷婷五月天777| 婷婷 亚洲图片 丁香| 亚洲成人乱码av网站| 婷婷五月天综合色| 综合久久99| 久久色五月| 天天爽天天操| 狠狠色综合网| 狠狠狠狠狠狠| 日本高清久久| 免费九九热| 思思re99视频在线观看| 一起草av| 夜夜干夜夜操| 夜夜操加勒比| 婷婷久久婷婷| 久久久五月天| 人妻五月天激情开心网| 华人在线免费| 色五月综合激情| 丰满少妇猛烈A片免费看观看| av操B网站| 99操无码视频观看| bbwcuckold精品熟妇| 丁香五月欧美色综合| 色色99| 日本久久网| 午夜丁香久久久久久| 久久精品99久久| 日本狠狠爽| www.婷婷五月| 99视频这里有精品| 亚州第一黄网| 色婷婷香蕉| 99色一| 婷婷丁香激情综合色情| 开心五月色婷婷综合开心网| 久久久九九九 99| 久久这里精彩免费在线观看| 99爱免费在线视频| 午夜天堂啪啪| 91免费啪视频| 五月丁香婷婷色色| 婷婷丁香人妻久久在线观看| 99这里有精品视频| 综合色色五月| 久久9视频| 激情婷婷色五月| 久久性爱视频| 国产综合久久久777777| 色小说婷婷五月天天天| 99人妻碰碰碰久久久久视| 国产成人精品一区二三区熟女在线| 六月色婷婷综合影视| 欧美日韩大黄| 丁香婷婷色| 成人国产网| 婷色人人狠| 国产亚洲精品久久一区二区三区| 涩涩五月天| 91人人澡人人爽人人看| 五月丁香青草综合啪啪| 亚洲视频99| 97婷婷狠狠久久综合9色| 激情婷婷五月天网址| 97视频91| 丁香久久九九99| 五月天小说激情| 97av在线视频| 综合五月丁香六月婷婷| 久久婷婷亚洲五月天| 丁香婷婷六月| 成人电影在线免费试看| 五月丁香六月综合激情无码软件亮点| 五月婷婷综合网| 996热| 婷婷久久精品| 综合久久六月| 婷婷五月骚厕所| 婷婷五月天激情小说| 激情另类综合| 91啪啪网| 五月丁香成年黄色| 深情五月天| 丁香五月综合狠狠| 综合色五月天| 婷婷五月天丁香| 六月丁香婷婷五月天| 五月久久婷婷丁香| 婷婷丁香成人五月天| 婷婷五月深爱五月| 婷婷丁香六月天| 色五月婷婷DVD| 91无码色色| 丁香婷婷免费| 一本大道嫩草AV无码专区| 婷婷四月 成人 狠狠干| 综合色五月| 国产成人网址| 中文字幕 中文字幕明步| 久久九区| 色婷婷五月在线| 九九成人精品免费视频| 深爱激情六月天| 激情五月丁香五月| 色婷婷九月| 色九九综合| 六月婷婷色综合| wuyuedingxiang99| 激情五月婷婷综合| 婷婷亚洲丁香五月| 大香蕉在九| 丁香五月在线观看完整版| www超碰com| 人妻操逼视频| 美欧成人视频| 亚洲综合久| 五月丁香婷婷在线综合蜜桃| 狠狠干,狠狠操| 丁香五月骚喷水视频| 777影视理论片大全在线观看| 色狠狠六月| www.久99| 色色99| 黄色AV日韩| 大香蕉婷婷| 五月婷婷欲色| www.激情com| 97资源碰碰| 婷婷综合激情五月中文字幕| 天天射网站| 五月激情六月宗合| 婷婷情色五月天| 婷婷五月激情图片| 欧美猛片| WWW.久久久久久久久久久久久| 玖玖婷婷五月| 99热99成人| 久久综合五月天激情小说网站 | 五月天久久婷婷| 美女黄频aⅴ视频| 99色色网| 男人的天堂五月丁香| 婷婷色五月激情强奸四射| 丁香五月天综合| 超碰狠狠色| 超碰在线观看9| 五月天婷婷基地| 六月丁香婷婷六月激情综合| 99人人精品| 99综合网| 99色色色色| 日本一级黄色电影| 色网五月婷婷| 熟女网站久久| 亚洲激情高潮| 香蕉伊人综合| 思思热在线观看| 婷婷五月在线观看| 综合激情网五月激情| 国内在线99视频| 99色色网| 91精品久久久久、久五月天| 婷丁香久综合| 婷婷丁香综合| 五月天激情国产综合婷婷婷| 激情综合五月婷婷六月丁香| 色色日韩| 婷婷综合偷拍| 天天操天天插| 国产精品成人AV在线| 噜噜噜噜在线| 黄色AV日韩| 人操91在线| 91久操| 99干日本| 狠狠插日日干撸| 五月色亭丁香| 久久伦乱| 欧美日韩一区二区三区四区| 亚洲综合另类| 狠狠色五月| 久久欧洲综合网| 婷婷丁香视频在线观看免费 | 丁香六月啪啪| 91性人人| 五月丁香综合色婷婷| 久久久这里有精品| 五月婷婷丁香六月| 色综合综合网| 婷婷狠狠久久| 九九香蕉网| 久久激情五月网| 精品自拍99| 96精品成人无码A片观看金桔| 成人欧美日韩| 日日夜夜婷婷| 婷婷五月婷婷五月| 婷婷五月成人有| 激情久久综合| 踪合专区啪啪| 美女被肏网站在线看| 少妇高潮呻吟A片免费看软件| 婷婷五月天AV| 在线成人网站| 丁香五月婷婷激情尤物| 色五月综合在线| www.26uuu.com亚洲电影| 狠狠五月天婷婷| 五月激情四射婷婷丁香| 人人摸人人操人人爽| 久久色9| 狠狠色丁香婷婷| 91精品久| 国产91在线视频| 91狼友视频在线观看| 精品影院| 伊人五月天| 五月天综合| 天天色播| 天天综合色| 九九亚洲| 九九热AV| 激情婷婷五月天| 免费观看18视频网站| 五月丁香| 国产精产国品一二三在观看| 91操人视频| 五月婷在线| 久草热久草在线视频| 激情五月综合网| 最近韩国日本免费高清观看| 五月天激情小说| 在线理论片| 俺也去五月婷婷丁| 九九综合九| 亞洲自怕| 亚洲av成人电影在线观看| 玖玖爱导航| 97干在线播放| 色婷操逼| 国产亚洲色婷婷99精品| 色综合爽| 婷婷丁香久久五月综合| 丁香五月婷婷激情123| 嫩草AV久久伊人妇女超级a| 五月成人综合| 天天插天天日| 久久久91| 久久女婷| 狠狠色噜噜狠| 亚洲欧美日韩另类| 久久久久99精品成人网站| 五月丁香色| 99色看这里只有精品| 欧美婷婷五月天综合| www.婷婷.com| 国产成人+综合亚洲+天堂| 五月丁香在线| 亚洲久久天堂| WWW久| 可以免费观看的av网址| 亚洲综合色丁香五月天| 色五月第四色| 97人人干人人操| 97碰碰碰免费公开在线视频| 热婷婷av| 在线成人网站| 这里只有精品99www| 人人视频人人干人人做| 日本三级日本三级99| 成人中文网| 偷拍九九五月丁香婷婷| 久久久人妻不卡| 久久激情五月网| 婷婷五月天奸女| 亚洲精品久久久无码| 99在线综合视频| 天天做天天爱天天爽夜夜揉| 五月综合六月婷婷| 婷婷综合色色| 99热 日韩| 在线看片av| 丁香色五月婷婷91桃色| 91seav| 91久久网站| 婷婷综合激情| 精品国产va久久久| 久久九九免费视频| 热久91| 久久五月天大美女| 五月丁香色六月激情干大屄| 综合久| 亚洲无aV在线中文字幕 | 99ri国产精品| 天天日夜夜高潮| 99综合网| 亚洲网站观看视频| 三级三久久线久久99久目本WW| 久久免费视频62| 超碰91在线| 欧美色偷拍| 婷婷五月婷婷五月天| 婷婷六月久久综合导航| 丁香婷婷六月在线资源观看| 国产永久一黄| 99热这只有| 丁香久月| 色级停停| 开心 五月 综合| 婷婷激情人妻| 亚洲AV久久久久久久久久久久久久久久| 日韩在线视频中文字幕| 久狠日av| 白人荫道BBWBBB大荫道| 在线看片av| 婷婷社区五月天| 碰碰人人人| 色色啊| 婷婷亚洲天堂| www.99精品视频| 99热99re6国产在线播放| 色婷婷五月天| 欧美操人| 美女网黄| 精品亚洲日韩99欧美片| 色五狠狠| 亚洲日韩操B| 六月丁香婷婷色综合| 欧美丁香婷婷五月| 五月激情网站| 五月综合色| 青青日韩| 久草热视频在线观看| 婷婷亚洲在线| 婷婷综合激情五月综合| 桃色五月天| 六月五月丁香五月欧美| 天天狠天天叉| 色啪影院| 99精品自拍| AV在线中文| 丁香五月综合婷婷| 综合激情在线视频| 婷婷狠狠操| 69久久99精品久久久久婷婷| 色香欲综合| 婷婷成人在线| 色色色99| 久久久欧美精品sm网站| 色婷婷精品视频| 婷婷色吧| 五月丁香亭亭操逼| 精品成人在线观看| 99色综合| 色综合久久五月| av大香蕉| 婷婷五月丁香色情|