99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Linux性能調(diào)優(yōu)實戰(zhàn):CPU、內(nèi)存、磁盤I/O與網(wǎng)絡(luò)參數(shù)優(yōu)化指南

Linux性能調(diào)優(yōu)實戰(zhàn):CPU、內(nèi)存、磁盤I/O與網(wǎng)絡(luò)參數(shù)優(yōu)化指南 簡介這份文檔面向企業(yè)級 Linux 運維工程師與系統(tǒng)管理員聚焦 Red Hat Enterprise Linux AS 與 SUSE LINUX Enterprise Server 兩大發(fā)行版下的性能調(diào)優(yōu)實踐幫助讀者在有限硬件條件下提升服務器吞吐與穩(wěn)定性。內(nèi)容圍繞關(guān)閉非必要 daemons、停用 GUI 圖形界面、修改內(nèi)核參數(shù)三條主線展開并延伸至處理器、內(nèi)存、文件系統(tǒng)與網(wǎng)絡(luò)子系統(tǒng)的調(diào)優(yōu)思路涉及 sysctl、runlevel、chkconfig、taskset、nice 等常用手段同時提醒過度優(yōu)化可能帶來的反效果。資源包內(nèi)含 1 個 docx 文檔約 373KB按調(diào)優(yōu)主題分節(jié)組織便于按需查閱與對照實踐。目前已有 239 人學習適合希望系統(tǒng)梳理 Linux 性能優(yōu)化路徑、積累調(diào)優(yōu)經(jīng)驗的中高級運維人員參考。1. Linux 性能調(diào)優(yōu)的幾種方法從一臺「沒跑滿卻卡成 PPT」的機器說起一臺 8 核 16G 的 Linux 服務器CPU 使用率不到 30%內(nèi)存還剩一半可業(yè)務接口的 P99 從 80ms 漲到了 900ms。登錄上去敲topload average 是 12iostat里%util貼著 100%vmstat的wa列高得離譜——問題不在 CPU也不在內(nèi)存而是磁盤 I/O 把整條鏈路拖住了。這就是 Linux 性能調(diào)優(yōu)最典型的場景瓶頸往往不在你第一眼看的那個指標上。這篇筆記圍繞「Linux 性能調(diào)優(yōu)的幾種方法」展開把 CPU、內(nèi)存、磁盤 I/O、網(wǎng)絡(luò)四條主線拆開講清楚每條線用什么工具定位、關(guān)鍵參數(shù)怎么讀、改哪些內(nèi)核參數(shù)或應用配置能真正見效、改完怎么驗證沒翻車。適合已經(jīng)能熟練敲linux 常用命令、但遇到性能問題還靠「重啟大法」的運維和后端同學也適合準備linux 面試題時想把「調(diào)優(yōu)」這塊從背答案變成真會做的人。下面所有命令都在主流發(fā)行版CentOS/RHEL、Ubuntu/Debian、國產(chǎn) Linux 發(fā)行版上驗證過參數(shù)含義逐條說明不玩玄學。2. 先定位再動手用 USE 方法把四條資源線跑一遍調(diào)優(yōu)最大的坑是「上來就改參數(shù)」。sysctl里幾百個內(nèi)核參數(shù)不知道瓶頸在哪就亂調(diào)輕則無效重則把穩(wěn)定的服務調(diào)崩。我一般先用 USE 方法Utilization 使用率、Saturation 飽和度、Errors 錯誤把 CPU、內(nèi)存、磁盤、網(wǎng)絡(luò)四條線快速掃一遍鎖定嫌疑對象再進具體章節(jié)。2.1 四條資源線的最小排查命令組合先裝好sysstat工具包yum install sysstat或apt install sysstat它提供sar、iostat、pidstat這一套。下面這組命令是我每次上機器必跑的第一輪# 1. 全局概覽load、CPU、內(nèi)存、swap、上下文切換 vmstat 1 5 # 輸出關(guān)注列 # r 運行隊列長度持續(xù) CPU核數(shù) 說明 CPU 飽和 # b 阻塞進程數(shù)0 通常意味著 I/O 等待 # si/so swap 換入換出非 0 就要警惕內(nèi)存壓力 # wa I/O 等待占 CPU 時間百分比20 基本鎖定磁盤 # cs 上下文切換次數(shù)突增可能是鎖競爭 # 2. 磁盤每個設(shè)備的 IOPS、吞吐、隊列、利用率 iostat -xz 1 5 # 關(guān)注列 # %util 設(shè)備繁忙度接近 100% 說明設(shè)備飽和 # await 平均 I/O 等待毫秒數(shù)機械盤 20ms、SSD 5ms 要查 # aqu-sz 平均隊列深度持續(xù) 1 說明請求排隊 # r/s w/s 讀寫 IOPS # 3. 進程級誰在吃 CPU、誰在等 I/O pidstat -u -d -r 1 5 # -u CPU -d 磁盤 -r 內(nèi)存缺頁 # 4. 網(wǎng)絡(luò)連接數(shù)、重傳、丟包 ss -s netstat -s | grep -iE retrans|drop|overflow邏輯說明vmstat給全局畫像iostat確認磁盤是否飽和pidstat把責任落到具體進程ss/netstat看網(wǎng)絡(luò)層有沒有異常。四步下來瓶頸基本能定位到某一條線。參數(shù)上vmstat 1 5表示每秒采樣一次共 5 次采樣間隔別設(shè)太大否則瞬時毛刺會被平均掉iostat -x的-x是顯示擴展統(tǒng)計不加這個參數(shù)看不到%util和await等于白跑。提示load average高不等于 CPU 忙。Linux 的 load 把「運行中」和「不可中斷睡眠D 狀態(tài)多在等 I/O」的進程都算進去所以磁盤卡死時 load 會飆高而 CPU 很閑。看到 load 高先看vmstat的b列和wa列。2.2 把指標對應到「改什么」的決策表定位到瓶頸后下一步是決定動哪里。下面這張表是我自己用的對照表左邊是現(xiàn)象右邊是優(yōu)先嘗試的方向避免瞎調(diào)現(xiàn)象大概率瓶頸優(yōu)先動作r列持續(xù) 核數(shù)ussy高CPU 飽和查熱點進程/線程看是否可并行或限流sy特別高30%系統(tǒng)調(diào)用/上下文切換查cs、中斷看是否鎖競爭或頻繁 syscallsi/so非 0free的 available 低內(nèi)存不足觸發(fā) swap查內(nèi)存泄漏調(diào)vm.swappinesswa高%util接近 100%磁盤 I/O 飽和查慢查詢/大文件寫考慮 IO 調(diào)度器重傳率高、ss -s連接堆積網(wǎng)絡(luò)或連接數(shù)瓶頸查somaxconn、tcp_max_syn_backlog這張表的價值在于它把「看指標」和「改配置」連起來了。很多人卡在中間——數(shù)據(jù)會看但不知道該改哪個參數(shù)。有了這張表至少方向不會錯。接下來四章分別展開 CPU、內(nèi)存、磁盤、網(wǎng)絡(luò)的具體調(diào)法。3. CPU 與調(diào)度調(diào)優(yōu)從 load 高但 CPU 閑的怪象說起CPU 調(diào)優(yōu)最容易翻車的地方是把「CPU 使用率高」直接等同于「CPU 不夠用」。實際上us用戶態(tài)、sy內(nèi)核態(tài)、waI/O 等待、st被虛擬化偷走四個值指向完全不同的病因。這一章先把 CPU 指標讀透再講調(diào)度和綁核這類真正能見效的手段。3.1 讀懂 us/sy/wa/st四種「CPU 高」的不同解法top第一行的%Cpu(s)拆開看us高應用在用戶態(tài)真算得歡。常見于計算密集、死循環(huán)、正則回溯。解法是查熱點函數(shù)perf top或加緩存。sy高內(nèi)核態(tài)時間多通常是系統(tǒng)調(diào)用頻繁、上下文切換多、鎖競爭。vmstat的cs列會同步飆高。解法是減少 syscall批量讀寫代替逐條、排查鎖。wa高CPU 在等磁盤本質(zhì)是 I/O 問題不是 CPU 問題。別去加 CPU去查磁盤。st高虛擬機被宿主機「偷」了 CPU 時間。這種情況你在 guest 里怎么調(diào)都沒用得找宿主機或換實例規(guī)格。我見過最典型的誤判一臺機器sy占到 40%運維以為是 CPU 不夠要擴容實際是應用每秒發(fā)起幾十萬次小write系統(tǒng)調(diào)用。改成批量寫之后sy掉到 5%機器根本不用換。所以看到 CPU 高先分清是哪種高。# 找出用戶態(tài) CPU 最高的線程并看到它在干什么 top -H -p $(pgrep -f your_app | head -1) # 拿到高 CPU 的線程 TID 后轉(zhuǎn)成 16 進制 printf %x\n TID # 用 perf 或 gdb 看這個線程的調(diào)用棧 perf top -p PID # 或者直接采樣整個系統(tǒng) 5 秒 perf record -F 99 -a -g -- sleep 5 perf report邏輯說明top -H把進程拆到線程級定位到具體線程perf record -F 99以 99Hz 采樣 5 秒-g記錄調(diào)用棧perf report里能看到熱點函數(shù)。參數(shù)-F 99是采樣頻率99 是經(jīng)驗值避開 100 的整數(shù)倍減少與定時器共振。這一步的目的是把「CPU 高」落到具體代碼路徑而不是停在進程名。3.2 進程優(yōu)先級、綁核與調(diào)度策略的取舍定位到熱點后如果短期內(nèi)改不了代碼可以用調(diào)度手段緩解。三個常用動作調(diào)整 nice 值renice -n -5 -p PID提高優(yōu)先級需要 root讓關(guān)鍵進程優(yōu)先拿到 CPU。但注意nice 只在 CPU 爭搶時起作用CPU 空閑時調(diào)它沒意義。CPU 綁核taskset -cp 0-3 PID把進程綁到 0-3 號核。適合對延遲敏感、且希望減少跨核緩存失效的服務。但綁核是雙刃劍——綁太死會讓該進程在核忙時干等反而增加延遲。我一般只對延遲敏感的中間件如網(wǎng)關(guān)綁核且留出至少一個核給系統(tǒng)。調(diào)度策略普通進程用 CFS完全公平調(diào)度實時進程可用chrt設(shè) SCHED_FIFO/SCHED_RR。實時策略優(yōu)先級高于所有普通進程設(shè)錯了會把系統(tǒng)卡死比如一個死循環(huán)的實時進程能餓死所有其他進程生產(chǎn)環(huán)境慎用。# 查看進程當前調(diào)度策略和優(yōu)先級 chrt -p PID # 把進程設(shè)為 SCHED_FIFO優(yōu)先級 101-99越高越優(yōu)先 chrt -f -p 10 PID # 綁核到 2、3 號 CPU taskset -cp 2,3 PID參數(shù)說明chrt -f是 FIFO 策略-p 10是優(yōu)先級。FIFO 策略下同優(yōu)先級進程按到達順序執(zhí)行且不會被低優(yōu)先級搶占。注意實時進程如果陷入死循環(huán)會獨占 CPU 導致系統(tǒng)無響應務必配合ulimit或 watchdog 使用。綁核的核編號從 0 開始lscpu能看到可用核范圍。提示容器環(huán)境下Docker/K8staskset和chrt的效果受 cgroup CPU 配額限制。如果容器設(shè)了--cpus2你在容器里綁 4 個核也沒用實際還是被 cgroup 限流。調(diào)優(yōu)前先確認cat /sys/fs/cgroup/cpu.maxcgroup v2或?qū)?cgroup v1 文件。4. 內(nèi)存與 swap 調(diào)優(yōu)OOM 之前你還有哪些后悔藥內(nèi)存問題的可怕之處在于它平時不聲不響一旦觸發(fā) OOM Killer進程直接被 kill業(yè)務瞬間掉線。這一章講三件事怎么判斷內(nèi)存是真不夠還是被緩存占了、swap 到底該不該關(guān)、以及 OOM 發(fā)生前能做什么。4.1 分清 available、buff/cache 與真正的內(nèi)存壓力free -h的輸出里最容易被誤讀的是buff/cache。很多人看到free只剩幾百 M 就慌了其實buff/cache是可回收的——它被內(nèi)核用來緩存文件內(nèi)存緊張時會自動釋放。真正該看的是available這一列它估算的是「不觸發(fā) swap 的情況下還能給新進程用多少內(nèi)存」。free -h # 關(guān)注 available 列而不是 free 列 # 看內(nèi)存壓力更準的指標/proc/meminfo 里的 MemAvailable grep -E MemTotal|MemFree|MemAvailable|SwapTotal|SwapFree|Dirty /proc/meminfo # 看誰在占內(nèi)存按 RSS 排序 ps aux --sort-rss | head -10 # 看進程的內(nèi)存明細常駐、共享、缺頁 pidstat -r 1 5邏輯說明MemAvailable是內(nèi)核給出的「可用內(nèi)存」估算比MemFree靠譜得多。Dirty是待寫回磁盤的臟頁如果這個值很大且長時間不降說明寫回跟不上可能引發(fā)內(nèi)存回收壓力。pidstat -r的minflt/s次缺頁和majflt/s主缺頁能看出進程是否在頻繁觸發(fā)磁盤換頁——majflt高說明進程在等磁盤性能會斷崖式下跌。4.2 swappiness、overcommit 與 OOM 的三個關(guān)鍵參數(shù)內(nèi)存相關(guān)的內(nèi)核參數(shù)里真正影響生產(chǎn)穩(wěn)定性的就三個vm.swappiness控制內(nèi)核把內(nèi)存頁換到 swap 的傾向取值 0-100。默認 60意味著內(nèi)核比較積極用 swap。對數(shù)據(jù)庫、緩存類服務我一般設(shè)成 1 或 10減少不必要的換出但不建議設(shè)成 0因為 0 在部分內(nèi)核版本上會讓內(nèi)核在內(nèi)存緊張時直接 OOM 而不是先換出反而更危險。vm.overcommit_memory控制內(nèi)存分配策略。0 是啟發(fā)式默認1 是永遠允許超額分配2 是嚴格限制。Redis 這類 fork 場景建議設(shè) 1避免 fork 時因 overcommit 檢查失敗。vm.panic_on_oomOOM 時是否 panic。默認 0只 kill 進程生產(chǎn)環(huán)境保持 0讓系統(tǒng) kill 掉最占內(nèi)存的進程而不是整機重啟。# 臨時生效 sysctl -w vm.swappiness10 sysctl -w vm.overcommit_memory1 # 永久生效寫入 /etc/sysctl.d/99-tuning.conf cat /etc/sysctl.d/99-tuning.conf EOF vm.swappiness 10 vm.overcommit_memory 1 vm.dirty_ratio 20 vm.dirty_background_ratio 10 EOF sysctl -p /etc/sysctl.d/99-tuning.conf參數(shù)說明vm.dirty_ratio20表示臟頁占到內(nèi)存 20% 時寫操作會被阻塞強制回寫vm.dirty_background_ratio10表示臟頁到 10% 時后臺開始回寫。這兩個值調(diào)低能讓寫回更平滑避免突發(fā)大量臟頁導致 I/O 抖動但調(diào)太低會增加磁盤寫次數(shù)。我一般把dirty_ratio設(shè)在 15-20dirty_background_ratio設(shè)在 5-10。注意改swappiness前先確認機器有沒有 swap。swapon --show為空說明沒啟用 swap改這個參數(shù)沒意義。另外 SSD 上頻繁 swap 會加速磨損但現(xiàn)代 SSD 壽命足夠不必因噎廢食關(guān)鍵還是別讓內(nèi)存真的不夠。5. 磁盤 I/O 調(diào)優(yōu)iostat 里 %util 100% 時該動哪里磁盤 I/O 是生產(chǎn)環(huán)境最常見的瓶頸也是最容易被誤診的。%util100% 不代表磁盤一定到極限——對多隊列的 NVMe%util可能虛高。這一章講怎么正確判斷磁盤飽和、IO 調(diào)度器怎么選、以及文件系統(tǒng)和掛載參數(shù)能帶來什么。5.1 用 await、aqu-sz、IOPS 判斷磁盤是否真飽和iostat -xz 1里幾個關(guān)鍵列的正確讀法r/s、w/s每秒讀寫次數(shù)IOPS。對比磁盤標稱 IOPS看是否接近上限。await平均每次 I/O 的等待時間毫秒包含排隊時間。這是判斷用戶體驗最直接的指標。aqu-sz平均隊列深度。持續(xù)大于 1 說明請求在排隊。%util設(shè)備繁忙百分比。對單隊列設(shè)備機械盤、SATA SSD這個值有意義對多隊列 NVMe即使 %util 100% 也可能還有余量要結(jié)合await和 IOPS 一起看。# 看磁盤的實時 IOPS 和延遲 iostat -xz 1 5 # 找出哪個進程在瘋狂讀寫 iotop -oPa # 或不用 iotop 時用 pidstat pidstat -d 1 5 # 看具體是哪個文件被讀寫需要 root # 先找到進程 PID再看它打開的文件 lsof -p PID | grep -E REG|DIR邏輯說明iotop -oPa的-o只顯示有 I/O 的進程-P顯示進程而非線程-a顯示累計。pidstat -d的kB_rd/s和kB_wr/s是讀寫吞吐。定位到進程后lsof看它打開了哪些文件能進一步縮小到具體數(shù)據(jù)文件或日志。5.2 IO 調(diào)度器選擇與文件系統(tǒng)掛載參數(shù)Linux 的 IO 調(diào)度器決定請求怎么排隊和合并。常見三種調(diào)度器適用場景特點none/noopNVMe、高性能 SSD不做排序直接下發(fā)依賴設(shè)備自身隊列mq-deadline通用、數(shù)據(jù)庫保證請求在截止時間內(nèi)完成防餓死bfq桌面、交互式按進程分配帶寬公平性好但開銷大查看和切換# 查看當前調(diào)度器 cat /sys/block/nvme0n1/queue/scheduler # 輸出如 [none] mq-deadline bfq方括號是當前生效的 # 臨時切換 echo mq-deadline /sys/block/nvme0n1/queue/scheduler # 永久生效寫 udev 規(guī)則 cat /etc/udev/rules.d/60-ioscheduler.rules EOF ACTIONadd|change, KERNELnvme[0-9]*, ATTR{queue/scheduler}none ACTIONadd|change, KERNELsd[a-z], ATTR{queue/scheduler}mq-deadline EOF參數(shù)說明NVMe 設(shè)備用none通常性能最好因為它自身有深度隊列內(nèi)核再排序反而增加開銷。SATA SSD 和機械盤用mq-deadline更穩(wěn)。bfq在服務器上一般不用開銷偏大。文件系統(tǒng)掛載參數(shù)也能影響 I/O 性能。以 ext4 為例noatime能避免每次讀文件都更新訪問時間減少寫操作datawriteback提升寫性能但降低一致性保證數(shù)據(jù)庫場景慎用。# /etc/fstab 里給數(shù)據(jù)盤加 noatime # /dev/sdb1 /data ext4 defaults,noatime 0 2 mount -o remount,noatime /data提示noatime對大多數(shù)服務是安全的但如果你的應用依賴文件訪問時間比如某些備份工具判斷文件是否被讀過就別加。改掛載參數(shù)前先確認業(yè)務不依賴 atime。6. 網(wǎng)絡(luò)與內(nèi)核參數(shù)調(diào)優(yōu)高并發(fā)下連接被丟在哪一步網(wǎng)絡(luò)調(diào)優(yōu)的坑在于參數(shù)很多但真正影響高并發(fā)表現(xiàn)的沒幾個。這一章聚焦 TCP 連接建立、連接隊列、以及文件描述符這幾個高并發(fā)場景下的關(guān)鍵點。6.1 從 ss 和 netstat 看連接堆積在哪高并發(fā)下連接建立失敗通??ㄔ谌齻€地方半連接隊列SYN 隊列、全連接隊列accept 隊列、文件描述符耗盡。先用命令確認卡在哪# 看各種狀態(tài)的連接數(shù) ss -s # 看監(jiān)聽隊列的溢出情況 ss -lnt # 輸出里 Send-Q 是隊列上限Recv-Q 是當前排隊數(shù) # 如果 Recv-Q 接近 Send-Q說明 accept 隊列快滿了 # 看內(nèi)核層面的隊列溢出統(tǒng)計 netstat -s | grep -iE listen|syn|overflow # times the listen queue of a socket overflowed 非 0 說明全連接隊列溢出 # SYNs to LISTEN sockets dropped 非 0 說明半連接隊列溢出邏輯說明ss -lnt的Recv-Q對 LISTEN 狀態(tài)的 socket 表示當前已完成三次握手、等待應用 accept 的連接數(shù)Send-Q是隊列上限。如果Recv-Q持續(xù)接近Send-Q說明應用 accept 太慢要么加應用處理能力要么調(diào)大隊列。netstat -s里的溢出計數(shù)是累計值隔一段時間看增量才有意義。6.2 somaxconn、tcp_max_syn_backlog 與文件描述符三個最常調(diào)的網(wǎng)絡(luò)參數(shù)net.core.somaxconn全連接隊列上限默認 128老內(nèi)核或 4096。高并發(fā)服務建議調(diào)到 32768。注意這個值要和應用的listen()backlog 參數(shù)配合取兩者較小值。net.ipv4.tcp_max_syn_backlog半連接隊列上限默認 1024 左右。SYN Flood 或高并發(fā)建連時可能不夠建議調(diào)到 8192 以上。文件描述符ulimit -n默認 1024高并發(fā)下遠遠不夠。要同時改系統(tǒng)級和進程級。# 臨時調(diào)整 sysctl -w net.core.somaxconn32768 sysctl -w net.ipv4.tcp_max_syn_backlog8192 sysctl -w net.ipv4.tcp_syncookies1 # 永久寫入配置文件 cat /etc/sysctl.d/99-tuning.conf EOF net.core.somaxconn 32768 net.ipv4.tcp_max_syn_backlog 8192 net.ipv4.tcp_syncookies 1 net.ipv4.tcp_tw_reuse 1 net.ipv4.ip_local_port_range 10240 65000 EOF sysctl -p /etc/sysctl.d/99-tuning.conf # 文件描述符系統(tǒng)級 cat /etc/security/limits.conf EOF * soft nofile 65535 * hard nofile 65535 EOF # 進程級systemd 服務 # 在 service 文件里加 LimitNOFILE65535參數(shù)說明tcp_syncookies1在 SYN 隊列滿時用 cookie 機制響應能緩解 SYN Flood但會犧牲部分 TCP 選項如窗口縮放高并發(fā)正常場景下影響不大。tcp_tw_reuse1允許復用 TIME_WAIT 狀態(tài)的連接緩解端口耗盡但只在客戶端主動連接時生效。ip_local_port_range擴大本地端口范圍增加可用連接數(shù)。注意tcp_tw_reuse和已廢棄的tcp_tw_recycle不是一回事。tcp_tw_recycle在 NAT 環(huán)境下會導致連接異常已被內(nèi)核移除別再去開它。改somaxconn后要重啟應用才生效因為隊列大小在listen()時確定。7. 調(diào)優(yōu)后的驗證與回滾怎么確認沒把系統(tǒng)調(diào)壞調(diào)優(yōu)最怕的是「改完感覺快了但不知道是不是錯覺」或者更糟——改完當時沒事壓測一上來就崩。這一章講怎么用數(shù)據(jù)驗證調(diào)優(yōu)效果以及怎么給自己留后悔藥。7.1 用壓測和基線對比驗證效果調(diào)優(yōu)前后必須有可對比的數(shù)據(jù)。我一般用wrk或ab做 HTTP 壓測用fio做磁盤壓測記錄關(guān)鍵指標# HTTP 壓測4 線程 100 連接持續(xù) 30 秒 wrk -t4 -c100 -d30s --latency http://127.0.0.1:8080/api # 磁盤壓測隨機讀 4K隊列深度 32跑 30 秒 fio --namerandread --ioenginelibaio --rwrandread \ --bs4k --numjobs4 --iodepth32 --runtime30 \ --time_based --group_reporting # 壓測同時采集系統(tǒng)指標 sar -u -r -d 1 30 /tmp/before_tuning.log邏輯說明wrk的--latency會輸出延遲分布P50/P90/P99這是比平均值更有意義的指標。fio的--iodepth32模擬高并發(fā) I/O--numjobs4是并發(fā)任務數(shù)。壓測時用sar同步采集事后對比調(diào)優(yōu)前后的%util、await、CPU 各態(tài)占比。關(guān)鍵原則一次只改一個參數(shù)改完壓測確認有效再改下一個否則出了問題不知道是哪個參數(shù)導致的。7.2 參數(shù)回滾與變更記錄調(diào)優(yōu)參數(shù)一定要有回滾方案。我的習慣是所有sysctl改動寫進獨立的/etc/sysctl.d/99-tuning.conf不直接改/etc/sysctl.conf回滾時刪文件即可。改動前記錄原值sysctl -a /tmp/sysctl_before.txt回滾時對比。應用層參數(shù)如 JVM、連接池改動走配置中心或版本控制別手改線上文件。每次變更記錄改了什么、為什么改、預期效果、實際效果、回滾命令。# 記錄當前所有內(nèi)核參數(shù)作為基線 sysctl -a /tmp/sysctl_baseline_$(date %F).txt # 回滾刪除調(diào)優(yōu)文件并重新加載 rm /etc/sysctl.d/99-tuning.conf sysctl --system # 對比改動前后的差異 diff (sysctl -a) /tmp/sysctl_baseline_2024-01-01.txt參數(shù)說明sysctl --system會重新加載所有配置文件包括/etc/sysctl.d/下的。diff能快速看出哪些參數(shù)被改過。這套流程看起來繁瑣但真出問題時能讓你在幾分鐘內(nèi)回到已知穩(wěn)定狀態(tài)比現(xiàn)場抓瞎強太多。我踩過最深的一個坑有次為了「優(yōu)化」把vm.dirty_ratio從 20 調(diào)到 5壓測時寫性能確實好了但上線后遇到一次大批量寫臟頁回寫太頻繁導致磁盤 I/O 抖動反而拖慢了讀請求。后來才明白dirty_ratio調(diào)低是拿「寫平滑」換「寫吞吐」得看業(yè)務是讀多還是寫多。調(diào)優(yōu)沒有銀彈每個參數(shù)背后都是取舍。希望這些經(jīng)驗能幫你少走點彎路幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
狠狠五月激情婷婷直播片| 婷婷五月天无码视频| 综合久久高清| 五月色精品| 99热网址| 色五月婷婷天堂| 五月综合无码| 色五月综合婷婷| AV在线免费播放| 亚洲色色色| Www,五月天| 五月丁香激情综合网| 丁香婷婷成年| 92久久精品一区二区| 色综合久久五月天| 色五月六月| 久热这里这里有精品| 一区二区aV电影免费看| 色爆五月| 少妇大叫太大太粗太爽了A片| 日日夜夜狠狠| 深爱激情六月天| 日韩欧洲亚洲| 影视av久久久噜噜噜噜噜三级| 99热个人在线| 久久er99热精品一区二区| 91N 一起草| 大香蕉人妻| Www,五月天| 丁香婷婷六月婷婷六月婷婷六月婷婷| 丁香五月六月综合激情| 99精品女人天堂| 全部老头和老太XXXXX| 日日夜夜干| 婷婷丁香五另类网站| 99久久99视频| 91丨九色丨丰满人妖| 九九色网| 草久私拍| 精品九九婷婷| 久久五月情| 99超超碰| 99久久婷婷国产综合精品| 婷婷丁香五月综合| 99热国产免费| 大战熟女丰满人妻AV| 丁香五月婷婷啪啪| 天天做天天爱| 国产美女无遮挡裸体毛片A片| 婷婷综合色色| 激情综合五月| 激情五月天综合网| 精品国产乱码久久久久夜深人妻 | 狠狠干狠狠干狠狠干狠狠干| 综合逼五月激情婷婷| 97色色婷婷| 999热在线视频| 激情五月色婷婷| 久久这里只精品| 99热99热不卡| 欧美日比视频| 丁香五月手机在线| 婷婷丁香综合网| 男女啪啪做爰高潮无遮挡| 91五月天| www.色欲丁香婷婷| 99日精品视频| 99er精品| 综合五月激情网| 五月丁香六月婷婷色| 这里只有精品日韩精品| AV79| 99热久草| 99国产精品白浆在线观看免费| 久热99| 日韩精品AV一区二区三区| 天天干电影| 人人摸人人| 丰满人妻一区二区三区| 97在线/日本| 伊人综合婷婷| 丁香久色| 五月综合色| 色99在线观看| 久久久久久久11111111111| 五月丁香六月激情网站| 91日韩美女被插视频| 91在线操| 丁香五月综合在线| 五月丁香好婷婷A片网| 九九99精品视频在线观看| 思思久久精品| 亚洲婷婷综合视频| 激情综合网,婷婷| 久久99热精品a片在线观看| 丁香五月亚洲天堂| 五月天婷婷丁香| 国产欧美精品AAAAAA片| 久大香蕉| 人人人va亚洲视频在线| 五月丁香六月激情在线| 婷婷激情啪啪| 亚洲六月婷| 五月天色婷婷激情| 激情五月天网站| 色爱爱综合网| 亚洲五月天综合| 这里只有久久精99| 99热久久这里只有精品| 五月婷婷性爱| 亚洲午夜一区二区| 国产免费av网站| 色五月天激情| 天天做天天爱天天高潮| 99超级超级超级碰| ji'qing'luan'ren'lun| 五月婷婷综合激情网| 黄桃AV无码免费一区二区三区| 五月天色色色网| 色婷婷导航| 精品成人无码A片观看香草视频| 五月天久久婷婷| 久久只有18视频| 久久婷婷免费| WWW、日本色丁香、co m| 婷婷婷久久久| 97婷婷狠狠久久综合9色| 狠狠色丁婷婷日日,伊人激情综合网| 第四色五月天| 超级97碰碰| 久色姿源| 天天综合色| 天堂综合久久| 五月婷婷深深爱| 亚洲激情四射色| 婷婷五月丁香久久| 丁香婷婷网| 丁香啪啪中文字幕| 深爱五月最新网址| 99操逼| 青青草婷婷久久| 久久综合激情| 日狠狠| AV动漫不卡无码免费| 丁香五月开心婷婷| 亚洲亚洲人成综合网络| 另类五月婷婷| 大地资源色婷婷视频在线| 五月婷婷偷拍| 亚洲精品婷婷| 99爱爱网| 色婷婷婷婷| 激情亭亭五月| 五月天久久综合| 色青五月天| 天天爽天天干天天| 五月丁香偷拍| 激情五月天视频| 五月丁香九九| 超碰人人超碰| 青青草原中文字幕| 婷婷导航| 丁香五月婷婷欧美成人色图| 婷婷综合另类| 五月婷婷色影院| 亚洲成人无码网站| 丁香六月综合激情| 操国产人妻| 六月色婷婷| 亚洲国产精品五月天| 婷婷伊人网| 欧美熟女99| 久久视频婷婷视频| 激情五月天在线观看色婷婷| 777精品久无码人妻蜜桃| 五月婷婷天天色| 另类小说五月天| 婷婷黄色五月天在线视频| 99在线精品观看99| 色丁香婷婷| 在线不卡AC| 天天操狠狠操| 亚洲1区| www.狠狠操| 这里只有精品热| 香蕉久久国产AV一区二区 | 色婷婷狠狠| 天天射影| 婷婷五月丁香成人网| 天天爽,夜夜爽| 丁香玖玖| 色网五月婷婷| 国产熟女一区二区三区五月婷| 99综合久久| 九九热精品| 丁香5月婷婷| 综合超碰熟| 91碰在线| 婷婷四色成人综合色视| 五月丁香久久综合| 碰99在线| 人人操av| 日本婷婷在线| site:ornaments52.com| 五月色在线| 狠狠色噜噜狠| 操一区| 天天爽天天摸| 五月丁香WWW| 超碰色天堂| 色综合婷婷| 六月丁香婷婷尤物| 香蕉婷婷| 国产九九一区二区三区| av中文在线| 狠狠撸激情综合丁香五月天俺来啦| 九九精品热播| 五月做爱| 99精品国产乱码久久久人妻| 狼人婷婷久久| 俺去也五月天婷婷| 激情婷婷狠狠干| 一区二区免费看| 99精品国产在热久久| 性综合网| 婷婷五月天狠狠色| 天天干天天操天天爱| 99久超碰| 激情综合色婷婷啪啪六月天| 日操熟女| 97碰碰碰免费公开在线视频| 九九视频在线观看| 999精品乱码77777| 欧美成人性爱网| 综合丁香婷婷五月天| 一区二区你懂的| 夜夜操狠狠操| 激情小说在线视频| 丁香五月天啪啪| 丁香五月婷婷色情综合| 亚洲色激情| 亚洲色五月天在线| 激情丁香淫荡婷婷| 人妻性爱| 激情综合网,五月| 五月天色综合| 综激情网| 久久五月视频| 91久久久久久| 超碰在线99| 九九这里是免费的视频5| 一起操最新网址| 无码成人AAAAA毛片AI换脸| 丁香六月婷婷| 99色网站| 日本色婷婷| 五月天激情四射| 丁香九月综合激情| 97色色婷婷| www久久99| 九月婷婷激情| 99精在线| 久久精品A片777777| 婷婷色综合| 狠狠干婷婷| 色婷婷久久综合| 操操天堂| 天天干天天干天天操| 色婷婷97| 成人综合网站| 久久婷婷五月综合色和| 日韩在线成人电影| 日本三级黄色大片| va婷婷在线| tingting五月天亚洲| 亚洲综合激| 亚洲婷婷丁香五月亚洲| 5月婷婷五月天| 婷婷五月天综合小说网| 久久亚洲天堂| 97人人射| 琪琪色网在线| 国产视频福利| 精品无码色| 99在线观看视频蜜臀| 丁香六月av| 五月婷婷深爱六月| 色色热| 日韩99视频| 啪啪激情综合| 性爱网五月婷婷| YW无码| 激情五月,激情综合网| 殴美日比视频| 密乳视频| 超碰a女人的天堂| 99热综合网| 欧美搡BBBBB摔BBBBB| 激情婷婷丁香五月| 丁香婷婷综合激情五月色| 97久人人| 91婷婷五月天综合视频| 丁香五月综合激情啪啪| 韩日另类| 色色99| 九九婷婷五月天影视| 日本色色色| 97香蕉久久超级碰碰高清版| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 色婷婷五月天激情久久| 天天天综合网| 色五月婷婷老师| 影音先锋高清无码资源网| 91热久| 成人国产综合| 激情五月婷婷丁香| 国产黄大片在线观看画质优化| 97成人超碰免| 蜜乳国产网站| 九九婷婷网五月天| 亚州综合色| 国产夫妻操逼内射视频| 久久婷.com| 影音先锋自拍网| 国产ava| 亚洲综合色丁香婷婷六月| 99在线精品视频| 99re6在线视频精品免费| 久久久色情| 丁香丁香激情网| 久青草影院| 日碰日| 国产成人+综合亚洲+天堂| www.久久66| 亚洲区视频| 超碰操日| 日在线V视频在线播放| 天天爽天天干天天| 最近中文字幕大全免费版在线 | 九色婷婷| 婷婷六月丁| 51国精产品自偷自偷综合| 中文激情网| WWW·色色色·COM| 深爱五月网| 久久久久er热| 99热很操老逼| 5月丁香综合网| 开心五月深爱五月| 久久大香蕉伊人| 噜综合| 久久久久久人妻久久久久久久久久人妻久久久 | 欧洲亚洲免费视频9| 五月情婷婷| 国产真实乱了老女人视频| 久久婷婷亚洲| 99热6精品| 丁香五月网| 精品无吗va视频免费观看| 国产偷人爽久久久久久老妇APP | 五月天激情图| 98国产精品综合一区二区三区 | 狠狠撸激情综合丁香五月天俺来啦| 天天射影院| 色情综合| 9色在线| 99操视频| 青草视频在线观看视频| 五月丁香婷婷婷婷综合网| 五月丁香综合啪啪| 五月天婷婷在看| 五月综合视频| 色色日韩无码| 一本到不卡高清DVD| 婷婷六月天激情影院| 日韩综合成人| 五月天网站亭亭| 日本欧美啪啪| 九九99在线免费在线观看视频| 婷婷内射视频在线| 99欧美| 99re6热在线精品视频播放速度 | 亚洲永久免费| 九月婷婷综合| 色色色免费视频| 激情五月婷婷色色| 婷婷射综合| 超碰人人超碰| 色五月婷婷五月天| 色五月婷婷久久| 啪啪东京热| 婷婷五月色综合| 婷婷色网站| 久久xxxx| 开心五月婷婷婷美女| 国产亚洲网站在线| 色五月综合| 色久五月| 激情五月天的婷婷| 狠狠操.com| 国产肥白大熟妇BBBB视频| 婷婷五月AV| 色99无码| 色欲一区二区三区精品A片| 六月婷婷国产| 五月天丁香网| 五月丁香婷婷狠狠操| 丁香五月天堂网| 综合久久婷婷| 91N 一起草| 亚洲无码播放| 成年人看Va免费视频| 五月丁香六月婷婷成人| 超碰国产在线播放| 色婷婷狠狠18| 五月激情精品视频| 欧美性久| av在线婷婷| 五月天操逼网| 丁香5月婷婷| 五月停停999| 国产美女无遮挡裸体毛片A片| 色色欧美色色| 五月天合网| 综合色视频| 婷婷色导航| 99热成人| 骚货艹网站视频| 狠狠人妻色综合| 1024操逼| 久久xx| 综合色影院| 五月色天五月色| 99这里有精品视频| 日韩无码性爱| 婷婷五月天国产性感美女演员久久久久| 99免费在线视频| 天色综合网站| 亚洲综合网区| 欧美色图天堂网| 任我肏视频精品| 综合久| 天天综合精品| 色婷婷五月天激情在线观看| 丁香六月成人网| 日本综合久| 婷婷五月天丁香成人社区| 久久视频在线视频| 五月综合视频| 色婷婷成人| 99re免费精品视频| 任你搞网站| 久久伊人五月天| 久久婷婷一级片| 亚洲日本激情| 色狠狠999综合网| 亚洲中文字幕av| 91打屁股视频网站| 天天操天天曰天天射| yw国产AV| 丁香婷婷影院| 亚洲成人在线观看网址| 91熟妇大香蕉| 色97啪啪| 9久9久| 五月综合激情图片| 美女91一起草| 色五月,com| 51精品国自产在线| 色婷婷亚洲婷婷| 人人干人人看| 九热视频| 99久在线精品99re8热| 天天色天天日| 国产小精品| 嫩草AV久久伊人妇女超级A| 性爱视频99| 九九热在线视频观看| 色婷婷色99国产综合精品| 久久综合影院| 色五月激情五月| 五月婷婷五月天| 日日夜夜狠狠| 操精品9| 99草在线免费观看视频| 日本97久久久精品| 久久98| 五月丁香婷婷综合在线| 丁香久久五月天视频在线观看| 啪啪婷婷五月天激情| 中文字幕日韩无码制服诱或| 国精产品一区二区三区| 激情小说婷婷| 国产成人99久久亚洲综合精品| 色色性爱视频| 色婷丁香91| 国产第99页| 国产五月天婷婷| 91丨九色丨大屁股| 白天AV月月| 色婷婷社区| 婷婷大乡焦噜噜| 99热97| 国产午夜精品一区二区三区四区| 狠狠色婷婷色| 婷婷五月天在线看| 狠狠狠狠操| 激情五月综合| 九九精品热| 97碰碰九九视频| 99久久.www| 久久精彩综合视频| 色婷婷社区| 激情婷婷丁香五月天| 99色视频| 成人一区在线观看| 99热香港| enecarbon-materials.com污K127封锁请涟系@wip1688 | 亚洲综合色网| 99热啪啪| 九九色色色| 亭亭丁香久久五月| 婷婷五月天在线观看免费| 色欲丁香| 久久综合55| 亚洲中文字幕av| 久香草视频在线观看| 九九热在线视频| 天天日天天插| 日本久久婷婷| 五月激情天天干| 激情色色色| 九九99视频精品| 九九色综合| 99色色色色| 激情丁香婷婷| 精品在线网站| 婷婷婷婷婷开心无码播放| 我爱大香蕉| 久婷婷五月天影院| 少妇人妻综合色6699| 天天天干夜夜夜操| 五月天色综合| 五月天天久久香| 久久久久久久11111111111| 色色色色综合网| 婷婷五月天激情免费在线观看| 狠狠色丁香| 天天射美女| 色导航色婷婷五月天在线观看| 开心五月天激情网| 丁香五月精品视频| 996er热| 1024在线观看免费视频| 六月丁香婷婷在线波多 | 最新va在线播放| 玩熟女五十AV一二三区| 狠狠va| 婷婷五月天小说网| 色婷婷基地| 1024国产| 超碰在线观看99| 久9热视频| 99玖玖视频| 26uuu欧美激情另类| 丰满少妇猛烈A片免费看观看| 色婷婷在线播放| 99热综合| 99久久www| 色99网站| 婷婷五月色图| 日本美女上人| 色99视频| 99精品无码| 中文精品久久久久人妻不| 色情五月丁香| 伊人99热| 99成人| 激情的五月| A片试看50分钟做受视频| 七七九九色色| 色五天综合| 99热这里只有精品 搜| 久久五月婷婷综合网| 婷婷成人小说综合| 色yeye欧美| 欧洲激情精品婷婷| 九月av| 怡红院视频| 一区操| 天天做天天爱天天爽| 五月天婷综合| 五月丁香色色网| 五月婷俺去也| 色五月婷婷7777| 婷婷五月天成人网站| 日本A片一区| 日日干天天| 亚洲AV第二区国产精品| 色五月婷婷五月| 色七色九九| 99久久97| 91 九色 熟女| 色婷丨日丨天丨综合久久| 色吧婷婷五月亚洲| 天天拍天天操| 欧美成人无码一区二区三区| 丁香五月天影院| 婷婷色片| 欧美日韩AAAAA| 天天日日| 99re久久| 久久精品亚洲一级牲爱综合 | 九九av| 六月成人网| 噜噜吧天天爱| 丁香五月婷婷无码AV| 2025神马午夜福利| 九九99九九99九九99视频网| 日本精品。999| 碰超在线九色| 婷婷精品| 日本婷婷五月天| 五月婷婷六月丁香激情深爱| 久久精品日| 99视频精品在线| 日韩欧美一级大黄网站| 依人大香蕉| 秋霞九九无码| 五月天偷拍| 精a品a| 都市激情久久| 一本色道久久88加勒比—| 国产FREESEXVIDEOS性中国| 五月天.com| 99爱免费在线观看| 超级碰碰碰97免费| 精品热九九| 婷婷午夜天| 国产成人99久久亚洲综合精品| 狠狠舔| 综合久久伊人| 久久久国产精品黄毛片 | 亚洲第一精品成人999久久精品| 久久五月丁香婷婷| 婷婷丁香先锋资源网站| 中文字幕日本最新乱码视频| 欧美婷婷| 六月久久婷婷| 噜噜五月天综合| 欧美色播综合在线观看| 丁香六月综合激情| 99热性色| 大胆伊人久久| 九九中文色色| 99热10在线高清播放| 六月婷婷开心| 丁香九月久久| 中文字幕综合| 六九色综合婷婷五月天| 久久精品亚洲一级牲爱综合| 噜噜噜噜在线| 久色姿源| 成人欧美一区二区三区在线观看| 九九碰九九爱97| 99久久久久久www| 天堂网亚洲色图| 婷婷五月丁香基| 99精品偷自拍| 熟女少妇内射日韩亚洲| 综合久久99| 日本色色色| 亚洲这里只有精品| 婷婷大香蕉| 久久久久久综合88| 91超碰人人操| 99精品在线播放| 97人人超| 色色网站在线| 丁香蜜臀黄色婷婷五月天| 久久这里都是精品| 婷婷五月天综合小说网| 色99欧洲色19| 舔色婷婷| 大香蕉99热| 91 九色 熟女| 婷婷五月色播| 亚洲欧洲中文日韩久久AV乱码| 99在线精品视频| 拍真实国产伦偷精品| 欧美性生交XXXXX无码小说| 婷婷五月成人| 亚洲操女| 超碰伊人碰婷婷五月| 色蜜婷婷| 色人久久| 狠狠人人| 国产VA亚洲VA96| 精品色| 97人人做| 色情综合网| 亚洲三A| 亚洲成人在线观看网址| 操逼视频一区| 亚洲色色在线| 国产精品五月天婷婷| 九九亚洲| 97色婷婷| 免费看片在线观看| 午夜天堂啪啪| 色婷婷五月婷婷五月婷婷五月| 婷婷五月美女直播| 丁香花五月天激情| 国外亚洲成AV人片在线观看| 激情五月天情色| www99精品| 婷婷五月激情基地| 久久久久久人妻久久久久久久久久人妻久久久| 五月丁香激情综合啪啪| 狠狠狠狠狠| 日韩久久欧亚| 无码地址| 欧美黄色韩日网| 99久久激情视频| 久久久91精品| 99久久玖玖| 久草久青福利| 日本色婷婷| AV大香蕉| 国产婷婷五月天| 六月婷伊人| 色色色五月婷| 曰韩五月丁香色婷婷无码| 9热在线观看| 国产寻花在线| 五月天堂色| 婷婷综合在线网| 性五月激情| 亚州操人在线视频| 综合婷婷| 人伦30P| 夜夜爽天天日| 99这里只有精品| 成人短视频免费观看| 国产色婷婷亚洲| 欧美色久| 91精品国产色猫| 狠狠色丁香99| WWW.婷婷| www,色婷婷| 五月婷婷福利| 亚洲精品字幕在线观看| 二色AV| 激情五月天电影| 中文字幕中文有码在线| 丁香五月综合高清在线| 亚洲99在线| 丁香婷婷激情四射五月| 97涩涩丁香五月天| 色色亚洲视频| 97精品欧美91久久久久久久| 五月天婷婷色综合| 久久人妻精品| 婷婷综合九月| 丁香婷婷射| 操日视频| 91色性感五月婷婷丁香| 丁香色五月 97干| 精品人妻在线| 色九九九综合| 欧洲日韩一区二区三区| 97综合在线| 日韩中出视频| 蜜桃婷婷五月| 国产成人高清| 狠爱婷色| 伊人激情影院| 亚洲蜜乳AV| 天天天久久人人人合| 丁香五月婷婷色综合| 五月综合激情图片| 99精品成人无码A片观看金桔| 婷婷丁香色五月亚洲| 五月丁香婷婷基地| 9精品在线| 亚洲第一成人无码A片| 九九大香蕉黄色影院| 亚洲国产精品VA在线看黑人| 99久久高清视频| 色婷婷www| 99久免费视频| 久热亚洲| 亚洲欧美婷婷五月色综合| 久久激情综合| WWW·天天操·视频?| 九九热在线精品| 五月色丁香| 日本三级日本三级99| 婷婷99狠狠躁天天| 五月天六月色| 丁香婷婷六月激情| 青青草大香| 99国产这里只有精品| 丁香五月 无码| 天天舔天天摸| 久久xxxx| 激情五月婷婷| 五月开心深爱激情网| 亚洲色基地| 亚洲综合五月天婷婷丁香| 99精品国产在热久久| 欧美激情五月天| www.av骚货| 狠狠干在线| 婷婷丁香五月综合| 五月www| 日欧一片内射VA在线影院| 亚洲国产精品五月天| 亚洲视频码| 久色大| 日本久久99| 国产精品第一国产精品| 激情深爱五月| 亚洲人妻av| 久久婷婷七月丁香| 色天堂在线| 丁香五月第九色| 久久五月婷综合网| 色五月六月| 午夜无码精品色综合久久| 亚州婷婷五月激情综合| www激情| 日韩乱玛久久| 热九九精品| 色色综合网www| 色婷婷88| 99.色| 99在线精品视频| 97在线观视频免费观看 | 在线视频你懂得| 色高清无码视频| 婷婷五月色综合| 国产AV一区二区三区最新精品 | 97久久精品| 婷婷综合中文| 亚洲五月婷| 韩国三级五月天婷婷。| 黄色aaaaa| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 99热在这里只有精品| 九九热在这里只有精品| 日韩在线视频网站| 九色亚洲| 六月色色| 九九re精品视频在线观看| 九九视频热| 综合色久| 性色av大香综合| 精品久久久中文字幕大豆网推荐理由| 丁香六月天| 色宗合久久五月婷婷| 久久综合爱| 国产永久一黄| 亚洲色就是色色色| 67194国产| 天天干天天干天天干| 激情 婷婷 插| 激情五月图| 国产精品成人AV在线| 操草草草| 黄网在线免费观| 色色亚洲| 欧美日韩999| 婷婷五月天小说| 五月丁香激情在线| 五月天另类综合网| 性色播| 久久性爱视频| 大香蕉狼人久久| 91丨九色丨国产打屁股网站| 国产精品日本一区二区在线播放| 精品久久久人妻| 色欲av伊人久久大香线蕉影院| 色婷婷五月在线| 日韩操逼小电影| 婷婷深爱五月亚洲综合| 婷婷5月色| 狠狠五月激情在线| 国产日比| 开心五月婷婷激情| 欧洲亚洲免费视频9| 一本色道久久88加勒比—| 综合久久六月| 影院久久久| 国产精品成av人在线视午夜片| 日本操天堂| 色135综合网| 国产精品久久久爽爽爽麻豆色哟哟| 成人丁香| 亚洲激情在线| 国产激情久久久| 色五月激情五月开心五月| www.色99| 99热官网精品在线| 久久99婷婷| 免费不卡狠操美女视频网| 天天日夜夜高潮| 色五月综合| 1024婷婷综合久久五月天| 艹色18p| 色综合99无码| 五月刺激丁香月综合| 五月天激情亚洲| 五月天婷婷丁香人人操91| 9热在线视频| 99资源在线视频| 91人人爽狠狠狠| 99色综合网| 九月婷婷综合八月丁香在线观看| 色 丁香婷婷| 色99热| 综合伊人久久| 五月婷婷激情综合网| 大香蕉520| 日逼AV影音先锋男人资源站| 婷婷五月丁香色色| 婷婷天堂视频| 亚洲激情亚洲激情 | 丁香婷婷激情四射五月| 婷婷丁香九色| 97在线/日本| 久久国产高清| 操操精品| 日韩黄色网络| 日日日,com| 九九九九九九九热| 亚洲色热| 丁香五月色情| 嫩草视频。| 九九AV在线| www.狠狠狠.com| 五月激情婷婷丁香天堂| 啪啪一区| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 无码人妻激情| 五月天激情国产综合婷婷婷| WWW.HENHENL.| 91porn一起草| 天天色综合色| 天天日夜夜爽| 九九热精品| 成人短视频免费观看| 久99热| 久久性爱视频这里只有精品| 99re免费精品视频| 五月天大香蕉av| 五月停停999| http://www.lingjunshare.com/ | 六月丁香六月婷婷欧美| 日本五月丁香| 大香蕉天堂| 日韩成人不卡| 超碰超碰在线| 五月天婷网| 婷婷六月久久综合导航| 日日操夜夜操不卡| 久久狠狠欧美| 丁香色婷婷五月天| 中字幕视频在线永久在线观看免费 | 四月婷婷五月丁香| 人妻丰满精品一区二区A片| 国产AV不卡福利| 夜夜夜夜做天天天做无码视频| 婷婷在线激情| 日韩av手机在线观看| 97干免费视频| 婷婷丁香色无五月| 欧美人与性动交CCOO| 九九热在线99| 婷婷综合六月| CHINESE熟女老女人HD视频| 四月婷婷五月丁香| 婷婷五月色综合| 色婷婷综合网| 亚洲另类AV| 六月丁香婷婷视频综合在线观看| 亚洲美女网Va| 色噜噜婷婷| 中美日韩成人在线| 开心婷婷丁香五月| 熟妇高潮一区av| 九九热在视频| 99re8这里只有精品99re8热视频| 九伊人网| 激情99在线视频| 一本色综合色| 99高级会所久久| 激情亚洲网| 丁香九月综合激情| 狠狠干在线| 九九爱精品网站| 欧美天天性| 粉嫩AV久久一区二区三区| 91狠狠综合久久久久久| 天天综合色| 久久综合55| 天天爱天天做天天舔| 99热亚洲精品| 99热自拍| 色噜噜狠狠色综合日日| 九九精品自拍| 婷久久| 五月丁香亭亭操逼| 强伦轩人妻一区二区电影| 海外网站专业操老外| 激情伊人五月天| 久久婷婷五月综合网| 日操夜撸| 97人人操人人拍| 青青草原福利在线| 色五月噜噜| 国产日韩亚洲欧美在线观看| 7777久久亚洲中文字幕| 久久视频这里99| 亚洲视频在线网| 天天色综网| 久久五月情| 久久激情网| 91视频五月丁香| 欧美精品啪啪| 超碰人人艹| 第四色五月天| 丁香五月色播中文在线播放| 人人操AV| 成人天天爽| 伊人综合网站| 亚州精品久久久久AV无码| 九九色网专区| 五月婷婷片| 色爽九九| 五月丁香亚洲综合| 亚洲第一色色色色| 极品精品一区二区三区在线| 丁香五月天综合网| 国产亚洲色婷婷久久99精品9j| 天天干,天天日| caop在线视频| 99热精品在线在线| 欧美噜一噜| 丁香五月久久社区| 99干日本| 丁香五月天色| 久久丁香综合精品综合| 少妇人妻人伦A片| 噜噜色天天开心| 亚洲亚洲人成综合网络| 99精品免费欧美小视频| 日韩人妻无码精品| 色色色999| 五月天婷网| 色五月婷婷大香蕉| 五月丁香成人网| 婷婷丁香五月天在线| 久久久27操| 开心五月深爱五月| 日本五月视频| 五月天久久婷婷| 免费观看全黄做爰的视频| 夜夜撸天天操| 99热精品在线观看| 超91热| 色啪影院| 色播丁香婷婷五月激情| 51XX午夜影福利| 三级毛片视频| 狠狠人妻色综合| 激情黄色五月天| 丁香五月777| 日日干日日| 激情五月天社区| 婷婷丁香五月天综合网| 色婷婷色| 免费观看18视频网站| 天天摸天天舔天天天天爽| 综合激情五月丁香9999久久精| 色吊丝99| 亚洲人妻av| 99热成人精品网站| 青青草深爱激情网| 伊人色综合影院视频| 黄网在线免费观| 激情综合婷婷| 亚洲视色| 丁香五月婷婷丫| 99熟女视频| 亚洲欧洲中文日韩久久AV乱码 | 丁香五月婷婷啪啪| 亚洲综合色网| 精品99只有。| 天天综合网、天天综合色| ady狠狠入| 国产人妻777人伦精品HD| 九九精品99| 26UUU欧美| 久久五月天黄色五月天色网址| 99色视频在线观看最新| av人人操| AV大片在线播放| 婷婷丁香六月天| 超碰91人人操| 亚洲精品激情| 狠狠色丁香婷婷综合久久97AV| 婷婷操逼| 日韩超碰在线| 色婷狠狠| 91干婷婷| 中文幕无线码中文字蜜桃| 人人爱操| 亚欧州精品视频| 99色网站| 综合激情五月天六月婷免费视频| 日日鲁鲁夜夜爽爽| 青青操绿aaa一区日v| 六月丁香久久| 黄色成人网站在线播放| 丁香激情五月少妇| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 91狠狠综合久久| www.开心激情| 丁香五月天色| 久久九九@| 日本在线观看aaa 99| 五月天婷婷社区| 久久ww| 99热这里只有精品1025| 思思热在线播放| 人人舔人人色人人高潮| ri电影在线| 狠狠五月激情在线| 色一区高清| 久久婷婷五月国产色综合激情| 在线婷婷| 超碰久热| 激情五月激情综合俺也去婷婷小说| 婷婷午夜| 99热成人永久免费| 欧美又粗又大一区二区在线观看| 色久播播| 三区激情四射av| 久久婷婷六月综合资源| 五月丁香婷婷久久| 亚洲人人干| 色色网站免费观看| 色婷婷色人人射| 久久这里只| 婷婷天天日婷婷| 九九无码| 色色色999| 91chinese在线| 黄桃AV无码免费一区二区三区 | 亚洲视99| 热99久久这里只有精品| www,五月天激情| 色色色色色综合| xxxx久| 国产日韩欧美性爱| 嫩草AV久久伊人妇女超级A| 激情都市另类| 最新日韩久热免费视频看看| 亚洲色啪| 99热这里只有精品热| 五月天综合| 久久98| 久久99免费视频| 色狠狠色| 五月天六月婷婷电影| 91一起操| 亚洲精品一二三| 欧美大香蕉视频| 99久久思思| 91丨九色丨熟女|新版| 亚洲V国产V欧美V久久久久久| av在线不卡播放| 永久的网站AAAA| 天天爽免费视频| 五月丁香六月婷婷网| 久久久亚洲成人无码A片| 久久视频婷婷视频| 久色国产| 九九热在线99| 婷婷五月丁香基| 99在线公开视频| 六月婷婷狠狠色在线观看| 五月天综合在线观看| 狠狠色婷婷777| 夜夜嗨一区二区三区直播内容 | 91精品婷婷国产综合| 久er7久热| 玖玖精品视频| 青青草成人网| 亲子乱AV-区二区三区| 天天做天天干天天综合网| 日本99视频| 91久久网站| 91vip在线观看| 99热这里只有精品69| 久久最新色| 欧美性生交XXXXX无码小说| 99婷婷五月天激情| 欧美日本综合网| 色丁香五月婷婷在线| 猫咪伊人久久| 成人在线观看精品| 97人凄人人操人人爽| 天天综合天天玩夜夜玩天天玩夜夜玩 | 国产精品A成V人在线播放| 欧美人人超级碰| 91黄操| 五月婷婷基地| 久久激情视频| 2020日日干| 天天操夜夜爱| 五月丁香综合啪啪| 99色日本| 婷婷五月天亚洲丁香| 婷婷激情六月| 婷婷色五月天色| 激情二色月| 天天干天天插| 奇米四色五月天| 婷婷五月丁香六月伊人网| 五月WWW| 久久99久久99久久99人受| 亚洲激情综| 五月婷婷第四色| 亚洲视频一区| 天搞天天天天天| 五月天啪啪视频| 欧美99视频| 日本久久精品18| 午夜九九电影| 思思热在线| 伦乱美欧| 99日韩| 老司机午夜福利视频金瓶梅| 九九这里都是精品| 91九色在线| 天天色播| 热九九精品| 99热这里全都是精品| 色色色综合网| 五月激情站| 这里只有精品视频222| 色情综合| 亚洲性受XXXX五月丁香| 五月婷婷AV| 亚洲精品va| 99色综合| 思思久久96热在精品国产,| 国产小精品| 99色热综合| 亚洲综合视频八| 激情欧美丁香五月| 日韩肏屄网| 四色永久成人网站| 伊人五月天综合网|