99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑 1. 磁盤配額到底解決了什么問題磁盤配額這個功能說復(fù)雜不復(fù)雜說簡單也不簡單。簡單理解就是給用戶或組設(shè)置一塊磁盤空間的消費(fèi)上限超過這個上限就禁止繼續(xù)寫入。這在多用戶服務(wù)器、共享存儲、虛擬主機(jī)生產(chǎn)環(huán)境里幾乎是剛需。我踩過最典型的一個坑是早年給公司搭文件共享服務(wù)器沒配配額結(jié)果某個同事直接往共享目錄里拖了幾百GB的虛擬機(jī)鏡像一夜之間整個存儲池滿了所有業(yè)務(wù)系統(tǒng)同時報錯磁盤空間不足。從那以后我學(xué)乖了凡是要給多人用的目錄配額一定先配好再交付。那磁盤配額能干什么幾條實(shí)在的能力限制單個用戶在特定文件系統(tǒng)上的空間占用按塊block限制限制單個用戶可創(chuàng)建的文件數(shù)量按inode限制限制一組用戶的總空間占用和文件數(shù)量組配額設(shè)置軟限制和硬限制軟限制是警告閾值超過后系統(tǒng)會提示但允許繼續(xù)用一段時間硬限制是絕對上限超過就直接拒絕寫入通過寬限期grace time控制在軟限制之上還能撐多久到期后軟限制自動變成硬限制這套機(jī)制特別適合幾類場景企業(yè)對內(nèi)文件服務(wù)器、高校機(jī)房或?qū)嶒?yàn)室共享存儲、云服務(wù)器上給客戶開通的多租戶站點(diǎn)、以及任何形式的公共FTP/NFS存儲目錄。單機(jī)個人電腦其實(shí)不太用得上但如果你的電腦上建了多用戶賬號給家人或同事用配一下也省心。2. 配額機(jī)制的底層原理搞懂這些再動手2.1 限制的是塊和inode而不是文件大小這件事很多人第一次看配額會困惑為什么有的配額配置界面顯示的是1K Blocks其實(shí)Linux文件系統(tǒng)在底層管理空間的時候是以**塊block**為單位劃分的一個塊默認(rèn)是4KB。一個100KB的文件實(shí)際占用的是25個塊而不是一個100KB的文件。配額限制的就是這些塊的總數(shù)也就是用戶實(shí)際消耗的物理空間。inode這個維度就更底層了。每個文件至少要占用一個inodeinode里存的不是數(shù)據(jù)而是文件的元數(shù)據(jù)——權(quán)限、所有者、時間戳、數(shù)據(jù)塊指針等。如果一個文件系統(tǒng)inode耗盡即使物理空間還一大堆你也創(chuàng)建不了新文件。所以配額表里通常同時提供blocks和inodes兩個維度blocks管空間大小inodes管文件數(shù)量。2.2 軟限制、硬限制和寬限期三者協(xié)作的邏輯軟限制soft limit是一個提醒值。比如你給某個用戶設(shè)了軟限制5GB、硬限制8GB、寬限期7天。用戶用到5GB之后系統(tǒng)會告警但用戶還是能繼續(xù)寫一直寫到8GB被硬限制堵死但如果用戶一直是超了5GB但沒到8GB的狀態(tài)超過7天寬限期系統(tǒng)就會直接禁止繼續(xù)分配塊除非刪除文件把用量壓回5GB以下。硬限制hard limit就是一道硬墻。到了這個值not only新寫入被拒絕之前的文件也刪不掉不是的硬限制只阻止新數(shù)據(jù)的寫入用戶依然可以刪除自己的文件騰出空間。這一點(diǎn)在排查問題的時候特別重要——用戶說我刪了文件還是寫不進(jìn)去多半是刪除后仍然超出硬限制或者配額按塊計算、小碎文件刪了不少但釋放的塊不多。2.3 用戶配額、組配額、項(xiàng)目配額有什么區(qū)別Linux配額支持三個作用域用戶user quota、組group quota、項(xiàng)目/目錄project quota。用戶配額最容易理解限制的對象是UID每個人的占用獨(dú)立算賬。適合個人目錄、home目錄這類場景。組配額限制的對象是GID。比如某個項(xiàng)目組共享一個目錄組內(nèi)5個人都往里寫配額只統(tǒng)計這5個人共同消耗的總量。這比單獨(dú)給每個人限制更有實(shí)際意義——項(xiàng)目組需要的是一個項(xiàng)目總盤子。項(xiàng)目配額是較新內(nèi)核2.6.35引入的機(jī)制按目錄維度管理目錄打上project ID標(biāo)簽后不管哪些用戶往里寫都?xì)w到同一個配額賬戶里。適合托管目錄、共享目錄這種以目錄為邊界的管理模型。實(shí)務(wù)上最常用的組合是用戶配額組配額同時啟用。舉例用戶A限額2GB、用戶B限額2GB同時A和B組成的組G限額3GB。這樣既防止個人濫用也防止整個團(tuán)隊用爆公共盤。2.4 開啟配額對文件系統(tǒng)有什么要求不是隨便一個分區(qū)就能直接開啟配額的關(guān)鍵前提有三個文件系統(tǒng)類型要支持。ext3、ext4、xfs、btrfs都原生支持配額ext4和xfs是生產(chǎn)環(huán)境中最穩(wěn)的選擇。老舊的ext2也可以但沒必要。FAT32/NTFS這類文件系統(tǒng)在Linux下掛載的話配額支持很弱建議不要折騰。必須掛載在獨(dú)立分區(qū)上。配額是一個文件系統(tǒng)級別的特性不能跨多個掛載點(diǎn)統(tǒng)一配額。你如果只給/home配了配額用戶把數(shù)據(jù)塞到/data下配額管不著。所以規(guī)劃配額之前先想清楚哪些目錄需要配額最好一開始就把它們單獨(dú)分區(qū)。掛載參數(shù)要帶上配額開關(guān)。ext4需要usrquota和/或grpquota掛載選項(xiàng)xfs比較特殊配額是文件系統(tǒng)自帶的特性掛載時需要uquota/gquota或prjquota參數(shù)不同發(fā)行版寫法略有差異。注意改掛載選項(xiàng)要寫入/etc/fstab并正確重掛載或重啟否則重啟后配額狀態(tài)會丟失。xfs格式的配額文件在掛載時是不能直接使用quotacheck等傳統(tǒng)命令的操作方式不同這個后文細(xì)說。3. 實(shí)操前準(zhǔn)備分區(qū)、掛載點(diǎn)、工具安裝3.1 推薦的環(huán)境與版本基準(zhǔn)我后面寫的所有步驟都是基于主流的RHEL/CentOS 7/8/9 或 Ubuntu 20.04/22.04 環(huán)境內(nèi)核版本4.x及以上文件系統(tǒng)以ext4為主xfs部分單獨(dú)說明。如果你用的是老系統(tǒng)命令參數(shù)可能會有細(xì)微差別但整體流程不變。先說一個實(shí)用判斷拿到一臺機(jī)器做配額之前先跑一下df -hT看清楚當(dāng)前分區(qū)和文件系統(tǒng)類型。見過太多人不管三七二十一先裝quota工具裝完發(fā)現(xiàn)要配額的分區(qū)是xfs手忙腳亂。先看環(huán)境再動手能省一半排查時間。3.2 安裝quota工具包quota工具在絕大多數(shù)發(fā)行版的基礎(chǔ)倉庫里都有# CentOS / RHEL / Rocky yum install -y quota # Ubuntu / Debian apt install -y quota # 新一點(diǎn)的系統(tǒng)可能要用 dnf dnf install -y quota裝完之后驗(yàn)證一下rpm -qa | grep quota dpkg -l | grep quota如果這條命令沒有輸出說明沒裝上。此外建議順手裝一個ncdu或du習(xí)慣后面核對配額用量的時候要用到。3.3 準(zhǔn)備好一個獨(dú)立分區(qū)硬性條件為了演示我們假設(shè)機(jī)器上有一塊獨(dú)立磁盤/dev/sdb1掛載在/data目錄專門用于多用戶共享文件。先把分區(qū)格式化mkfs.ext4 /dev/sdb1如果有現(xiàn)成的/home獨(dú)立分區(qū)也可以直接拿它演示。但不管用哪個你絕對不能對根分區(qū)/做配額操作實(shí)踐因?yàn)楦謪^(qū)一旦配額配置失誤很可能導(dǎo)致系統(tǒng)起不來或用戶登錄異常。演示環(huán)境怎么折騰都行生產(chǎn)環(huán)境務(wù)必小心。格式化完成后創(chuàng)建掛載點(diǎn)并掛載mkdir -p /data mount /dev/sdb1 /data df -h /data3.4 修改fstab讓配額開關(guān)永久生效很多教程會教你先手動改掛載參數(shù)掛載一遍再來說fstab。我建議直接一步到位編輯/etc/fstab加上配額選項(xiàng)然后用mount -o remount重掛載。這樣不重啟也能生效而且重啟后配置不會丟。以/dev/sdb1 /data為例fstab里的寫法是/dev/sdb1 /data ext4 defaults,usrquota,grpquota 0 0usrquota表示啟用用戶配額grpquota表示啟用組配額。如果你只需要用戶配額只寫usrquota即可如果兩個都需要就都寫上別漏。改完fstab后執(zhí)行mount -o remount /data然后確認(rèn)掛載參數(shù)已經(jīng)生效cat /proc/mounts | grep /data輸出里能看到usrquota,grpquota字樣就說明掛載參數(shù)帶上了。如果fstab寫錯了這個命令可能報錯系統(tǒng)會提示你重新檢查。千萬別跳過這一步去重啟重啟后發(fā)現(xiàn)系統(tǒng)起不來再去改fstab那就被動了。提示如果是xfs文件系統(tǒng)fstab里的掛載選項(xiàng)通常寫uquota,gquota或者usrquota,grpquota在新內(nèi)核同樣識別xfs下的配額文件是作為文件系統(tǒng)內(nèi)部元數(shù)據(jù)自動管理的不需要手動創(chuàng)建aquota.user等文件。3.5 確認(rèn)內(nèi)核是否支持配額絕大多數(shù)發(fā)行版內(nèi)核都默認(rèn)打開了配額支持但保險起見可以確認(rèn)一下grep -i quota /boot/config-$(uname -r)能看到類似CONFIG_QUOTAy、CONFIG_QUOTACTLy、CONFIG_QUOTA_NETLINK_INTERFACEy的輸出就行。如果這些配置項(xiàng)是m或沒有需要重新編譯內(nèi)核或換個內(nèi)核版本。這個步驟在標(biāo)準(zhǔn)云鏡像上幾乎從沒出過問題但檢查成本極低順手做沒壞處。4. 初始化配額數(shù)據(jù)庫并設(shè)置用戶/組配額4.1 創(chuàng)建配額文件quotacheckext文件系統(tǒng)啟用配額后系統(tǒng)需要在文件系統(tǒng)根目錄維護(hù)配額記錄文件傳統(tǒng)上是aquota.user和aquota.group新版系統(tǒng)也支持quota.user但aquota系列最通用。初始化命令quotacheck -cug /data參數(shù)解釋-c創(chuàng)建配額文件如果不存在-u啟用用戶配額檢查-g啟用組配額檢查-v顯示詳細(xì)過程可選但推薦能看到每個文件系統(tǒng)的處理情況你可以在/data目錄下用ls -l確認(rèn)ls -l /data/aquota.user /data/aquota.group如果跑完quotacheck報錯“Cannot find quota file”或者“Permission denied”多半是前面掛載參數(shù)沒生效或者SELinux在攔。解決辦法后面第7節(jié)會單獨(dú)講。4.2 首次掃描的作用與注意事項(xiàng)quotacheck的機(jī)制是遍歷文件系統(tǒng)里每個文件的屬主和所屬組把所有已占用空間和inode數(shù)據(jù)匯總寫入配額文件。在已有大量數(shù)據(jù)的目錄上首次啟用配額這一步是必須的因?yàn)橄到y(tǒng)此前并不知道每個用戶已經(jīng)消耗了多少。這里有一個關(guān)鍵的運(yùn)維經(jīng)驗(yàn)對線上正在服務(wù)的數(shù)據(jù)目錄執(zhí)行quotacheck要在業(yè)務(wù)低谷期做最好先卸載或只讀掛載在做。因?yàn)閽呙杵陂g文件的變化可能導(dǎo)致配額記錄和實(shí)際不一致。生產(chǎn)實(shí)例如果實(shí)在不能停機(jī)可以接受短暫的不一致跑完后再用quotacheck重掃一次。但千萬別在配額文件生成過程中貿(mào)然重啟。4.3 用edquota交互式為單個用戶設(shè)置配額創(chuàng)建好配額數(shù)據(jù)庫之后給用戶zhangsan設(shè)置配額edquota -u zhangsan這條命令會打開一個文本編輯器界面內(nèi)容類似Disk quotas for user zhangsan (uid 1001): Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 12 24 7 3 5各列含義blocks該用戶當(dāng)前已占用的塊數(shù)每塊大小在掛載參數(shù)里確定默認(rèn)1KB單位顯示soft/hard空間塊軟限制和硬限制inodes該用戶當(dāng)前已創(chuàng)建的文件/目錄數(shù)量soft/hard右側(cè)兩列inode的軟限制和硬限制注意編輯時左右兩組soft/hard要對應(yīng)清楚左側(cè)是存儲空間、右側(cè)是文件數(shù)量。我自己第一次配置時就搞混過把文件數(shù)硬限制當(dāng)成空間限制了害得用戶沒法建目錄反而可以隨便寫數(shù)據(jù)——這錯得很隱蔽。把數(shù)字改好保存退出。比如要限制空間2GB硬限制2048MB即2048個1KB單位不對這里單位是1K blocks2GB要寫成2048000個1K block稍微算一下和文件數(shù)10000個Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 1843200 2048000 7 9000 10000這里就是單位換算的關(guān)鍵坑1K blocks進(jìn)位的單位是KB2048000個單位是2048000KB約2GB實(shí)際2,048,000KB 1.95GB但四舍五入可接受。我建議直接按KB來換算2GB 2 × 1024 × 1024 2097152 KB但寫的時候注意2048000和2097152就差一點(diǎn)分區(qū)大小足夠就行設(shè)置成整數(shù)比較方便管理。我的習(xí)慣是用2048000這種整數(shù)因?yàn)榭粗庇^。4.4 批量設(shè)置配額從參考用戶復(fù)制如果用戶數(shù)量多一個個edquota顯然低效。edquota提供了-p參數(shù)可以把一個參考用戶的配額原樣復(fù)制給其他用戶edquota -p zhangsan lisi wangwu這樣lisi和wangwu就復(fù)制了zhangsan的配額設(shè)置。對幾十個用戶批量初始化時非常方便。更徹底的方式是寫個循環(huán)腳本結(jié)合setquota命令非交互設(shè)置for user in zhangsan lisi wangwu; do setquota -u $user 1843200 2048000 9000 10000 /data donesetquota的參數(shù)順序是-u 用戶名 軟塊數(shù) 硬塊數(shù) 軟inode數(shù) 硬inode數(shù) 文件系統(tǒng)。所有值都是數(shù)字單位是1KB塊/個。4.5 配置組配額組配額設(shè)置方式和用戶配額幾乎一樣只是-u換成-gedquota -g project_team組配額默認(rèn)會統(tǒng)計該組所有成員寫入的塊數(shù)總和。假設(shè)project_team組里有5個人你給組配額設(shè)了10GB硬限制那么這5個人加在一起最多寫到10GB。這里有個重點(diǎn)用戶配額和組配額是疊加生效的。比如用戶A個人硬限制2GB組G硬限制3GB那么A的寫入受“兩者中先命中的那個”約束。他寫到2GB會撞到用戶硬限制但整個組才消耗了1.5GB組配額還沒觸發(fā)。反之如果A已經(jīng)寫了1GB組里其他人寫了2.5GB組硬限制已經(jīng)觸發(fā)A即使個人沒用完也寫不進(jìn)去。這種雙維度限制在項(xiàng)目制環(huán)境里非常好用但要跟用戶解釋清楚規(guī)則不然會被罵“為什么我限額還沒到就寫不進(jìn)去了”。4.6 設(shè)置寬限期寬限期的默認(rèn)值是7天如果你覺得太長或太短可以改edquota -t界面會顯示類似Grace period before enforcing soft limits for users: Time units may be: days, hours, minutes, or seconds Filesystem Block grace period Inode grace period /dev/sdb1 7days 7days改成3天/dev/sdb1 3days 3days寬限期只對軟限制有意義。如果你直接設(shè)置硬限制寬限期對它完全無效——硬限制從生效那一刻起就不可逾越。5. 配額狀態(tài)查看與配額報告5.1 用quota命令查單用戶用量切換成普通用戶身份執(zhí)行quota -u zhangsan輸出類似Disk quotas for user zhangsan (uid 1001): Filesystem usage quota limit grace files quota limit grace /dev/sdb1 104K 1843200K 2048000K 7 9000 10000這里的quota列對應(yīng)軟限制limit列對應(yīng)硬限制。用戶自己也可以執(zhí)行這個命令看自己用了多少。如果某個用戶進(jìn)入了grace期輸出里會顯示剩余時間一眼就能看出他是不是“踩線”了。5.2 用repquota生成全體配額報告運(yùn)維視角下最常用的命令其實(shí)是repquotarepquota -a-a表示報告所有啟用了配額的文件系統(tǒng)。輸出*** Report for user quotas on device /dev/sdb1 Block grace time: 3days; Inode grace time: 3days Block limits File limits User used soft hard grace used soft hard grace ---------------------------------------------------------------------- root -- 215424 0 0 5500 0 0 zhangsan -- 104 1843200 2048000 7 9000 10000 lisi - 4096 102400 2048000 2days 12 9000 10000注意第二行zhangsan前面的標(biāo)記--代表一切正常沒有超過軟限制-代表空間或inode超了軟限制但硬限制還沒到正在grace期內(nèi)-同理只是方向不同代表軟硬限制都超了比如lisi那行出現(xiàn)了-和2days說明他已經(jīng)超過了塊軟限制還剩2天寬限期。這種輸出非常適合寫腳本監(jiān)控如果報告中出現(xiàn)非--的行就告警通知管理員查看。5.3 用quotacheck重新校正配額數(shù)據(jù)配額數(shù)據(jù)是動態(tài)維護(hù)的正常情況下每次寫入都會實(shí)時更新。但偶爾會遇到配額記錄和實(shí)際不符的怪問題比如用戶copy了文件但配額統(tǒng)計沒變或者明明刪了大量文件配額占用卻不降。這時重新跑一次quotacheck就能校正quotacheck -avug-a檢查所有配額文件系統(tǒng)-v打印詳細(xì)過程。跑完后配額記錄會和實(shí)際用量重新對齊。這個命令本身有開銷文件越多、體量越大耗時越長。建議在文件系統(tǒng)變化不頻繁的窗口期跑比如深夜定時任務(wù)。6. xfs文件系統(tǒng)配額配置的特異性6.1 為什么xfs不能照抄ext4的步驟很多人在xfs上執(zhí)行quotacheck會得到類似quota not enabled on filesystem的報錯或者直接卡死原因在于xfs的配額機(jī)制和ext系完全不同。xfs從誕生起就把配額作為文件系統(tǒng)內(nèi)建的“日志型”功能配額信息通過掛載參數(shù)直接開啟不需要外部配額文件因此也不存在aquota.user這種文件。xfs的掛載選項(xiàng)常見寫法是/dev/sdb1 /data xfs defaults,uquota,gquota 0 0其中uquota用戶配額gquota組配額。老內(nèi)核版本也接受usrquota,grpquota但新版xfs更推薦直接用uquota,gquota。掛載后在xfs文件系統(tǒng)上設(shè)置配額也有專門工具xfs_quota -x -c limit bsoft1843200 bhard2048000 isoft9000 ihard10000 -u zhangsan /data參數(shù)分解-x進(jìn)入專家模式-c執(zhí)行命令limit bsoft1843200 bhard2048000設(shè)置塊軟限制/硬限制isoft9000 ihard10000設(shè)置inode軟限制/硬限制-u zhangsan針對用戶/data目標(biāo)文件系統(tǒng)查看xfs配額報告的指令是xfs_quota -x -c report -u /data輸出和repquota類似同樣能列出每個用戶的使用量、軟硬限制和grace狀態(tài)。6.2 ext4和xfs配額管理的差異對照我列一個簡單的對照表方便你判斷自己該按哪套流程走對比項(xiàng)ext3/ext4xfs是否生成磁盤配額文件存在aquota.user/aquota.group不生成外部文件由元數(shù)據(jù)管理是否需要quotacheck需要用于初始化和校正不需要底層掃描配額信息可靠啟用掛載參數(shù)usrquota,grpquotauquota,gquota/prjquota配額設(shè)置命令edquota / setquotaxfs_quota -c limit ...配額報告命令repquota / quotaxfs_quota -c report ...日志型一致性一般掃描校正強(qiáng)日志記錄適合規(guī)模中小型單機(jī)/家庭服務(wù)器企業(yè)級/大容量/高并發(fā)如果你用的是新版CentOS/Rocky默認(rèn)安裝的xfs根文件系統(tǒng)想給home目錄配配額直接走xfs路線別再折騰edquota了。但傳統(tǒng)ext4環(huán)境在所有舊文檔和老教程里還是絕對主流兩種都掌握才不會被卡住。7. 常見問題排查與實(shí)戰(zhàn)避坑技巧7.1 quotacheck報錯Cannot find quota file或Operation not permitted這兩類報錯出現(xiàn)時最先懷疑的方向不是quota工具本身而是掛載參數(shù)或SELinux。排查順序# 確認(rèn)掛載參數(shù)是否帶上了 mount | grep /data # 確認(rèn)fstab是否寫對 cat /etc/fstab | grep /data # 臨時禁用SELinux測試排查用 setenforce 0 quotacheck -cug /data如果setenforce 0后要再次測試出問題看ausearch -m avc -ts recent | grep quota確認(rèn)是否被SELinux攔截。真正的修復(fù)方法是調(diào)整SELinux布爾值或文件上下文而不是長期關(guān)閉SELinux。quota相關(guān)目錄的SELinux類型通常需要設(shè)為quota_db_trestorecon -Rv /data但最直接的做法是給掛載目錄設(shè)置正確的上下文。這個知識點(diǎn)容易被人忽略因?yàn)槟J(rèn)SELinux策略下普通數(shù)據(jù)目錄的上下文不是quota專用類型導(dǎo)致寫aquota文件被拒。7.2 配額已設(shè)但用戶仍能無限寫入這類問題是我在群里看到提問頻率最高的。原因通常是下面幾種掛載參數(shù)根本沒帶上配額標(biāo)志。檢查/proc/mounts輸出如果只有defaults而沒有usrquota,grpquota配額功能形同虛設(shè)。配額作用于了錯誤的分區(qū)。用戶把文件寫到了另一個沒開配額的分區(qū)上配額當(dāng)然管不到。比如你只在/data開了配額用戶的$HOME在/home且沒開配額他把數(shù)據(jù)放到家目錄就繞過了所有限制。軟限制設(shè)置得太大或忘記了硬限制。有些人只設(shè)了軟限制沒設(shè)硬限制寬限期一過系統(tǒng)可能直接拒絕——但這個“可能”取決于版本和配置。老版本在寬限期結(jié)束后才會把軟限制變硬限制如果你的版本行為不是這樣就會看起來“沒限制”。用戶是root。root用戶默認(rèn)不受配額限制這是設(shè)計如此不要花時間去“修復(fù)”。逐一排查時別忘了看quota -u 用戶名的實(shí)際輸出。有時候你以為設(shè)置了實(shí)際上沒保存成功。7.3 刪除文件后配額用量不下降這個情況很多人遇到以后第一反應(yīng)是系統(tǒng)壞了其實(shí)大概率不是。原因在于配額統(tǒng)計的是塊占用不是文件數(shù)量并且塊是預(yù)分配的。舉個例子用戶寫了一個100GB的稀疏文件比如dd創(chuàng)建大文件然后seek跳著寫文件系統(tǒng)可能預(yù)分配或稀疏映射了很多塊。刪除部分文件后如果還在硬限制之上寫入依然被拒看起來就是“我刪了但還是寫不進(jìn)去”。另一個常見情況是文件被進(jìn)程持續(xù)占用。用戶刪了文件但因?yàn)槟硞€服務(wù)還持有文件句柄磁盤空間并沒有真正釋放進(jìn)程內(nèi)read/write不會中斷。這種情況你可以這樣確認(rèn)lsof L1 | grep deleted看到still open的deleted文件就知道是哪個進(jìn)程占了。殺掉對應(yīng)進(jìn)程或重啟服務(wù)后空間才真正歸還。7.4 重啟后配額丟失重啟后配額丟失幾乎可以確定是fstab沒有修改或者掛載參數(shù)沒有正確寫入。有些人圖省事只手動mount時帶了參數(shù)重啟后系統(tǒng)按fstab默認(rèn)配置掛載配額開關(guān)自然沒了。排查cat /etc/fstab | grep /data如果fstab里沒配額選項(xiàng)重新編輯并重啟或者重新mount -o remount。還有一個細(xì)節(jié)是老舊的Linux版本fstab中連續(xù)掛載參數(shù)之間不能有空格寫成defaults,usrquota,grpquota而不是defaults, usrquota, grpquota否則重啟時解析會出問題。7.5 生產(chǎn)環(huán)境第一次啟用配額的操作節(jié)奏這個屬于經(jīng)驗(yàn)篇了。生產(chǎn)環(huán)境第一次啟用配額我建議的節(jié)奏是先在測試機(jī)上完整走一遍全流程記錄每個命令的實(shí)際輸出找業(yè)務(wù)低谷窗口備份數(shù)據(jù)或做快照修改fstab添加配額掛載選項(xiàng)執(zhí)行mount -o remount觀察系統(tǒng)日志dmesg | tail確認(rèn)掛載成功無報錯執(zhí)行quotacheck -cugm /data其中-m是“不阻止寫入”的強(qiáng)制模式適合在線執(zhí)行雖然我還是推薦短時只讀掛載更穩(wěn)用edquota/setquota批量設(shè)置配額用repquota -a核對數(shù)據(jù)是否準(zhǔn)確觀察24小時確認(rèn)無異常后再把流程納入常規(guī)維護(hù)手冊7.6 監(jiān)控配額使用率的實(shí)用腳本思路配額管理不能設(shè)完就撒手不管建議寫個簡單的告警腳本放到cron里。我用得最多的核心邏輯是解析repquota的輸出找到超過軟限制的用戶并發(fā)送通知一個bash函數(shù)就夠repquota -a | awk $3 ~ /[0-9]/ $3 $4 {print $1, $2, $3, $4}這段的意思是輸出文件中第三列used超過第四列soft limit的記錄。你把它接入短信或釘釘webhook就成一個最小可用的配額告警系統(tǒng)。當(dāng)然生產(chǎn)環(huán)境用成熟監(jiān)控平臺如zabbix、prometheusnode_exporter更正規(guī)但這個“做殼”思路能幫你快速發(fā)現(xiàn)問題。8. 一個小眾但在多項(xiàng)目環(huán)境非常實(shí)用的擴(kuò)展項(xiàng)目配額上文提了一句project quota這里展開說一下。傳統(tǒng)的用戶/組配額在“一個用戶參與多個項(xiàng)目”的場景里會失控一個用戶分了2GB總配額但他可能給項(xiàng)目A、項(xiàng)目B、項(xiàng)目C各寫了1GB加在一起自己先撞了墻項(xiàng)目之間的隔離也沒做到。項(xiàng)目配額project quota把“誰寫”變成“寫到哪里”以目錄為維度做限制。典型操作# 對目錄打項(xiàng)目ID標(biāo)簽 mkdir -p /data/proj_a chattr -R p /data/proj_a # 打開project屬性非所有文件系統(tǒng)支持ext4需要內(nèi)核CONFIG_EXT4_FS_PROJECTy # xfs上直接分配prjquota xfs_quota -x -c project -s -p /data/proj_a proj_a /data xfs_quota -x -c limit -p bhard10g proj_a /dataext4項(xiàng)目配額的配置流程相對繁瑣而且需要內(nèi)核編譯支持。我自己的經(jīng)驗(yàn)是如果你想用目錄維度配額直接選xfs別在ext4上硬磕省心太多。xfs的項(xiàng)目配額是RHEL/CentOS特意在系統(tǒng)安裝時預(yù)置了prjquota支持生產(chǎn)上非常穩(wěn)。項(xiàng)目配額有一個附帶的好處即使權(quán)限上不同用戶混寫同一個目錄項(xiàng)目配額也能統(tǒng)一算總賬非常適合臨時拉人進(jìn)項(xiàng)目又不想逐個改用戶配額的協(xié)作環(huán)境。9. 我踩過幾次坑之后的最終體會說實(shí)話磁盤配額本身并不難大部分坑都出在文件系統(tǒng)類型判斷錯誤和掛載參數(shù)沒有真正生效這兩件事上。我給新手的忠告是上手之前先用df -hT認(rèn)清楚文件系統(tǒng)再決定走ext4流程還是xfs流程改完fstab后不要偷懶跳過mount -o remount加cat /proc/mounts驗(yàn)證這兩個動作加起來不過幾秒鐘卻能在配額全流程里省掉成小時的排查。另外配額始終是管理工具不是存儲備份。它只能防止單點(diǎn)用戶撐爆磁盤不能替你處理誤刪、病毒、磁盤物理故障。真正重要的業(yè)務(wù)目錄配額要和監(jiān)控告警、定期快照、定期巡檢配合起來才是一套比較完整的數(shù)據(jù)保護(hù)方案。如果你目前只是在一臺小服務(wù)器上給幾個同事分空間按照第4節(jié)的流程配好用戶配額就足夠了沒必要一開始就上項(xiàng)目配額。真到了多項(xiàng)目、多目錄、多人交叉寫入的規(guī)模再切xfs項(xiàng)目配額完全不遲。配額這東西配好之后平時幾乎感覺不到它存在但一旦有人把整盤寫滿你會慶幸當(dāng)初花了一個下午把這事兒做完了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
中国女人做爰A片| 五月丁香六月| 97电影99热| 婷婷五月天电影在线| 欧洲第一无人区观看| 色婷婷国产精品综合在线观看| 中文字幕色色色| 日韩无码AV电影网站| 狠狠干总合| 国产精品天天狠天天看| 九九热视频免费| 婷婷综合五月天| 久热这里只有精品性色AV| 九九色影视| 久久激情五月婷婷| 这里只有精彩视频| 天天cha成人综合网| 久久人人做人人妻人人玩精品va| 久久99激情丁香婷婷小说网| 色呦呦美女| 激情综合网激情五月天| 九九激情网| 色噜噜狠狠色综合日日| 亚洲综合激情五月天婷婷| 五月婷婷六月丁香在线| 色亚洲婷婷| 99婷五月| 色婷婷激情四射视频| 任你操精品免费| 色情久久久| 久久精品五月天| 久久久久激情网| 97热这里精品在线视频| 色婷婷五月天天天做| 欧美成人AAA片一区国产精品| 五月天婷婷丁香视频| 亚洲正能量欧美| 久久婷婷五月| 婷婷五月蜜桃成人桃色丁香| 婷婷五月日本| 婷婷五月色情天| 另类的婷婷| 免费视频WWW在线观看网站| 色欲五月天| 欧美综合激情| 超碰人人色| 丁香丁香激情网| 狠狠色狠狠| 人人干人人干骚美女| 99精品视频在线观看| 99精品久久久久久久婷婷久久| 67194线路二在线观看| 六月婷婷在线| 成人羞羞啪啪 全 视频| 五月丁香综合久久夜夜| 97久久超碰| 。久久久久久久久久久久久久人妻| 91人人妻人人操| 色婷婷在线播放| 青青操绿aaa一区日v| 欧美日韩成人h| 色综合天天综合成人网| 99网址在线观看| 色五月综合| 亚洲超碰在线| 色护士综合| AV九九| 成人小说 五月天 婷婷| 久久 婷婷 五月天| 色五月色开心开心五月| 这里有精品| 日日综合网| 99精品国产在热久久| 亚洲五月婷婷| 任你搞网站| 五月丁六月香av| 性爱人人网| 99日韩| 色噜噜在线| 久久9久久| 日韩免费视频| 五月婷综合| 五月婷婷婷婷网| 久久三级视频| 欧美、日韩、中文、制服、人妻| 激情综合网婷婷五夜| 97在线精品视频| 婷婷激情五月综合在线视频| 午夜激情婷婷| 啪色综合| 五月伊人婷婷999| 国产精品第一国产精品| 色婷婷免费观看| 日本97久久久精品| 五月婷婷亚洲综合在线| 啪啪婷婷五月天激情| 婷婷狠狠综合网入口| 色色五月天婷婷| 91打屁股免费看| 久久五月天精品视频| 色婷婷亚洲综合网站| 婷婷五月色影视先锋| 欧在线一区| 欧美日综合| 色婷六月| 色五月婷婷老师| 五月天婷婷伊人| 五月久久婷婷丁香| 九九热re99re6在线精品| 99九九这里有免费视频| 久久人人添人人爽添人人片αV | 99热在线播放精品| 狠狠ri| 色噜噜狠狠色综无码久久合欧美| 久久九九蜜| 97性视频| 九九综合| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 97五月婷| 色五月婷婷777| 夜夜爱网站| 日本3级片一区2区| 狠狠干综合| 婷婷色五月综合| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | av性爱在线| 日本婷婷在线| 国产精品视频免费看| 成人婷99最新| 精品久久久久久久久久久久人妻| 九久9精品| 色五月xxx| 大香蕉婷婷| 色天天综合| 天天色天天爽| 九九这里只这里只有精品| 五月丁香六月婷婷久久| 激情五月综合久久| 婷婷五月天堂| 色婷婷五月开心六月综合| 亚洲在线成人| 奇米色大香蕉| 99人人精品| 一级性爱大片| 五月丁香婷婷99| 亚洲第二AV| 91色综合久久| www.9797国产| 色狠狠999综合| 色婷婷国产精品综合在线观看| 丁香六月婷婷色播| 亚洲狠狠婷婷| 色综合丁香| 色色丁香五月天| 九九AV在线| 99九九精品视频| 亲子乱AV一区二区三区下载| 丁香六月婷婷久久综合八月| 爱射综合| 激情综合激情五月| 婷婷五月天伊人网在线观看视频| 思思热思在线精品视频| 九九热区一区二区三区| 五月天婷婷色综合| 国产激情久久久| 五月天婷综合| 狠狠狠狠狠| 久久久久亚洲AV综合| 成人综合视频网址| www.yw色| 日本激情ⅩXX免费视频| 婷婷十月丁香| 五月丁香色婷婷色| 亚洲乱码日产精品BD| 99视频这里有精品| 色护士综合| 天天综合色丁香| 色综合久久天天综合网| 呦呦v线| 夜夜撸天天日| 婷婷丁香五月麻豆| 琪琪色五月婷婷老师| 丁香五月天影院| 婷婷伊人75| 超碰97久久| 日本色色网站| 婷婷欧美色| 亚洲综合婷婷五月天| 人人摸人人射| 久色成人| 五月丁香六月婷婷激情视频在线观看免费| 91超级碰碰碰| 成人做爰A片免费看网站找不到了| 激情五月婷婷色综合| 免费成人网在线观看| 色婷婷六月天| 日日日影院| 99熟女啪啪视频| 日本丁香五月| 婷婷五月综合色中文字幕| 91综合国免费久入| 人妻操逼视频| 成人无码髙潮喷水A片| 日本三级99人妇网站| 超碰a女人的天堂| 丁香激惜男女| 79精品视频| 五月天综合色| 中文字幕av亚洲| 热久久成人| 色五月天激情| 国产在线中文字幕| 97超碰在线观看免费| 亚洲精品电影| 人人人va亚洲视频在线| 久久婷婷亚洲| 欧美乱码国产一级A片| 天天成人综合| 很很干天天干| 伊人久久丁香狠狠婷婷综合香蕉| 丁香五月久久| 夜夜骑天天玩天天日| 九色视频91| 教师性爱毛片| 玖玖伦理电影| 26uuu精品国产| 婷婷五月欧美| 丁香网五月网| 5月婷婷激情6月| 婷婷五月丁香五月综合网| 丁香五月激情五月| 97资源欧美日韩大香蕉超碰一区| 五月天综合视频网| 伊人大香蕉爱聚| 亚洲一个色| 91操色| 99乱视频| 99热第一页| 在线视频色五月| 久久这里只有精品热在99| 精国产品一区二区三区A片| 99热国内精品| 婷婷激情人妻| 亚洲无码色| caop在线| 九九综合| 99WWW免费视频| 91丨九色熟女丨首页| 99热精品网| 国产精品色色| 五月色综合| 伦99热| 2025年最新亚洲在线欧美| 欧美在线干| 狼友视频在线观看18| 99r这里| 婷婷五月亚洲综合| 97人人操在线| 久久九九爽| www.久久9| 亚洲AV成人无码久久精品老人法拉利| 夜夜谢天天干| 99免费视频久久| 激情性爱五月天| 超热久碰.com| 类似婷婷激情综合网站| 五月丁香六月激情综合| 黄网在线播放| 激情五月天婷婷直播| 另类天堂| 丁香婷婷啪啪| 99色在线免费观看视频| 色五月婷婷在线| 色色色色色日韩午夜激情| 婷婷播播五月天| 欧美丰满熟妇BBB久久久| 婷婷激情中文综合| www色色com| 久久伦乱| 丁香六月五月天| 激情国产综合| 婷婷色基地| 欧美色偷偷大香| av五月天婷婷丁香| 大香蕉操操| 超碰在线观看9| 成人中文字幕在线| 淫视馆aV二区一区| 91精品无码| 网色99| 天天搡日日搡aaaaⅩ| 丁香午夜天| 五月天大香蕉视频| 激情五月天影院| 九九色之九九色之88| 婷婷五月精品中文字幕| 丁香五月婷婷啪啪啪| 九色91国产| 婷婷综合五月天| 九九黄色网| 久久永久网址| 婷婷五月丁香第四色超碰在线| 99热99这里有免费的精品| 久婷婷视平| 干亚洲天堂| 丁香五月欧美| 亚洲色五月天是什么| 日本婷婷| 色波激情五月天| 亚洲妇女熟BBW| 思思热在线精品视频网站| 伊人网色婷婷五月天| 欧州色色| 夜夜夜天天操| 成人做爰高潮A片免费视频| 97久久香草精品视频| 久久三级视频| 天堂爱爱| 丁香婷婷久久综合在线| 欧美精品999| 日日撸夜夜操| 只有久久精品免费| 婷婷射图| 99久久婷婷国产综合精品电影| 婷婷亚洲综合| 日韩欧美一级大黄网站| 精品久热| 五月丁香六月婷婷网站| 9久久久久| 国产综合婷婷| 激情图片婷婷| 91久久电影| 亚洲综合五月| 91精品电影18T| 五月婷婷 婷婷五月 一区二区 久久久 | 3DAV亚洲香蕉久久 一区二区| 人人摸人人干| 天堂五月婷婷| 亚洲在线综合| av网站免费在线| 超碰色综合| 五月深爱婷婷| 婷婷五月色综合| 亚洲欧洲中文日韩久久AV乱码| 日日色综合| 婷婷五月成人色综合| 婷婷丁香五月在线观看91| 91婷婷色 | 91九色在线| 激情五月,激情综合网| 婷婷午夜激情| 九九黄色网| 六月五月久久丁香| 在线超碰91| 大香蕉五月天| www.99热视频| 丁香婷五月天| 九九九日本熟女| 激情小说五月天| 激情五月婷婷在线观看| 99.色| 五月天婷婷激情在线色图| 婷婷五月天网| 欧洲综合视频| 94干大香蕉| www.色综合.com| 九九久久这里只有精品XB| 亚洲乱码w在线观看| 五月婷婷色欲| 玖玖综合色| 成年人看Va免费视频| 婷婷少妇激情| 日韩性爱无码| 五月丁香六月激情| 久久婷婷五月天| 日本高清久| 天天爽综合网| 五月丁香青草综合啪啪| 四虎成人精品永久免费AV九九| 成人做爰高潮A片免费视频| 激情五月色播五月| 婷婷五月天成人基地| 久久宗合影| 色婷婷五月综合激情中文字幕| 色~性~乱~伦~噜| 99爱在线精品视频免费观看| 天天精品视频在线观看视频| 九九视频免费| 九九综合色| 99精品视频推荐| 五月天婷婷综合网| 丁香五月婷婷激情网| 97干在线免费| 99欧美热| 亚洲AV成人在线| 激情五月婷婷五月| 丁香六月色婷婷| 大伊久久| 天天檫天天爽| 六月香五月婷| 色欲日日躁| 综合婷婷| 日本熟女视频一区二区| 丁香五月区| 91岛国片| 91在线人| 男人的天堂av俄罗斯热| 第四色色六月色综合| A片女女女女女女BBBB| 婷婷俺去也| 六月婷婷激情| 激情五月婷婷综合| 99久在线精品99re8| 97香蕉人人在线观看| 九九爱精品网站| 日韩乱轮AV| 亚洲深喉aV| 亚洲国产精品二二三三区| 成人电影一区| 超碰人人色| 色情综合网| 99综合网| 天天日天天爽| 国产精品扒开腿做爽爽爽A片唱戏| 日韩成人电影AV| 99色色网| 国产一级视频a| 噜噜在线| 五月天婷婷小说| 狠狠久久婷五月| 99热综合网| 999婷婷综合| 欧美久久婷婷| 性爱久久| 五月婷婷黄色网址| 成人免费视频一区| 六月色 亚洲| 综合爱久久| 婷婷九九视频| 色九月婷婷| 色五月开心婷婷| 开心婷婷五月花| 色 五月婷婷基地| 九九九午夜影院成人| 婷婷综合激情五月综合| 五月丁香av在线| 人妻操在线看| 五月婷婷天| 第四色大香蕉| 欧美在线视频99| 天天日天天久久青青| 色9999综合久久| 射久久丁香五月| 六月婷婷综合| 五月丁香网av| 久操人| 久综合色| 玖玖视频福利| 丁香色情五月综合网站| 激情五月丁香婷婷| 亚洲婷婷五月天| 麻豆AV一区二区三区| 成人五月天。COM| 在线不卡中文字幕| 色婷婷视频| 色狠久| 综激情网| 色婷网站| 大香蕉免费9| 97碰操| 色六月婷婷| www.国产亚洲69ty.久久久久久久久久久久| 激情小说之五月| 亚洲色五月| 香蕉久久国产AV一区二区| 狠狠婷婷色综合| 思思久久99热只有频精品66| 五月丁香啪。| 99色啊| 欧美VA在线| 婷婷金品综合视频| 久久久久九九九九视屏小说88| 人妻激情在线| 婷婷丁香激情| 思思热视频在线观看| 99色综合久久| 婷婷色导航| 色婷婷六月天在线| 九月婷婷综合| 强辱丰满人妻HD中文字幕| 日本欧特黄色刺激一区影视久精品无码| 91丨九色熟女丨首页| 侠女刀之记忆电影在线看免费| 开心激情网在线| 色欲色香综合网| 色爆五月| 日本一级黄色电影| 深爱婷婷网| 大学生高潮无套内谢视频| 久久色午夜在线导航| 亚洲性天天| 99热在线只有精品| 激情小说色五月| 在线日本www| 综合五月丁香久久| 99精品国产在热久久| 丁香六月激情综合啪啪| 久久婷婷五月天激情四射| 99精品偷自拍| 热99免费在线| 久久久久久久合一狠狠做深爱| 狠狠干婷婷| 色五月大| 99视频精品全部免费看| 婷婷五月天成人网站| 亚洲熟妇无码乱子AV电影| 三年高清大片免费观看国语| 久热9| 五月婷激情| 午夜无码熟熟妇丰满人妻| 色婷丁香| 欧美 日韩 成人 在线| 婷婷五月丁香国产| 颜射 精品性爱av| 狠狠干综合| 色欲一区二区三区精品A片| 久热大香蕉| 五月婷婷影院| 最新AV在线观看| 淫荡综合网| 丰满老熟妇BBBBB搡BBB| 五月色婷婷综合色| 99色视频| 综合亚洲色色| 婷婷五月天开心网| 日韩精品一品二区三区的使用体验| 丁香五月aV| 五月婷婷激情网| 97资源碰碰| 六月婷婷激情图片| 99啊精典免费视频| www,超碰| 91视频综合网| 五月天婷婷激情| 麻豆精品| 99九九玖玖| 99视频日韩| 久久久久亚洲A∨成人乱码电影| 狠狠爱激情网| www.精品99| 天天五月天综合网址| 艳妇野外情欲放荡HD| 婷婷激情小说网| 色婷婷www| 亚洲思思热久| 激情五月婷婷| 日本99在线视频| 99这里热| 噜噜干日本| 99啪啪| 九九熱最新視頻| 人人草人人舔| 色色吧综合| 丁香久久| 久久ER视频com| 国产成人亚洲综合A∨婷婷| 丁香激情五月| 久久久18| 五月婷婷性爱| 久久婷婷五月天| 能看的AV网站| yiqicaoav| 婷婷六月综合基地| 五月婷婷婷综合网| 婷婷五月丁香五月| 深夜男女福利刺激影院一区| 亚洲五月婷婷| 色久五月| 日韩二区搞逼插逼毛片| 天天干、天天日日| 色情五月天导航| 新激情五月开心五月婷婷五月丁香五月| 97久久婷婷色| 亚洲五月婷婷| 五月天亚洲图片婷婷| www.婷婷| 国产99视频永久免费| 激情小说色五月| 天天肏天天插| 99热超碰人| 泰州成人视频| 色色色色区| 另类视频一区| 香蕉婷婷| 国产亚洲色婷婷久久99精品91| 亚洲在线操| 欧美色综合天天久久综合精品| 亞洲自怕| 人人肏逼视频在线一区二区| 深爱激情69热| 影音先锋男人av资源站| tingtingzonghewang| 五月丁香婷婷综合| 五月天丁香成人| 超碰在线9| www狠狠| 久草网大香视频| 激情综合网址| 性色欲情 网站| 久草婷婷网| 五月婷婷激情日本| 六月丁香花婷婷| 色五月婷婷777| 9热在线观看| 九九婷婷综合| 久久人妻精品| 99精品国产在热久久| 亚洲视频一区| 女同激情久久av久久| 99色在线| 五月伊人91| 色五月色五天色情网| 免费黄色AV| 亚洲电影在线观看| 99热亚洲| 色欲香综合网| 99超碰人人| 五月香婷婷| 婷婷五月天BBw| 99热在线观看免费中文| 三级99热| 1024操逼| 色色色色色网| 少妇性按摩无码中文A片| 久久996re热这里只有精品无码| 色婷婷五月综合色婷婷| 夜夜谢天天干| 婷婷五月综合久久中文字幕| 婷婷五月天777| 五月婷婷深深爱| 青青草青青草五月天| 丁香五月网址| 美女五月狠狠| 五月婷婷天天色| 亚洲愉拍99热成人精品| 婷婷自拍| 香蕉曰比| 99免费超碰在线| 激情五月综合网| 26uuu成人网| 噜噜噜噜在线| 人妻系列久久久久久久久久久| 青青操成人福利| 天天日天天爽夜夜爽| 热99只有里视频| 激情综合久久| 99热 在线播放| 亚洲精品一区中文字幕乱码| 丁香六月激情国产| 99视频在线观看视频| 丁香五月婷婷婷桃花影院| 五月天久久久| 午夜成人网站在线观看| 我爱婷婷五月天综合88| 五月久久婷婷丁香| 99碰在线视频| 91九色精品| 91碰操| 婷婷伊人五月天| 天堂中文国产| 91久久九久久九久久九久久九久久| 九九热这里只有精品556| 92国产福利| 91久久电影| 色婷婷色和| 丁香五月婷婷色综合| 国产毛片精品一区二区色欲黄A片 极品人妻VIDEOSSS人妻 | 婷婷五月天激情小说| 日本女人久久| 色播五月丁香婷婷| 免费色婷婷| 五月激情婷婷在线| www.激情| 九九99一区| 五月丁香激情婷婷综合| 色色日韩| 99热免费精品热久久66| 99精品久久| 色婷久久| 五月婷亚洲精品AV天堂| 黄色五月婷婷| 婷婷99狠狠躁天天| 岛囯综合激情网| 亚洲综合色婷婷文学| AV在线免费观看不卡| 国产精品国产| 久久丁香网| 色五月丁香五月| 亚洲成人高清在线| 色色五月天婷婷丁香| 99热伊人| 激情五婷精品网在线观看网址| 久久五月天影院| 风流少妇A片一区二区蜜桃| 伊人网碰碰| 婷婷五月丁香综合激情| 综合色图区| 思思久久99| 99热伊人| 色色色色色综合| 26uuu| 五月婷婷官网色| 久久亚洲无码| 日韩欧洲亚洲| 涩五月婷婷| 五月婷婷涩涩爱| 被强行糟蹋的女人A片| av国产精品| 九九热123| www.久久色.com| 第四色网婷婷| 五月玖玖| 激情五月婷婷啪啪| 99日本精品视频热| 丁香五月在线视频| 操一操| 天天操狠狠操| 久久偷拍综合五月天| 91人操人人人操人| 天天色视频| 尤物一区二区| aaa9区免费在线观看| 先锋资源91| 就要去操亚洲成人精品五月天丁香婷婷| 插插网爽妇五月丁香| 色婷婷社区| 伊人啪啪网| 亚洲av网站| 久久精品国产AV一区二区三区 | 香蕉久久国产AV一区二区| 人碰人人人玩91| 91综合在线视频| 婷婷综合色色| 深爱丁香激情| 激情六月天婷婷| 婷婷五月天基地| 色色97丁香婷婷五月天| 五月丁香激情综合网| 色综合五月婷婷狠狠干| 婷五月天| 99国产精品白浆在线观看免费| 五月丁香婷婷伊人日韩| 九热...av| 狠狠操狠狠爱| 日日狠狠久久偷偷四色综合免费 | 强壮公让我夜夜高潮A片视频| 超级久久久| 中文字幕 码精品视频网站| 日韩AV色色色| 99久久婷婷国产综合精品青桔| 天干天天干天天天天天| 婷婷在线播放| 久久综合激情| 久久蜜臀婷婷| 开心婷婷五| 五月丁香六月情婷婷久久| 中文字幕av在线播放| 亚洲色碰| 婷婷五月综合中文字幕| 六月婷婷综合激情| 婷婷日日天天| 国产99热| 久久99久久久久久久噜噜| 99久在线精品99re8热| 天天日日人| 十一月婷婷激情四射| 国产亚洲成AV人片在线观黄桃| 久久久久久久久久久jjjj| 国产超碰av| 天天人人天天爽| 久久99久久99精品免观看粉嫩| 99欧美| 极品嫩草| 亚洲综合视频网| 婷婷五月天另类网站| 九九99九九99| 综合激情四射一theav| www.婷婷| 色五月激情| 亚洲精品久久久久久久久久吃药| 五月丁香婷中文| 91av无码| 久久婷婷五月国产激情综合片| 五月丁香六月激情| 色综合婷婷99| 激情五月综合免费| 激情五月小说婷婷| 婷婷色五月大香蕉在线观看| 久久久久人妻中文| 少妇被下春药玩弄A片| 久热久| 天天高潮夜夜爽| 国产精产国品一二三在观看| 玖热精品综合视频| 巴基斯坦粉嫩无码视频| 亚洲综合九九| 狠狠se| 六月色五月天天婷婷| 色五月色图| 怡春院天天干| 亚洲色色在线| 思思热视频在线| 亚洲黄3级片网站欧美| 少妇婷婷五月天| 激情综合五月天| 色五月综合激情| 啪啪99| 99ER热精品视频| 五月激情丁香五月| 91成人品| 99久.| 久久婷婷五月天激情| 久久五月天网| av最新在线| 亚洲天天操| 久久日本wwww色| 午夜婷婷五月天| 五月婷婷av在线| 婷婷综合激情五月中文字幕| 婷婷六月丁| 淫视馆aV二区一区| 色综合九九| 2015WWW永久免费观看播放| 色五月丁香伊人五月| 欧美三级韩国三级日本三斤| 五月婷婷六月奇米网丁香| 中文字幕免费高清电视剧| 亚洲AV影片在线观看| 亚洲人成网站999综合| 天天射夜夜骑| 97久久婷婷色| 婷婷久久亚洲| 97丁香视频| av人人干| 狠狠噪| 色综合综合网| 90色免费视频| 激情小说视频图片网| 99热黄| 欧美成人性爱网| 很很色丁香久久停停| 五月激情视频网| 97色干在线观看| 六月激情婷婷色| 色五月首页| 久鲁鲁色网| 这里只有精彩视频| 成人婷婷五月天| 久久98| 26uuuu精品一区二区| 国产精品美女久久久久AV超清| 丁香五月老师| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 久久五月婷天天干| AA片在线观看视频在线播放| 欧美色色色色色色色色色色影视| 97影院一级片| 九九热这里只有精品23| 五月婷婷六月丁香综合在线| 91啪啪啪啪| 九九热啪啪| 热的五码久久精品| 国产全是老熟女太爽了| 再綫Av免费視品| 亚洲中文字幕av| 亚洲欧洲色色| 亚洲va久久久噜噜噜久久天堂| 夜夜爱网站| 午夜丁香久久久久久| 99精彩视频| 日韩成人AV在线| 欧美色五月| 五月激激网w'w'w| 五月婷婷综合成人| 啪啪99| 天天综合亚洲综合网天天αⅴ| 免费观看全黄做爰的视频| 丁香五月播播| 9久久精品视频| 噜噜狠狠色| 国产免费一区二区三州老师F1F1……| 天堂久久精品| 中文久久婷婷| 亚洲操逼网| 夜夜天天久久婷婷| 99热99思午夜精品| 婷婷五月视频| 91综合国免费久入| 婷婷99狠狠| 激情五月天www| 99 re视频一区| 亚洲色五月婷婷| 亚洲亚洲永久无码777777| 色婷婷www| 亚洲最大在线| 婷婷之六月丁香| 偷偷操99| 婷婷五月天777| 丁香五月天堂亚洲社区| 五月婷婷丁香瑟瑟视频| 99精品视频偷拍| 精品人妻一区二区三区在| 91狠狠色色丁香婷婷综合久久| 久久色天堂| 夫妇交换刺激做爰| 激情网五月天| AⅤ色区| 日本99在线视频| 99在线小视频| 丁香五月在线观看完整版| 亚洲av成人电影在线观看| 狠狠干天天内射| 99热免费18| 色婷婷网| 四色99久久| 综合xx网| 任你搞网站| 亚洲中字AV电影在线网站| 天天搽天天射| 丁香视频| 综合网色| 无码99| 久久99热 这里有精品| 91成人电影| 玖玖九九超碰| 婷婷五月天国产在线播放| Av性爱网站| 成人丁香色| 996黄色片| 色欲一区二区三区精品A片| 大香蕉五月天婷婷| AV操操操| 欧美婷婷五月天综合| 六月丁香激情综合网| www网站在线观看| 亚洲精品无码一区二区| 无码啪啪| 亚洲色婷婷五月天| 六月色丁香中文字幕| 天天综合 99久久婷婷| 嫩BBB搡BBBB榛BBBB| 激情丁香社区| 久久久区区一久久久久久| 九九Av| 婷婷综合一二三| 色欲一区二区三区精品A片| 六月婷婷激情| 亚洲人妻电影| 亚洲综合热| www.91久久| 怡春院久操| 任你搞在线观看视频| 久久婷婷七月丁香| 四LLL少妇BBBB槡BBBB| 99精品在线| 激情五月婷婷开心网| 这里只有视频精品| av大香蕉| 婷婷性爱| 99色婷婷视频| 超碰在线国产9| 大香蕉75线| 91人人看| 任我干视频在线观看| 日韩免费视频| 久久婷婷亚洲| 激情五月天社区| caop在线视频| 日本婷色| 五月草影视| 五月天婷a| 1995年关宝慧版蜘蛛女| 色五月天天| 五月天开心婷婷久久| 乱女乱妇熟女熟妇综合网站| 日韩av一区二区在线/日产精品久久久| 久久五月丁香| 久久久久婷婷| www.狠狠操| 亚洲色五月婷婷| 色色射| 激情五月婷婷五月| 亚洲久久激情| 亚洲中文字幕网| 五月婷久久| 久久一热| 亚洲视频色婷婷| 天天做夜夜爽| 婷婷五月丁香色综合| 久久亚洲天堂| 久久偷拍综合五月天| 天天操天天谢| 亭亭社区五月天| 天天色天天噜| 婷婷五月天.com| 天天综合色丁香| 丁香婷婷免费| 噜综合| 色婷婷视频| 五月丁香六月合| 丁香五月在线观看完整版| 久久精品亚洲一级牲爱综合 | 狼人婷婷久久| 粉嫩av蜜桃av蜜臀av| 99婷婷国产最新视频| 人人操av| 色综合久久88色综合天天99| 丁香五月社区| 操久久网| 五月婷久久| 九九热青草| 99丁香婷婷综合网| 97超碰色| 久久精品婷婷五月丁香| 激情色色| 亚洲色情一区二区三区四区| 丁香婷婷色五月天| 欧美va在线观看| 日日操天天| EEUSS鲁片一区二区三区| 超碰操网| 人妻熟人中文字幕一区二区| 婷婷综合久久综合| 91九色成人原创视频| 91嫩草久久| 九九精品热| 婷婷五月精品中文字幕| 久久这里只有精品99| 六月丁香激情网| www.99热国产| 怡红院成人AV| 九九人人操| 色激情综合狠狠婷婷| 丁香五月婷婷俺也要去| 婷婷五月天AV在线| h在线看免费版在线看| 4399无码视频二区| 国产成人AV在线播放| 五月天色播网| 午夜激情五月天| 五月色色色| 色色操| 久久大香蕉丁香| 五月天婷婷色色网| 这里只有精品热| 激情纯色婷婷五月天在线不卡视频| 九九热视频免费观看| 狠狠干,狠狠操| 丁香五月色情| 免费91久久精品| 国产精品久久..4399| 亚洲色色色色| 亚洲天堂啪啪| 99热最新| 亚洲成人在线电影网站| wWW九九在线播放| 五月www| 精品色色| 情欲禁地| a九九热www| 五月婷深深爱激情网| www.五月丁香| 亚洲乱码精品久久久久..| 久久日九九| 五月丁香视频在线观看| 丁香五月婷婷在线| 亚洲性爱电影| 五月婷婷电影院| 欧美99热| 噜噜网免费视频| 久久9视频| 色色色色区| 六月丁香激情最新更新| 五月婷婷偷拍| 热99玖玖99玖玖99九九| 色综合99| 人人播| 日韩av手机在线观看| 啊V视频在线观看| 深爱激情网噜噜色| 开心激情网五月天| 色婷婷在线视频| 五月丁香激| 婷婷丁香五月天中文字幕| 超碰在线人妻| 熟美女麻豆| 99亚洲大片精品永久在线观看| 夜夜 操无码| 97人人干。| 五月丁香六月激情狠狠| 九九在线精品| 日本97在线视频| 亚洲婷婷激情五月天| 精品一二三区久久AAA片| 久久婷狠狠色| 五月天婷婷爱| 国内精品99| 99久久国产成人精品| 久热无码| 国产.亚洲.欧洲视频在线| 激情五月色综合| 国产亚洲成AV人片在线观黄桃| 日韩操人| 久久婷婷丁香| 97色一二三| xxx综合在线| 婷婷丁香五另类网站| 久久99三级在线视频| 久久女人天堂| 久久婷婷视频| 人人综合色| 情涩婷婷五月天| 亚洲亚洲人成综合网络| 第2色五月婷| 色综合婷婷| 亚洲AV第二区国产精品| 超碰1999| 操逼综合激情网| 色婷婷五月天小说网| 久草热8精品视频在线观看| 日韩色色色色色| 亚洲综合1024| 夜夜爱伊人| 丁香五月影院| 久热久re| 99热这里只有精品4| 午夜激情四射影院| 精品久久66| 香港九九六区八区99| 色婷婷成人在线| 色情综合网| 九九家庭影院| 欧美在线干| 一本久道综合色婷婷五月| 99精品在线观看| 九九人人看| 色久五月天| 五月激情久久| 六月丁香激情网| 久久图色4| 99这里有精品视频| 婷婷五月丁香啪啪| 97热视频| 激情图片久久| 色综合天堂| 日本啪啪天堂| 任你草| 婷婷五月激情四月综合| 亚洲精品大片| av在线免费网站 | 无码九九| 色色射| 婷婷五月天成人网| 日韩AAAAA| 丁香五月花婷婷开心| 久久ww| 天天日天天添| 丝袜人妻| 五月天激情综合网俺也去| 日日干天天| 激情五月综合色婷婷| 亚洲操逼网| 日日鲁鲁夜夜爽爽| 蒲京久久无码视频| 天天摸天天舔天天天天爽| 99热欧美偷拍| 九九自拍网| 婷婷丁香久久| 天天干天天插| 天天添天天摸天天天天做| 男女激情久久| 久久色亭亭五月天| 亚洲AV网站| 五月婷婷激情久久| 香蕉婷婷| 五月丁香六月婷综合成人综合| 天天综合插插| www.夜夜操.com| 婷婷五月天亚洲天堂| 欧美人与性动交CCOO| 日本操逼九九九九58日本操逼| 婷婷9月天| 激情文学五月丁香六月婷婷| 91碰超| 五月天伊人| 思思久日精品视频| 婷婷丁香六月天激情四射网| 色婷婷六月天| 激情婷婷五月久久| 久久久全国免费视频| 九九这里只有精品| 五月天综合缴情网网站0| 玖玖婷婷免费| 日韩综合天堂| 九九热这里只有精品5| 国产超碰在线| 人人妻久久妻| 9月色婷婷| 五月天婷婷基地| 色婷五月天综合网| 久久五月丁香| 亚洲午夜在线视频| www.91九色| 丁香六月婷婷一区| 亲子乱av一区二区三区的| 色999五月色| 激情综合网亚洲色图| 在线视频激情网站| 日本99久久| 深爱激情婷| 天天日天天做天天舔| 婷婷丁香91综合| 99九九在线精品热动漫| 无码G高清天| 色婷婷亚洲综合网站| 丁香五月婷婷AV在线| 91黄址| 色噜噜狠狠色综无码久久合欧美| 69堂午夜视频最新地址| 色五月色情| 日本三级日本三级99| 丁香婷婷噜噜| 色五月天天在线观看资源站| 97久操| 国产成人网| 六月天丁婷婷| 色你久久| 九九热精品| 日日夜夜狠狠| 狠狠操天天操天天操| 五月婷婷之综合激情在线| 99热这里只有精品4| 欧洲激情精品婷婷| 激情播丁香| 九九 激情 网| 色欧美一级| 99久在线精品99re8热| 婷婷五月18永久免费视频| 丁香五月婷婷深五月| 俺来也狠狠| 夜夜干天天操| 丁香五月综合| www,婷婷五月天777me,com| 五月天综合久久| 亚洲视频另类| 97色碰| 亚洲综合网激情小说| 伊人婷婷大香蕉| 欧美97超碰| 五月婷久久| 欧美色九| 夜夜天天天天天干天天爽| 色狠狠综合| 超碰免费大香蕉| 98热精品| 五月停停99|