99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Linux虛擬文件系統(tǒng)深度解析:/dev、/proc、/sys實戰(zhàn)指南

Linux虛擬文件系統(tǒng)深度解析:/dev、/proc、/sys實戰(zhàn)指南 用了這么多年Linux/dev、/sys、/proc這三個目錄幾乎天天都在打交道但你有沒有真正想過它們到底是誰創(chuàng)建的、底層跑的是什么機制、為什么有的文件能直接cat出信息、有的文件寫進去一個數(shù)字系統(tǒng)行為就變了這篇文章不打算講教科書上那種照本宣科的科普而是從一個實際運維和開發(fā)者的視角把這三大虛擬文件系統(tǒng)的來龍去脈、核心設計、實操玩法以及我踩過的坑一次性講透。對于剛接觸Linux的朋友這三個目錄是繞不開的“詭異存在”——它們不占用磁盤空間文件大小經(jīng)常是0可偏偏是系統(tǒng)運行的核心樞紐。對于有經(jīng)驗的工程師理解這幾個目錄的內(nèi)部邏輯不只是為了面試更是排查硬件故障、調(diào)整內(nèi)核參數(shù)、做性能分析的基本功。我盡量用類比和現(xiàn)場實例把背后的原理講明白讀完你再去敲ls /dev、cat /proc/meminfo、find /sys/class感官會完全不一樣。1. 三個目錄的整體定位與設計思路1.1 它們不是普通目錄而是“虛擬文件系統(tǒng)”的掛載點第一次接觸Linux的人往往會問為什么/dev、/proc、/sys在df -h里看不到占用空間卻又能“存”東西答案很簡單它們根本不是磁盤上的目錄而是內(nèi)核在內(nèi)存中構(gòu)建出來的虛擬文件系統(tǒng)掛載到了對應路徑。你可以用mount命令確認一下常見的輸出類似這樣$ mount | grep -E /dev|/proc|/sys devtmpfs on /dev type devtmpfs (rw,nosuid,relatime,size65052k,nr_inodes65052,mode755) proc on /proc type proc (rw,nosuid,nodev,noexec,relatime) sysfs on /sys type sysfs (rw,nosuid,nodev,noexec,relatime)注意它們的文件系統(tǒng)類型分別是devtmpfs、proc、sysfs都不是ext4或xfs這種真正的磁盤文件系統(tǒng)。換句話說你“看到”的文件、目錄、屬性都是內(nèi)核按需生成并呈現(xiàn)在你面前的背后沒有物理存儲介質(zhì)。這個設計思路很妙對用戶態(tài)程序訪問設備信息、進程狀態(tài)、內(nèi)核參數(shù)統(tǒng)一走“打開文件、讀寫文件”這套熟悉接口不用發(fā)明新API也不用手寫一堆ioctl調(diào)用。1.2 三個目錄的分工設備節(jié)點、進程信息、設備模型說白了一句話記法/dev是“設備的入口”/proc是“進程與內(nèi)核的臨時窗口”/sys是“設備與驅(qū)動的結(jié)構(gòu)化視圖”。三者緊密關聯(lián)但定位不同。/dev提供設備訪問節(jié)點。你想讀寫硬盤、串口、聲卡都是打開/dev/下面的某個文件。這里核心是“能操作”是向磁盤、硬件驅(qū)動發(fā)請求的通道。/proc提供進程級別和內(nèi)核級別的運行時信息。比如系統(tǒng)負載、內(nèi)存使用、每個進程的映射、命令行參數(shù)。核心是“看狀態(tài)、改參數(shù)”最早的動態(tài)內(nèi)核參數(shù)入口就在這里。/sys提供設備、驅(qū)動、總線之間關系的結(jié)構(gòu)化視圖。核心是“管設備”它把內(nèi)核設備模型暴露出來你能看到一塊SSD掛在哪個控制器下、某個驅(qū)動綁定哪個設備也能在運行時調(diào)整設備級參數(shù)比如風扇轉(zhuǎn)速、屏幕背光。如果還不直觀打個比方/dev像一個小區(qū)大門口的門禁設備你刷個卡就能進出具體單元/proc像是物業(yè)中心的公告欄上面實時貼著整個小區(qū)的運行數(shù)據(jù)有些欄位還允許你貼新通知來調(diào)規(guī)則/sys則是整個小區(qū)的規(guī)劃沙盤每一棟樓、每一條管道、每一個設備都按樹狀結(jié)構(gòu)擺得明明白白還能撥動沙盤上的旋鈕做實時調(diào)整。1.3 為什么內(nèi)核不把這些功能做成普通命令而要做成文件這個設計是UNIX哲學的一部分“一切皆文件”。做成文件的好處顯而易見shell、Python、Perl甚至grep、awk、dd都能直接處理不用專門寫復雜的用戶態(tài)工具。想獲取CPU信息直接cat /proc/cpuinfo想給指定PID發(fā)個狀態(tài)查詢cat /proc/1234/status。這在排查生產(chǎn)問題時有巨大優(yōu)勢——很多場景下系統(tǒng)已經(jīng)嚴重卡頓連常規(guī)工具都起不來但cat一個文件這種原子操作仍然可以執(zhí)行這些虛擬文件系統(tǒng)此時就是最后的救命通道。2. /dev目錄設備文件系統(tǒng)的入口與實操要點2.1 字符設備、塊設備與設備號/dev中絕大部分文件對應兩類設備字符設備和塊設備。字符設備以字節(jié)流方式讀寫比如鍵盤、串口、聲卡每次讀寫不經(jīng)過緩存層典型代表是/dev/null、/dev/tty。塊設備以固定大小的塊為單位讀寫數(shù)據(jù)可以走緩存、排隊、合并典型代表是磁盤/dev/sda、分區(qū)/dev/sda1。怎么快速區(qū)分ls -l第一列是c就是字符設備b就是塊設備。而設備文件最核心的標識其實是“設備號”也就是主設備號和次設備號$ ls -l /dev/sda /dev/tty /dev/null brw-rw---- 1 root disk 8, 0 1月 5 10:00 /dev/sda crw-rw-rw- 1 root tty 5, 0 1月 5 10:00 /dev/tty crw-rw-rw- 1 root root 1, 3 1月 5 10:00 /dev/null這里8, 0表示主設備號8、次設備號0。主設備號對應驅(qū)動類型內(nèi)核靠它找到正確的設備驅(qū)動次設備號用于區(qū)分同一驅(qū)動下的不同物理設備或邏輯單元。/dev/sda和/dev/sdb共享主設備號8都是同一套SATA/SCSI磁盤驅(qū)動只是次設備號不同。注意設備文件本身只是“門牌”不包含設備數(shù)據(jù)。真正干活的是內(nèi)核驅(qū)動。你可以把設備文件理解成一個指向驅(qū)動程序的門牌號應用程序open它時內(nèi)核根據(jù)門牌號找到驅(qū)動之后read/write就是驅(qū)動和硬件在交互。2.2 devtmpfs與udev設備節(jié)點的自動生成機制在老版本Linux里要在/dev下創(chuàng)建設備節(jié)點需要手寫mknod還得知道主次設備號維護成本極高。現(xiàn)代系統(tǒng)采用兩套機制配合內(nèi)核啟動早期掛載devtmpfs由內(nèi)核自身為已經(jīng)識別的設備自動創(chuàng)建設備節(jié)點保證基本可用隨后udev守護進程接管根據(jù)內(nèi)核發(fā)出的uevent事件和規(guī)則文件做符號鏈接、權(quán)限設置、命名調(diào)整。比如一塊USB盤插上內(nèi)核識別后自動在/dev下生成/dev/sdbudev再根據(jù)/dev/disk/by-uuid/之類的規(guī)則補建友好的穩(wěn)定鏈接。手動創(chuàng)建設備節(jié)點的能力仍然值得掌握某些容器環(huán)境、嵌入式裁剪系統(tǒng)或恢復場景下設備節(jié)點缺失很常見一條mknod命令能救命mknod /dev/testnull c 1 3這條命令創(chuàng)建一個字符設備主設備號1、次設備號3恰好對應null設備。創(chuàng)建完你可以echo hi /dev/testnull完全不會報錯。反過來如果忘記指定主次設備號或搞錯類型open設備會直接失敗。這也是排查“設備節(jié)點存在但無法訪問”問題時的關鍵步驟——節(jié)點只是入口入口對了驅(qū)動不對一樣出錯。2.3 常見設備節(jié)點及用途速查長期和Linux打交道的開發(fā)者至少要和下面這些設備節(jié)點熟起來設備節(jié)點類型常見用途/dev/sda、/dev/nvme0n1塊設備整塊磁盤訪問配合fdisk、parted分區(qū)/dev/sda1、/dev/nvme0n1p1塊設備磁盤分區(qū)/dev/ttyS0字符設備串口調(diào)試嵌入式設備、網(wǎng)絡設備/dev/tty字符設備當前終端echo test /dev/tty直接顯示在當前屏/dev/null字符設備丟棄一切寫入數(shù)據(jù)讀取返回EOF最常見的“黑洞”/dev/zero字符設備讀取永遠返回0字節(jié)用于清零或生成空數(shù)據(jù)/dev/random、/dev/urandom字符設備隨機數(shù)源urandom性能更好現(xiàn)代系統(tǒng)兩者基本等價/dev/loop0塊設備回環(huán)設備將鏡像文件模擬成塊設備掛載iso、ext4鏡像必備/dev/mapper/xxx塊設備設備映射器LVM、dm-crypt生成的邏輯設備實操中一個高頻用法是用/dev/zero配合dd生成指定大小的臨時文件dd if/dev/zero of./alldata.bin bs1M count1024 statusprogress這會在當前目錄生成一個1G的全零文件經(jīng)常用來做稀疏文件測試、磁盤性能測試或者制造占位文件。同理把if/dev/urandom加進去就能生成隨機內(nèi)容文件。這個“文件即設備、設備即文件”的思路在處理數(shù)據(jù)時真的非常順手。2.4 /dev的實操排查思路業(yè)務上遇到“無法識別磁盤”的問題我的排查順序基本固定。先lsblk看內(nèi)核是否能發(fā)現(xiàn)設備再ls -l /dev/看節(jié)點是否存在。如果內(nèi)核發(fā)現(xiàn)了但節(jié)點沒創(chuàng)建多半是udev規(guī)則問題查看udevadm monitor抓取uevent確認規(guī)則是否攔截了命名如果節(jié)點存在但dd讀寫報錯再dmesg看看底層驅(qū)動有沒有I/O錯誤、鏈路是否正常。這里要特別強調(diào)不要手動在正常系統(tǒng)里亂刪/dev下面的設備節(jié)點再靠mknod重建因為udev規(guī)則和selinux上下文可能對不上重啟或拔插后反而更亂正常環(huán)境請讓udev管好它自己。3. /proc目錄進程與內(nèi)核狀態(tài)的信息中樞3.1 procfs的設計理念沒有文件的文件系統(tǒng)/proc在早期Linux中是個很特別的存在它不存數(shù)據(jù)而是在你打開某一文件、讀取某一目錄時內(nèi)核動態(tài)調(diào)用相應函數(shù)生成內(nèi)容。/proc下沒有磁盤塊、沒有inode一切都是“現(xiàn)算現(xiàn)賣”。所以你看到很多文件大小是0但cat依然能輸出一堆內(nèi)容——這就是虛擬文件系統(tǒng)的特征。/proc最初是為了進程信息而創(chuàng)建后來內(nèi)核參數(shù)也塞了進來逐漸成了大雜燴。這也是后來/sys被設計出來的原因之一/proc什么都有但結(jié)構(gòu)混亂、分類不清晰、權(quán)限粒度粗糙。3.2 /proc三大類內(nèi)容進程目錄、系統(tǒng)信息、內(nèi)核參數(shù)最核心的內(nèi)容分三類。第一類是/proc/[PID]/目錄每個運行中的進程都有一個以其PID命名的目錄。進入任意一個進程目錄status看狀態(tài)、cmdline看完整命令行、environ看環(huán)境變量、fd/看打開的文件描述符、maps看內(nèi)存映射。第二類是系統(tǒng)級信息比如/proc/cpuinfoCPU型號與特性、/proc/meminfo內(nèi)存使用細節(jié)、/proc/loadavg系統(tǒng)負載、/proc/uptime開機時長與空閑時長、/proc/interrupts中斷統(tǒng)計。第三類是內(nèi)核可調(diào)參數(shù)目錄/proc/sys/它與sysctl命令對應幾乎是內(nèi)核運行時調(diào)優(yōu)的主戰(zhàn)場。舉一個實操例子線上排查CPU使用率異常時除了top我會直接看進程的/proc/[PID]/status和/proc/[PID]/schedstat判斷是不是發(fā)生了綁定異常或大量自愿上下文切換??茨硞€進程打開了哪些文件則可直接ls -l /proc/[PID]/fd比lsof在某些受限環(huán)境里更原始可靠$ ls -l /proc/1234/fd | head total 0 lrwx------ 1 user user 64 1月 5 10:00 0 - /dev/null lrwx------ 1 user user 64 1月 5 10:00 1 - /var/log/app.log lr-x------ 1 user user 64 1月 5 10:00 2 - /etc/app.conf3.3 內(nèi)核參數(shù)調(diào)整/proc/sys與sysctl的關系/proc/sys下面的文件很多可以直接寫寫入即生效。但要注意兩點第一寫操作需要root權(quán)限第二這樣修改是臨時的重啟后丟失。持久化要通過/etc/sysctl.conf或/etc/sysctl.d/下的配置文件。sysctl命令本質(zhì)上就是在讀寫/proc/sys比如以下兩條命令是等價的echo 1 /proc/sys/net/ipv4/ip_forward sysctl -w net.ipv4.ip_forward1在修改內(nèi)核參數(shù)前我強烈建議先確認當前值和上下文。比如要啟用IP轉(zhuǎn)發(fā)先cat /proc/sys/net/ipv4/ip_forward再確認網(wǎng)絡架構(gòu)中是否存在多個網(wǎng)卡之間需要轉(zhuǎn)發(fā)流量否則開著轉(zhuǎn)發(fā)在安全敏感環(huán)境里可能有風險。更常規(guī)的做法是修改/etc/sysctl.conf后執(zhí)行sysctl -p這樣既能持久化也能檢查語法。另外/proc/sys下的參數(shù)命名規(guī)律很有用/proc/sys/net/ipv4/tcp_tw_reuse對應net.ipv4.tcp_tw_reuse就是把路徑中的/proc/sys/前綴和斜杠換成點。3.4 一個需要注意的特殊文件/proc/kcore 與 /proc/sysrq-trigger/proc/kcore是內(nèi)核核心內(nèi)存的映像大小跟你物理內(nèi)存差不多但別拿cat去讀也別隨手cp否則系統(tǒng)會卡死。要分析內(nèi)核內(nèi)存請用crash、gdb等專門機制或者直接繞過這個文件。另一個常被忽視的/proc/sysrq-trigger則是系統(tǒng)卡死時的終極逃生門允許你向內(nèi)核發(fā)送特殊序列命令。比如系統(tǒng)完全無響應但還能按下鍵時執(zhí)行echo s /proc/sysrq-trigger echo u /proc/sysrq-trigger echo b /proc/sysrq-triggerecho s同步磁盤echo u只讀方式重新掛載文件系統(tǒng)echo b立即重啟。整套組合拳在運維現(xiàn)場曾經(jīng)救過我一回。生產(chǎn)環(huán)境要提前確認內(nèi)核/proc/sys/kernel/sysrq的值不為0否則sysrq-trigger會被禁用。3.5 /proc容易踩坑的細節(jié)有一個我踩過不少次的坑解析/proc/meminfo時不同內(nèi)核版本字段名稱會有變動比如MemFree里可能包含被內(nèi)核回收的緩存如果直接拿它判斷“內(nèi)存還夠不夠”經(jīng)常會被誤導。我更習慣看MemAvailable這是內(nèi)核經(jīng)過算法預估的可分配內(nèi)存比MemFree更有參考意義。另一個坑是/proc/[PID]/status中的VmRSS只能代表物理內(nèi)存駐留量無法完全等價于程序真正占用的內(nèi)存如果程序有共享庫映射VmRSS會重復計算共享部分精確分析得綜合smaps里的細分項。4. /sys目錄設備模型與內(nèi)核對象的結(jié)構(gòu)化視圖4.1 sysfs的誕生對癥下藥解決/proc的混亂/sys對應的文件系統(tǒng)叫sysfs出現(xiàn)在Linux 2.6時代核心目的就是“收拾”/proc這個雜物間。它把內(nèi)核的設備和驅(qū)動模型以嚴格的層次結(jié)構(gòu)暴露給用戶空間。如果說/proc是按用途堆文件那么/sys就是按“設備拓撲”建目錄。你在/sys下看到的目錄名稱背后都對應著內(nèi)核中的kobject對象目錄的嵌套結(jié)構(gòu)對應kobject之間的父子關系。這也是理解/sys最關鍵的一點它不是隨便設計的目錄樹它是內(nèi)核設備模型在用戶態(tài)的真實映射。4.2 核心子目錄速覽/sys/devices、/sys/bus、/sys/class、/sys/block/sys/devices是最底層真實的設備樹包含系統(tǒng)總線PCIe、USB、平臺總線等上所有真實設備路徑冗長但最完整。/sys/bus按總線類型組織是查找設備和驅(qū)動綁定的近路比如/sys/bus/pci/devices/下列出所有PCI設備每個設備目錄下有driver符號鏈接指向當前綁定的驅(qū)動。/sys/class按設備功能分類比如net下是網(wǎng)卡、block下是塊設備、backlight下是屏幕背光、thermal下是溫度傳感器這種分類最貼近日常使用。/sys/block是塊設備專屬視圖軟鏈到真實設備路徑。查看某個nvme固態(tài)硬盤的信息可以這樣$ ls -l /sys/class/block/nvme0n1 lrwxrwxrwx 1 root root 0 1月 5 10:00 /sys/class/block/nvme0n1 - ../../devices/pci0000:00/0000:00:01.0/0000:01:00.0/nvme/nvme0/nvme0n1順著這條軟鏈能看到它掛在哪個PCI控制器下進而判斷是不是接了轉(zhuǎn)接卡、走的是不是直通CPU的PCIe通道。4.3 實用場景通過/sys讀取設備狀態(tài)與調(diào)節(jié)參數(shù)/sys里很多文件是只讀的但不乏可寫的高頻參數(shù)入口。比如查看CPU頻率策略直接讀/sys/devices/system/cpu/cpu0/cpufreq/scaling_cur_freq單位是kHz。調(diào)整最大最小頻率則寫對應文件echo 2400000 /sys/devices/system/cpu/cpu0/cpufreq/scaling_max_freq再比如查看硬盤溫度部分NVMe設備支持cat /sys/class/nvme/nvme0/device/hwmon/hwmon*/temp1_input輸出的是毫攝氏度除以1000就是正常攝氏度讀數(shù)。另一個高頻操作是背光亮度調(diào)節(jié)筆記本場景下/sys/class/backlight/intel_backlight/brightness可以直接寫數(shù)值比在桌面環(huán)境里拖滑塊更快多級腳本調(diào)光也常走這里。但切記這些寫入操作都是臨時的重啟后復位需要持久化請走systemd服務或?qū)挠布橄髮庸ぞ摺?.4 sysfs與uevent/udev的關系/sys不只是給人看的也是給用戶態(tài)事件機制用的。內(nèi)核檢測到設備插入或移除時sysfs會生成uevent事件udev通過netlink監(jiān)聽到這些事件后根據(jù)規(guī)則在/dev下創(chuàng)建設備節(jié)點、創(chuàng)建符號鏈接、設置權(quán)限。你可以在命令行手工觸發(fā)uevent重放讓udev重新處理某個設備這在調(diào)試設備規(guī)則時非常有用echo change /sys/class/net/eth0/uevent執(zhí)行后udev會重新處理eth0的change事件。調(diào)試網(wǎng)卡改名規(guī)則、權(quán)限規(guī)則時配合udevadm monitor看實時事件輸出整個鏈路清晰可見。所以/sys與/dev的關系可以理解為/sys是設備和驅(qū)動的“關系網(wǎng)”/dev是面向應用訪問的“操作門戶”而uevent是維護門戶的更新信號。4.5 使用/sys排查硬件問題的經(jīng)驗拿到一臺服務器懷疑網(wǎng)卡掉速或PCIe降速我會查/sys/bus/pci/devices/0000:xx:00.0/目錄下的link_speed、link_width對比設備原始能力和當前協(xié)商狀態(tài)。同樣命令cat /sys/class/net/eth0/carrier顯示1表示物理鏈路正常0表示沒插線或?qū)Ψ皆O備未啟動cat /sys/class/net/eth0/operstate則直接顯示up、down、unknown等狀態(tài)。遇到NVMe設備掉盤/sys/class/nvme/nvme0/device/下經(jīng)常能看到健康信息nvme smart-log也是讀同一套數(shù)據(jù)只是通過字符設備另外暴露兩者可以交叉驗證。5. 三個目錄的差異對比與整體協(xié)作5.1 一張表看懂三者核心區(qū)別對比項/dev/proc/sys文件系統(tǒng)類型devtmpfs、udev管理procsysfs核心內(nèi)容設備文件節(jié)點進程信息、內(nèi)核信息與參數(shù)設備、驅(qū)動、總線拓撲是否真實占磁盤否否否典型操作open、read、write設備cat查看、echo修改內(nèi)核參數(shù)cat查看、echo修改設備參數(shù)主要設計目的提供設備訪問入口進程與內(nèi)核運行時狀態(tài)結(jié)構(gòu)化設備模型與運行期配置內(nèi)容是否可寫多數(shù)不可寫/proc/sys下可寫部分屬性文件可寫持久性動態(tài)重建改動重啟丟失改動重啟丟失常用命令lsblk、fdisk、dd、mknodps、lsof、sysctl、catudevadm、cat、echo、find這張表基本可以覆蓋日常工作的認知。重點提示三者都不是永久存儲不要指望在里面保存數(shù)據(jù)。曾有同事把配置寫到/proc下面的臨時文件里重啟機器什么都沒了這種用法天然就是錯的。真正的配置要么寫到/etc要么通過systemd單元重啟后自動重建。5.2 三者在一次磁盤故障排查中的聯(lián)合用法我用一個非常典型的磁盤故障場景把三個目錄串起來。某次線上機器告警某塊數(shù)據(jù)盤讀寫超時。我先執(zhí)行l(wèi)sblk確認盤符為/dev/sdc接著cat /sys/class/block/sdc/device/state查看設備狀態(tài)發(fā)現(xiàn)狀態(tài)異常。隨后dmesg確認I/O錯誤再看cat /proc/diskstats統(tǒng)計該磁盤的IO錯誤計數(shù)最后smartctl -a /dev/sdc獲取SMART健康信息綜合判斷是物理磁盤即將損壞及時更換。整個過程涉及/dev、/proc、/sys互補/dev給出訪問入口/proc給出全局IO統(tǒng)計/sys給出設備與驅(qū)動狀態(tài)。少任何一個目錄排查效率和信息完整性都會大打折扣。5.3 容器環(huán)境下的新變化近年容器化普及后這三個目錄的行為出現(xiàn)了新差異。容器內(nèi)部的/proc和/sys通常并非宿主機全局視圖而是掛載了帶有命名空間隔離或只讀約束的副本。在容器里cat /proc/meminfo會看到宿主機的物理內(nèi)存但/proc/[PID]/下的很多進程在容器外的父進程視角完全不同早期版本的Docker默認以只讀方式掛載/sys部分子目錄導致在容器內(nèi)調(diào)節(jié)某些設備參數(shù)直接報Read-only file system。排查這類問題時要先mount | grep sysfs確認掛載參數(shù)不要想當然認為容器內(nèi)能改宿主機的設備參數(shù)。安全上這是合理限制也是Linux內(nèi)核持續(xù)演進的方向之一。6. 常見問題與避坑經(jīng)驗實錄6.1 誤刪/dev節(jié)點如何恢復偶爾會有人誤刪/dev/null、/dev/sda。正常系統(tǒng)下最快恢復方式是借助mknod重建前提是你知道正確的主次設備號和類型。比如恢復null設備rm -f /dev/null mknod /dev/null c 1 3 chmod 666 /dev/null執(zhí)行前用ls -l /dev/null查詢原屬性最為穩(wěn)妥。如果是磁盤類設備節(jié)點損壞優(yōu)先考慮重啟或觸發(fā)udev重放而不是手動mknod重建否則分區(qū)符號鏈接、磁盤組、設備映射器的依賴容易對不上。嵌入式和容器里沒有udev才需手動mknod這時明確自己系統(tǒng)里設備的主次設備號就是基本功了可以在同型號正常機器上查好了備用。6.2 為什么cat /proc/xxx發(fā)現(xiàn)文件大小是0這完全正常。虛擬文件系統(tǒng)沒有真實數(shù)據(jù)塊文件大小通常表示不了什么。讀取時動態(tài)生成內(nèi)容才是它的工作方式。所以不要因為ls -l /proc/meminfo顯示0就把它當成空文件直接用cat看內(nèi)容。相關地du -h /proc也毫無意義它會顯示0反而可能讓你誤判。6.3 修改/sys或/proc參數(shù)后重啟失效這不是bug而是設計。/proc/sys和/sys的可調(diào)參數(shù)屬于運行時設置以內(nèi)核內(nèi)存為存儲介質(zhì)重啟必然恢復默認。要實現(xiàn)持久化/proc/sys走/etc/sysctl.conf或/etc/sysctl.d/*.conf/sys設備參數(shù)沒有統(tǒng)一持久化入口一般通過systemd服務、rc.local或者udev規(guī)則在開機時重新寫入。我自己寫過一個專門調(diào)背光和CPU頻率閾值的systemd unitExecStart里逐行echo生產(chǎn)環(huán)境中穩(wěn)定復現(xiàn)比依賴具體桌面環(huán)境可靠得多。6.4 修改/sys或/proc提示Permission denied兩種常見情況非root用戶權(quán)限不足文件本身被內(nèi)核標記為只讀。對于root用戶仍報拒絕的多數(shù)是掛在只讀屬性上echo前先cat /sys/.../文件確認當前內(nèi)容再判斷內(nèi)核是否允許寫。有些參數(shù)受其他子系統(tǒng)約束比如CPU頻率受熱保護策略干預即使寫入了也會被內(nèi)核自動糾正反復改不生效時先看dmesg和thermal相關文件。6.5 /dev/random和/dev/urandom到底用哪個現(xiàn)代Linux內(nèi)核里/dev/random和/dev/urandom的差異已經(jīng)大幅縮小。早期隨機數(shù)池估計不足時random讀多了會阻塞urandom不會今天兩者底層共享相同的CRNG密碼學隨機數(shù)生成器僅在啟動初期存在理論差異。絕大多數(shù)業(yè)務場景直接用/dev/urandom即可需要高安全性且能容忍阻塞的場景才考慮讀/dev/random。生成密鑰或會話令牌時優(yōu)先建議直接用內(nèi)核提供的getrandom()系統(tǒng)調(diào)用而不是手動打開設備文件更簡潔也更規(guī)范。6.6 在/sys或/proc里誤寫危險參數(shù)導致系統(tǒng)異常/proc/sys/kernel/panic被設為0以上時內(nèi)核panic后會自動重啟/proc/sys/vm/drop_caches寫入1、2、3會丟棄頁緩存、目錄項或inode緩存對啟動時內(nèi)存吃緊的系統(tǒng)可能造成短暫卡頓/sys下某些電源管理文件寫錯可能導致設備直接掉電。因此任何寫操作特別是生產(chǎn)環(huán)境一是提前備份原值二是先確認文件語義三是寫好回滾方案。如果只是臨時測試建議在測試機或容器環(huán)境內(nèi)驗證再推廣到生產(chǎn)。7. 一點實操心得這三個目錄用熟了你對Linux的認知會有實質(zhì)提升。我最深的體會是它們不是三個獨立零散的文件夾而是內(nèi)核向用戶態(tài)開的三扇窗/dev提供出入口/proc反映運行時狀態(tài)/sys描述設備關系。排查思路的起點就是先想清楚當前問題該看哪扇窗而不是盲目地在所有目錄里翻找。最后再分享一個提高效率的小技巧善用find在兩個虛擬目錄組合搜索。比如你想找出所有可調(diào)亮的背光設備一條命令find /sys/class -maxdepth 2 -name brightness -type f直接定位想確認哪些進程還打開著某個已經(jīng)被刪除的文件find /proc/*/fd -lname *deleted*能快速掃出來。這些操作沒有復雜的工具依賴純shell就能完成在救援模式下尤為好用。多讀、多試、多對比/dev、/proc、/sys會成為你最順手的Linux排查利器。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
jizzdr| 日日干天天爽| 一本色道久久88加勒比—| 五月婷婷久久久| 九九爱激情| 色情综合网| 久操人| 婷婷五月天视频| 色婷婷AⅤ| 99热99美国在线观看| 成人免费在线电影| 久久久区区一久久久久久| 久久大香蕉丁香| 国产精品久久7777777精品无码| 黄色高清无码| 色五月色五天色情网| 大香蕉婷婷丁香天堂AV| 黄色热99| 丁香九九九九| 色五月激情综合| 人操综合| 亚洲无码99| 色播五月丁香综合| 色色色在线观看| www.五月婷婷| 亚洲另类久久| 91婷婷在线| 久热免费视频| 色欲婷婷五月天丁香| 久久精品99| 开心五月色婷婷综合开心网| 99精品在线观看| 亚洲天堂99| 伊人玖玖婷婷| 99精品偷自拍| 欧美在线97| 99re这里只有精品9| 五月丁香综合网| 五月丁香啪啪啪综合网| 亚洲第一成人AV| 啪啪操超碰| 免费视频舔| 8050一级网| 色老久久| 五月婷婷久| 性色婷婷| 五他月天啪啪啪| 国产日比| 丁XX 成人| 人人舔人人色人人高潮| 久久新地址| 美国少妇性做爰| 26uuu成人网| 婷婷激情五月天天天开心| 禁片二区| 国产又色又爽又黄又免费| 激情五月天社区| 国产人妻操逼| 国产激情在线| 日本在线观看aaa 99| 一起草av| 久久99精品久久久久久噜噜| 伊人五月丁香| 国产丁香五月天婷婷| 色婷婷色综合激情91| 另类小说五月天| 操操碰| 国产免费性爱| 99热啪啪| 国产色色视频| 九九热免费| 国产资源91在线| 婷婷色导航| 国产三级秋霞| 播播网色播播| 九九久久精品| 色99色| 色女伊人| va亚洲中文在线| 亚州激情在线视频| 五月激情五月丁香| 天天做天天爱高潮片| 亚洲久艹| 丁香五月ⅤA久久久| 99久在线精品99re8热| 玖玖婷婷综合| 天堂网啪啪| 99re最新地址| 尔尔AV一区| 青青草青青草五月天| 欧美99视频| 99er精品视频| 深情五月天| 五月天婷婷六月激情网| 久久作爱| 激情五月婷婷在线| 99日在线视频| 疯狂做受XXXX高潮A片动画| 丁香六月天之亚州热女| 毛片新网地| 人人97碰| 激情五月丁香色色去久久| 最近中文字幕2019视频1| 五月丁香成人| 久久超视频| www.sezonghe| 五月天婷婷黄色| 激情精品久久| 丁香激情合作五月| 六月婷婷狠狠做| 久久五月天激情婷婷| 99久久婷婷五月综合| 丁香婷婷十月| 人妻激情在线| 丁香六月成人| 五月天亭亭俺也| 婷婷六月丁香久| 国产综合婷婷| 五月婷婷综合久久| 超碰成人在线观看| 99热这里只有精品中文字幕| 亚洲天堂爱爱| YW无码| 激情五月婷婷| 欧美性爱一区| 狠狠干 狠狠操| 色综合激情| 搡BBBB搡BBB搡18| 9伊人网| 欧洲激情五月天婷婷| 久久只有18视频| 六月99天天婷婷激情综合| 被强行糟蹋的女人A片| 色综合久久88| 五月天激情av| 99∨VTV| 久久sp免费视频| 色五月人妻| 思思热久久婷婷五月天| 亚艹艹| 激情小说五月欧美亚洲丁香| 久久99热免费最新版| 丁香五月婷婷AV在线| 五月激情六月综合| 亚洲无码播放| 婷婷五月天综合网| 九九色黄色| 婷婷丁香五月天熟女丝袜| 99色视频在线观看最新| 毛片毛片毛片毛片| 色黄啪啪| EEUSS鲁片一区二区三区| 婷色影院| 亚洲韩国日产综合AV| 99热丁香| 久久九九国产精品怡红院| 丁香五月,激情五月,深爱五月| 五月丁香婷婷综合网| 国产亚洲精品AAAA片APP| 99热免费精品| 五月丁香无码| 超碰免费大香蕉| 天天干夜夜谢| 久久婷婷五月天激情| 人人人va亚洲视频在线| 日操夜操天天操不卡| 五月天色图| 欧美乱码国产一级A片| 激情av| 99这里只有精品|v| 五月丁香六月片| www.99操| 538午夜激情| 秋霞网在线观看理论91| 婷婷亚洲综合| 99无码视频| 婷婷无五月无码视频| 嫩草视频| 狠狠搞五月天| 丁香六月天堂| 韩日AV片| 97人妻碰碰碰久久香蕉| 五月婷婷丁香五月婷婷丁香| 午夜丁香六月婷| 99精品久久久久久久| 成片免费播放| 婷婷五月花西瓜| 国产成人综合在线| 色婷婷婷综合五月天| 久久婷婷五月丁香网| 肏屄色播伊人97婷婷| 亭亭五月丁香五月天激情| 婷婷中文综合网| 五月丁香拍拍激情综合| 色操综合| 日本在线视频播放91| 国产婷婷综合| 天堂久久性| 五月丁香好婷婷A片网| 熟女网站久久| 色综合激情| 五月婷婷内射网| A网在线欧洲| 久久久99免费视频| 日本啪啪网| 五月天综合| www.婷婷com| 蜜桃婷婷狠狠久久| 无码色色| 深爱激情五月婷婷| 99爱在线视频| www.精品99| 亚洲视频图片婷婷五月| 亚洲成人综合在线| 99视频在线啪| www.第四色99| 色五月涩涩婷婷蜜桃| 亚洲色五月天| 丁香五月婷婷激情97| 日本操B视频| 精品九九视频| 久久丁香五月| 亚洲色久| 9999热在线免费观看| 99热久草| 久久久久久人妻| Xx色综合| 欧美色久| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 伊人婷婷色激情丁香| 色五月综合| 开心五月色婷婷综合开心网| 999婷婷综合| 综合久| 激情网婷婷婷| 91九色无码内射| 日本a片网址| 成人精品视频99在线观看免费| 色婷婷色婷婷五月| 激情五月伊人婷婷| 天天操天天曰天天射| 激情五月天视频| www.ppypp| 六月丁香综合| 婷婷午夜激情| 99超级碰碰| 亚洲av成人一区二区电影在线| 国产阿姨日皮艹逼内射视频| 五月丁香综合激情| 丁香 婷婷 激情 综合 五月| 8区视频在线| 丁香久久九九99| 99愛国产| 五月婷婷之综合激情在线| 操日本人妻视频| 久久久精品人妻| 国产va在线视频| 视频在线免费观看欧洲乱码| 中国无码av| 日本久热| 丁香婷婷六月| 婷婷五月天成人动漫 | 99er6热在线观看精品6| 五月丁香婷婷激情图片| 久久3级片| 在线观看av网站| 久久性爱网站| 色播五月婷婷综合| 无码人妻少妇色欲AV一区二区| 99热6色| 思思视频这里是精品| 狠狠情色| 色五月情| 精品人妻伦九区久久AAA片| 激情图片五月天| 免费观看欧美成人AA片爱我多深| 99riav 亚洲| 春色激情第四色| 狠狠干狠狠干| 激情五月丁香六月婷婷| www久久久久久| 天天久综合| 99热一本久道| 五月天久久综合婷婷| 97超级碰碰碰| 亚洲AV成人在线| 色婷婷深爱五月| 91久久九久久九久久九久久九久久 | 日韩人妻AV在线| 成人做爰高潮A片免费视频| 亚洲日韩成人三级av| 婷婷五月激情片| 这里只有精品96| 插插插丁香五月婷婷| 专区无日本视频高清8| 激情五月天无码| 免费啪啪亚州视频| 亚洲Av成人在线观看| 婷婷成人AV| 五月婷婷丁香在线| 夜夜爽天天爽| 精品99在线| 五月激情久久| 五月天播播| 亚洲性色XXXXX| 99热这里只有精品268| 天天操B| 97色热| 91视频一起草| 伊人网欧美在线男人天堂五月丁香| 久久香蕉影院| 色六月天| 99riAv1国产在线观看| 成人丁香五月| www.亭亭五月天| 婷婷玖玖五月天| 高清无码入口| 色五月婷婷五月天激情综合| 性爱AV天堂| 欧美亚洲色色色色| 9月色婷婷| 天天综合天综合久久网| 五月婷婷很很色| 五月做爱| 欧美精品啪啪| 激情六月婷| 色色草97| 99综合视频一体| 99热99热| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 精品丁香五月天在线播放| 日日撸夜夜操| 思思久久精品| 日韩人妻白浆视频系列| 丁香六月久久| 亚洲综合激情五月久久| 久久久91精品| 大香蕉五月天婷婷丁香91| 色婷婷狠狠爱| 日韩精品无码99| 99re6久热只有精品6在线直播| 成人在线综合| 婷婷亚洲综合| 日韩精品在线观看9| 99色1| 丁香六月婷婷开心婷婷网| 色播五月网| 79色色色色| 草综合网| 超级碰碰碰97免费| 丁香五月婷婷操逼| 人妻久久久久久| 五月丁香六月激情在线| 婷婷五月天播| 五月久久婷婷丁香| www.com在线操视频免费观看| 亚洲1区| 久久er99| 国产日韩欧美性生活| 98永久精品| 久久五月天婷婷视频| 很很操很很操| 九九热在线精品| 这里只有精彩视| 久久婷婷欧美| 这里有精品| 99日热在线视频| 五月在线| 午夜色色色极品视频| 超碰成人电影| 丁香五月激情婷婷视频| 91久久久久久久久18| AV在线大香蕉| 日韩一级片| 婷婷五月综合视频| 九色视频91| 操操综合网婷婷| 九9九9无码| 啪啪干伊人婷婷| 日本久热| 久久影视婷婷五月| 色5月婷婷| 人人摸人人摸| 久草五月婷婷| 色99在线视频| 日逼影音先锋男人资源站| 九月婷婷久久| 97色热| 91综合视频丁香| 色色五月丁香| 另类激情五月| 啪啪操操| 人人摸人人| 欧美电影在线观看| 激情网五夜婷婷| 99在线热视频| 色狠狠999综合| 香蕉综合网| 欧美三日本三级少妇三99| 国产人妻人伦精品一区二区| 色婷婷久久综| 丁香五月五月婷婷| 五月丁花色综合网| 夜色综合网| 91九色在线观看免费| 农村熟妇高潮精品A片| 日韩成人电影AV| 婷婷激情图片| 久久久天堂国产精品女人| 99热这里只有精品2| 91热在线| 五月天综合| 五月丁香偷拍| 国产午夜精品AV一区二区麻豆| 五月丁香啪啪网| 另类图片五月天| 亚洲精品一区无码A片| 久色婷婷200| 亚洲五月天婷婷在线| 91猫咪国产在线播放| 五月色婷婷在线观看| 伊人高清无码| 丁香婷婷五月天成人| 91传媒无码人妻精| 色婷婷综合久久久久| 91色综合网| 色情五月天。| 丁香激情五月少妇| 九月色婷婷综合| 涩涩涩五月天| 亚洲天堂大香蕉| 丁香 久久| 超碰资源在线| 五月天婷婷基地| 大香蕉婷婷| 色无码| 久久视频婷婷视频| 可以直接看的av网站| 久草热8精品视频在线观看| 日本va欧美va精品发布视频| 五月婷婷很很色| 色欧美色色色| 欧美色图天堂网色| 丁香五月在线人妻| 五月丁香另类网| 久久丁香五月天| 日韩成人网址| 久久99热网| 午夜福利8055| 五月丁香久久网| 99热这里精| 玖玖热视频| 婷婷丁香97| 99色热| av操B网站| 99在线热视频| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 国产VA亚洲VA96| 久久精品系列| 性爱在线播放av| 婷婷综合网| 九九热这里只有精品一| 婷婷综合影院| 成人无码精品1区2区3区免费看| 日韩在线9| 91欧美| 五月婷婷激情四月| 五月丁香大香蕉| 五月婷婷花| 色婷亚洲| 精品一区二区三区免费毛片爱| 亚洲色a| 99久精品视频| 99re在线观看| 久久亚洲婷婷| WWW.99热| 婷婷综合久久综合| 综合av在线| 中文字幕高清av| 五月丁香六月色婷婷综合五月天| 亚艹艹| 五月婷婷啪啪| 午夜天天精品视频| 丁香五月网| 久久香蕉婷婷五月天| 99爱视频| 日韩欧美成人网| 九九热在线亚洲免费视频| 天天射色五月天| 五月丁香婷婷在线| 91窝窝| 思思99精品视频| 五月婷婷婷丁香播| 97超级碰人人| 九热在线这里有精品6| 色综合性视频| 九九偷拍网| 国产精品人成A片一区二区| 99九九视频| 婷婷丁香五月基地| 久久色天堂| 六月丁香久久| 人人操插| 久久免费操| 天天日天天久久青青| 欧美六月| 久久婷婷五月天蜜桃| 婷婷五月天激情在线观看 | 丁香五月影院| 亚洲经典小视频| 天天插天天插天天操| 丁香视频| 99久久婷婷国产综合精品电影| 夜夜爽天天干| 久久婷婷色色| 五月天婷综合| 99热这里只有的精品视| 婷婷综合五月天激情| 日韩国产在线精品| 深夜男女福利刺激影院一区完整| 看全色黄大色大片| 密臀av无码人妻精品| 久久成人天| 第九色区av天堂| 大香网伊人久久综合| 超碰国产AV| 丁香五月 无码| 欧美婷| 免费看欧美成人A片无码| 久久久人妻不卡| 超碰99久久| 久久99免费视频网站| 午夜婷婷五月天在线| 99re在线播放| 日韩狠狠色婷婷| 久久丁香五月婷婷| 久久黄色免费视频| 久久爱婷婷| 激情综合综合综合| 新99色色色色色色| 综合久久97| 我去色色网五雨天| 96自拍视频九色在线观看| 夜夜 操无码| 久操福利| 色色色地址| 超碰人人干| 五月婷婷成人| 碰碰91| 综合激情婷婷| 五月花婷婷| 亚洲激情av| 欧美日综合| 日韩成人电影AV| 五月天婷婷在线观看| 婷婷天天日婷婷| 九九久久精品| 亚洲人人操| 免费无码毛片一区二区A片| 极品少妇XXXX精品少妇偷拍 | 久色五月| 亚洲丁香婷婷丁香五月天激情| 久久久久久久人妻| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 久久久婷婷婷| 婷婷激情鹿城五月天| 欧美叉叉叉BBB网站| 久久99久久99精品免观看软件| 婷婷丁香综合网| 婷婷六月视频| 91婷婷五月丁香碰| www婷婷| 美女天天久久| 人妻第九页| 久久刺激网| 9久热| 99热在这里只有免费精品| 五月婷婷深深爱爱| 色五月婷婷、老熟女| 色综合久久伊伊婷婷五月| 五月丁香六月激情综合| 日本欧美国产| AV在线免费网站| 久久92| 亚洲va综合va国产va中文| 色婷婷性爱网| 97人人操在线| 五月婷婷免费在线观看| 这里有精品| 色五月婷婷五月天| 天堂网亚洲色图| 性欧美日本| 99热香港| 99九九视频| 五月婷激情| 国产免费性爱| 99九九玖玖| 日韩人妻无码一区二区| 四月丁香五月婷婷久久| 人人草人人舔| 色99婷婷五月天| www久久五月com| 激情婷婷亚洲五月| 久久这里只有精品热在99| 玖玖在线资源视频| 亚洲热久| 久久小说| 99爽视频| 欧美激情五月天在线观看| 日韩精品VIP| 99视频内射三四| 久久九精品| 日本色99| www.丁香黄色五月天人与| 91成人视频| 精品人妻久久久久久久| 欧美性生交XXXXX无码小说| 婷婷va| 都市激情久久| 久久jiuwww| 婷婷五月花| 色色日本| 亚洲九九九九| 色色丁香| 婷婷色五月色妇| 色久九| 无码色| 亚亚州久久高潮| 婷婷欧美激情综合| 婷婷久久综合| 丁香玖玖视频大全| 无码四色色色| 91一起操| 久久亚洲无码| 99视频在线精品免费观看2| 久草热8精品视频在线观看| 婷婷久久丁香五月| 这里只有精品9| 色婷婷成人做爰A片免费看网站| 成人电影AV在线观看| 亚洲综合丁香五月| 激情婷婷六月天| 182TV大香蕉| 激情五月色播五月| 99在线视频免费| 亚洲中文字幕在线观看| 丁香五月偷拍| 欧美色五月天| 婷婷五月激情欧美大胆视频| 丁香色六月| 大香蕉九九热| 婷婷丁香成人色综合| 九九99久久| 伊人干综合| 六月婷婷色| 天天爽夜夜爽天天爽夜夜爽| 天天操夜夜夜拍拍拍| 天天爱天天做天天日| 九九99九九99| 五月婷婷综合影院| 丁香五月婷婷影院| 日比视频91| 六月婷婷色| 五月丁香婷婷激激激综合网色播| 日本色婷婷综合| 伊人久久婷婷| 99男人的天堂| 五月天激情啪啪| 丁香婷婷啪啪啪| 色播五月丁香婷婷| 久久婷婷精品| 午夜色婷婷| 免费黄色AV| 9精品视频在线| 日本va欧美va精品发布视频| 久久精品人妻| 久久99最新| 五月天激情国产综合婷婷婷| 色狠狠六月| 熟女强人妻一区二区三区四区无| 亚洲六月婷| 五月婷婷激情在线| 99精品网| 黄色一级影片| 人妻操逼视频| 色婷婷综合五月| 国产精品99久久久久久久女警| 青青夜夜狠狠夜夜狠狠| 天天色中文字幕女优AV| 五月激情站| 色综合久久44| 久热91| 操一操插一插| 成人丁香五月婷| 丁香五月 性爱| 大大香蕉综合在线| 色色五月天com| 丁香99| 综合精品99| 九九综舍久久| 91爱操| 伊人网欧美在线男人天堂五月丁香| www.激情| 777久久综合视频 | 五月丁香| 亚洲精品国产熟女久久久| 亚洲精品又粗又大又爽A片 | 182tv992tv人之初午夜免费观看| 人人草碰| 亚洲视频二区| 97碰人人操| 色综合网上班开心婷婷久久| 99玖玖视频| 96精品久久久久久久久| 天天日夜夜高潮| 九九久久视频| 四色永久成人网站| 激情都市五月天| 九九色综合九九色| 色婷婷丁香| 六月婷婷综合| 777米奇影视第四色| 丁香五月婷婷国产av| 免费成人中文字幕| 91九色熟女| 9久热免费视频99| 超碰成人在线观看| 久久婷婷超碰| 婷婷金品综合视频| 色丁香影院| 青青热视频| 日本偷拍九九九| 在线另类| 成人免费va| 色欲Av五月天| 精品99在线看| 又大又粗九一在线| 开心五月婷婷激情| 五月婷婷六月综合| 天天做天天双| 日本啪啪天堂| 色 噜噜 九月 婷婷| 99热伊人| 欧美婷婷色五月| 超碰三级秋霞| 91九色国产熟女| 99激情在线| 日本久久爱| 热这里只有精| 九九AV在线| 9 1 A v久久久| 玖玖综合色| 操人妻视频91| 国产日韩欧美性生活| 丁香五月亭亭六月综合激情网| 色色色图| 免费看欧美成人A片无码| 婷婷色五月天色色| 欧美日韩大黄| 丁香月六月| 中文AV网| 成人AV网站在线| site:esunnet.com| 99九九玖玖| 亚洲狠狠爱婷婷| 婷婷丁香五月麻豆| 天天做天天爱天天综合| 丁香五月成人| 99精品97| 中文字幕色色色| 色色性爱视频| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 久99视频在线观看| 免费色婷婷| 综合五月草| 天天干,夜夜爽| 日本美女上人| 五月婷婷丁香瑟瑟视频| dingxiangtingtingliuyue| 五月丁香婷婷综合| 中国激情网| 婷婷激情五月| 大香蕉99| 97色婷婷成人综合在线观看| 嫩草AV久久伊人妇女超级A| 久久丁香| 亚洲乱码在线观看| 综合久久影院| 色六月婷婷| 97干欧美| 97久久视频| 99在线观看| 五月婷婷六月丁香| 深爱激情六月天| 欧美色色色| 成人精品人妻| 激情另类综合| 色色五月天婷婷| www久久久| 久一这里有精品国产| oumeisesewang| 久久6这里只有精品| 婷婷日| 色色色在线播放| 久久视频婷婷视频| 777.色色| 5月丁香六月情| 人妻VideOssS人妻高清| 色色日本| 91久久1118| 婷婷六月视频| www.婷婷五月天| 婷婷激情97| 久久五月天黄色五月天色网址| 噜噜在线| 99热r| 丁香五月天啪啪| 黄色五月婷婷| 亭亭色色五月天| 91婷婷色 | 六月丁香五月婷婷首页| 五月婷婷婷婷| av九九| 中文字幕成人| 激情四射五月天偷偷看婷婷| 婷婷丁香五月天激情| 色婷婷色99国产综合精品| 91人人操.COM| 99日本在线| 九九久久五月天| 91碰| 任你草| 亚洲啪啪网| 丁香六月色婷婷欧美| 做爱夜夜干天天操| 人人人操B超碰| 丁香五月先锋| 九九精品免费| 五月丁香日本在线视频观看| 亚洲成人综合在线| 丁香五月第九色| 伊人网啪啪| 99re6热在线精品视频播放速度| 狠狠狠狠狠狠草| 激情综合网五月| 狠狠色综合网站久久久久| 国内一级片| 五月丁香色婷基地综合久久| 深爱 五月天| 久久五月天色| 婷婷久久99| 天天日天天久久青青| 91精品无码久久久久久五月天| 丁香五月婷婷性爱| 色色色色色色网站| 五月天色图| www.五月婷| 五月天激情综合网站| 色五月视频无码播放| 99av视频| 人人摸人人| 91干99| 操操操av| 色五月色综合| www.五月天婷婷| 在线综合91| 激情六月下句是什么| 性生活久久朋友人妻| 久久性爱视频| 色久一| 99精品综合| 男女99免费视频| 婷婷综合| 色青五月天| 在线超碰91| www色五月| 色五月色综合| 色五月婷婷自拍| www.天天干| 丁香婷婷色五月天| 熟女网站久久| 99精品在线观看| 色五月在线视频观看| WWW色色色COm| 亚洲激情综合| 久草五月天| 久久久婷| 欧美久久九九| 久久新地址| 天天综合图片| av不卡网站| av色婷婷| 欧美色五月| 激情综合色婷婷啪啪五月天| 大香蕉久久婷婷精品综合| 99噜噜噜在线播放| 丝袜熟女一区二区三区| 91日本在线观看| 丁香五月婷婷国产av| 色婷婷狠狠久久YY| 无码任你操| 97碰碰九九视频| 婷婷丁香五月天综合网| 九色综合五月天婷五月| 色综合九九| 欧美丁香六月在线观看视频| 五月天久久91| 综合网精品99| 热99只有精品| 99在线精品免费视频| 五月婷婷啪啪| 久9视频| 五月丁香久| 婷婷五月丁香五月| 97超级碰碰碰| 夜夜操天天干| 午夜激情久久| 天天干天干| 人人草碰| 欧美日韩成人在线网站| 色蜜婷婷| 久婷久婷| 4399啪啪视频| 思思热精品免费视频| 少妇AB又爽又紧无码网站| 色色亚洲无码| 天天操比比| 五月婷婷丁香大陆免费| 99日在线视频| 91趴趴| 丰满少妇猛烈A片免费看观看 | AA片在线观看视频在线播放| 色呦呦美女| 亚洲日韩26uuu| 97人人干人人操| 99久久高清视频| AA片在线观看视频在线播放 | 琪琪理论片| 午夜亚洲国产精品av一区二区| 婷婷色网址| 天天狠天天叉| 天堂久久性| 五月丁香六月婷婷的女人| 99精品这里只有免费视频| 丁香六月狠狠干| 天堂在线婷婷| 五月丁香亭亭激情操逼网| 涩五月婷婷| 久久女婷| 五月停停999| 亚洲久久天堂| 国产又色又爽又黄又免费| AV中文字幕夜夜操b天天摸bb | 99乱视频| 亚洲无码99| 九九人人操| 亚洲av无码精品色午夜| 五月丁香亭亭A片| 国产免费性爱| 极品少妇XXXX精品少妇偷拍| 91精品综合久久久久久五月丁香| 91丁香五月| 99视频只有精品| 伊人久久五月天综合| www.五月天婷婷姐姐| 五月丁香| 丁香五月婷婷av| 五月伊人综合| 五月天啪啪网| 五月色网| 热久久66| 9 99免费视频| 夜夜爽77777妓女免费下载| 狠狠搞亚洲| 五月婷婷偷拍| 思思热精品在线视频| 26uu| 99热性色| 1000部毛片A片免费观看| 激情五月天网页| 五月丁香综合影院| 99操视频| 婷五月天在线草| 91视频免费后入强操| 五月婷婷啪啪| 婷婷激情视频欧美视频自拍视频欧美剧| 亚洲另类在线观看| 亚洲AV成人无码精品| 六月婷婷av| 欧洲婷婷五月天| 在线成人视频免费| 国产午夜精品AV一区二区麻豆 | 五月丁香六月综合激情无码软件亮点 | 久久99精品久久久久久三级| 婷婷在线播放| 大香蕉网站,大香蕉综合| 五月婷激情| 97五月天| 任你爽精品免费视频6| 夜丁香综合| 久久99热这里只频精品6学生| 偷偷操99| 色色综合网站| 久热九九| 色色操| 成人做爰A片免费看视频| 99热精品在线| 国产人妻777人伦精品HD| 国产真实乱对白精彩| 极品精品一区二区三区在线| 日本久碰| 2015在线中文字幕| 99在线视频操999| 午夜不卡久久精品无码免费| 国产精品成人网址| 四射综合网| 亚洲99在线| av激情在线| 狠狠操综合| 9月色婷婷| 开心激情五月天网| 五月天伊人| 激情五月婷婷综合网| 成人短视频在线观看| 五月天堂色色| 九色综合网| 婷婷伊人綜合中文字幕| 思思热在线视频99| 五月婷婷人妻| 99热综合在线| 婷婷伊人| 色婷婷91激情小说| 五月丁香花激情综合网| 天天舔天天插天天爱| va婷婷在线免费观看| 久久99性爱| 91AV婷婷| 双性美人被调教到喷水A片| 国产精品成人网址| 激情五月婷| 91超碰人人操| 综合性视频99| 免费视频这里只有精品| 丁香激情五月天| 国产激情综合五月久久| 性欧美大战久久久久久久83| 毛v一区二区视频| 激情综合网五月在线播放| 五月婷婷之激情五月| 99爱视频| 99在线精品视频| www久久久久久| 精热在线综合网| 五月天综合影院| 婷婷五月精品中文字幕| 日本熟妇乱妇熟色A片蜜桃| ai97re99一本| 久99久在线| 精品久久久久久久久久久久人妻| 少妇搡BBBB搡BBB搡毛茸茸 | 日本久久网| 影音先锋 一区| 久久亚洲网| 色五月激情网| 天天天天操| 五月天基地| 大波美女VA网站| 色香久久| 九九在线热九九在线热99热| 五月天激情四射网站| 中文aV网| 亚洲午夜一区二区| 免费观看全黄做爰的视频| 精品人妻在线| 色五月天成人在线| 天天操天天操天天操天天操天天操 | 激情综合播播| 婷婷新网址| 丁香 久久| 亚洲婷婷五月天| 99热每日| 狠狠干狠狠操狠狠爱| 丁香五月花婷婷开心| 五月丁香婷婷导航视频| A片试看120分钟做受图片| 婷婷丁香黄色| 五月婷婷成人网首页| 能看的AV| 狠狠色色| 日本99在线视频| 天天干com| 开心激情站| 日本婷久久| 99A片| 密着浓厚中出乚交尾GvG935| 亚洲AV成人片无码网站| 99热99精品在线观看| 依人大香蕉| 国产九九一区二区三区| 激情五月婷婷网在线观看| 91婷婷丁香| 欧美日韩五月婷婷| 五月婷婷我| 四虎国产精品永久在线国在线| 午夜成人天堂久久无码日韩久久| 欧美色爱五月天| 色爆五月| peg 2区三区四区的| 亚洲综合五月天婷婷丁香| 伊人丁香五月婷婷潮吹| 久久99热这里只有精品首| 国产精品色婷婷99久久精品| 99操视频| 国产婷婷五月天| 日日激情网| 一区视频网站| 91九色国产| 97自拍视频网| 26uuuavcom| 91狠狠综合久久| 国产激情av| 国产色色网站网址| 99无码视频| 婷婷五月丁香青青草在线| 色综合久| 五月婷婷色| 一区二区你懂的| 色欲香综合网| 91九色偷拍| se色综合网| 天天操电影院色狼性av| 热99在线| 99九九精品| AV在线免费播放| 久久婷婷色综合老司机| 天天日天天干天天插天天射| 日日做A爰片久久毛片A片英语| 亚洲精99| 天天日天天色| 亚洲欧洲色色| 另类小说五月天| 激情综合色网| 超碰免费人人| 亚洲在线操| 人人操AV| 五月激情丁香五月| 色99在线观看| 性韩日色婷婷五月天激情啪啪XXX| 亚洲午夜av| 久久久中文| 婷婷综合亚洲| 91碰碰视频| 色婷婷AV在线| www九九热| 青青草成人网| 丁香婷婷精品视频| 91丨九色丨东北熟女| AV变态另类一区二区| 激情五月天在线视频| 青青草婷婷久久| 丁香五月av| 九热免费视频| 天天干天天做| 色噜噜97视频在线观看| 婷婷精品在线| 99精品国产在热久久| 丁香五月偷拍| 日韩在线观看网址| 五月丁香香蕉| 99亚洲视频| 五月婷狠狠| 五月丁香综合久久| 激情综合网激情五月天| 麻豆WWWCOM内射软件| 亚洲九区| 天天日,天天射,天天舔| 国外亚洲成AV人片在线观看| 三级三久久线久久99久目本WW| 狠狠久综合| 公的粗大挺进了我的密道| jiujiu热在线视频| 在线中文亚洲| 99热亚洲只有色| 婷婷色播综合五月| 强壮的公次次弄得我高潮A片日本 | 成人在线不卡| 天天摸天天舔天天天天爽| 熟女强人妻一区二区三区四区无| 狠狠操天天操| 婷婷99| 激情婷婷五月天。| 久热大香蕉| 五月天婷婷免费| 五月丁香色婷婷色| 区区欧美你爱| 色婷婷影院| 98色丁香五月婷婷综合网| 开心婷婷五月天电影院| 国产精品第一国产精品| 五月婷婷 欧美| 五月丁香婷婷基地| 大香蕉伊人久久| 久久五月视频| 国在线激情网| www.粉嫩av.com| 深爱激情六月天| 欧美日本黄色| 色婷婷五月网| 天天揷综合网| 色综合性视频| 99热午夜精品| 五月综合婷婷久久在线| 91久久久久久久久久18| 五月噜噜| 99在线视频观看| 丁香五月精品| 伊人婷婷福利网| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪| 五月天久久婷| 99热中文字幕久久| 97国产精品女人碰碰| 九九热这里| 日韩久综合| 激情五月天色色网| 久9精品| 日韩亚洲视频| 99热成人永久免费| 99操视频| 九九碰九九爱97| 狠狠狠狠狠干| 九九亚洲小视频| 亚洲成人网址在线观看| 婷婷亚洲综合| 五月丁香激情四射| 人人操AV| 开心五月综合激情综合五月| 五月激情婷婷四射| 超碰网站在线观看| 另类的婷婷| 婷婷不干网| 婷婷99狠狠| av成人在线播放| 五月天婷婷在线播放| …亚洲黄色在线播放日韩、av中文a…| 狠狠狠狠狠狠狠狠| 97香蕉人人在线观看| 9久国产精品| 婷婷色播婷婷| 第九色区av天堂| 九九免费精品| 久久草中文日韩欧美| 激情第四色| 久久九精品| 日本乱论99| 四色五月婷婷| 色婷五月| 香蕉五月婷婷| 婷婷五月天激情电影小说| 人人操 色| 六月天婷婷| 日日爽日日爽| www,五月天com| 97搞在线| 99热这里只有精品1025| 美女要搞搞天天搞搞搞网站| 九色激情网|