99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Linux虛擬文件系統(tǒng)深度解析:/dev、/proc、/sys實戰(zhàn)指南

Linux虛擬文件系統(tǒng)深度解析:/dev、/proc、/sys實戰(zhàn)指南 用了這么多年Linux/dev、/sys、/proc這三個目錄幾乎天天都在打交道但你有沒有真正想過它們到底是誰創(chuàng)建的、底層跑的是什么機制、為什么有的文件能直接cat出信息、有的文件寫進去一個數(shù)字系統(tǒng)行為就變了這篇文章不打算講教科書上那種照本宣科的科普而是從一個實際運維和開發(fā)者的視角把這三大虛擬文件系統(tǒng)的來龍去脈、核心設計、實操玩法以及我踩過的坑一次性講透。對于剛接觸Linux的朋友這三個目錄是繞不開的“詭異存在”——它們不占用磁盤空間文件大小經(jīng)常是0可偏偏是系統(tǒng)運行的核心樞紐。對于有經(jīng)驗的工程師理解這幾個目錄的內(nèi)部邏輯不只是為了面試更是排查硬件故障、調(diào)整內(nèi)核參數(shù)、做性能分析的基本功。我盡量用類比和現(xiàn)場實例把背后的原理講明白讀完你再去敲ls /dev、cat /proc/meminfo、find /sys/class感官會完全不一樣。1. 三個目錄的整體定位與設計思路1.1 它們不是普通目錄而是“虛擬文件系統(tǒng)”的掛載點第一次接觸Linux的人往往會問為什么/dev、/proc、/sys在df -h里看不到占用空間卻又能“存”東西答案很簡單它們根本不是磁盤上的目錄而是內(nèi)核在內(nèi)存中構(gòu)建出來的虛擬文件系統(tǒng)掛載到了對應路徑。你可以用mount命令確認一下常見的輸出類似這樣$ mount | grep -E /dev|/proc|/sys devtmpfs on /dev type devtmpfs (rw,nosuid,relatime,size65052k,nr_inodes65052,mode755) proc on /proc type proc (rw,nosuid,nodev,noexec,relatime) sysfs on /sys type sysfs (rw,nosuid,nodev,noexec,relatime)注意它們的文件系統(tǒng)類型分別是devtmpfs、proc、sysfs都不是ext4或xfs這種真正的磁盤文件系統(tǒng)。換句話說你“看到”的文件、目錄、屬性都是內(nèi)核按需生成并呈現(xiàn)在你面前的背后沒有物理存儲介質(zhì)。這個設計思路很妙對用戶態(tài)程序訪問設備信息、進程狀態(tài)、內(nèi)核參數(shù)統(tǒng)一走“打開文件、讀寫文件”這套熟悉接口不用發(fā)明新API也不用手寫一堆ioctl調(diào)用。1.2 三個目錄的分工設備節(jié)點、進程信息、設備模型說白了一句話記法/dev是“設備的入口”/proc是“進程與內(nèi)核的臨時窗口”/sys是“設備與驅(qū)動的結(jié)構(gòu)化視圖”。三者緊密關聯(lián)但定位不同。/dev提供設備訪問節(jié)點。你想讀寫硬盤、串口、聲卡都是打開/dev/下面的某個文件。這里核心是“能操作”是向磁盤、硬件驅(qū)動發(fā)請求的通道。/proc提供進程級別和內(nèi)核級別的運行時信息。比如系統(tǒng)負載、內(nèi)存使用、每個進程的映射、命令行參數(shù)。核心是“看狀態(tài)、改參數(shù)”最早的動態(tài)內(nèi)核參數(shù)入口就在這里。/sys提供設備、驅(qū)動、總線之間關系的結(jié)構(gòu)化視圖。核心是“管設備”它把內(nèi)核設備模型暴露出來你能看到一塊SSD掛在哪個控制器下、某個驅(qū)動綁定哪個設備也能在運行時調(diào)整設備級參數(shù)比如風扇轉(zhuǎn)速、屏幕背光。如果還不直觀打個比方/dev像一個小區(qū)大門口的門禁設備你刷個卡就能進出具體單元/proc像是物業(yè)中心的公告欄上面實時貼著整個小區(qū)的運行數(shù)據(jù)有些欄位還允許你貼新通知來調(diào)規(guī)則/sys則是整個小區(qū)的規(guī)劃沙盤每一棟樓、每一條管道、每一個設備都按樹狀結(jié)構(gòu)擺得明明白白還能撥動沙盤上的旋鈕做實時調(diào)整。1.3 為什么內(nèi)核不把這些功能做成普通命令而要做成文件這個設計是UNIX哲學的一部分“一切皆文件”。做成文件的好處顯而易見shell、Python、Perl甚至grep、awk、dd都能直接處理不用專門寫復雜的用戶態(tài)工具。想獲取CPU信息直接cat /proc/cpuinfo想給指定PID發(fā)個狀態(tài)查詢cat /proc/1234/status。這在排查生產(chǎn)問題時有巨大優(yōu)勢——很多場景下系統(tǒng)已經(jīng)嚴重卡頓連常規(guī)工具都起不來但cat一個文件這種原子操作仍然可以執(zhí)行這些虛擬文件系統(tǒng)此時就是最后的救命通道。2. /dev目錄設備文件系統(tǒng)的入口與實操要點2.1 字符設備、塊設備與設備號/dev中絕大部分文件對應兩類設備字符設備和塊設備。字符設備以字節(jié)流方式讀寫比如鍵盤、串口、聲卡每次讀寫不經(jīng)過緩存層典型代表是/dev/null、/dev/tty。塊設備以固定大小的塊為單位讀寫數(shù)據(jù)可以走緩存、排隊、合并典型代表是磁盤/dev/sda、分區(qū)/dev/sda1。怎么快速區(qū)分ls -l第一列是c就是字符設備b就是塊設備。而設備文件最核心的標識其實是“設備號”也就是主設備號和次設備號$ ls -l /dev/sda /dev/tty /dev/null brw-rw---- 1 root disk 8, 0 1月 5 10:00 /dev/sda crw-rw-rw- 1 root tty 5, 0 1月 5 10:00 /dev/tty crw-rw-rw- 1 root root 1, 3 1月 5 10:00 /dev/null這里8, 0表示主設備號8、次設備號0。主設備號對應驅(qū)動類型內(nèi)核靠它找到正確的設備驅(qū)動次設備號用于區(qū)分同一驅(qū)動下的不同物理設備或邏輯單元。/dev/sda和/dev/sdb共享主設備號8都是同一套SATA/SCSI磁盤驅(qū)動只是次設備號不同。注意設備文件本身只是“門牌”不包含設備數(shù)據(jù)。真正干活的是內(nèi)核驅(qū)動。你可以把設備文件理解成一個指向驅(qū)動程序的門牌號應用程序open它時內(nèi)核根據(jù)門牌號找到驅(qū)動之后read/write就是驅(qū)動和硬件在交互。2.2 devtmpfs與udev設備節(jié)點的自動生成機制在老版本Linux里要在/dev下創(chuàng)建設備節(jié)點需要手寫mknod還得知道主次設備號維護成本極高。現(xiàn)代系統(tǒng)采用兩套機制配合內(nèi)核啟動早期掛載devtmpfs由內(nèi)核自身為已經(jīng)識別的設備自動創(chuàng)建設備節(jié)點保證基本可用隨后udev守護進程接管根據(jù)內(nèi)核發(fā)出的uevent事件和規(guī)則文件做符號鏈接、權(quán)限設置、命名調(diào)整。比如一塊USB盤插上內(nèi)核識別后自動在/dev下生成/dev/sdbudev再根據(jù)/dev/disk/by-uuid/之類的規(guī)則補建友好的穩(wěn)定鏈接。手動創(chuàng)建設備節(jié)點的能力仍然值得掌握某些容器環(huán)境、嵌入式裁剪系統(tǒng)或恢復場景下設備節(jié)點缺失很常見一條mknod命令能救命mknod /dev/testnull c 1 3這條命令創(chuàng)建一個字符設備主設備號1、次設備號3恰好對應null設備。創(chuàng)建完你可以echo hi /dev/testnull完全不會報錯。反過來如果忘記指定主次設備號或搞錯類型open設備會直接失敗。這也是排查“設備節(jié)點存在但無法訪問”問題時的關鍵步驟——節(jié)點只是入口入口對了驅(qū)動不對一樣出錯。2.3 常見設備節(jié)點及用途速查長期和Linux打交道的開發(fā)者至少要和下面這些設備節(jié)點熟起來設備節(jié)點類型常見用途/dev/sda、/dev/nvme0n1塊設備整塊磁盤訪問配合fdisk、parted分區(qū)/dev/sda1、/dev/nvme0n1p1塊設備磁盤分區(qū)/dev/ttyS0字符設備串口調(diào)試嵌入式設備、網(wǎng)絡設備/dev/tty字符設備當前終端echo test /dev/tty直接顯示在當前屏/dev/null字符設備丟棄一切寫入數(shù)據(jù)讀取返回EOF最常見的“黑洞”/dev/zero字符設備讀取永遠返回0字節(jié)用于清零或生成空數(shù)據(jù)/dev/random、/dev/urandom字符設備隨機數(shù)源urandom性能更好現(xiàn)代系統(tǒng)兩者基本等價/dev/loop0塊設備回環(huán)設備將鏡像文件模擬成塊設備掛載iso、ext4鏡像必備/dev/mapper/xxx塊設備設備映射器LVM、dm-crypt生成的邏輯設備實操中一個高頻用法是用/dev/zero配合dd生成指定大小的臨時文件dd if/dev/zero of./alldata.bin bs1M count1024 statusprogress這會在當前目錄生成一個1G的全零文件經(jīng)常用來做稀疏文件測試、磁盤性能測試或者制造占位文件。同理把if/dev/urandom加進去就能生成隨機內(nèi)容文件。這個“文件即設備、設備即文件”的思路在處理數(shù)據(jù)時真的非常順手。2.4 /dev的實操排查思路業(yè)務上遇到“無法識別磁盤”的問題我的排查順序基本固定。先lsblk看內(nèi)核是否能發(fā)現(xiàn)設備再ls -l /dev/看節(jié)點是否存在。如果內(nèi)核發(fā)現(xiàn)了但節(jié)點沒創(chuàng)建多半是udev規(guī)則問題查看udevadm monitor抓取uevent確認規(guī)則是否攔截了命名如果節(jié)點存在但dd讀寫報錯再dmesg看看底層驅(qū)動有沒有I/O錯誤、鏈路是否正常。這里要特別強調(diào)不要手動在正常系統(tǒng)里亂刪/dev下面的設備節(jié)點再靠mknod重建因為udev規(guī)則和selinux上下文可能對不上重啟或拔插后反而更亂正常環(huán)境請讓udev管好它自己。3. /proc目錄進程與內(nèi)核狀態(tài)的信息中樞3.1 procfs的設計理念沒有文件的文件系統(tǒng)/proc在早期Linux中是個很特別的存在它不存數(shù)據(jù)而是在你打開某一文件、讀取某一目錄時內(nèi)核動態(tài)調(diào)用相應函數(shù)生成內(nèi)容。/proc下沒有磁盤塊、沒有inode一切都是“現(xiàn)算現(xiàn)賣”。所以你看到很多文件大小是0但cat依然能輸出一堆內(nèi)容——這就是虛擬文件系統(tǒng)的特征。/proc最初是為了進程信息而創(chuàng)建后來內(nèi)核參數(shù)也塞了進來逐漸成了大雜燴。這也是后來/sys被設計出來的原因之一/proc什么都有但結(jié)構(gòu)混亂、分類不清晰、權(quán)限粒度粗糙。3.2 /proc三大類內(nèi)容進程目錄、系統(tǒng)信息、內(nèi)核參數(shù)最核心的內(nèi)容分三類。第一類是/proc/[PID]/目錄每個運行中的進程都有一個以其PID命名的目錄。進入任意一個進程目錄status看狀態(tài)、cmdline看完整命令行、environ看環(huán)境變量、fd/看打開的文件描述符、maps看內(nèi)存映射。第二類是系統(tǒng)級信息比如/proc/cpuinfoCPU型號與特性、/proc/meminfo內(nèi)存使用細節(jié)、/proc/loadavg系統(tǒng)負載、/proc/uptime開機時長與空閑時長、/proc/interrupts中斷統(tǒng)計。第三類是內(nèi)核可調(diào)參數(shù)目錄/proc/sys/它與sysctl命令對應幾乎是內(nèi)核運行時調(diào)優(yōu)的主戰(zhàn)場。舉一個實操例子線上排查CPU使用率異常時除了top我會直接看進程的/proc/[PID]/status和/proc/[PID]/schedstat判斷是不是發(fā)生了綁定異常或大量自愿上下文切換??茨硞€進程打開了哪些文件則可直接ls -l /proc/[PID]/fd比lsof在某些受限環(huán)境里更原始可靠$ ls -l /proc/1234/fd | head total 0 lrwx------ 1 user user 64 1月 5 10:00 0 - /dev/null lrwx------ 1 user user 64 1月 5 10:00 1 - /var/log/app.log lr-x------ 1 user user 64 1月 5 10:00 2 - /etc/app.conf3.3 內(nèi)核參數(shù)調(diào)整/proc/sys與sysctl的關系/proc/sys下面的文件很多可以直接寫寫入即生效。但要注意兩點第一寫操作需要root權(quán)限第二這樣修改是臨時的重啟后丟失。持久化要通過/etc/sysctl.conf或/etc/sysctl.d/下的配置文件。sysctl命令本質(zhì)上就是在讀寫/proc/sys比如以下兩條命令是等價的echo 1 /proc/sys/net/ipv4/ip_forward sysctl -w net.ipv4.ip_forward1在修改內(nèi)核參數(shù)前我強烈建議先確認當前值和上下文。比如要啟用IP轉(zhuǎn)發(fā)先cat /proc/sys/net/ipv4/ip_forward再確認網(wǎng)絡架構(gòu)中是否存在多個網(wǎng)卡之間需要轉(zhuǎn)發(fā)流量否則開著轉(zhuǎn)發(fā)在安全敏感環(huán)境里可能有風險。更常規(guī)的做法是修改/etc/sysctl.conf后執(zhí)行sysctl -p這樣既能持久化也能檢查語法。另外/proc/sys下的參數(shù)命名規(guī)律很有用/proc/sys/net/ipv4/tcp_tw_reuse對應net.ipv4.tcp_tw_reuse就是把路徑中的/proc/sys/前綴和斜杠換成點。3.4 一個需要注意的特殊文件/proc/kcore 與 /proc/sysrq-trigger/proc/kcore是內(nèi)核核心內(nèi)存的映像大小跟你物理內(nèi)存差不多但別拿cat去讀也別隨手cp否則系統(tǒng)會卡死。要分析內(nèi)核內(nèi)存請用crash、gdb等專門機制或者直接繞過這個文件。另一個常被忽視的/proc/sysrq-trigger則是系統(tǒng)卡死時的終極逃生門允許你向內(nèi)核發(fā)送特殊序列命令。比如系統(tǒng)完全無響應但還能按下鍵時執(zhí)行echo s /proc/sysrq-trigger echo u /proc/sysrq-trigger echo b /proc/sysrq-triggerecho s同步磁盤echo u只讀方式重新掛載文件系統(tǒng)echo b立即重啟。整套組合拳在運維現(xiàn)場曾經(jīng)救過我一回。生產(chǎn)環(huán)境要提前確認內(nèi)核/proc/sys/kernel/sysrq的值不為0否則sysrq-trigger會被禁用。3.5 /proc容易踩坑的細節(jié)有一個我踩過不少次的坑解析/proc/meminfo時不同內(nèi)核版本字段名稱會有變動比如MemFree里可能包含被內(nèi)核回收的緩存如果直接拿它判斷“內(nèi)存還夠不夠”經(jīng)常會被誤導。我更習慣看MemAvailable這是內(nèi)核經(jīng)過算法預估的可分配內(nèi)存比MemFree更有參考意義。另一個坑是/proc/[PID]/status中的VmRSS只能代表物理內(nèi)存駐留量無法完全等價于程序真正占用的內(nèi)存如果程序有共享庫映射VmRSS會重復計算共享部分精確分析得綜合smaps里的細分項。4. /sys目錄設備模型與內(nèi)核對象的結(jié)構(gòu)化視圖4.1 sysfs的誕生對癥下藥解決/proc的混亂/sys對應的文件系統(tǒng)叫sysfs出現(xiàn)在Linux 2.6時代核心目的就是“收拾”/proc這個雜物間。它把內(nèi)核的設備和驅(qū)動模型以嚴格的層次結(jié)構(gòu)暴露給用戶空間。如果說/proc是按用途堆文件那么/sys就是按“設備拓撲”建目錄。你在/sys下看到的目錄名稱背后都對應著內(nèi)核中的kobject對象目錄的嵌套結(jié)構(gòu)對應kobject之間的父子關系。這也是理解/sys最關鍵的一點它不是隨便設計的目錄樹它是內(nèi)核設備模型在用戶態(tài)的真實映射。4.2 核心子目錄速覽/sys/devices、/sys/bus、/sys/class、/sys/block/sys/devices是最底層真實的設備樹包含系統(tǒng)總線PCIe、USB、平臺總線等上所有真實設備路徑冗長但最完整。/sys/bus按總線類型組織是查找設備和驅(qū)動綁定的近路比如/sys/bus/pci/devices/下列出所有PCI設備每個設備目錄下有driver符號鏈接指向當前綁定的驅(qū)動。/sys/class按設備功能分類比如net下是網(wǎng)卡、block下是塊設備、backlight下是屏幕背光、thermal下是溫度傳感器這種分類最貼近日常使用。/sys/block是塊設備專屬視圖軟鏈到真實設備路徑。查看某個nvme固態(tài)硬盤的信息可以這樣$ ls -l /sys/class/block/nvme0n1 lrwxrwxrwx 1 root root 0 1月 5 10:00 /sys/class/block/nvme0n1 - ../../devices/pci0000:00/0000:00:01.0/0000:01:00.0/nvme/nvme0/nvme0n1順著這條軟鏈能看到它掛在哪個PCI控制器下進而判斷是不是接了轉(zhuǎn)接卡、走的是不是直通CPU的PCIe通道。4.3 實用場景通過/sys讀取設備狀態(tài)與調(diào)節(jié)參數(shù)/sys里很多文件是只讀的但不乏可寫的高頻參數(shù)入口。比如查看CPU頻率策略直接讀/sys/devices/system/cpu/cpu0/cpufreq/scaling_cur_freq單位是kHz。調(diào)整最大最小頻率則寫對應文件echo 2400000 /sys/devices/system/cpu/cpu0/cpufreq/scaling_max_freq再比如查看硬盤溫度部分NVMe設備支持cat /sys/class/nvme/nvme0/device/hwmon/hwmon*/temp1_input輸出的是毫攝氏度除以1000就是正常攝氏度讀數(shù)。另一個高頻操作是背光亮度調(diào)節(jié)筆記本場景下/sys/class/backlight/intel_backlight/brightness可以直接寫數(shù)值比在桌面環(huán)境里拖滑塊更快多級腳本調(diào)光也常走這里。但切記這些寫入操作都是臨時的重啟后復位需要持久化請走systemd服務或?qū)挠布橄髮庸ぞ摺?.4 sysfs與uevent/udev的關系/sys不只是給人看的也是給用戶態(tài)事件機制用的。內(nèi)核檢測到設備插入或移除時sysfs會生成uevent事件udev通過netlink監(jiān)聽到這些事件后根據(jù)規(guī)則在/dev下創(chuàng)建設備節(jié)點、創(chuàng)建符號鏈接、設置權(quán)限。你可以在命令行手工觸發(fā)uevent重放讓udev重新處理某個設備這在調(diào)試設備規(guī)則時非常有用echo change /sys/class/net/eth0/uevent執(zhí)行后udev會重新處理eth0的change事件。調(diào)試網(wǎng)卡改名規(guī)則、權(quán)限規(guī)則時配合udevadm monitor看實時事件輸出整個鏈路清晰可見。所以/sys與/dev的關系可以理解為/sys是設備和驅(qū)動的“關系網(wǎng)”/dev是面向應用訪問的“操作門戶”而uevent是維護門戶的更新信號。4.5 使用/sys排查硬件問題的經(jīng)驗拿到一臺服務器懷疑網(wǎng)卡掉速或PCIe降速我會查/sys/bus/pci/devices/0000:xx:00.0/目錄下的link_speed、link_width對比設備原始能力和當前協(xié)商狀態(tài)。同樣命令cat /sys/class/net/eth0/carrier顯示1表示物理鏈路正常0表示沒插線或?qū)Ψ皆O備未啟動cat /sys/class/net/eth0/operstate則直接顯示up、down、unknown等狀態(tài)。遇到NVMe設備掉盤/sys/class/nvme/nvme0/device/下經(jīng)常能看到健康信息nvme smart-log也是讀同一套數(shù)據(jù)只是通過字符設備另外暴露兩者可以交叉驗證。5. 三個目錄的差異對比與整體協(xié)作5.1 一張表看懂三者核心區(qū)別對比項/dev/proc/sys文件系統(tǒng)類型devtmpfs、udev管理procsysfs核心內(nèi)容設備文件節(jié)點進程信息、內(nèi)核信息與參數(shù)設備、驅(qū)動、總線拓撲是否真實占磁盤否否否典型操作open、read、write設備cat查看、echo修改內(nèi)核參數(shù)cat查看、echo修改設備參數(shù)主要設計目的提供設備訪問入口進程與內(nèi)核運行時狀態(tài)結(jié)構(gòu)化設備模型與運行期配置內(nèi)容是否可寫多數(shù)不可寫/proc/sys下可寫部分屬性文件可寫持久性動態(tài)重建改動重啟丟失改動重啟丟失常用命令lsblk、fdisk、dd、mknodps、lsof、sysctl、catudevadm、cat、echo、find這張表基本可以覆蓋日常工作的認知。重點提示三者都不是永久存儲不要指望在里面保存數(shù)據(jù)。曾有同事把配置寫到/proc下面的臨時文件里重啟機器什么都沒了這種用法天然就是錯的。真正的配置要么寫到/etc要么通過systemd單元重啟后自動重建。5.2 三者在一次磁盤故障排查中的聯(lián)合用法我用一個非常典型的磁盤故障場景把三個目錄串起來。某次線上機器告警某塊數(shù)據(jù)盤讀寫超時。我先執(zhí)行l(wèi)sblk確認盤符為/dev/sdc接著cat /sys/class/block/sdc/device/state查看設備狀態(tài)發(fā)現(xiàn)狀態(tài)異常。隨后dmesg確認I/O錯誤再看cat /proc/diskstats統(tǒng)計該磁盤的IO錯誤計數(shù)最后smartctl -a /dev/sdc獲取SMART健康信息綜合判斷是物理磁盤即將損壞及時更換。整個過程涉及/dev、/proc、/sys互補/dev給出訪問入口/proc給出全局IO統(tǒng)計/sys給出設備與驅(qū)動狀態(tài)。少任何一個目錄排查效率和信息完整性都會大打折扣。5.3 容器環(huán)境下的新變化近年容器化普及后這三個目錄的行為出現(xiàn)了新差異。容器內(nèi)部的/proc和/sys通常并非宿主機全局視圖而是掛載了帶有命名空間隔離或只讀約束的副本。在容器里cat /proc/meminfo會看到宿主機的物理內(nèi)存但/proc/[PID]/下的很多進程在容器外的父進程視角完全不同早期版本的Docker默認以只讀方式掛載/sys部分子目錄導致在容器內(nèi)調(diào)節(jié)某些設備參數(shù)直接報Read-only file system。排查這類問題時要先mount | grep sysfs確認掛載參數(shù)不要想當然認為容器內(nèi)能改宿主機的設備參數(shù)。安全上這是合理限制也是Linux內(nèi)核持續(xù)演進的方向之一。6. 常見問題與避坑經(jīng)驗實錄6.1 誤刪/dev節(jié)點如何恢復偶爾會有人誤刪/dev/null、/dev/sda。正常系統(tǒng)下最快恢復方式是借助mknod重建前提是你知道正確的主次設備號和類型。比如恢復null設備rm -f /dev/null mknod /dev/null c 1 3 chmod 666 /dev/null執(zhí)行前用ls -l /dev/null查詢原屬性最為穩(wěn)妥。如果是磁盤類設備節(jié)點損壞優(yōu)先考慮重啟或觸發(fā)udev重放而不是手動mknod重建否則分區(qū)符號鏈接、磁盤組、設備映射器的依賴容易對不上。嵌入式和容器里沒有udev才需手動mknod這時明確自己系統(tǒng)里設備的主次設備號就是基本功了可以在同型號正常機器上查好了備用。6.2 為什么cat /proc/xxx發(fā)現(xiàn)文件大小是0這完全正常。虛擬文件系統(tǒng)沒有真實數(shù)據(jù)塊文件大小通常表示不了什么。讀取時動態(tài)生成內(nèi)容才是它的工作方式。所以不要因為ls -l /proc/meminfo顯示0就把它當成空文件直接用cat看內(nèi)容。相關地du -h /proc也毫無意義它會顯示0反而可能讓你誤判。6.3 修改/sys或/proc參數(shù)后重啟失效這不是bug而是設計。/proc/sys和/sys的可調(diào)參數(shù)屬于運行時設置以內(nèi)核內(nèi)存為存儲介質(zhì)重啟必然恢復默認。要實現(xiàn)持久化/proc/sys走/etc/sysctl.conf或/etc/sysctl.d/*.conf/sys設備參數(shù)沒有統(tǒng)一持久化入口一般通過systemd服務、rc.local或者udev規(guī)則在開機時重新寫入。我自己寫過一個專門調(diào)背光和CPU頻率閾值的systemd unitExecStart里逐行echo生產(chǎn)環(huán)境中穩(wěn)定復現(xiàn)比依賴具體桌面環(huán)境可靠得多。6.4 修改/sys或/proc提示Permission denied兩種常見情況非root用戶權(quán)限不足文件本身被內(nèi)核標記為只讀。對于root用戶仍報拒絕的多數(shù)是掛在只讀屬性上echo前先cat /sys/.../文件確認當前內(nèi)容再判斷內(nèi)核是否允許寫。有些參數(shù)受其他子系統(tǒng)約束比如CPU頻率受熱保護策略干預即使寫入了也會被內(nèi)核自動糾正反復改不生效時先看dmesg和thermal相關文件。6.5 /dev/random和/dev/urandom到底用哪個現(xiàn)代Linux內(nèi)核里/dev/random和/dev/urandom的差異已經(jīng)大幅縮小。早期隨機數(shù)池估計不足時random讀多了會阻塞urandom不會今天兩者底層共享相同的CRNG密碼學隨機數(shù)生成器僅在啟動初期存在理論差異。絕大多數(shù)業(yè)務場景直接用/dev/urandom即可需要高安全性且能容忍阻塞的場景才考慮讀/dev/random。生成密鑰或會話令牌時優(yōu)先建議直接用內(nèi)核提供的getrandom()系統(tǒng)調(diào)用而不是手動打開設備文件更簡潔也更規(guī)范。6.6 在/sys或/proc里誤寫危險參數(shù)導致系統(tǒng)異常/proc/sys/kernel/panic被設為0以上時內(nèi)核panic后會自動重啟/proc/sys/vm/drop_caches寫入1、2、3會丟棄頁緩存、目錄項或inode緩存對啟動時內(nèi)存吃緊的系統(tǒng)可能造成短暫卡頓/sys下某些電源管理文件寫錯可能導致設備直接掉電。因此任何寫操作特別是生產(chǎn)環(huán)境一是提前備份原值二是先確認文件語義三是寫好回滾方案。如果只是臨時測試建議在測試機或容器環(huán)境內(nèi)驗證再推廣到生產(chǎn)。7. 一點實操心得這三個目錄用熟了你對Linux的認知會有實質(zhì)提升。我最深的體會是它們不是三個獨立零散的文件夾而是內(nèi)核向用戶態(tài)開的三扇窗/dev提供出入口/proc反映運行時狀態(tài)/sys描述設備關系。排查思路的起點就是先想清楚當前問題該看哪扇窗而不是盲目地在所有目錄里翻找。最后再分享一個提高效率的小技巧善用find在兩個虛擬目錄組合搜索。比如你想找出所有可調(diào)亮的背光設備一條命令find /sys/class -maxdepth 2 -name brightness -type f直接定位想確認哪些進程還打開著某個已經(jīng)被刪除的文件find /proc/*/fd -lname *deleted*能快速掃出來。這些操作沒有復雜的工具依賴純shell就能完成在救援模式下尤為好用。多讀、多試、多對比/dev、/proc、/sys會成為你最順手的Linux排查利器。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丁香五月日啪| 亚洲狠狠狠| 丁香婷婷色五月| 日批在线看| 人人草碰| 色情成人五月天| 九九五月天| 少妇婷婷五月天| 六月合五月婷| 日韩成人无码| 色五月综合激情网| 狠狠色丁香婷婷久久综合| 99在线精品观看99| 久久综合影院| 淑女丝袜bi操逼123| 大香蕉520| 大香蕉AV电影在线| 熟女人妻一区二区三区免费看| 激情六月日韩| 99热这里只有精品 搜| 1024手机在线观看看片_日韩精品| 人妻少妇色综合| 色无码| 激情婷婷内射| 欧美激情综合| 性色婷婷| 9热精品| 亚洲精品一区中文字幕乱码| 国产精品18久久久| 色色五月天网站| 99re免费精品视频| 婷婷情色五月天| 日本三级99人妇网站| 激情六月综合| 亭亭玉月丁香| 九九色婷婷| 久久停停超碰| 色五月婷婷久久| 色偷偷色婷婷| 99精品福利视频| 狠狠五月丁香色婷| 激情综合网,五月| 九九RE视频在线精品| 激情五月天.色网| 天天干,夜夜爽| 亚洲免费看片| 99色在线| 操操碰| 人妻激情综合| 日本99在线| 99啪啪骑| 色月九九| 99er这里只有精品视频| 六月激情久久婷婷| 日日做天天操夜夜爽| 亚洲热久| 五月丁香91| 五月婷婷三级| 99久久久国产大片| 日日干夜夜撸夜夜骑| 操熟女成人网| WWW、日本色丁香、co m| 五月婷婷色播视频| hd五月婷婷在线| 亚洲俩性性爱图片久久第六页| 精品三区影院| 99热这里精品| 五月婷婷综合久久| 婷婷狠狠操| 五月天另类小说| www超碰| 久久综合中文| 亚洲精品白浆高清久久久久久| 久久怡红院| 青青草免费公开视频| 天天色天天操天天射| 思思热视频| 五月天婷婷久久视频| 九九热只有精品| 色色操| 五月天婷婷综合网| 欧美三级大片AA在线看| 久操人妻| 亚州AV超碰人人操| 久久综合性| 综合欧美五月婷婷| 色亚洲婷婷| 色婷婷视频综合| 激情婷婷六月天| 五月丁香婷婷视频| 国产精产国品一二三在观看| 丁香五月婷婷久久久| 色婷婷五月影院| www色色色com| 色色五月婷婷丁香| 五月综合色| 99re在线观看| 玖玖五月丁香| 日本特黄aaaaa| 日日射天天射| 婷婷色五月色妇| 婷婷五月天高清无码| 丁香五月最新地址| 羞羞嫩草视频| 五月激情五月丁香| 99色在线视频| 乱乱av| 五月婷婷精品视频| 秋霞三级色戒| 日日夜夜天天| 欧美 色婷婷| 色五月婷婷综合在线| 99色色爰| 人人摸人人澡人人| 黄色视频网站在线播放| 欧美在线视频99| 丁香五月天欧美| 色噜噜狠狠色综合日日| 中文字幕丰满乱孑伦无码专区| 婷婷网影院| 青青操avbb| www.五月.com| 婷婷色五月大香蕉在线| 五月婷婷六月丁香激情深爱| 极品另类| 红桃91人妻爽人妻爽| 中文字幕在线不卡| 99免费在线| 激情五月天婷婷| WWW色色色COM| 精品综合五月| AA丁香综合激情| 激情99| 无码免费人妻A片AAA毛片西瓜| 亚洲a片免费观看| 婷婷激情伍月网| 婷婷五月六| 五月丁香六月激情综合| 婷婷激情四射| 亚洲成人av在线| 激情AV综合| 啪啪啪大香蕉| 99热精品在线| 色五月激情| se影音资源在线观看| 国产超碰在线| 婷婷色五月噜噜| 91视频一起草| 另类专区在线| 激情另类综合| 9视频1在线| 欧美色图天堂网| 精品无吗va视频免费观看| 99操逼| 玖玖在线| 啪啪综合网| 伊人狠狠丁香婷婷综合尤物| 五月天婷婷爱| 97操碰视频| 天天综合在线网| 久久精品A片777777| www.五月婷婷久久.com| 久机视频这只有精品| 成人免费高清在线播放| 色五月激情综合| 另类婷婷五月天啪帕帕| 天天爽日日爽夜夜爽| 亚洲操操操| 五月天婷婷色五月天| 亚洲人妻av| 六九色综合婷婷五月天| 成人永久免费视频在线观看| 超碰人人干| Www99热| 五月天婷婷色| 大香蕉九九| 激情综合色网| 99热 在线观看| 激情五月色婷婷| 九九热黄色| 99久久久免费| 激情 五月 婷婷 丁香| 亚洲黄色影视| 人人摸人人干人人做| 色五月天在线观看| 九九热在视频| 91久久日日| 五月婷婷丁香五月婷婷| 久久爱综合| 天天日夜夜曹| 精品久久99| 噜噜视频| 99热99这里有免费的精品| 午夜伊人大香蕉| 综合五月天婷婷色| 五月婷婷七月丁香| 欧美va在线| 人妻久久久久久久久妻久久久久久久久 | 思思99精品视频在线观看| 另类小说色婷婷| 婷婷久久夜| 日韩av变天就操逼不卡区| 五月婷婷丁香综合| 97干网站| 婷婷D区| 久久欧洲综合网| 色色色色色九九九九九| 五月天开心色情网| 午夜不卡成人一区二区| 国产精品视频| www色婷婷久久综合久色 | 日日操夜夜爽| 99热大全在线观看| 天天艹| 大香蕉九操| 狠色综合网| 色婷婷小说| 这里只有精品9| 97婷婷在线| 99热最新| 五月天激情电影| 夜夜躁婷婷AV| 激情五月天婷婷播播久久综合91| 丁香久久综合| 六月婷婷激情小说网| 九伊人网| 俺也去五月婷婷丁| 草草操操| 精品亚洲VA网站| 9 1超碰九色| 五月婷婷操操| 婷婷香五月天| 夜夜爱网站| 五月丁香综合激情在线观看| 99在线热视频| 精品9久| 色一情一乱一乱一区91| 天天做天天爱综合| 99在线观看视频精品| 99在线播放| 大香蕉手机视频| 欧美五月婷婷| xfplayav在线| 六月婷婷网| 丁香激情五月| 人人草人人视| 天天狠狠夜夜狠狠2023| 婷婷五月天影视| 日本WwW色偷偷丁香花久久久京东热| 亚洲五月婷婷| 99热国产这里只有| 婷婷五月综合在线| 婷婷色吧| 九九色中文| 国产亚洲AV人片在线| 白天AV月月| 毛v一区二区视频| 五月丁香啪啪| 在线99热| 六月婷婷av| 激情色视频| 人人爱干人人爱草| 国产成人AV在线| 亚洲韩国日产综合AV| 婷婷色五月激情| 久久九九@| 丁香五月AV综合激情| 成人网站免费在线播放| 婷婷综合av| 中国女人做爰A片| 99人人操人人爱久久久| 色吊丝99| 色婷婷狠狠禁18久久| 开心婷婷五月| 五月丁香六月成人| 久久五月丁香| 碰碰91| 五月天激情久久| 视频这里只有精品16| 五月丁香久久| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 婷婷色在线播放| 九九99热| 丁香综合网| 五月天伊人久久| 嫩草AV久久伊人妇女超级A| 色欲av伊人久久大香线蕉影院| 亚洲精品激情| 婷婷中文字幕| 日本一级一片免费视频| 日本色久| 婷婷六月激情| 婷婷综合久久| 97亚洲视频在线| 色的色综合| 九九热视频精品2| 亚洲色啪| 六月伊人婷婷| 五月丁香欧美综合免费视频| 岛国av电影网站| 天天爽曰日爽| 日韩99色99| 夜夜操天天爽| 99热这里只有精品4| 五月婷婷免费在线观看视频| 色播五月天激情| 日日噜狠狠色综合久| 丁香婷婷影院| 99热91| 99激情视频| 六月丁香久久| 精品日本视频444| 婷婷五月日本| 99在线观看精品| A片一曲| 色综天天综合| 激情婷婷六月| 日韩在线一级| 久碰视频| 亚洲一区二区 成人网站戴套| 综合色视频| 久久婷婷五月综合色丁香| 操比激情五月综合| 婷婷激情丁香五月婷婷激情丁香五月婷婷| 婷婷五月天深爱| 99久久精品视频女神1| 久久婷婷五月天蜜桃| 婷婷色在线播放| 欧美一级色| 亚洲综合五月天| 99色爱| 无码一级片| 色九区| 婷婷六月色| 日韩在线观看网址| 色噜噜97视频在线观看| 色天天久婷婷| www.婷婷| 国产精品涩涩涩视频网站| 99久久国产综合精品五月天喷水\| 97久久超视频| 另类的婷婷| 日本熟女一区二区| 九九热超碰| 在线成人va| enecarbon-materials.com污K127封锁请涟系@wip1688 | 久久99成人性爱高清视频| 五月天综合在线| 九九色综合| 97超碰99热99| 丁香久色| 国产 亚洲 在线| 成人国产欧美大片一区| 影视av久久久噜噜噜噜噜三级| 色色色在线播放| 丁香成人五月天| 久久久久久欧美精品se一二三四| 亚洲精品一二三| 色婷婷五月天激情| 99九九精品| 日韩1区2区| 激情婷婷在线| 色六月丁香婷婷狠狠干| 色欲天天综合| 五月天丁香啪啪啪啪| 99久久99视频只有精品| av国产精品偷| 99色免费视频| 国产人妻人伦精品一区二区| 九月激情网| 人人妻久久妻| 五月丁香婷婷钟和色图| 99热国内| 五月开心激情| 色哟哟精品| 五月丁香六月婷婷久久久综合| 激情综合久久| 久久综合伊人77777蜜臀| 激情影院免费视频婷婷五月天| 久久免费操| 99热99精品在线观看| 综合97五月| 4438激情网| 日本A片一区| 热久久这里只有精品20| 国产看真人毛片爱做A片| 丁香 久久| 婷婷丁香五月天在线| 六月色国内综合| 婷婷基地成人五月天| 五月激情丁香六月狠狠干| 五月激情影视| 超级碰碰视频无码| 99热精地址| 99这里都是精品| 婷婷久月| 久久丁香| 九九伊人网| 加勒比色色| 五月婷婷片| 91人碰| 亭亭五月激情亚洲在线| 色婷婷网大全在线| 日本成人噜噜噜噜噜| 开心五月网| 九九热99视频在线| 五月婷免费视频| 色综合久久伊伊婷婷五月| 99色精品| 91婷婷色五月| se99视频| 99视频这里只有免费精品| 婷婷五月天综合网| 99re久热只有精品6在线直播.com| 五月精品免费XXX| 久在线88综合| 久久婷婷五月综合色播| 激情色五月天| 999热在线视频| 北条麻妃伊人| 五月丁香六月婷婷免费| 538在线精品| 2025中文在线视频字幕免费观看| 欧美成人猛片AAAAAAA| WWW,色五月| 色九月婷婷| 99色色热| 中文字幕日产A片在线看| anquye伊人| 精品一二三区久久AAA片| 丁香五月婷婷婷婷欧美综合| 丁香五月激情综合| 国产视频久色| 婷婷酒色网| 狠色狠色综合久久| 国产黄色av| 狠狠狠人妻| 婷婷中文字幕网站| 色色色色色色色色综合网| 天天色凹凸| 五月天激情久久| 91色干| 蜜臀av粉嫩av懂色av| 99色在线观看视频| 日本天天操| 激情婷婷综合| 午夜丁香久久久久久| 丁香五月婷婷色| 国产性爱一级| 激情第四色| 五月激情精品视频| 久在线88综合| 五月丁香大相交| 丁香九月激情| 三人荫蒂添的好舒服A片 | 日日.c| 色五月婷婷91| 色色丁香| 色五月六月| 色婷婷久久天天性爱| JAPANRCEP老熟妇乱子伦视频| 六月婷婷狠狠做| 五月丁香婷婷狠狠操| 久久色五月| 激情五月婷黄版| 久草热久草在线视频| 狠狠色综合五月| 另类图片色五月| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 伊人久久婷婷| 色婷婷丁香五月色综合网| 丁香五月九九| 婷婷五月综合在线| 六月婷婷视频| 激情五月综合免费| 激情五月婷婷视频一区二区三区| 国产精品扒开腿做爽爽爽A片唱戏| 五月综合缴情网| 亚洲情欲| 丁香五月综合| 99热99热在线| 国产va在线视频| 人人综合91网| 婷婷五月丁香综合网| 亚洲婷婷久久综合| 99福利视频| 人妻22p| 欧美成人猛片AAAAAAA| 五月天激情小说| 天天舔天天| 六月婷婷综合激情| 人人摸人人干| 色色色999| 色欲影香| 丁香婷婷婷五月| 丁香五月亚洲激情婷婷射| 久久婷婷资源| 五月婷婷影视| 婷婷五月天影院| 婷婷无码五月天| 噜噜噜噜在线| 丁香色五月婷婷17C| 久草视频大香蕉99| 97色精品视频| 国产肥白大熟妇BBBB视频| 噜噜在线| 天天干夜夜想| 国精产品一区二区三区| 婷丁香五月天| 99久久九九| 五月天伊人综合| 超碰成人影视| 超碰免费成人网站| 国产69精品久久久久999小说| 99九九在线精品热动漫| 99久久精品国产色欲| 五月丁香六月婷综合成人综合| 天天性视频| 亚洲激情| 中文字幕不卡网站| 热99玖玖99玖玖99九九| 欧美成人精品A片免费一区99| 精品乱码久久久久| 超碰九色| 中文字幕在线免费观看视频| 婷婷综合激情| 成人 在线 日韩| 狠狠色噜噜狠狠狠888| www.99精品视频| 丁香五月婷婷基地| 婷婷五月天综合网| 99亚州综合精品成人网| 五月天色色网站| 91大神操美女| 色伊人婷婷| 精品乱码久久久久| 激情五月婷黄版| 色色色色色色网站| 99在线观看精品视频| 99热手机在线精品| 日婷婷| 婷婷婷婷婷开心无码播放| 久久久精品色| 五月天开心激情综合网| 狠狠干五月天| 99碰碰| 久久九九网| 亚洲综合在线视频| 人妻久久久| 99精品成人无码A片观看金桔| 天天色粽合合合合合合合| 91蜜桃婷婷狠狠久久综合9色| 五月丁香五月婷婷| 狠狠干狠狠干| 99热精地址| 激情五月天www| 婷婷深爱五月丁香网| 九九成人精品免费视频| 激情影院免费视频婷婷五月天| 婷婷丁香五另类网站| 色亭亭五月天网扯| 淫荡综合网| 五月天精品综合| 激情六月婷| 激情综合网 激情五月天| 99re思思久久| 五月丁香久久网| 久久久久久欧美精品se一二三四| 色综合五月| 99re在线播放| 一本色道久久综合狠狠躁一二三| 婷婷丁香五月色偷偷| 97视频.干com| 伊人五月天日日夜夜久久久天天| 亚洲VA在线| www激情婷婷com| 香蕉操亚洲| 久综合4| 国产69精品久久久久999小说| 内射 无码 伊人| 亚洲超级碰| 丁香激情五月天| 五月丁香久久| 天天色凹凸| 免费成人中文字幕| 五月天激情黄色小说在线观看| 丁香五月花婷婷开心| 狠狠狠激情网| 91色操| 91丨九色丨大屁股| 亚洲国产成人AV在线| 色综合综合色| 丁香五月天啪啪激情综合网| 99热综合色图| 在线视频婷婷| 99久.| 青草久久五月婷伊人| 欧美黄色韩日网| 婷婷六月激情| 野外99热| 国产美女精品| 97人人做| 五月停视频天堂| 久久色婷婷| 久久在线人妻| 久久性爱视频网站| www.久久爱.c n| 六月婷婷狠狠| 91人操| 67194中文在线| 高清视频一区| 色五月婷婷亚洲| 蜜桃成语时李时珍 免费| 天天摸天天做天天爱天天爽| 日日干日日| 婷婷五月中文字幕| 激情五月色综合国产精品| 狠狠爱婷婷爱| 五月伊人婷婷999| 秋霞午夜理论| 99久在线观看| 中文字幕黄色电影网址| 九九热99精品| 天天综合网在线| 久久丝袜婷婷| http://www.sd-xiangsu.com/| 激情五月天在线视频| 综合亚洲AV| 亚洲综合色丁香五月天| 91狠狠色色丁香婷婷综合久久| 欧美精品狠狠色丁香婷婷| 六月欧美综合色情| 色五月婷婷网| 97碰超级人人看| 永久精品| 日本 色综合| 伊人婷婷色激情丁香| 色五月婷婷综合| 生活片五区| 五月婷婷中文| 亚洲欧洲美女在线观| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 另类少妇人与禽zOZZ0性伦| www.henhenl| 五月婷亚洲精品| 亚洲AV成人在线观看| www.夜夜夜| 天天干,夜夜爽| 色五月综合网| 九九九九国产| 久久久久久久久久久97| 九九99香蕉在线视频播放| 亚洲AV久久久久久久久久久久久久久久| 妻久久久久| 亚洲操逼网| 99综合色色色| 夜夜爽天天爽| 激情中文在线| 97干综合网| 99re在线视频| 热久国产| 综合久久影院| 狠狠干夜夜干| 丁香五月天偷拍| 99热综合网| 另类五月婷婷| 国产精产国品一二三在观看| 丁香五月亭亭六月综合激情网| 亚洲中文字幕在线观看| 婷婷黄色五月天在线视频| 伊人网大香| 99爱视频精品在线观看| 任你爽视频| 无码G高清天| 国产成人精品一区二区三区视频 | 996er热| 伊人影音无码一区二区三区| 天天日天天爽| www.思思99热| 日本熟女啪啪| 蜜桃人妻无码AV天堂三区| 色女人久久| 国产成人网址| 成人羞羞啪啪 全 视频| 伊人久久丁香狠狠婷婷综合香蕉 | 日日噜狠狠色综| 中国丰满熟女A片免费观| 五月丁香色婷婷熟女| 五月天婷婷无码| 五月丁香婷婷三级| 99精品97| 色五月综合| 日日操日日干| 激情av网| 九九香蕉网| caopeng97日韩| www.婷婷久久五月天| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 国产肥白大熟妇BBBB视频| 色999五月色| 激情综合九| 久久怡红院| 婷婷日在线观看| 久久精品国产精品| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 午夜理论片最新午夜理论剧| 日噜噜色| 九九99免费理论| 久久这里面只有精品视频| YW无码| 亚洲综合无码| 久久婷婷五月综合激情国产| 97色在线观看视频| 思思99热| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 成人在线网址| 久久久aaa| 亚洲天堂99| 激情婷婷综合| 色99在线观看| 久久五月婷综合| 婷婷大乡焦噜噜| 国产淫熟妇| 精品网站:999WWW| 久久精品无码一区| 婷婷色九月| 成人欧美Va| 五月丁香福利| 亚洲图片 丁香婷婷| 久re热视频| 伊人狠狠操| 色~性~乱~伦~噜| 97色综合视频| 99性视频| 4438激情网| 99精品22| 五月婷婷丁香深深爱| 大香蕉九九热| 色五月丁香A欧美com| 日日夜夜狠狠| 亚洲精品五月| 99r久久这里只有精品| www,com,五月色色| 丁香亭亭激情四射| 亚洲精品色| 亚洲色色色| 看久久性爱视频| 激情综合五月激情| 五月天婷婷基地| 丁香五夜激情四射夜夜夜| 99久久99九九99九九九| 五月色色色| 丁香五月天AV| 激情网综合| 欧洲激情五月天婷婷| 亚洲欧洲国产精品| 色婷婷色九月| 国产AV网页| 大香蕉色婷婷伊人在线| 精品色色| 99热这里只有精品66| 五月婷婷啪啪啪| 天天插天天插天天插天天插| 99色免费视频| 深爱丁香激情| 五月激情婷婷六月丁香| 久久久久久草黄色片AV在线观看 | 日日操日日射| 这里只有精品视频国产| 丁香婷婷综合精品六月初| 五月色丁香| 9999热在线观看| 9精品一区| 狠狠色噜噜狠狠狠狠狠色综合久久| 久久精品99国产精品日本| 大香蕉综合| 欧美丁香婷婷五月| 色婷婷电影网| 激情六月综合| 久久丁香五月婷婷| 人人操AV| 久久久婷| 久久丁香| 久久久久er热| 激情综合网激情五月天| 综合色图区| 成人无码髙潮喷水A片| 99久久婷婷国产综合| 九九热这里| 久青草影院| 99re在线播放| 亚洲九九99精品视频在线播放| 亚洲乱码日产精品BD| 天天日天天爽夜夜爽| 激情网五月| 色欲天天综合网| 色婷婷基地 | 国产肥白大熟妇BBBB视频| 99激情视频| 午夜丁香| 国产真实乱了老女人视频 | 五月天综合在线网| 31色区视频免费看| 久久大香蕉伊人| 免费人人操| 五月丁香六月婷| 丁香 婷婷 激情 综合 五月| 五月丁香六月婷婷色| 五月丁香六月合| 深爱五月激情| 97碰| 色综合色综合网| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 综合激情啪啪| 色高清无码视频| 26UUU欧美| 五月天操逼网| 国产精品涩涩涩视频网站| 三年高清大片免费观看国语| 青吴乐视频| 九九热大香蕉| 天天爽爽日日做做| 婷婷五亚洲| 玖玖婷婷色五月| 97福利视频| 伊人丁香在线| 91人人操| 另类综合激情| 丁香六月伊人| 婷婷久久五月天| 性av| 久久久27操| 亚洲午夜精品久久久久久人妖| 五月丁香综合啪啪対白| www.婷婷六月天| 亚洲热综合| 亚州欧美黄色电影| 亚洲不卡欧洲| 婷婷成人综合五月| 五月丁香在线观看| 久久曰曰| 国产精品热搜丁香五月婷婷| 91啪啪啪啪| 《久久综合九色综合97婷婷| 草综合网| 五月丁香无码| 1024人妻| 日本V在线观看不卡视频网站| 天天插天天射天天干| 99色在线视频观看| 五月天婷婷基地| 大香网伊人久久综合| 99视频日韩| 日日日日做夜夜夜夜无码| 天天婷婷色六月| 中文字幕成人| 人人操AV| 色大综合| 高清不卡一区| 丁香婷婷天堂| 7月婷婷六月丁香| 99热这里只有精品2| 思思99热| 五月丁香六月婷婷的女人| 日本婷婷丁香五月| 久婷婷婷| 九九伦子片| 狠狠操天天操综合| 狼友视频在线观看18| AV中文字幕夜夜操b天天摸bb| 人人草公开操| 久久久大香蕉| av网站免费在线| 嫩草综合网| 99精品久久久久久久婷婷| 超碰免费人人肏| 五月婷婷 六月丁香| 99热碰碰热| 99热热热国产超碰| 五月色欧洲| 九九无码| 五月天丁香久久| 色五月色五天免费视频| 成人国产欧美大片一区| 六月婷婷色色色| 俺也去在线视频| 大战熟女丰满人妻AV| 色婷婷五月影视| 91色吧网| 婷婷久久内射| 精品A√| 久久综合66| 天堂爱爱| 超碰人人在线| 欧美日韩99| 自拍偷窥99热| 亚洲AVDVD| 婷婷噜噜| 人操人| 这里只有精品在线看| 六月成人网| 成人婷婷桔色| 亚洲精品久久久久久久久久吃药 | 中文字幕在线播放视频| 婷婷五月天丁香成人社区| 色永久| 琪琪色五月婷婷老师| 亚洲综合色丁香五月天| 丁香五月av| 丁香五色月婷婷网| 91超碰人人操| 中文字幕,综合,91| 五月婷婷激情综合| 99riAV国产精品视频| 夜夜操狠狠操| 色域五月婷婷丁香| www.黄色片-久久成人国产精品在线播放-999AV | 久久老码第一| 色婷婷香蕉| 亚洲五月天色| 日本五月婷| 亚洲色色爱| 色色激情| 99久久成人| 婷婷99狠狠躁天天久久久九九九| 婷婷五月天激情五月天网站| 大香蕉AV电影在线| 亚州操人在线视频| 1024亚洲| 国产成人av在线播放| 国产毛片精品一区二区色欲黄A片| 日本精品在线噜噜噜| 97干在线视频| 99日韩| 久久ab| 五月婷婷丁香伦理网| 少妇被躁爽到高潮无码文| 欧美综合在线五月天色婷婷| 26uuu国产精品| 亚洲成人丁香花| 九九热视频精品| 婷婷99狠狠躁天天躁中文| 色婷婷AV在线| 婷婷六月丁香在线| 亚洲欧洲中文日韩久久AV乱码| 这里只有免费的精品| 亚洲av另类在线观看| 五月天激情综合| 国产成人综合在线| 另类少妇人与禽zOZZ0性伦| 天天色色婷婷| www.com色播五月天| www.91.com黄| 免費亭亭成人| 色综合婷婷99| 色综合九九| 久久在这里有精品| 五月天婷婷激情四射综合| 超碰国产AV| 99色综合| 亚洲午夜成人av电影网| 久热这里只有| 噜噜噜狠狠色综合| 激情亚洲五月| 热99在线精品| 亚洲激情电影五月天色婷婷丁香一起草| 精品人妻一区二区三区在| 综合久久五月| 色婷婷免费视频| 99超级碰碰| 激情五月综合六月丁香婷婷狠狠干| 色九月婷婷| 91婷婷五月天嫩女| 丁香五月欧美成人| 色播jjjj| 人人操av| 婷婷丁香五月精品| 激情人妻蜜夜系列区| 色热久| 超碰在线观看99| 嘿嘿视频免费看9| 另类 在线| 日本人妻丁香婷婷久久寝取熟女五月| www.丁香六月婷婷久久天堂影院.con| 五月天激情视频| 六月婷婷色综合| 激情五月天婷婷播播久久综合91| 超碰大香蕉网| 欧美婷| 色亚洲无码| 无码字幕中文| 超碰av在线| 亚洲天堂aaaa| 啪啪啪五月天| 亚洲av网站在线观看| 91碰碰视频在线观看| 伊人狠狠丁香婷婷综合尤物| 这里只有精品视频一区| 99自拍视频| 2015WWW永久免费观看播放| 99色热| 99热大香蕉| 天天操综合网站| 99热香港| 亚洲视频操| 91碰碰碰久久久久| 久久久网站| 超碰人人操在线| 五月丁香六月婷婷手机无线| 永久思思热在线| 五月丁香五月丁香五月丁香五月丁香91| 免费视频WWW在线观看网站| 婷婷噜噜| 婷婷丁香综合在线| 九九久久网| 天天日夜夜曹| 日日夜夜爽爽| 777.色色| 婷婷激情中文综合| 六月色激情| 大大香蕉综合在线| 午夜天堂一区人妻| 色综合激情| 中文久久婷婷| 26uuu成人网| 99热这里有精品24| 开心久久五月天| 91chinese在线| 伊人网啪啪| 玖玖爱导航| avh片在线观看| 中文字幕视频色婷婷| 97香蕉碰碰人妻国产欧美| 九九碰九九爱97| 影音先锋91| 亚洲成人在线综合| 舔色婷婷| 婷婷久久色| 九九热精品视频| 久久视频这里99| 五月宗合激情网| 深爱丁香激情| 婷婷综合伊人丁香| 呦呦v线| 婷婷五月精品在线| 色色色视频免费无码| 综合婷婷六月| 色婷婷欧美在线| 久久五月丁香伊人青草| 乱女乱妇熟女熟妇综合网站| 天天射影| 热99热| 五月天堂婷婷| 激情五月天婷婷色色色色色色色色色色色 | 99热久草| 九九视频热| 第四色婷婷五月| 婷婷综合网站| 538午夜激情| 秋霞午夜理论| 狠狠干天天内射| 婷婷激情鹿城五月天| 五月六月激情婷婷| 亚洲六月婷| 好好干av| 九九热视频精品| 激情五月天免费视频| 四色AVwww| 五月丁香婷婷视频| 大香蕉久热| 五月激情婷婷丁香| 五月婷婷综合网| 丁香五月婷婷色| 99热在线观看| 亚洲传媒在线观看| 免费91久久精品| 九热电影av| 天天射综合网站| 色色色色色热| 先锋男人99资源| 欧美色欲色欲天天天www| 五月综合无码| 精品女人九九九| 久久久人妻| 婷婷丁香无码专区| 久久精品日| 亚洲综合视频在线| 婷婷丁香五月av| 亚洲人妻一区二区 | 亚洲成人色五月婷婷综合| 激情二色月| 亚洲色在线观看| 成人丁香五月| 超碰在线成人| 亚洲黄网在线| 精品99在线观看| 六月丁香婷婷拍拍| 69五月天视频| 开心激情网五月| 97人人操人人干| 欧美激情性做爰免费视频| 1024在线视频| 婷婷午夜激情| 成人精品视频99在线观看免费| 日日操无码| 大香蕉久久草| 婷婷瑟五月天久久综合| 五月开心深爱激情网| 欧美色五月| 久久婷五月天| 五月丁香综缴情性爱| 99啪啪视频| 久久草婷婷丁香网站| 久久在线大香蕉| 五月激情综合网| 日本少妇AA一级特黄大片| 99色综合网| 婷婷五月天偷拍| 欧美成人A片AAA片在线播放 | 91热er| 五月欧美丁香在线观看| 成人在线99| 美腿丝袜AV天堂网| 日本va欧美va欧美va精品| 性日本精品| 99热91| 蜜桃婷婷狠狠久久综合| 激情丁香五月婷| 十月色综合| 亚州美女| 国产9色在线/日韩| 九九视频精品在线免费| 久99视频在线观看| 婷婷影院A成人| 五月天色色色| 思思热视频在线观看| 这里只有精品视频看看| 色五月婷婷自拍| 婷婷天天舔| 在线色色| 狠狠爱五月婷婷综合六月| 99热综合在线| 大香蕉欧美在线| 情欲禁地| 99自拍视频在线| 九九久久视频| 中文字幕按摩做爰| 99色视频在线观看最新| www.夜夜騎夜夜狠| 亚洲激情综合| 婷婷五月电影| 欧美α√| 伊人婷婷99热精品| 婷婷成人网五月天| 欧洲一区二区| 三日本无码| 五月熟妇婷婷久久| 99欧美| 97在线日本| dingxiangtingtingliuyue| 婷婷五月色天| 久久人人九九| 人人爱摸视频| 日碰日| 99热在线这里只有精品| 大香蕉啪啪啪| 五月天堂色| 91成人电影| 亚洲视频久久| 这里只有精彩视| 偷拍丁香九月激情| 久久老码第一| 开心五月激情网| 青草青草久热这里只有精品| 丁香五月六月婷婷综合| 欧美碰碰| 久久欧洲综合网| 丁香婷婷天堂| 五月激情在线| 婷婷丁香色女人| 五月丁香视频在线观看| 另类激情综合| 色五月首页| 99热这里有精力| 天天久综合网永久入口17v| 色播五月丁香婷婷| 亚洲午夜av| www.粉嫩av.com| 久久久久久综合88| 丁香五月区| 六月婷婷久久大全| 99热在线看片| 欧美成人色婷婷| 婷婷五月色播天| 日韩久久这里只有精品| 香蕉久操| 久久久婷婷五月天| 精品久久久久成人码免费动漫| 亚洲成人网无码| 九九久久网| 五月婷网| 久热超碰| 五月婷婷六月丁香激情深爱| 色婷视频| 26uuu视频欧美| 色你久久| 久热九九| 六月婷婷五月丁香| 激情综合网之激情五月| AA片在线观看视频在线播放| 色五月丁香激情| 久久AAAA片一区二区| 丁香六月成人网| www.cao.com久久| 热成人网| 久久9999| 大香蕉av在线| 五月丁香久久精品在线观看| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 天天做天天爱天天爽| 色婷婷综合在线| 丁香五月在线自慰| AV伊人青草丁香六月| 涩涩五月天| www.热99热| 五月丁香视频色色| 丁香五月天社区| 色婷婷丁香五月天| 亚洲妇女熟BBW| 色性五月天| 亚洲色色五月天| 伊人五月成人| 夜夜大香蕉婷婷丁香| 婷婷色中文字幕| 日日日,com| av五月天婷婷丁香| 9久热在线视频精品| 激情文学第四色婷婷丁香五月| 色偷偷五月天| 色狠狠综合| 五月四色激情| 超碰男人色| 丁香婷婷激情五月| 99精品成人无码A片观看金桔| 五月婷婷六月婷| www.婷婷亚洲基地| 久热黄色| 婷婷综合网站| 欧美性猛交99久久久久99按摩| 开心五月网 | 五月丁香激情欧洲啪啪| 国产一区二区av免费| 色播五月| 大香蕉人妻| 一本久久婷婷| 色婷婷AAA| 黄涩毛片| 香蕉婷婷色五月| 免费看欧美成人A片无码| 婷婷五月天精品| 久久婷婷视频| 日本WwW色偷偷丁香花久久久京东热| 99热66| 婷婷五月成人有| 久久您您综合网| 久久草大香蕉|