99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑 1. 磁盤配額到底解決了什么問題磁盤配額這個功能說復(fù)雜不復(fù)雜說簡單也不簡單。簡單理解就是給用戶或組設(shè)置一塊磁盤空間的消費(fèi)上限超過這個上限就禁止繼續(xù)寫入。這在多用戶服務(wù)器、共享存儲、虛擬主機(jī)生產(chǎn)環(huán)境里幾乎是剛需。我踩過最典型的一個坑是早年給公司搭文件共享服務(wù)器沒配配額結(jié)果某個同事直接往共享目錄里拖了幾百GB的虛擬機(jī)鏡像一夜之間整個存儲池滿了所有業(yè)務(wù)系統(tǒng)同時報錯磁盤空間不足。從那以后我學(xué)乖了凡是要給多人用的目錄配額一定先配好再交付。那磁盤配額能干什么幾條實(shí)在的能力限制單個用戶在特定文件系統(tǒng)上的空間占用按塊block限制限制單個用戶可創(chuàng)建的文件數(shù)量按inode限制限制一組用戶的總空間占用和文件數(shù)量組配額設(shè)置軟限制和硬限制軟限制是警告閾值超過后系統(tǒng)會提示但允許繼續(xù)用一段時間硬限制是絕對上限超過就直接拒絕寫入通過寬限期grace time控制在軟限制之上還能撐多久到期后軟限制自動變成硬限制這套機(jī)制特別適合幾類場景企業(yè)對內(nèi)文件服務(wù)器、高校機(jī)房或?qū)嶒?yàn)室共享存儲、云服務(wù)器上給客戶開通的多租戶站點(diǎn)、以及任何形式的公共FTP/NFS存儲目錄。單機(jī)個人電腦其實(shí)不太用得上但如果你的電腦上建了多用戶賬號給家人或同事用配一下也省心。2. 配額機(jī)制的底層原理搞懂這些再動手2.1 限制的是塊和inode而不是文件大小這件事很多人第一次看配額會困惑為什么有的配額配置界面顯示的是1K Blocks其實(shí)Linux文件系統(tǒng)在底層管理空間的時候是以**塊block**為單位劃分的一個塊默認(rèn)是4KB。一個100KB的文件實(shí)際占用的是25個塊而不是一個100KB的文件。配額限制的就是這些塊的總數(shù)也就是用戶實(shí)際消耗的物理空間。inode這個維度就更底層了。每個文件至少要占用一個inodeinode里存的不是數(shù)據(jù)而是文件的元數(shù)據(jù)——權(quán)限、所有者、時間戳、數(shù)據(jù)塊指針等。如果一個文件系統(tǒng)inode耗盡即使物理空間還一大堆你也創(chuàng)建不了新文件。所以配額表里通常同時提供blocks和inodes兩個維度blocks管空間大小inodes管文件數(shù)量。2.2 軟限制、硬限制和寬限期三者協(xié)作的邏輯軟限制soft limit是一個提醒值。比如你給某個用戶設(shè)了軟限制5GB、硬限制8GB、寬限期7天。用戶用到5GB之后系統(tǒng)會告警但用戶還是能繼續(xù)寫一直寫到8GB被硬限制堵死但如果用戶一直是超了5GB但沒到8GB的狀態(tài)超過7天寬限期系統(tǒng)就會直接禁止繼續(xù)分配塊除非刪除文件把用量壓回5GB以下。硬限制hard limit就是一道硬墻。到了這個值not only新寫入被拒絕之前的文件也刪不掉不是的硬限制只阻止新數(shù)據(jù)的寫入用戶依然可以刪除自己的文件騰出空間。這一點(diǎn)在排查問題的時候特別重要——用戶說我刪了文件還是寫不進(jìn)去多半是刪除后仍然超出硬限制或者配額按塊計算、小碎文件刪了不少但釋放的塊不多。2.3 用戶配額、組配額、項(xiàng)目配額有什么區(qū)別Linux配額支持三個作用域用戶user quota、組group quota、項(xiàng)目/目錄project quota。用戶配額最容易理解限制的對象是UID每個人的占用獨(dú)立算賬。適合個人目錄、home目錄這類場景。組配額限制的對象是GID。比如某個項(xiàng)目組共享一個目錄組內(nèi)5個人都往里寫配額只統(tǒng)計這5個人共同消耗的總量。這比單獨(dú)給每個人限制更有實(shí)際意義——項(xiàng)目組需要的是一個項(xiàng)目總盤子。項(xiàng)目配額是較新內(nèi)核2.6.35引入的機(jī)制按目錄維度管理目錄打上project ID標(biāo)簽后不管哪些用戶往里寫都?xì)w到同一個配額賬戶里。適合托管目錄、共享目錄這種以目錄為邊界的管理模型。實(shí)務(wù)上最常用的組合是用戶配額組配額同時啟用。舉例用戶A限額2GB、用戶B限額2GB同時A和B組成的組G限額3GB。這樣既防止個人濫用也防止整個團(tuán)隊用爆公共盤。2.4 開啟配額對文件系統(tǒng)有什么要求不是隨便一個分區(qū)就能直接開啟配額的關(guān)鍵前提有三個文件系統(tǒng)類型要支持。ext3、ext4、xfs、btrfs都原生支持配額ext4和xfs是生產(chǎn)環(huán)境中最穩(wěn)的選擇。老舊的ext2也可以但沒必要。FAT32/NTFS這類文件系統(tǒng)在Linux下掛載的話配額支持很弱建議不要折騰。必須掛載在獨(dú)立分區(qū)上。配額是一個文件系統(tǒng)級別的特性不能跨多個掛載點(diǎn)統(tǒng)一配額。你如果只給/home配了配額用戶把數(shù)據(jù)塞到/data下配額管不著。所以規(guī)劃配額之前先想清楚哪些目錄需要配額最好一開始就把它們單獨(dú)分區(qū)。掛載參數(shù)要帶上配額開關(guān)。ext4需要usrquota和/或grpquota掛載選項(xiàng)xfs比較特殊配額是文件系統(tǒng)自帶的特性掛載時需要uquota/gquota或prjquota參數(shù)不同發(fā)行版寫法略有差異。注意改掛載選項(xiàng)要寫入/etc/fstab并正確重掛載或重啟否則重啟后配額狀態(tài)會丟失。xfs格式的配額文件在掛載時是不能直接使用quotacheck等傳統(tǒng)命令的操作方式不同這個后文細(xì)說。3. 實(shí)操前準(zhǔn)備分區(qū)、掛載點(diǎn)、工具安裝3.1 推薦的環(huán)境與版本基準(zhǔn)我后面寫的所有步驟都是基于主流的RHEL/CentOS 7/8/9 或 Ubuntu 20.04/22.04 環(huán)境內(nèi)核版本4.x及以上文件系統(tǒng)以ext4為主xfs部分單獨(dú)說明。如果你用的是老系統(tǒng)命令參數(shù)可能會有細(xì)微差別但整體流程不變。先說一個實(shí)用判斷拿到一臺機(jī)器做配額之前先跑一下df -hT看清楚當(dāng)前分區(qū)和文件系統(tǒng)類型。見過太多人不管三七二十一先裝quota工具裝完發(fā)現(xiàn)要配額的分區(qū)是xfs手忙腳亂。先看環(huán)境再動手能省一半排查時間。3.2 安裝quota工具包quota工具在絕大多數(shù)發(fā)行版的基礎(chǔ)倉庫里都有# CentOS / RHEL / Rocky yum install -y quota # Ubuntu / Debian apt install -y quota # 新一點(diǎn)的系統(tǒng)可能要用 dnf dnf install -y quota裝完之后驗(yàn)證一下rpm -qa | grep quota dpkg -l | grep quota如果這條命令沒有輸出說明沒裝上。此外建議順手裝一個ncdu或du習(xí)慣后面核對配額用量的時候要用到。3.3 準(zhǔn)備好一個獨(dú)立分區(qū)硬性條件為了演示我們假設(shè)機(jī)器上有一塊獨(dú)立磁盤/dev/sdb1掛載在/data目錄專門用于多用戶共享文件。先把分區(qū)格式化mkfs.ext4 /dev/sdb1如果有現(xiàn)成的/home獨(dú)立分區(qū)也可以直接拿它演示。但不管用哪個你絕對不能對根分區(qū)/做配額操作實(shí)踐因?yàn)楦謪^(qū)一旦配額配置失誤很可能導(dǎo)致系統(tǒng)起不來或用戶登錄異常。演示環(huán)境怎么折騰都行生產(chǎn)環(huán)境務(wù)必小心。格式化完成后創(chuàng)建掛載點(diǎn)并掛載mkdir -p /data mount /dev/sdb1 /data df -h /data3.4 修改fstab讓配額開關(guān)永久生效很多教程會教你先手動改掛載參數(shù)掛載一遍再來說fstab。我建議直接一步到位編輯/etc/fstab加上配額選項(xiàng)然后用mount -o remount重掛載。這樣不重啟也能生效而且重啟后配置不會丟。以/dev/sdb1 /data為例fstab里的寫法是/dev/sdb1 /data ext4 defaults,usrquota,grpquota 0 0usrquota表示啟用用戶配額grpquota表示啟用組配額。如果你只需要用戶配額只寫usrquota即可如果兩個都需要就都寫上別漏。改完fstab后執(zhí)行mount -o remount /data然后確認(rèn)掛載參數(shù)已經(jīng)生效cat /proc/mounts | grep /data輸出里能看到usrquota,grpquota字樣就說明掛載參數(shù)帶上了。如果fstab寫錯了這個命令可能報錯系統(tǒng)會提示你重新檢查。千萬別跳過這一步去重啟重啟后發(fā)現(xiàn)系統(tǒng)起不來再去改fstab那就被動了。提示如果是xfs文件系統(tǒng)fstab里的掛載選項(xiàng)通常寫uquota,gquota或者usrquota,grpquota在新內(nèi)核同樣識別xfs下的配額文件是作為文件系統(tǒng)內(nèi)部元數(shù)據(jù)自動管理的不需要手動創(chuàng)建aquota.user等文件。3.5 確認(rèn)內(nèi)核是否支持配額絕大多數(shù)發(fā)行版內(nèi)核都默認(rèn)打開了配額支持但保險起見可以確認(rèn)一下grep -i quota /boot/config-$(uname -r)能看到類似CONFIG_QUOTAy、CONFIG_QUOTACTLy、CONFIG_QUOTA_NETLINK_INTERFACEy的輸出就行。如果這些配置項(xiàng)是m或沒有需要重新編譯內(nèi)核或換個內(nèi)核版本。這個步驟在標(biāo)準(zhǔn)云鏡像上幾乎從沒出過問題但檢查成本極低順手做沒壞處。4. 初始化配額數(shù)據(jù)庫并設(shè)置用戶/組配額4.1 創(chuàng)建配額文件quotacheckext文件系統(tǒng)啟用配額后系統(tǒng)需要在文件系統(tǒng)根目錄維護(hù)配額記錄文件傳統(tǒng)上是aquota.user和aquota.group新版系統(tǒng)也支持quota.user但aquota系列最通用。初始化命令quotacheck -cug /data參數(shù)解釋-c創(chuàng)建配額文件如果不存在-u啟用用戶配額檢查-g啟用組配額檢查-v顯示詳細(xì)過程可選但推薦能看到每個文件系統(tǒng)的處理情況你可以在/data目錄下用ls -l確認(rèn)ls -l /data/aquota.user /data/aquota.group如果跑完quotacheck報錯“Cannot find quota file”或者“Permission denied”多半是前面掛載參數(shù)沒生效或者SELinux在攔。解決辦法后面第7節(jié)會單獨(dú)講。4.2 首次掃描的作用與注意事項(xiàng)quotacheck的機(jī)制是遍歷文件系統(tǒng)里每個文件的屬主和所屬組把所有已占用空間和inode數(shù)據(jù)匯總寫入配額文件。在已有大量數(shù)據(jù)的目錄上首次啟用配額這一步是必須的因?yàn)橄到y(tǒng)此前并不知道每個用戶已經(jīng)消耗了多少。這里有一個關(guān)鍵的運(yùn)維經(jīng)驗(yàn)對線上正在服務(wù)的數(shù)據(jù)目錄執(zhí)行quotacheck要在業(yè)務(wù)低谷期做最好先卸載或只讀掛載在做。因?yàn)閽呙杵陂g文件的變化可能導(dǎo)致配額記錄和實(shí)際不一致。生產(chǎn)實(shí)例如果實(shí)在不能停機(jī)可以接受短暫的不一致跑完后再用quotacheck重掃一次。但千萬別在配額文件生成過程中貿(mào)然重啟。4.3 用edquota交互式為單個用戶設(shè)置配額創(chuàng)建好配額數(shù)據(jù)庫之后給用戶zhangsan設(shè)置配額edquota -u zhangsan這條命令會打開一個文本編輯器界面內(nèi)容類似Disk quotas for user zhangsan (uid 1001): Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 12 24 7 3 5各列含義blocks該用戶當(dāng)前已占用的塊數(shù)每塊大小在掛載參數(shù)里確定默認(rèn)1KB單位顯示soft/hard空間塊軟限制和硬限制inodes該用戶當(dāng)前已創(chuàng)建的文件/目錄數(shù)量soft/hard右側(cè)兩列inode的軟限制和硬限制注意編輯時左右兩組soft/hard要對應(yīng)清楚左側(cè)是存儲空間、右側(cè)是文件數(shù)量。我自己第一次配置時就搞混過把文件數(shù)硬限制當(dāng)成空間限制了害得用戶沒法建目錄反而可以隨便寫數(shù)據(jù)——這錯得很隱蔽。把數(shù)字改好保存退出。比如要限制空間2GB硬限制2048MB即2048個1KB單位不對這里單位是1K blocks2GB要寫成2048000個1K block稍微算一下和文件數(shù)10000個Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 1843200 2048000 7 9000 10000這里就是單位換算的關(guān)鍵坑1K blocks進(jìn)位的單位是KB2048000個單位是2048000KB約2GB實(shí)際2,048,000KB 1.95GB但四舍五入可接受。我建議直接按KB來換算2GB 2 × 1024 × 1024 2097152 KB但寫的時候注意2048000和2097152就差一點(diǎn)分區(qū)大小足夠就行設(shè)置成整數(shù)比較方便管理。我的習(xí)慣是用2048000這種整數(shù)因?yàn)榭粗庇^。4.4 批量設(shè)置配額從參考用戶復(fù)制如果用戶數(shù)量多一個個edquota顯然低效。edquota提供了-p參數(shù)可以把一個參考用戶的配額原樣復(fù)制給其他用戶edquota -p zhangsan lisi wangwu這樣lisi和wangwu就復(fù)制了zhangsan的配額設(shè)置。對幾十個用戶批量初始化時非常方便。更徹底的方式是寫個循環(huán)腳本結(jié)合setquota命令非交互設(shè)置for user in zhangsan lisi wangwu; do setquota -u $user 1843200 2048000 9000 10000 /data donesetquota的參數(shù)順序是-u 用戶名 軟塊數(shù) 硬塊數(shù) 軟inode數(shù) 硬inode數(shù) 文件系統(tǒng)。所有值都是數(shù)字單位是1KB塊/個。4.5 配置組配額組配額設(shè)置方式和用戶配額幾乎一樣只是-u換成-gedquota -g project_team組配額默認(rèn)會統(tǒng)計該組所有成員寫入的塊數(shù)總和。假設(shè)project_team組里有5個人你給組配額設(shè)了10GB硬限制那么這5個人加在一起最多寫到10GB。這里有個重點(diǎn)用戶配額和組配額是疊加生效的。比如用戶A個人硬限制2GB組G硬限制3GB那么A的寫入受“兩者中先命中的那個”約束。他寫到2GB會撞到用戶硬限制但整個組才消耗了1.5GB組配額還沒觸發(fā)。反之如果A已經(jīng)寫了1GB組里其他人寫了2.5GB組硬限制已經(jīng)觸發(fā)A即使個人沒用完也寫不進(jìn)去。這種雙維度限制在項(xiàng)目制環(huán)境里非常好用但要跟用戶解釋清楚規(guī)則不然會被罵“為什么我限額還沒到就寫不進(jìn)去了”。4.6 設(shè)置寬限期寬限期的默認(rèn)值是7天如果你覺得太長或太短可以改edquota -t界面會顯示類似Grace period before enforcing soft limits for users: Time units may be: days, hours, minutes, or seconds Filesystem Block grace period Inode grace period /dev/sdb1 7days 7days改成3天/dev/sdb1 3days 3days寬限期只對軟限制有意義。如果你直接設(shè)置硬限制寬限期對它完全無效——硬限制從生效那一刻起就不可逾越。5. 配額狀態(tài)查看與配額報告5.1 用quota命令查單用戶用量切換成普通用戶身份執(zhí)行quota -u zhangsan輸出類似Disk quotas for user zhangsan (uid 1001): Filesystem usage quota limit grace files quota limit grace /dev/sdb1 104K 1843200K 2048000K 7 9000 10000這里的quota列對應(yīng)軟限制limit列對應(yīng)硬限制。用戶自己也可以執(zhí)行這個命令看自己用了多少。如果某個用戶進(jìn)入了grace期輸出里會顯示剩余時間一眼就能看出他是不是“踩線”了。5.2 用repquota生成全體配額報告運(yùn)維視角下最常用的命令其實(shí)是repquotarepquota -a-a表示報告所有啟用了配額的文件系統(tǒng)。輸出*** Report for user quotas on device /dev/sdb1 Block grace time: 3days; Inode grace time: 3days Block limits File limits User used soft hard grace used soft hard grace ---------------------------------------------------------------------- root -- 215424 0 0 5500 0 0 zhangsan -- 104 1843200 2048000 7 9000 10000 lisi - 4096 102400 2048000 2days 12 9000 10000注意第二行zhangsan前面的標(biāo)記--代表一切正常沒有超過軟限制-代表空間或inode超了軟限制但硬限制還沒到正在grace期內(nèi)-同理只是方向不同代表軟硬限制都超了比如lisi那行出現(xiàn)了-和2days說明他已經(jīng)超過了塊軟限制還剩2天寬限期。這種輸出非常適合寫腳本監(jiān)控如果報告中出現(xiàn)非--的行就告警通知管理員查看。5.3 用quotacheck重新校正配額數(shù)據(jù)配額數(shù)據(jù)是動態(tài)維護(hù)的正常情況下每次寫入都會實(shí)時更新。但偶爾會遇到配額記錄和實(shí)際不符的怪問題比如用戶copy了文件但配額統(tǒng)計沒變或者明明刪了大量文件配額占用卻不降。這時重新跑一次quotacheck就能校正quotacheck -avug-a檢查所有配額文件系統(tǒng)-v打印詳細(xì)過程。跑完后配額記錄會和實(shí)際用量重新對齊。這個命令本身有開銷文件越多、體量越大耗時越長。建議在文件系統(tǒng)變化不頻繁的窗口期跑比如深夜定時任務(wù)。6. xfs文件系統(tǒng)配額配置的特異性6.1 為什么xfs不能照抄ext4的步驟很多人在xfs上執(zhí)行quotacheck會得到類似quota not enabled on filesystem的報錯或者直接卡死原因在于xfs的配額機(jī)制和ext系完全不同。xfs從誕生起就把配額作為文件系統(tǒng)內(nèi)建的“日志型”功能配額信息通過掛載參數(shù)直接開啟不需要外部配額文件因此也不存在aquota.user這種文件。xfs的掛載選項(xiàng)常見寫法是/dev/sdb1 /data xfs defaults,uquota,gquota 0 0其中uquota用戶配額gquota組配額。老內(nèi)核版本也接受usrquota,grpquota但新版xfs更推薦直接用uquota,gquota。掛載后在xfs文件系統(tǒng)上設(shè)置配額也有專門工具xfs_quota -x -c limit bsoft1843200 bhard2048000 isoft9000 ihard10000 -u zhangsan /data參數(shù)分解-x進(jìn)入專家模式-c執(zhí)行命令limit bsoft1843200 bhard2048000設(shè)置塊軟限制/硬限制isoft9000 ihard10000設(shè)置inode軟限制/硬限制-u zhangsan針對用戶/data目標(biāo)文件系統(tǒng)查看xfs配額報告的指令是xfs_quota -x -c report -u /data輸出和repquota類似同樣能列出每個用戶的使用量、軟硬限制和grace狀態(tài)。6.2 ext4和xfs配額管理的差異對照我列一個簡單的對照表方便你判斷自己該按哪套流程走對比項(xiàng)ext3/ext4xfs是否生成磁盤配額文件存在aquota.user/aquota.group不生成外部文件由元數(shù)據(jù)管理是否需要quotacheck需要用于初始化和校正不需要底層掃描配額信息可靠啟用掛載參數(shù)usrquota,grpquotauquota,gquota/prjquota配額設(shè)置命令edquota / setquotaxfs_quota -c limit ...配額報告命令repquota / quotaxfs_quota -c report ...日志型一致性一般掃描校正強(qiáng)日志記錄適合規(guī)模中小型單機(jī)/家庭服務(wù)器企業(yè)級/大容量/高并發(fā)如果你用的是新版CentOS/Rocky默認(rèn)安裝的xfs根文件系統(tǒng)想給home目錄配配額直接走xfs路線別再折騰edquota了。但傳統(tǒng)ext4環(huán)境在所有舊文檔和老教程里還是絕對主流兩種都掌握才不會被卡住。7. 常見問題排查與實(shí)戰(zhàn)避坑技巧7.1 quotacheck報錯Cannot find quota file或Operation not permitted這兩類報錯出現(xiàn)時最先懷疑的方向不是quota工具本身而是掛載參數(shù)或SELinux。排查順序# 確認(rèn)掛載參數(shù)是否帶上了 mount | grep /data # 確認(rèn)fstab是否寫對 cat /etc/fstab | grep /data # 臨時禁用SELinux測試排查用 setenforce 0 quotacheck -cug /data如果setenforce 0后要再次測試出問題看ausearch -m avc -ts recent | grep quota確認(rèn)是否被SELinux攔截。真正的修復(fù)方法是調(diào)整SELinux布爾值或文件上下文而不是長期關(guān)閉SELinux。quota相關(guān)目錄的SELinux類型通常需要設(shè)為quota_db_trestorecon -Rv /data但最直接的做法是給掛載目錄設(shè)置正確的上下文。這個知識點(diǎn)容易被人忽略因?yàn)槟J(rèn)SELinux策略下普通數(shù)據(jù)目錄的上下文不是quota專用類型導(dǎo)致寫aquota文件被拒。7.2 配額已設(shè)但用戶仍能無限寫入這類問題是我在群里看到提問頻率最高的。原因通常是下面幾種掛載參數(shù)根本沒帶上配額標(biāo)志。檢查/proc/mounts輸出如果只有defaults而沒有usrquota,grpquota配額功能形同虛設(shè)。配額作用于了錯誤的分區(qū)。用戶把文件寫到了另一個沒開配額的分區(qū)上配額當(dāng)然管不到。比如你只在/data開了配額用戶的$HOME在/home且沒開配額他把數(shù)據(jù)放到家目錄就繞過了所有限制。軟限制設(shè)置得太大或忘記了硬限制。有些人只設(shè)了軟限制沒設(shè)硬限制寬限期一過系統(tǒng)可能直接拒絕——但這個“可能”取決于版本和配置。老版本在寬限期結(jié)束后才會把軟限制變硬限制如果你的版本行為不是這樣就會看起來“沒限制”。用戶是root。root用戶默認(rèn)不受配額限制這是設(shè)計如此不要花時間去“修復(fù)”。逐一排查時別忘了看quota -u 用戶名的實(shí)際輸出。有時候你以為設(shè)置了實(shí)際上沒保存成功。7.3 刪除文件后配額用量不下降這個情況很多人遇到以后第一反應(yīng)是系統(tǒng)壞了其實(shí)大概率不是。原因在于配額統(tǒng)計的是塊占用不是文件數(shù)量并且塊是預(yù)分配的。舉個例子用戶寫了一個100GB的稀疏文件比如dd創(chuàng)建大文件然后seek跳著寫文件系統(tǒng)可能預(yù)分配或稀疏映射了很多塊。刪除部分文件后如果還在硬限制之上寫入依然被拒看起來就是“我刪了但還是寫不進(jìn)去”。另一個常見情況是文件被進(jìn)程持續(xù)占用。用戶刪了文件但因?yàn)槟硞€服務(wù)還持有文件句柄磁盤空間并沒有真正釋放進(jìn)程內(nèi)read/write不會中斷。這種情況你可以這樣確認(rèn)lsof L1 | grep deleted看到still open的deleted文件就知道是哪個進(jìn)程占了。殺掉對應(yīng)進(jìn)程或重啟服務(wù)后空間才真正歸還。7.4 重啟后配額丟失重啟后配額丟失幾乎可以確定是fstab沒有修改或者掛載參數(shù)沒有正確寫入。有些人圖省事只手動mount時帶了參數(shù)重啟后系統(tǒng)按fstab默認(rèn)配置掛載配額開關(guān)自然沒了。排查cat /etc/fstab | grep /data如果fstab里沒配額選項(xiàng)重新編輯并重啟或者重新mount -o remount。還有一個細(xì)節(jié)是老舊的Linux版本fstab中連續(xù)掛載參數(shù)之間不能有空格寫成defaults,usrquota,grpquota而不是defaults, usrquota, grpquota否則重啟時解析會出問題。7.5 生產(chǎn)環(huán)境第一次啟用配額的操作節(jié)奏這個屬于經(jīng)驗(yàn)篇了。生產(chǎn)環(huán)境第一次啟用配額我建議的節(jié)奏是先在測試機(jī)上完整走一遍全流程記錄每個命令的實(shí)際輸出找業(yè)務(wù)低谷窗口備份數(shù)據(jù)或做快照修改fstab添加配額掛載選項(xiàng)執(zhí)行mount -o remount觀察系統(tǒng)日志dmesg | tail確認(rèn)掛載成功無報錯執(zhí)行quotacheck -cugm /data其中-m是“不阻止寫入”的強(qiáng)制模式適合在線執(zhí)行雖然我還是推薦短時只讀掛載更穩(wěn)用edquota/setquota批量設(shè)置配額用repquota -a核對數(shù)據(jù)是否準(zhǔn)確觀察24小時確認(rèn)無異常后再把流程納入常規(guī)維護(hù)手冊7.6 監(jiān)控配額使用率的實(shí)用腳本思路配額管理不能設(shè)完就撒手不管建議寫個簡單的告警腳本放到cron里。我用得最多的核心邏輯是解析repquota的輸出找到超過軟限制的用戶并發(fā)送通知一個bash函數(shù)就夠repquota -a | awk $3 ~ /[0-9]/ $3 $4 {print $1, $2, $3, $4}這段的意思是輸出文件中第三列used超過第四列soft limit的記錄。你把它接入短信或釘釘webhook就成一個最小可用的配額告警系統(tǒng)。當(dāng)然生產(chǎn)環(huán)境用成熟監(jiān)控平臺如zabbix、prometheusnode_exporter更正規(guī)但這個“做殼”思路能幫你快速發(fā)現(xiàn)問題。8. 一個小眾但在多項(xiàng)目環(huán)境非常實(shí)用的擴(kuò)展項(xiàng)目配額上文提了一句project quota這里展開說一下。傳統(tǒng)的用戶/組配額在“一個用戶參與多個項(xiàng)目”的場景里會失控一個用戶分了2GB總配額但他可能給項(xiàng)目A、項(xiàng)目B、項(xiàng)目C各寫了1GB加在一起自己先撞了墻項(xiàng)目之間的隔離也沒做到。項(xiàng)目配額project quota把“誰寫”變成“寫到哪里”以目錄為維度做限制。典型操作# 對目錄打項(xiàng)目ID標(biāo)簽 mkdir -p /data/proj_a chattr -R p /data/proj_a # 打開project屬性非所有文件系統(tǒng)支持ext4需要內(nèi)核CONFIG_EXT4_FS_PROJECTy # xfs上直接分配prjquota xfs_quota -x -c project -s -p /data/proj_a proj_a /data xfs_quota -x -c limit -p bhard10g proj_a /dataext4項(xiàng)目配額的配置流程相對繁瑣而且需要內(nèi)核編譯支持。我自己的經(jīng)驗(yàn)是如果你想用目錄維度配額直接選xfs別在ext4上硬磕省心太多。xfs的項(xiàng)目配額是RHEL/CentOS特意在系統(tǒng)安裝時預(yù)置了prjquota支持生產(chǎn)上非常穩(wěn)。項(xiàng)目配額有一個附帶的好處即使權(quán)限上不同用戶混寫同一個目錄項(xiàng)目配額也能統(tǒng)一算總賬非常適合臨時拉人進(jìn)項(xiàng)目又不想逐個改用戶配額的協(xié)作環(huán)境。9. 我踩過幾次坑之后的最終體會說實(shí)話磁盤配額本身并不難大部分坑都出在文件系統(tǒng)類型判斷錯誤和掛載參數(shù)沒有真正生效這兩件事上。我給新手的忠告是上手之前先用df -hT認(rèn)清楚文件系統(tǒng)再決定走ext4流程還是xfs流程改完fstab后不要偷懶跳過mount -o remount加cat /proc/mounts驗(yàn)證這兩個動作加起來不過幾秒鐘卻能在配額全流程里省掉成小時的排查。另外配額始終是管理工具不是存儲備份。它只能防止單點(diǎn)用戶撐爆磁盤不能替你處理誤刪、病毒、磁盤物理故障。真正重要的業(yè)務(wù)目錄配額要和監(jiān)控告警、定期快照、定期巡檢配合起來才是一套比較完整的數(shù)據(jù)保護(hù)方案。如果你目前只是在一臺小服務(wù)器上給幾個同事分空間按照第4節(jié)的流程配好用戶配額就足夠了沒必要一開始就上項(xiàng)目配額。真到了多項(xiàng)目、多目錄、多人交叉寫入的規(guī)模再切xfs項(xiàng)目配額完全不遲。配額這東西配好之后平時幾乎感覺不到它存在但一旦有人把整盤寫滿你會慶幸當(dāng)初花了一個下午把這事兒做完了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
另类精品视频在线观看| 久久99热这里只有精品首| 五月丁香六月婷婷激情视频在线观看免费| 婷婷五月天激情小说| 婷婷五月天激情小说| 色播五月婷婷五月| 视频这里只有精品16| 综合九九日本| 韩国中文字幕91| 人人干av| 欧美va在线| 99久久久国产大片| 操人无码| 六月99天天婷婷激情综合| 婷婷性爱| 婷婷五月av| 日韩在线婷婷五月天综合| 在线另类视频| 五月丁香色婷婷久久| 青草视频在线观看视频| 97啪啪| 99热99热在线| 免费观看欧美成人AA片爱我多深 | 丁香婷婷五月综合欧美另类| 99热 精品在线| 久久精品五月天| 亚洲五月天婷婷在线| eeuus五月婷| 丁香五月欧美激情| 伊九九三级区| 婷婷六月激情小说网| 婷婷99丁香| 日韩黄在免| 色五月AV| 精品一二三区久久AAA片| 天天爽天天爽视频| 五月婷婷免费在线观看视频| 亭亭五月色男人| 99热精品一区| 激情五月婷婷丁香综合网| 丁香五月综合久久八| 9999热在线免费观看| 不卡在线超碰| 超碰丁香五月| 人妻视频在线| 啪啪91| 久热69| 97偷拍在线视频| 婷婷91视频| 国产美女无遮挡裸体毛片A片 | 天天爽天天操| 女人被躁到高潮嗷嗷叫小| 五月丁香久久| 色和综合网| 午夜不卡久久精品无码免费| 色综合五月| 黄急一级视频| 婷婷九月在线| 亚洲激情亚洲激情| 狠狠色精品综合| 五月丁香婷中文| 色综色五月天婷婷| 五月丁香亭亭操逼| 亚洲乱码日产精品BD| 亚洲12p| 国外亚洲成AV人片在线观看| 五月天色色色色色| jiujiu热在线视频| 涩五月丁香| 一本伊人色婷| 天天射影院| 999久久久国产精品| 丁香婷婷激情五月天无毒不卡蜜桃| 五月婷视屏在线观看| 九九热视频精品| 六月婷婷五月天| 色玖玖导航| 激情五月色婷婷| BBWCUCKOLD精品熟妇| 色五月 婷婷, 大香蕉| 色综合女人99| 美女五月激情| 国产色网站| 可以直接看的av| 午夜天堂一区人妻| 91人碰| 97九色| 思思热久久阴99| 婷婷五月永远18免费久久久| 激情综合激情综合| 欧美丰满熟妇BBB久久久| 中文字幕无线久必| 日本久久婷| 五月天激情美女久久| 五月婷婷在线视频观看| 噼里啪啦完整版中文在线观看| 91国产精品视频播放| 婷婷五月天亚洲综合| 五月丁香婷婷在线| 在线观看免费观看在线9久| 大香蕉五月天婷婷| 99se丁香| 五月丁了香蕉综合| 九九热自拍| 成人视频网| 啪啪东京热| 99热20| 久久五月天色| 岛国在线观看91| www.日本91| 日本的α片xxxwww| 丁香五月成人社区| 99在线资源| 丁香五月激情六月| 99欧美| 欧美天堂久久| 色爱综合网| 影音先锋男人女人| 亚洲瑟瑟精品在线| 久久AAAA片一区二区| 成年人夜夜喷水| 六月丁香婷婷网| 亚洲AV中文在线| 精品99*| 综合亚洲色色| 深爱婷婷网| 91综合在线观看首页| 丁香六月婷婷综合色| 丁香五月Av| 欧洲第一无人区观看| 五月激情网站| 五月丁香啪啪啪综合网| 99伊人性爱在线影院| 五月丁香网中文字幕| 99九色视频在线观看| OYIWbGcPu8H| 五月丁香婷婷AV天堂| 三级三久久线久久99久目本WW| 99久高清视频| 五月激情综合网| 五月天福利影院导航| 99国产小视频2013| 亚洲电影在线观看| 俺也高清无码高清视频| 无码一区二区三区四区五区91c| 欧美色骚婷婷五月天| 欧美色色色色色色色| 性爱五月婷| 色丁香久久久| 任你搞在线观看视频| 伊人六月丁香婷婷| 玖玖婷婷五月天毛片| 在线VA视频| www.狠狠| 丁香婷婷激情五月色| 26uuu在线观看| 六月色婷婷色| 无码激情AAAAA片-区区| 天天爽天天草| 婷婷五月色影视先锋| 五月天四色房丁香亭亭| 婷婷五月丁香91| 五月丁香成人网| 久99热在线观看| 色婷婷激情四射视频| 卡视频1区2区| 狠狠操狠狠爱| 色婷婷五月亚洲| 亚洲视频在线观看| 久久狠狠干| 亚洲AVwwwwwww| 色婷婷小说网| 99热免费网站| 超级碰 久久9| 午夜大香蕉| 成人五月天婷婷| 三男玩一女三A片| 99视频精品8| 男人大jjc女人免费视频| 亚洲丁香五月| 亚洲综合99| 丁香五月在线播放| 久久99热久久99精品| 色综合久久综合| 九九热自拍| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 激情婷婷丁香| 爱的综合网| 亚洲成人日韩无码精品| www婷婷| 美女亚洲五月丁香| 日日噜噜久久婷婷五月天| 伊人网啪啪| 狠狠大香婷婷爱| 黄色片久久| 五月天婷婷亚洲| 操碰91| 91午夜婷婷狠狠久久综合9色| 五月天天爽| 久久这里精彩免费在线观看| 五月激情久久| 97在线观视频免费观看| 久热九九| 99热这里只有精品在线| 狠狠干思思热| 夜夜躁狠狠| 2013AV天堂| 超碰在线成人| 成人婷99最新| 99爱在线视频| 丁香婷婷成人在线播放| 狠狠看狠狠| 五月色激情综合网| 五月九九综合| 99精品国产乱码久久久人妻| 亭亭五月色男人| 丁香激激情网| 天天拍夜夜爽日日| 国产永久一二一起草| 丁香五月婷婷激情完整版| 亚洲激情久久| 色色色综合色| 天天插天天射| 五月激情婷婷丁香| 91色在线/日韩| 99热色在线精品| 无码地址| 99热99成人| 性爱人人网| 免费观看欧美成人AA片爱我多深| 99热这里只有精品4| 五月天激情综合| 激情99在线视频| 99热精品综合| 色性日本| 久久性爱视频久久性爱视频| 天天做综合网色综合| 久热综合| 激情婷婷五月天| 色婷婷激情五月天| 天天综合色丁香| 五月综合激情图片| 亚洲国产另类av| 超碰免费人| 99热久| 超碰av在线| 亚洲操操操| 婷婷色正月| 99热的无码| 亚洲综合婷婷| 久久色五月天综合网| 天天综合天天玩夜夜玩天天玩夜夜玩 | 五月丁香欧美综合免费视频| 九九这里精品| 亚洲va欧美va国产综合久久久| 五月婷无码| 丁香九月综合| 丁香五月婷婷亚洲综合精品在线| 99精品在线下载| 色A网| 综合激情五月四射婷婷| 婷婷五月综合婷婷| 九九热视频免费观看| 久久久婷丁香五月| 色色色色色色网站| 99在线视频精品| 久久草中文日韩欧美| 色婷婷久久| 可以免费观看的AV| 深爱五月激情| 丁香五月激情图片婷婷| 冬月かえでAV无码播放| 亚洲超碰在线| 丁香五月综合在线| 天天久综合| 99色在线| 丁香五月天激情综合| 久99999热视频在线观看免费| 国产精产国品一二三在观看| 国产操逼网站| 99久久精彩视频。| 99热在线成人网站| 日日杆天天| 99久久国产宗和精品1上映| 成人无码精品1区2区3区免费看 | 98永久精品| 99九色视频在线观看| www.夜夜操| 九九九九操逼| 生活片五区| 五月天六月天| 99无码| 99热66| 色婷婷五月综合激情中文字幕| 婷婷伊人视婷婷婷| 天天噜天天爱| 色噜噜狠狠色综合成人网| 99热在线只有精品| 欧美成综合在线观看| 丁香婷婷九月| 五月丁香六月婷婷综合网缴情| 一级精品999WWW| 久久激情视频| 久久刺激网| 77799热| 色婷婷丁香香香蕉视频| 久久只有18视频| 99综合色色色| 丁香六月亚洲| 九月丁香亭亭| 99玖玖人人| 天天爽夜夜爽夜夜爽精品| 久99久热只有精品国产99| 色色亚洲| 碰碰碰97免费精彩视频| 国产精品色色色色| 狠狠色婷婷7777久| 五月丁香婷中文| 色五月婷婷啪啪五月| 精品久久9| 狠狠干.com| 五月婷婷五月天| 五月色影院| 99热久| 五月天丁香综合久久国产| www,欧美干干干干干干| 色优久久| 91爱啪啪| 五月丁香av中文| 超级碰碰碰久久网站| 快乐激情五月色婷婷| 六月合五月婷| 综合久久五月| 99国产性感视频| 超碰久热| 思思热思在线精品视频| 日本天天操| 久久婷婷五月天激情四射| 婷婷五月天激情综合网| 丁香五月婷婷色综合| 日本怕怕视频| 婷婷综合五月| 久久综合激情五月天| 最新久久网址| 国産精品| 狠狠香蕉| 99久re热视频精品98| 日日撸夜夜操| 91porn一起草| 久久久8| 91互操| 九九视频在线观看| 久久看婷婷| 色婷婷五月天偷拍| 97欧美在线| 婷婷爱五月| 色婷婷综合在线| 十月丁香九月婷婷综合| 9 大屁股在线视频精品| 五月天婷婷乱论小说| 97在线日韩| 丁香五月天成人| 色婷婷中文| 色综色五月天婷婷| 天天操精品| 夜夜爱网站| 久久激情五月网| 欧美 日韩 成人| 五月狠狠| 五月婷婷六月激情| 亚洲色a| 黄色av高清| 亚洲激情精品| 亚洲色图五月丁香| 久久五月婷| 巴基斯坦粉嫰无码视频| 色婷婷色| 激情五月丁香五月| 夜夜撸日日骑| 欧美日韩123| 丁香五月成人网| 2023天天日夜夜爽| 丁香久久久| 久久99久久99久久99人受| 六月丁香婷婷色狠狠久久| 久久精品99国产精品日本| 深爱激情网婷婷| 九久久九精品视频| www久久久久久久97| 九九Av| 成人做爰A片免费看视频| 欧美久久婷婷| 国产精品久久..4399| 天天弄天天操| AV性爱在线| 日韩亚洲视频| 久久久久9久无码视频| 久久五月综合| 天堂婷婷五月在线| 免费观看2018www黄色操逼网站| 久久婷婷久久| 天天操天天谢| 四色永久成人网站| 天花AV无码| 久色激情| 欧美色色色色色色色色色色| 九九爱看亚洲| 亚洲区,视频区,视频区免费| 国产色香蕉精品五夜婷| 日日干夜夜干| 天天综合五月天| 思思99精品视频在线观看| 婷婷酒色网| 五月婷婷与六月丁香图片激情| 影音先锋色色色资源色资源色| 琪琪布丁香社区激情五月天| 九九碰九九爱97| 这里只有精品视频在线看| 五月色婷婷中文字幕| 中字幕视频在线永久在线观看免费| 五月丁香五月婷婷在线观看| 日本特黄aaaaa| 五月婷婷久久久久| 婷婷五月综合社区在线| 婷婷久久综合| www,天天干| 91精品综合久久久久久五月丁香 | 天天色天天噜| 99热 这里只有精品 国产 日韩| 91主播在线| av中文在线| 在线观看欧美| 天天干电影| 颜射 精品性爱av| 五月天堂色| 996黄色片| BBWCUCKOLD精品熟妇| xx久久| 美英法精品无码免费视频| www,五月天com| 99热超| 婷婷视频在线碰| 日韩丰满少妇无码内射| 六月丁香久久| 五月天激情婷婷| 天天综合在线网| 色婷婷偷拍| 五月丁香色| 99热最新网址| 精久久色| 99热的无码| 六月婷婷七月丁香| 午夜丁香六月婷| 激情网站五月| 久久老码第一| 亚洲成人电影aaaa| 婷婷六月色播| 激情五月,激情综合网| 六月天丁婷婷| 99re思思久久| 丁香婷婷社区| 九色PORNY自拍成人精彩视频| 亚洲色频| 大香蕉中文| 婷婷六月色| 欧美日韩aaa| 激情综合网五月| 五月婷婷六月丁香在线| 天天干天天做| 91婷婷| 国产成人av在线| 99操碰| 色五月丁香五月| 337p大胆噜噜噜噜噜91Av| 五月天开心色情网| 操一区| 九九丁香社区欧美激情| 深爱激情AV| 色天天综合色| 婷婷久久亚洲| 五月天天综合| 中文字幕在线日亚州9| 色色色综合网| 久久婷五月影院| 久热AⅤ| 久久婷婷五月天激情| 成人永久免费视频在线观看| 色 免费网站视频| 人妻系列久久久久久久久久久| site:wpjngj.com| 6080av| 天天综合网亚洲网站| 婷婷五月激情视频在线| 人妻精品在线| 久久人人做人人妻人人玩精品va| 狠狠狠狠青草| 亚洲超碰在线| 婷婷丁香五月六月激情| 99成人| 丁香五月婷婷网| 日本V在线观看不卡视频网站| 五六月婷婷久久| 色色色在线| 婷婷丁香五月天综合网| 五月丁香香蕉| 国自产拍偷拍精品啪啪一区二区 | 丁香婷婷情色五月天| A片一曲| 大香蕉啪啪啪| 午夜成人综合| 天天成人综合视频| 黄网在线播放| 影音先锋男士资源网一区| 日韩精品一品二区三区的使用体验 | 色婷婷综合影院| 丁香色婷婷五月天| 伊人影院久久网| 青青草原中文字幕| 九九热最新| 九月婷婷| 五月丁香啪啪激情| 九九热视频精品| 久久这里有精品| 激情婷婷五月社区| 天天激情视频| 狠狠爱综合网| 亚洲婷婷五月| 999热成人在线综合网| 婷婷永久在线| 91大屁股精品| 2025天天操| 亚洲免费看片| 一级片sese片.COM| 9久热在线视频精品| 久9热视频在线| 日本色色色| 久久激情五月婷婷| 久久五月天精品视频| 日韩三级片一区二区| 99热这里是精品| 七七婷婷综合| 五月天激情网图片 - 百度| 日本在线视频播放91| 99在线视频观看| 99久在线精品99re8| 99热久| 婷婷激情六月中文| 丁香狠狠色婷婷久久无码视频| 国产精品人妻欲求不满| 狠狠干在线| 少妇人妻丰满做爰XXX| 久久综合九九| 在线不卡视频| 人妻AV在线观看| 五月天成人综合| 精品久9| 天天天天天操| 国产人妻777人伦精品HD| 99激情网| 国产人妻777人伦精品HD| 久久99免费视屏| 在线视频另类| www色五月| 九月婷婷色色| 婷婷的99视频网站| 99亚州综合精品成人网| 激情av| 丁香久久综合| 婷婷丁香69精华| 9色在线| 日韩成人无码人妻| 久久激情五月| 丁香五月婷婷亚洲色图| 内射爽无广熟女亚洲| 狠狠香婷婷五月| 激情婷婷丁香| 色丁香在线视频| 影音先锋日本三级资源| 大陆肏屄视频| 色婷成人狠干| 黄网在线播放| 亚洲色欲欧美一区二区三区| 玖玖爱伊人网| 丰满熟女人妻一区二区三 | 亚洲综合无码| 丁香五月久久| www.狠狠干com| 丁香婷婷激情四射五月| 美女精品一级不卡视频| 思思99热热热99| 无码激情AAAAA片-区区| 久色欧美| 久久98| 久久久99精品免费观看| www、色色色| 婷婷天堂视频| 久草婷婷| 五月婷婷天天| 九九热这里只有精品7| 国产成人网| 五月婷婷六月开心| 婷婷六月激情| 亚洲视频一区| 五月天婷婷操逼视频| 人妻久久久久久久久妻久久久久久久久| 婷婷亚洲综合| 日本va欧美va欧美精品88| 久久久91| 亚洲无码影音| 婷婷精品免费久久| 韩国久久少妇视屏| 亚洲综合在线伊人婷| 九月丁香网婷婷| 五月天婷婷免费| 天干干夜夜操| 第五婷婷伊人丁香色| 色色色热| 日韩色五月| 99精品在| 欧美天天草人人草| 99啪在线视频| 精品国产乱码久久久久久免费| 色爱五月天| 五月丁香色色综合| 九九99香蕉在线视频播放| 91九色精品熟女内射| 思思热视频在线| 天干干夜夜操| 亚洲精品无码久久| 97在线天堂| 丁香五月影院| 黄色五月婷婷| 婷婷丁香成人五月天| 色五月丁香总合网| 激情婷婷五月| 丁香婷婷综合色五月激情国产基地| 五月天大香蕉| 99只有这里有精品在线视频| 999热成人在线综合网| 91碰碰| 9 99免费视频| 1024在线视频| 激情五月四色| 青柠影视免费高清电视剧| 婷婷色色丁香五月天| 有哪些A片网站| 婷婷五月天 偷拍| 色播六月| 五月婷婷天堂| 婷婷少妇激情| 丁香久月婷| #NAME?| 大色鬼综合| 99这里只有精品| 五月激情六月综合| 操操人人| 综合AV在线| 婷婷色导航| 天天操夜夜橾| 99热在线观看精品| 亚洲五月天婷婷在线| 99热精这里只有精品| 免费日韩99| 五月天激情播播网| 99rewww| 这里只有精品视频视频在线观看| 色~性~乱~伦~噜| 五月婷婷亚洲| 8区视频在线| 久艹大香蕉| 亚洲性视频| www.99精品视频| 国产综合81p| av在线免费网站| 大伊香蕉玖玖爱| 任你日热视频| 婷婷五月综合社区| 婷婷五月天av| 五五月丁香花激情综合网| 五月丁香六月久久| 激情五月天综合图片小说网站| 欧美激情丁香五月天久久婷婷一区| 五月丁香综合啪啪啪啪啪| 99色在线视频观看| 天天日夜夜夜操操操操| 婷婷丁香五月,狠狠综合| 五月丁香婷婷激激激综合网色播| 国产色色色色| 五月天婷婷网站888| 激情五月婷婷网| 97色色网| 亚洲成人电影在线免费观看| g00d人体西西| 婷婷在线播放av| 亚洲五月天天| 日日操夜夜骑| 日韩无码专区| 九九99九九精品免费| www.9色色色| 免费国产视频| 综合狠狠五月婷婷| 五月天.com| 综合五月婷婷| 丁香综合日产精品久久| 韩国19 主播内部福利vip免费播放| 五月综合丁香婷婷| 激情婷婷综合| 五月天婷婷在线视频| 99热精品无码| 婷婷综合九色伊人| 久激情网| 丁香六月亚洲综合| 任你艹| 丁香五月婷婷国产av| 97精品自拍视频| 五月丁香怕怕综合| 丁香五月天啪啪a日本| 日韩一级片| 丁香五月综合网| 免费啪啪亚州视频| 丁香六月视频免费观看| 五月婷婷99热| 五月婷九月| 激情深爱五月婷婷| AV操操操| 国产精品扒开腿做爽爽爽A片唱戏| 欧美久久久久久久久中文字幕| 五月丁香亚洲校园欧美| 成人五月天视频播放| 超碰99在线| 操碰99在线视频观看| 国产精品久久99| 99热这里只有精品16| 久色激情| 91疯狂操操操操| 天天操,天天插| 色综合九九| 婷婷五月开心六月AV| 午夜色色色极品视频| 丁香婷婷激情六月五月开心| 国产在线aaa片一区二区99| 日韩另类在线观看| 深爱婷婷丁香五月激情| 亚洲精品又粗又大又爽A片| 久久久久久97| 色婷婷亚洲五月天| 日本三级99人妇网站| 亚洲va日| 久久综合九九| 七七九色| 久热这里只有| 丁香五月婷婷少妇| 色婷五月| 在线看的免费网站| 五月丁香怕怕综合| 99色免费观看全部| 91ncm视频| 无码色色色| 色情成人五月天| 热99久久这里只有精品| 夜精品无码A片一区二区蜜桃| 超碰人人操人人干| 热五月婷婷| 碰人人操| 色播播五月天| 青青草Avb在线| A久网| 色综合色香蕉网| 九九热在线观看视频网站| 中文字幕无码人妻少妇免费视频| 国产1区2区3区在线观| 久久女人天堂| 91Chinese在线| 97AV在线视频| 日韩操人| 日韩无码专区| 99久久国产宗和精品1上映 | 黄色国久久| 五月婷婷久久内射| 天天日色情| 狠狠干 狠狠操| 婷婷综合久久综合| 欧美日韩一区二区三区四区| 欧美性爱专区| 色噜噜狠狠一区二区三区| 熟美女麻豆| 色色色综合| 婷婷九九| 日韩AV大全| 色噜噜伊人| 亚洲第一成人无码A片| 九九热99精品| 丁香五月婷婷www..com| 丁香五月婷婷偷拍| 久99热| 五月丁香啪| 五月丁香六月综合激情网| 综合久久五月| 91黄操| 另类色视频| 免费做A爰片77777| 国产日韩亚洲欧美在线观看| aaaa.黄| 色久九| WWW、日本色丁香co m| 免费看欧美成人A片无码| 99热成人在线观看| 天堂中文国产| 亚洲精品一区中文字幕乱码| www.夜夜.com| 久久久久8888| 97精品人人A片免费看| 色久五月天| 激情综合网五月丁香| 97色婷| 色婷婷丁香| 五月婷婷狠狠干| 免费视频WWW在线观看网站| 激情综合激情五月一起草| www.99热在线观看| 噼里啪啦在线观看免费完整版视频| 丁香五月23111| 中文在线成人| 国产精品久久欧美久久一区| 成年人最刺激的综合网| 婷婷五月黄色激情在线| 99热伊人综合| 五月天色丁香| 少妇人妻综合色6699| 婷婷久月| 中文字幕不卡网站| 夜夜干夜夜操| 久久思思精品| 亚洲成人网无码| 五月丁香最新| 国产精品第一国产精品| 婷婷丁香六月| 亚洲、热| 狠狠干五月天婷婷网| 亚洲中文AV网站| 免费精品99| 色色色热| 五月花亭亭| 超碰九色| 亚洲精品成人片在线播| 大香蕉啪啪啪| 国产精品社区| 天天爽天天摸天天爱| 婷婷国产日本欧美| 天天肏视频| 日韩久久日| 专区无日本视频高清8| 久久与婷婷| 色五开心五月五月深深爱| 丁香五月花婷婷开心| 久久久久久99精品无码| 雪千夏麻豆| 熟妇人妻中文字幕无码老熟妇| 26uuu精品一区二区| 日日夜夜小色哥| 色婷婷五月天激情在线播放| 五月丁香啪啪激情| 4438成人电影| 人人97操| 久久婷婷免费| 风流少妇A片一区二区蜜桃 | 国产99久久久国产精品免费看| 99在线精品视频| 五月婷婷中文字幕| 丁香五月综合亚洲| 能看的av片| 精品人妻伦| 五月天丁香六月综合| 99re热99| 97久久五月丁香婷婷| 婷婷五月综合网激情| 激情综合网激情五月丁香五月俺也去| 久久草大香蕉| www狠狠| 色色射| 99热九九热| 粉嫩av懂色av蜜臀av熟妇| 久久思思热| 六月丁香网| 久热只有精品| 播五月开心婷婷欧美综合| www99热| 99re热视频这里只精品5| AV79| 六月婷婷九月丁香亚洲综合| 成人电影丁香六月天| 久久网思思| 丁香婷婷色五月合集| 欧美Va在线| 无码人妻一区二区三区免费九色| 丁香激情六月天婷婷| 五月婷色丁香| 婷婷五月色综合| 五月婷婷综合精品| av性爱网站| 五月天激情综合| 91碰碰视频| 91精品综合久久久久久五月丁香| 1024日韩| 五月综合激情| 激情五月四色| 去色色五月天| 99riAv1国产在线观看| 另类专区在线观看| 99色区| 五月婷婷影视| 九九视频这里只有精彩| 五月婷婷综合视频| 中文字幕av久久爽一区| 亚洲免费看片| 久久婷婷丁香花综合网| 五月色婷丁香| 91在线日| 丁香 婷婷五月| 五月天精品综合| 天堂网啪啪| 日日干夜夜干| 精品热九九| 九九色大香蕉| 人妻操逼| 综合色激情| 亚洲精品国产成人AV在线| 久99久视频| 婷婷五月丁香性爱| 色综合久久88色综合天天99| 婷婷色播色五月五色五月天色妇| 亚洲99视频| 日本色爽| 综合婷婷| 九月av在线| 亚洲婷婷丁香五月在线| 五月激情网综合| 熟女网站久久| 精品香蕉99久久久久网站| 1囯产午夜仑鲁鲁| 久久这里只有精品久久| 五月涩涩网| 热久久91| 色色婷婷综合| 九九综合九九| 激情婷婷网| 5月丁香啪啪啪| 天天肏视奸| 成人看片网站| 欧洲激情精品婷婷| 五月综合久久| 国内久久亭亭| 五月激情偷拍婷婷| 99在线视频资源| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 91丨九色丨东北熟女| www.99.色| 激情婷婷五月久久| 97 A I色色| www.婷婷| 婷婷综合色| 五月天俺去也| 人人爱操| 色综合激情| 丁香桃色网| 97色婷婷| www.久久| 久久在线大香蕉| 女同在线9| 成人视频九九| 亚洲AV免费在线| 91oumei| 夜夜爽天天日| 欧美大片免费播放器| 97色婷婷成人综合在线观看| 天天干狠狠| 亚洲国产精品成人午夜| 五六月婷婷| 色综合九九色综合88| 久久99精品久| 可以直接看的av网站| 婷婷五月天小说| 欧美三级欧美一级| 97五月天| 久久久色情| 五月香六月婷| 久草热8精品视频在线观看| 久久五月天激情美女| 五月天社区婷婷丁香社区| 99九九99九九九视频精品| 亚洲性爱99在线| 性做久久久久久久免费看 | www.开心激情| 婷婷五月激情黄色| 春色激情第四色| 婷婷97狠狠成人网站| 天天曰夜夜爽| 天天日天天爽| 久久婷婷五月天激情新地址| 色色色欧美| 9l视频自拍九色9l视频自拍九色9l社区| 99色色网| 99九九中文字幕视频| 99热只有这里有精品| 丁香五月婷婷亚洲天堂| 操日挥操日日| 五月婷婷黄网站大全| 婷婷五月综合视频| 狠狠爱婷婷五月天| 很很干夜夜干| 熟美女麻豆| 五月丁香综合网| 草榴视频网| 亚洲六月色婷婷| 五月婷婷亚洲| 五月色婷婷综合| 99视频色在线观看| 禁欲电影完整版在线播放| 综合狠狠干| 韩日另类| 另类小说激情五月天| 五月情涩综合婷婷| 9有码中文| 色五月首页| 香蕉久久国产AV一区二区| 狠狠干总合| 97婷婷五月| 色五婷婷在线视频| 成人在线视频网| 色色激情五月天| 五月天堂在线| 五月丁香最新| 五月婷婷六月丁香| 色婷婷五月天激情久久| 99视频热99| WWW.婷婷| 亚洲1区| 国产成人精品一区二区三区视频 | 超碰猛烈的性猛交| 九九99精品视频在线观看| 五月天丁香啪啪综合| 六月丁花香啪啪激情欧美| 99精色| av久热| 久久久国产精品黄毛片| 婷婷五月天在线观看免费| 超碰人人91| 婷婷五月天小说| 丁香六月婷婷一区二区三区| 久久WW| AV大香蕉| 俺去也五月| www久| 色色五月天 亚洲| 九色无码| 五月婷婷天天色| 色播五月丁香综合| 夜夜爽天天爽| www激情五月天| 久久永久网址| 亚洲视频在线观看区| 日日天天干| www.99热. com这里只有精品| 久久狠狠干| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 在线婷婷| 天天舔天天摸天天透| www.91在线观看| 五月婷婷视频| 婷婷久月| 色五月六月| 天天插天天插天天日| 激情久久综合网| 五月天婷婷小说| 欧美Va婷色| 色五月婷婷丁香婷婷| 另类亚洲2| 97超级碰碰碰久久久| 丁香六月婷婷| 丁香五月天激情综合| 色五月视频无码播放| 丁香九月婷| 99啪啪骑| A短视频免费在线观看| 五月婷婷激情网| 激情文学五月丁香六月婷婷| 亚洲丁香五月天在线视频| 五月停停999| 久久丁香婷| 国产成人精品一区二三区熟女在线| 久久98热re| 五月婷婷无码| 婷婷成人丁香色情基地30 | 少妇激情五月天| 色高清无码视频| 狠狠搞五月天| 成人一级片| 五月丁香六月婷婷综合| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 欧美三级巜人妻互换| 丁香五月综合AV在线| 综合久久十三| 色色色色网| 91无码视频| 99综合| 超碰熟女拍拍| 26UUU精品一区二区Com| bbwcuckold精品熟妇| 久久9视频欧美| 国产无人区大片| 亚洲成人无码免费| 亚洲天堂制| 97久久超碰| 色婷婷色综合激情91| 国产精女同一区二区三区久| 国产精品18久久久| 五月婷婷五月| 综合激情五月天| 婷婷精品在线| 麻豆雪千夏| 亚洲熟妇无码乱子AV电影| 五月激情婷婷丁香天堂| 这里只有精品视频99| 欧美天天干天天草| 99色在线观看| 久久久久99精品成人片| 色婷婷五月天成人网| 思思热精品免费视频| 爱草视频在线观看| 好吊丝aV| 先锋资源 996| 色了色综合| 五月停停丁香| 亚洲亚洲永久无码777777| 精品草原久久视频| 婷婷噜噜| 日日噜噜夜夜狠狠久久丁香五月| www.婷婷.com| 少妇性按摩无码中文A片| 影音先锋天天日| 久99视频在线观看| 亚洲成人综合在线| 婷婷五月丁香五月| 色婷婷丁香A片区毛片区女人区| 超碰人妻在线| www。久久久久一b。Cc| 婷婷欠久少妇| 婷婷伊人綜合| 五月婷婷天堂| 久久久妻人人人| 色999五月色| 性日本精品| 五月天婷婷爱| 欧美日韩成人在线| 国产亚洲精品AAAAAAA片| 色五月婷婷成人| se.久久视频在线观看| 亭亭色网| 五月天婷婷三级黄| 伊人婷婷五月天av| 婷香五月激情视频| 九九综合精品| 国产又粗又大又爽又黄| 99久久婷婷国产综合精品| 久热婷婷在线视频| 另类小说五月天| 色丁香久综合在线久综合在线观看| 丁香九月婷婷色| 激情爱爱网站超大免费| 免费视频99| 日本44久久在线| 久久婷婷五月天激情四射| 丁香五月婷婷无码AV| 久久机热这里只有精品| 天天日天天插| 欧美性做爰大片免费看办公室| 丁香六月婷婷操逼网| 日本久久超碰| 免费精品66| 五月天狠狠网| 亚洲色综合| 国产黄色av| 亚洲精品乱码久久久久久按摩观| 九九一综合精品| 最新久久网址| 婷婷欠久少妇| 日日噜噜夜夜狠狠久久丁香六月| www.色窝| 日本系列_4页_777FP| 黑人巨粗进入警花疼哭A片| 伊人婷婷五月天av| 色婷婷欧美在线| 991精品在线视频| 无码免费人妻A片AAA毛片西瓜| 99ri在线播放| 偷拍视频五月天| 色婷婷成人| 国产探花一片区| 激情五月天综合图片小说网站| 青草五月天| 国产精品美女久久久久AV超清| 婷婷色五月激情强奸四射| 思思热在线精品视频网站| 天天色图| 色色综合五月| 亚洲激情高潮| 成人在线不卡| 五月天婷婷涩涩| 综合性视频99| 26uuu亚洲| 九九青草热| 五月天婷婷永久免费视频| 婷婷五月六月丁香| 99超碰在线观看| 五月婷婷激情69| 欧美精品999| 亚洲AV网址| 综合激情站| 琪琪色网在线| 精品无码av丁香五月激情| av在线中文| 狠狠色狠狠色综合日日91| 狠狠干总合| 亚洲婷婷五月天| 亚洲成人网在线观看| 五月丁香五月综合欧美| 中文字幕在线视频播放| 天天做天天双| 五月婷婷激情网| 97操在线视频| www.9797国产| 99热99| 亚洲欧州色情在线观看| 色婷婷成人做爰A片免费看网站| 五月婷婷三级| 亚洲综合另类| 十区AV| 夜夜骑夜夜操| 丁香五月天日韩无码| 五月婷婷乱| 蜜臀久久99精品久久久久久酒店| 六月色伊人婷婷| 夜夜谢天天干| 九九AV| 婷婷五月情| 欧美激情综合| 另类小说五月天| 久久婷综合| 91碰碰| 99色天堂| 26uuu欧美日本| www.激情.com.| 99免费在线| 色噜噜狠狠色综合无码久久欧美| 久草大| 成人片在线播放| 永久精品| 性爱在线播放av| CHINESE熟女老女人HD视频| 五月天播播综合| 国产无遮挡又黄又爽免费网站| 丁香婷婷人妻综合网| 亚洲天堂婷婷丁香| 天天干天天操天天爱| AV网在线观看| 狠狠爱婷婷丁香|