99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

WiFi模式下NFS與TFTP嵌入式調(diào)試環(huán)境搭建與優(yōu)化

WiFi模式下NFS與TFTP嵌入式調(diào)試環(huán)境搭建與優(yōu)化 做嵌入式開發(fā)的人應(yīng)該都經(jīng)歷過一種糾結(jié)明明可以抱著一塊開發(fā)板到處跑卻總得拖著一根網(wǎng)線才能干活。有的板子沒有有線網(wǎng)口有的板子放在某個現(xiàn)場角落拉線不現(xiàn)實還有些時候手里拿的是一臺手機改裝過的調(diào)試終端。這時候把NFS和TFTP這兩個調(diào)試?yán)骷艿絎iFi上就成了非?,F(xiàn)實的需求。這篇內(nèi)容我想把“WiFi模式下nfs與tftp的網(wǎng)絡(luò)環(huán)境搭建”這件事從頭到尾捋一遍。它不復(fù)雜但也不是直接把有線環(huán)境的配置搬過來就行——無線鏈路的延遲、丟包、IP漂移這些特性會實實在在影響NFS的掛載穩(wěn)定性和TFTP的傳輸成功率。這篇文章適合正在用開發(fā)板做根文件系統(tǒng)掛載調(diào)試的工程師適合想擺脫網(wǎng)線束縛的嵌入式愛好者也適合那些手里只有WiFi環(huán)境、卻要折騰uboot和內(nèi)核鏡像傳輸?shù)娜恕O冉o你交個底這套環(huán)境本身并不難難的是讓它穩(wěn)定、可復(fù)用。下面我會從整體設(shè)計思路說起把服務(wù)端配置、客戶端優(yōu)化、WiFi場景下的驗證和排錯一路講完。我不喜歡寫那種“復(fù)制粘貼就能跑”的教程你想跑起來很容易想跑得穩(wěn)就得知道參數(shù)背后的原因。1. WiFi模式下NFS與TFTP環(huán)境的整體設(shè)計與核心思路1.1 為什么非要在WiFi下搭這套環(huán)境先把場景掰開。NFSNetwork File System解決的是開發(fā)板啟動時掛載根文件系統(tǒng)的問題TFTP解決的是uboot階段傳輸內(nèi)核鏡像、設(shè)備樹文件的問題。這兩個服務(wù)在有線網(wǎng)絡(luò)下都非常成熟但WiFi場景會引入幾個有線環(huán)境幾乎不會遇到的不確定因素IP地址可能是動態(tài)分配的、丟包率比網(wǎng)線高一個數(shù)量級、延遲抖動明顯、路由器的AP隔離可能直接掐斷設(shè)備間的互訪。我碰到過的真實場景是某塊開發(fā)板自帶WiFi模塊但沒有以太網(wǎng)口項目現(xiàn)場又不能隨便布線。當(dāng)時手頭只有一臺筆記本電腦和一個家用路由器要在這種條件里完成內(nèi)核下載、文件系統(tǒng)掛載的整套調(diào)試不像聽起來那么輕松。特別是第一次用TFTP傳內(nèi)核時反復(fù)超時后來發(fā)現(xiàn)是WiFi基站下的丟包率偏高小文件沒感覺一傳到十幾MB就原形畢露。WiFi天然具有“移動性”優(yōu)勢很多開發(fā)環(huán)境需要設(shè)備在實際擺放位置調(diào)試電腦可以就近放著但網(wǎng)線布不過去。把NFS和TFTP從有線遷到無線本質(zhì)上是把調(diào)試鏈路的傳輸介質(zhì)換掉了但服務(wù)架構(gòu)沒有變一臺開發(fā)機服務(wù)器提供共享目錄和啟動文件開發(fā)板作為客戶端啟動時通過網(wǎng)絡(luò)拉取資源。區(qū)別在于無線鏈路不允許你像有線那樣“隨便配配就能用”必須針對鏈路質(zhì)量做參數(shù)層面的適配。1.2 網(wǎng)絡(luò)拓?fù)渑c鏈路規(guī)劃這套環(huán)境里的角色劃分非常清晰開發(fā)機也被稱作宿主機安裝并運行NFS服務(wù)端和TFTP服務(wù)端通常通過網(wǎng)線或WiFi接入同一個局域網(wǎng)段。開發(fā)板客戶端通過WiFi接入相同局域網(wǎng)啟動過程中先從DHCP獲取IP或配置靜態(tài)IP然后依次通過TFTP下載內(nèi)核、通過NFS掛載根文件系統(tǒng)。無線模式下我強烈建議給開發(fā)板固定IP而不是完全依賴DHCP動態(tài)分配。原因后面細(xì)說簡單講就是動態(tài)IP在WiFi下重新關(guān)聯(lián)路由器時很容易變化而NFS掛載一旦斷掉再恢復(fù)就要重新定位服務(wù)器IP這會浪費大量調(diào)試時間。實測中比較穩(wěn)的搭配是路由器開啟DHCP靜態(tài)綁定把開發(fā)板的MAC地址和某個固定IP綁在一起。這樣既不用在板子上寫死IP換網(wǎng)絡(luò)環(huán)境時還能自動適配又能保證每次重新上電后IP不變。這是整套環(huán)境的鏈路示意圖路由器位于中間開發(fā)機通過WiFi/網(wǎng)線接入開發(fā)板通過WiFi接入兩者處于同一網(wǎng)段。TFTP走的是UDP 69端口NFS走的是TCP/UDP 2049端口外加一組動態(tài)端口rpcbind。WiFi環(huán)境下如果路由器開啟了AP隔離客戶端隔離這兩個設(shè)備的二層通信會被直接切斷表現(xiàn)為互相ping不通——這個問題我后文還會專門說。1.3 方案選型為什么不直接用U盤或串口你可能問既然WiFi不穩(wěn)定為什么不直接U盤拷貝、串口下載答案是效率和迭代速度。嵌入式調(diào)試是一個“改代碼、編內(nèi)核、拷過去、看現(xiàn)象”的循環(huán)串口傳一個大內(nèi)核要等幾分鐘U盤還得來回插拔。NFS和TFTP的價值在于把“傳輸”變成網(wǎng)絡(luò)上的常態(tài)操作每次改動后重啟開發(fā)板就能加載最新內(nèi)容。WiFi雖然不如有線穩(wěn)定但勝在沒有物理束縛尤其適合移動調(diào)試和現(xiàn)場聯(lián)調(diào)場景。這套方案解決的真實痛點其實就一句話在沒有有線條件的環(huán)境里保留完整的網(wǎng)絡(luò)調(diào)試能力。代價則是鏈路質(zhì)量下降所以整個配置過程不能照搬有線思路要在NFS協(xié)議版本、掛載超時參數(shù)、TFTP塊大小這些層面上做針對性調(diào)整。2. 服務(wù)端基礎(chǔ)環(huán)境搭建NFS與TFTP的安裝和啟動2.1 確認(rèn)服務(wù)端網(wǎng)絡(luò)狀態(tài)與軟件源無論你用的是哪一套Linux發(fā)行版第一步都先確認(rèn)開發(fā)機自身的網(wǎng)絡(luò)狀態(tài)。這一步看起來多余但確實現(xiàn)場翻車過很多回有人裝好了NFS掛載時才發(fā)現(xiàn)服務(wù)端自己有兩個IP開發(fā)板訪問的是那個被防火墻擋住的地址。# 查看網(wǎng)卡IP與連接狀態(tài) ip addr show ip route show # 確認(rèn)能與開發(fā)板互通先做一次基本ping ping 開發(fā)板IP我建議第一次搭建的時候用有線把開發(fā)機和路由器連接起來確認(rèn)整套NFSTFTP流程走通再切換到WiFi做鏈路優(yōu)化。這不是慫而是把變量拆開排查——有線都跑不通就上無線出了問題都不知道怪誰。軟件源方面Debian系和Red Hat系裝的服務(wù)名字不一樣但核心組件一樣發(fā)行版系NFS服務(wù)端包名TFTP服務(wù)端包名Debian/Ubuntunfs-kernel-servertftpd-hpaCentOS/RHEL/Rockynfs-utilstftp-server2.2 安裝NFS服務(wù)端以Debian系為例sudo apt update sudo apt install -y nfs-kernel-server裝完之后不要急著配先把服務(wù)狀態(tài)確認(rèn)一下sudo systemctl status nfs-server這個服務(wù)名在Debian系上是 nfs-server在部分版本上可能是 nfs-kernel-server。不管叫啥state為activerunning就行。Red Hat系的安裝命令是sudo dnf install -y nfs-utils sudo systemctl enable --now nfs-server這一步的作用是讓NFS在開機后自動拉起避免每次手動啟動。后面你在開發(fā)板上配置開機自動掛載時服務(wù)端的自啟動就是前提條件。2.3 安裝TFTP服務(wù)端TFTP的陣營選擇比較多我用的是 tftpd-hpa理由是它配置集中、支持systemd管理、參數(shù)語義清楚。Debian系安裝sudo apt install -y tftpd-hpaRed Hat系則要裝 tftp-server并通過socket激活sudo dnf install -y tftp-server sudo systemctl enable --now tftp.socket注意Red Hat系會拆成tftp.service和tftp.socket兩個單元實際監(jiān)聽68/69端口的是socket單元部署的時候要確認(rèn)socket是啟動狀態(tài)。我見過有人在Red Hat上配了老半天配置文件結(jié)果發(fā)現(xiàn)tftp.service是獨立的、根本不是自己用的那個進(jìn)程。2.4 防火墻策略NFS和TFTP的端口開放防火墻是NFS環(huán)境搭建里翻車率最高的環(huán)節(jié)。NFS本身不止監(jiān)聽2049端口它依賴rpcbind動態(tài)分配端口所以不能只放行2049還要放行rpcbind的111端口以及一系列動態(tài)端口。TFTP則相對簡單固定UDP 69端口。Debian系的ufw可以這樣操作sudo ufw allow 2049/tcp sudo ufw allow 2049/udp sudo ufw allow 111/tcp sudo ufw allow 111/udp sudo ufw allow 69/udpRed Hat系的firewalld更省事直接認(rèn)服務(wù)名sudo firewall-cmd --permanent --add-servicenfs sudo firewall-cmd --permanent --add-servicerpc-bind sudo firewall-cmd --permanent --add-servicetftp sudo firewall-cmd --reloadfirewalld能識別nfs這個服務(wù)名會自動放行2049、111以及NFS動態(tài)端口。但有一個問題有些環(huán)境中firewalld的服務(wù)定義不包含全部動態(tài)端口范圍配置完還是掛不上。保險起見可以查看自己的NFS實際使用了哪些端口rpcinfo -p | grep nfs如果發(fā)現(xiàn)動態(tài)端口不在防火墻放行范圍內(nèi)就得手動加一條規(guī)則。有種更穩(wěn)的做法是固定NFS動態(tài)端口范圍到某個區(qū)間再對區(qū)間放行具體做法是把下面這行寫進(jìn) /etc/nfs.conf 的[nfsd]段[nfsd] vers3y vers4y動態(tài)端口固定的做法稍復(fù)雜但在部分企業(yè)路由器環(huán)境下確實更可靠。這是后話如果你只是個人開發(fā)環(huán)境放行服務(wù)名的方案通常就夠了。3. NFS核心配置與WiFi鏈路下的參數(shù)優(yōu)化3.1 導(dǎo)出目錄配置/etc/exports 的每一項都別糊弄NFS服務(wù)端配置核心就一個文件/etc/exports。它定義了“哪些目錄可以給誰用、用什么權(quán)限”。我的習(xí)慣是單獨劃一個目錄做嵌入式調(diào)試共享區(qū)比如 /srv/nfs/rootfs里面放編譯好的根文件系統(tǒng)。一個典型的exports條目/srv/nfs/rootfs 192.168.1.0/24(rw,sync,no_subtree_check,no_root_squash)四個參數(shù)里每個都有講究rw允許讀寫。調(diào)試階段你經(jīng)常要在開發(fā)板上寫文件只讀的話連日志都存不下來。sync服務(wù)端在響應(yīng)客戶端寫請求前必須將數(shù)據(jù)落盤。WiFi下鏈路本來就不穩(wěn)sync能最大限度避免數(shù)據(jù)不一致的問題。有人為了性能用async但是在嵌入式調(diào)試場景我寧可慢一點也要數(shù)據(jù)安全。no_subtree_check關(guān)閉子目錄的權(quán)限檢查。這個參數(shù)能降低NFS在目錄重命名等場景下的延遲WiFi下尤其有價值。no_root_squash允許開發(fā)板上的root用戶以root權(quán)限訪問共享目錄。沒有這個參數(shù)開發(fā)板上的root會被映射成nobody你連創(chuàng)建設(shè)備節(jié)點都做不了很多根文件系統(tǒng)掛載后會直接啟動失敗。寫完exports后執(zhí)行sudo exportfs -ra sudo showmount -e localhostshowmount -e 輸出的內(nèi)容就是開發(fā)板側(cè)能看到的共享列表。如果這里沒有輸出你的共享目錄大概率是exports格式寫錯了別急著去客戶端排查。3.2 WiFi場景下NFS掛載參數(shù)的選擇邏輯服務(wù)端配置搞定后真正能體現(xiàn)“WiFi優(yōu)化”的是客戶端掛載參數(shù)。有線環(huán)境下很多人直接 mount -t nfs 192.168.1.10:/srv/nfs/rootfs /mnt/nfs但無線環(huán)境的丟包與延遲不允許這么粗暴。這是我實測在WiFi場景下很好用的一組參數(shù)mount -t nfs -o nolock,tcp,rsize4096,wsize4096,timeo50,retrans5,soft \ 192.168.1.10:/srv/nfs/rootfs /mnt/nfs逐項說明nolock關(guān)閉NFS的鎖管理。開發(fā)板側(cè)的NFS客戶端鎖機制在無線環(huán)境下容易觸發(fā)問題關(guān)閉后能減少掛載失敗的概率。tcp強制走TCP而非UDP。WiFi本身丟包率不低TCP的重傳機制能保證數(shù)據(jù)傳輸完整性。有人擔(dān)心TCP比UDP慢但在NFS場景下TCP的可靠優(yōu)勢遠(yuǎn)大于那點延遲差。rsize/wsize4096單次讀寫的塊大小。有線環(huán)境你完全可以設(shè)成32768但WiFi下大塊傳輸容易觸發(fā)底層重傳風(fēng)暴4096是實踐下來比較折中好用的值。timeo50超時時間單位是0.1秒也就是5秒。這個值比默認(rèn)的60060秒小很多。為什么不直接用默認(rèn)因為默認(rèn)超時在無線鏈路上會讓你等很久才報錯調(diào)試時卡在那里非常被動。retrans5重傳次數(shù)。配合timeo約5次重試后還沒成功就報錯。這兩個參數(shù)的意義是把“等待掛載結(jié)果”的時長控制在可接受范圍內(nèi)。soft使用軟掛載即重試超時后返回錯誤而不是無限阻塞。開發(fā)調(diào)試階段用soft因為你經(jīng)常改配置、調(diào)鏈路硬掛載一旦斷連會卡死整個系統(tǒng)只能重啟開發(fā)板。我之前在某塊板子上測試過同樣的NFS共享有線掛載開機到進(jìn)入shell大約10秒WiFi下用優(yōu)化參數(shù)大約14秒。多出的時間主要是無線鏈路的連接開銷和NFS握手延遲這個代價可以接受。但你如果用默認(rèn)的全部參數(shù)直接掛會出現(xiàn)一種情況掛載命令執(zhí)行后沒有任何反饋卡幾分鐘都不報錯——那是硬掛載的等待重傳機制在空轉(zhuǎn)。3.3 客戶端掛載操作與開機自動掛載手動掛載確認(rèn)無誤后最好把掛載動作固化到開發(fā)板的啟動流程里。有兩種常見做法一種是把掛載命令寫進(jìn)啟動腳本rc.local或systemd服務(wù)另一種是寫進(jìn) /etc/fstab。開發(fā)板上的文件系統(tǒng)如果本身在本地Flash里fstab是合適的192.168.1.10:/srv/nfs/rootfs /mnt/nfs nfs nolock,tcp,rsize4096,wsize4096,timeo50,retrans5,soft 0 0如果開發(fā)板根本沒有本地根文件系統(tǒng)整個過程是“uboot通過TFTP下載內(nèi)核 - 內(nèi)核通過NFS掛載根文件系統(tǒng)”那掛載參數(shù)要傳在內(nèi)核bootargs里。比如root/dev/nfs nfsroot192.168.1.10:/srv/nfs/rootfs,tcp,nolock,rsize4096,wsize4096 rw ipdhcp注意這里的nfsroot參數(shù)列表和服務(wù)端配置是配套的。別小看這個細(xì)節(jié)我見過有人uboot能起來、TFTP也能下內(nèi)核但根文件系統(tǒng)一直掛不上最后發(fā)現(xiàn)是bootargs里沒寫tcp、nolock內(nèi)核默認(rèn)用UDP掛載在WiFi下就是會莫名失敗。3.4 NFS權(quán)限問題的排查思路Permission denied是NFS最常見的錯誤之一而在WiFi環(huán)境中多了一層配IP的干擾讓問題更難定位。排查順序是先確認(rèn)客戶端拿到的是否是192.168.1.0/24網(wǎng)段的IP再看exports里的網(wǎng)段是否覆蓋了這個IP再看no_root_squash是否加上了。小技巧在服務(wù)器端看日志能最快定位權(quán)限問題。sudo tail -f /var/log/syslog | grep nfs日志會直接告訴你“nfsd: permission error”以及來源IP。我看到過不少人折騰半天防火墻結(jié)果全是網(wǎng)段寫錯導(dǎo)致的權(quán)限拒絕。還有一個坑是SELinux。Red Hat系默認(rèn)SELinux強制模式會攔NFS流量表現(xiàn)為客戶端卡在掛載、服務(wù)端日志卻干干凈凈。臨時驗證可以先執(zhí)行 setenforce 0如果掛載立刻成功說明就要么關(guān)SELinux要么打SELinux布爾值放行NFS。4. TFTP服務(wù)配置啟動文件的分發(fā)通道4.1 TFTP與NFS的職責(zé)邊界在整套啟動流程里TFTP和NFS的分工是uboot階段用TFTP下載內(nèi)核鏡像和設(shè)備樹因為uboot里的NFS客戶端太簡陋性能和穩(wěn)定性都差內(nèi)核接管啟動后再用NFS掛載根文件系統(tǒng)。這兩個服務(wù)各管一段但文件來源可以共享同一個目錄也可以分開。TFTP配置目錄建議放在 /srv/tftp 或者 /var/lib/tftpboot。里面放zImage、uImage、設(shè)備樹dtb文件。你可能會問這些文件都不大為什么WiFi下還偶爾傳失敗因為TFTP走UDP本身沒有擁塞控制WiFi的隨機丟包一旦觸發(fā)了服務(wù)端的超時重傳重傳往往也一起丟——這就是TFTP在無線環(huán)境里“越傳越慢、最后失敗”的根因。4.2 tftpd-hpa 的配置細(xì)節(jié)tftpd-hpa的配置文件在 /etc/default/tftpd-hpa內(nèi)容一般長這樣TFTP_USERNAMEtftp TFTP_DIRECTORY/srv/tftp TFTP_ADDRESS:69 TFTP_OPTIONS--secure --create每個配置項的作用TFTP_USERNAME運行tftpd的進(jìn)程用戶建議專用低權(quán)限用戶tftp。防止TFTP被攻擊時拿到root權(quán)限。TFTP_DIRECTORYTFTP的根目錄。--secure模式下客戶端訪問的所有文件都限制在這個目錄里相當(dāng)于chroot。TFTP_ADDRESS監(jiān)聽地址:69表示監(jiān)聽所有網(wǎng)卡的69端口。也可以指定開發(fā)機的IP比如192.168.1.10:69這樣更安全但如果開發(fā)機IP變化會直接失聯(lián)。TFTP_OPTIONS--secure是安全的chroot模式務(wù)必保留。--create允許客戶端創(chuàng)建文件這樣開發(fā)板也能把日志、臨時文件傳回服務(wù)端。如果只是為了啟動鏡像下載不一定要加--create。改完配置后sudo systemctl restart tftpd-hpa sudo ss -ulpn | grep :69看到監(jiān)聽在69端口就說明服務(wù)起來了。有些老教程會教你把TFTP托管給xinetd配置 /etc/xinetd.d/tftp。我不推薦新環(huán)境用xinetd因為它多了一層進(jìn)程管理的復(fù)雜度systemd已經(jīng)把它替代得差不多了。用tftpd-hpa的獨立daemon模式啟動快、日志清晰、排查方便。4.3 WiFi鏈路下的TFTP實測驗證搭建完服務(wù)端用命令行tftp客戶端做一次完整測試# 開發(fā)機上測試 tftp 192.168.1.10 tftp put testfile.txt tftp get zImage tftp quit建議傳一個稍微大一點的文件幾十MB級別來驗證穩(wěn)定性。我第一次在WiFi下傳35MB的內(nèi)核壓縮包傳了三次兩次在校驗階段失敗都是丟包導(dǎo)致的。TFTP協(xié)議有個天然限制單塊數(shù)據(jù)固定512字節(jié)超時時間默認(rèn)5秒。在無線鏈路下如果丟包率高于1%重傳會頻繁觸發(fā)整個傳輸過程會拖得很長甚至超時終止。我實測的一個實用優(yōu)化是按數(shù)據(jù)包模式調(diào)整雖然TFTP協(xié)議本身規(guī)定了超時重傳但客戶端uboot往往沒給你調(diào)節(jié)超時的選項。所以更現(xiàn)實的辦法是能用NFS就用NFSTFTP只傳小文件。如果必須傳大文件優(yōu)先考慮從服務(wù)端角度降低鏈路丟包率——換5GHz頻段、靠近路由器、減少無線信道干擾比在TFTP參數(shù)上做文章有效得多。4.4 與uboot結(jié)合的啟動流程如果你在uboot階段使用TFTP需要在uboot環(huán)境變量里指定服務(wù)端IP和文件名。大致流程如下setenv serverip 192.168.1.10 setenv ipaddr 192.168.1.20 setenv bootfile zImage # 下載內(nèi)核到內(nèi)存 tftp 0x81000000 ${bootfile} # 下載設(shè)備樹 tftp 0x82000000 ${devicetree}這里有一個經(jīng)常出錯的地方uboot的ipaddr、serverip必須和開發(fā)板運行內(nèi)核后使用的IP保持一致否則會出現(xiàn)“uboot下tftp成功內(nèi)核啟動后網(wǎng)絡(luò)不通”的詭異狀況。WiFi環(huán)境下尤其要注意如果路由器給開發(fā)板分配的是動態(tài)IPuboot階段的固定ipaddr和內(nèi)核階段的DHCP獲得的IP可能不一致導(dǎo)致服務(wù)器無法回包或者NFS掛載失敗。最省心的方案是前面說過的路由器上綁定開發(fā)板MAC到固定IP同時uboot里把ipaddr設(shè)成同一個固定IPserverip設(shè)為開發(fā)機IP。然后把內(nèi)核bootargs改成 ip192.168.1.20::192.168.1.1:255.255.255.0::wlan0:off用靜態(tài)IP而不是dhcp。這樣整條鏈路從uboot到內(nèi)核IP一致不容易出幺蛾子。5. WiFi環(huán)境下的聯(lián)通性驗證與穩(wěn)定性加固5.1 從物理層到應(yīng)用層的逐級驗證很多人搭完環(huán)境掛載失敗第一反應(yīng)就是改NFS參數(shù)實際上問題可能出在物理鏈路。無線環(huán)境下必須按這個順序排查每一步都通過再進(jìn)下一步先在開發(fā)板上確認(rèn)無線連接本身正常ip link show wlan0 iw dev wlan0 linkiw dev 的輸出能看到當(dāng)前連接的SSID和信號強度。信號強度低于-70dBm就要小心了這個閾值下丟包率會劇增NFS和TFTP都會表現(xiàn)得不穩(wěn)定。然后驗證基本連通性ping -c 5 192.168.1.10不要只看“通不通”要關(guān)注延遲分布和丟包率。如果ping的丟包率超過1%后面的NFS、TFTP都不必談先解決鏈路問題。第三步驗證端口可達(dá)性# 開發(fā)板側(cè)測試NFS端口 nc -vz 192.168.1.10 2049 # 測試TFTP端口 nc -vzu 192.168.1.10 69nc測TCP端口穩(wěn)一點UDP端口測試不一定準(zhǔn)確nc的UDP模式不保證能反映服務(wù)端狀態(tài)但好在TFTP服務(wù)是否啟動可以通過ss命令在服務(wù)端確認(rèn)兩端對照即可。最后驗證NFS共享列表showmount -e 192.168.1.10如果能列出共享但掛載失敗問題基本鎖定在掛載參數(shù)或權(quán)限而不是鏈路。5.2 AP隔離WiFi下最容易被忽略的攔路虎很多家用路由器默認(rèn)開啟“AP隔離”也叫客戶端隔離、無線隔離目的是防止同一WiFi下的設(shè)備互相訪問。這個功能對普通家庭上網(wǎng)沒影響但對嵌入式調(diào)試是致命的開發(fā)板和開發(fā)機都能上網(wǎng)、都能ping通路由器但彼此無法通信。癥狀是開發(fā)板ping開發(fā)機能通因為走的是路由器轉(zhuǎn)發(fā)AP隔離一般只隔離WLAN客戶端之間的二層直接通信不一定隔離三層轉(zhuǎn)發(fā)實際上多數(shù)家用路由的AP隔離會擋掉客戶端之間的所有訪問包括局域網(wǎng)內(nèi)訪問。我來說一個清晰的判斷方法如果開發(fā)板和開發(fā)機都能ping通路由器但互相ping不通第一優(yōu)先懷疑就是AP隔離。處理方式是登錄路由器后臺關(guān)閉“AP隔離”或“無線AP隔離”設(shè)置位置通常在無線設(shè)置的高級選項里。有的固件把guest network默認(rèn)開啟并默認(rèn)啟用隔離如果你連接的是訪客網(wǎng)絡(luò)大概率就是這個原因。5.3 頻段選擇與信號質(zhì)量優(yōu)化2.4GHz和5GHz在這個場景里我會毫不猶豫選5GHz。原因很直接2.4GHz頻段在家庭和辦公環(huán)境里干擾源太多藍(lán)牙、微波爐、USB 3.0設(shè)備、鄰居WiFi都在搶信道。實測在同一個位置2.4GHz下ping延遲的抖動范圍可以達(dá)到幾十毫秒5GHz則穩(wěn)定在個位毫秒級。如果你的開發(fā)板支持5GHz一定切到5GHz如果不支持就得在2.4GHz下做更多鏈路層面的補償比如把路由器擺放得更近、選擇一個不那么擁擠的信道。另外有個WiFi省電模式的坑。很多開發(fā)板的無線網(wǎng)卡默認(rèn)開啟省電模式power save這會帶來明顯的延遲尖峰和偶發(fā)丟包。開發(fā)板連接WiFi后通過下面的命令關(guān)閉省電iw dev wlan0 set power_save off這條命令太實用了。我之前在某塊板子上遇到過NFS隨機卡死的情況查了一圈發(fā)現(xiàn)是無線網(wǎng)卡每隔幾秒進(jìn)入一次休眠再喚醒TCP連接沒斷但是傳輸停頓了一下NFS客戶端就等超時了。關(guān)掉省電模式以后問題再沒出現(xiàn)過。5.4 動態(tài)IP場景下的掛載自恢復(fù)即使做了靜態(tài)綁定WiFi斷開重連后開發(fā)板的IP可能依然會變或者網(wǎng)絡(luò)棧在重連過程中出現(xiàn)短暫不可用。這時候NFS掛載會卡住或報錯。如果你沒有做靜態(tài)綁定那么在開發(fā)板上寫一個小的監(jiān)控腳本是必要的#!/bin/sh while true; do ip addr show wlan0 | grep 192.168.1.10 /dev/null 21 if [ $? -ne 0 ]; then IP_CHANGED1 fi mountpoint -q /mnt/nfs if [ $? -ne 0 ] [ $IP_CHANGED -eq 1 ]; then mount -t nfs -o nolock,tcp,rsize4096,wsize4096,timeo50,retrans5,soft \ 192.168.1.10:/srv/nfs/rootfs /mnt/nfs IP_CHANGED0 fi sleep 10 done這個腳本雖然是簡化版本但是思路是對的檢測IP、檢測掛載狀態(tài)、重新掛載。實際項目里你可以把它弄成一個systemd服務(wù)。有這個腳本兜底WiFi重啟、路由器重啟后調(diào)試環(huán)境能自動恢復(fù)省掉很多手動操作。6. 常見故障排查與個人實操心得先把這段時間積攢下來的高頻問題做成一個速查表遇到的問題基本都能在里面找到入口現(xiàn)象可能原因排查方案開發(fā)板和開發(fā)機互ping不通AP隔離開啟 / 不在同一網(wǎng)段檢查路由器設(shè)置、檢查WiFi連接ping通但NFS掛載卡住防火墻未放行 / rpcbind未啟動放行111和2049端口檢查rpcinfoNFS掛載報Permission deniedexports網(wǎng)段不對 / 缺少no_root_squash查看服務(wù)端syslog、檢查exportfsNFS掛載偶爾斷開無線省電模式 / 丟包率偏高關(guān)閉power_save、換5GHz頻段TFTP傳小文件成功大文件失敗WiFi丟包觸發(fā)頻繁重傳換有線驗證、換鏈路、減小文件uboot能tftp但內(nèi)核啟動后網(wǎng)絡(luò)不通uboot固定IP與內(nèi)核IP不一致路由器靜態(tài)綁定MAC、bootargs設(shè)靜態(tài)IPSELinux攔截導(dǎo)致掛載無反應(yīng)Red Hat系默認(rèn)SELinux強制setenforce 0驗證后配置布爾值6.1 掛載命令卡住不動怎么快速脫身NFS掛載命令一旦卡住最常見的錯誤操作是按CtrlC然后重試發(fā)現(xiàn)還是卡。原因是NFS cliente掛載進(jìn)程已經(jīng)進(jìn)入不可中斷的等待狀態(tài)D state普通信號殺不掉。我的處理方式# 先等軟掛載的timeo retrans周期走完 # 如果超過2分鐘還無響應(yīng)強制卸載 umount -lf /mnt/nfs使用 umount -lf懶惰卸載可以強制解除掛載點然后檢查鏈路和服務(wù)端狀態(tài)確認(rèn)沒問題再重新掛載。加了這個惰性卸載參數(shù)之后你就不用為了恢復(fù)環(huán)境而重啟整個開發(fā)板了。但注意省事不代表可以亂用頻繁強制卸載容易造成文件系統(tǒng)緩存未落盤。調(diào)試階段沒問題生產(chǎn)設(shè)備上不要這么干。6.2 服務(wù)端日志怎么高效利用NFS和TFTP的很多問題只在服務(wù)端日志里有線索客戶端界面只能給你一個籠統(tǒng)的錯誤碼。Debian系NFS在 /var/log/syslog 或 /var/log/messages 里Red Hat系在 /var/log/messages 里。每次出現(xiàn)問題時第一時間查這兩個日志比反復(fù)重啟客戶端高效太多。我之前遇到過一次開發(fā)板掛載NFS失敗排查了很久沒頭緒最后打開服務(wù)端日志看到一行 nfsd: request from unprivileged port才知道問題出在開發(fā)板把源端口映射到了高端口而服務(wù)端配置了安全端口限制。這個錯誤信息在客戶端完全不顯示不查日志根本無從入手。還有一點很多教程不會提TFTP上傳失敗時在/tftpboot目錄下查找同名零字節(jié)文件如果存在說明上次傳輸失敗了但殘留了空文件會影響下次傳輸或誤判文件完整性。我的習(xí)慣是每次做TFTP傳輸測試前先清空一下TFTP目錄里同名目標(biāo)文件。6.3 TFTP傳輸大文件容易失敗的另類解法WiFi下TFTP傳大文件失敗已經(jīng)確認(rèn)是丟包引發(fā)的重傳風(fēng)暴后還有一個我親測有效的思路把要傳的大文件拆成若干小段用腳本循環(huán)傳。比如一個35MB的鏡像拆分成每段5MBTFTP逐段傳輸后重新拼接split -b 5M zImage zImage_part_ for part in zImage_part_*; do tftp -p 192.168.1.10 -l $part done在開發(fā)板上再把這幾個部分拼接回完整鏡像。這個辦法有點取巧對于“WiFi鏈路質(zhì)量不算太差但不穩(wěn)定”的環(huán)境很有效。如果鏈路質(zhì)量已經(jīng)很差拆成多段依然會失敗那就不如老老實實解決信號問題。這個方法不適合日常工作流只適合應(yīng)急比如你人在現(xiàn)場手頭沒有網(wǎng)線但內(nèi)核編譯好了必須馬上傳到板子上驗證。絕大多數(shù)情況下我更建議Wireless環(huán)境里能用NFS就NFS能用串口傳小文件就串口傳。6.4 不同開發(fā)板的WiFi行為差異市面上的開發(fā)板WiFi模塊千差萬別同樣是WiFi有的板子連上什么都不干就很穩(wěn)定有的板子省電模式關(guān)不掉、驅(qū)動有bugNFS時不時掉線。遇到后者別死磕服務(wù)端配置先查無線驅(qū)動和固件版本。我遇到過的情況是某開發(fā)板的WiFi驅(qū)動在某種路由器上場掃描行為異常表現(xiàn)為每隔固定時間就掉線重連。最后通過升級內(nèi)核模塊才徹底解決。這個經(jīng)驗的意思是如果你的服務(wù)端配置、防火墻、信號質(zhì)量都排查完了仍然不穩(wěn)定去看無線網(wǎng)卡驅(qū)動是不是有已知bug。還有一個再小不過但是影響鏈路穩(wěn)定性的點無線電源管理。很多開發(fā)板默認(rèn)啟用省電模式啟動調(diào)試時CPU是省不了多少電的但網(wǎng)卡會頻繁休眠。在代碼里加一條 iw dev wlan0 set power_save off 的成本低于后面排查隨機斷連的時間成本。最后分享一個我自己的習(xí)慣我會在開發(fā)機上留一個啟動腳本把NFS服務(wù)、TFTP服務(wù)、防火墻狀態(tài)一次檢查完輸出一份清晰的報告。在WiFi調(diào)試這種多環(huán)節(jié)的場景里腳本檢查比手工排查可靠得多每次改完環(huán)境配置跑一遍能節(jié)省大量時間。這套WiFi模式下的NFSTFTP環(huán)境本質(zhì)上就是處理好三件事服務(wù)端正確導(dǎo)出、客戶端選用適配無線鏈路的掛載參數(shù)、鏈路質(zhì)量足夠可靠。從有線轉(zhuǎn)到無線千萬不要以為只是換了傳輸介質(zhì)鏈路特征變了參數(shù)和排查思路都要跟著變。希望這些從現(xiàn)場踩坑里總結(jié)出來的經(jīng)驗?zāi)軒湍闵僮咭恍澛贰?
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色欲Av五月天| 99视频只有这里精品| 五月婷婷 自拍| 99精品免费欧美小视频| xxxx五月激情| 日韩精品一区二区亚洲AV观看| 精品久久99| 激情五月天婷婷| 中美日韩成人在线| 五月天激日本色情在线| 亚洲日本韩国| 中文字幕日韩无码制服诱或| 葵花AV在线| 激情综合婷婷| 99热精品6| 99riAV国产精品视频| 色色a| 欧美综合激情五月天| 99在线视频资源| 9久久狠狠的| 9999三级片| 狠狠色丁香婷婷综合久久97AV| 日本天堂免费99| 嫩草AV久久伊人妇女超级A| 久色激情| av免费在线网站| 国产偷人爽久久久久久老妇APP | 欧美狠狠色| 国产噜一噜天天噜| 五月婷婷色综图片| 色欲久久久久久综合网综合网| 极品少妇XXXX精品少妇偷拍| 五月婷婷性爱| 五月丁香婷婷色| 精品99在线| 天天干天天爽| 亚洲五月婷| 深爱五月最新网址| 亚洲最大五月六月丁香婷婷| 狠狠操.COM| 激情五月天婷婷久久久久久久久久久| 日韩成人电影AV| 999热这里只有美国精品| 天天操婷婷| 五月婷婷成人| 丁香五月AV| 天天爽天天做| 狠狠xx| 亚洲九九免费| 伊人六月丁香婷婷| 四色女婷婷| 99热99思午夜精品| 中文aV网| 国产精品久久7777777精品无码| 五月六月丁香婷婷在线观看| 国产精品国产VA片国产| 99热视精品| 五月丁香婷婷激情在线| 久草xx性爱视频| 日本在线播放97| 久色激情| 亚洲精品久久久无码| 六月婷婷激情| 天天射天天插天天干| 大香网伊人久久综合| se99视频| 五月天综合色| 99热久久这里只有精品| 色综合婷婷99| 综激情网| 九九综合九九| 激情精品久久| 天天色官网| 俺也高清无码高清视频| 色婷婷69| 精品一区二区三区免费毛片爱| www.99热| 96色婷婷| 婷婷六月丁香激情| 九九热99精品| 99精品在线| 996热re视频精品视频| 91热视频色网站| 日本视频99| 综合色99| 精品五月天| 色婷婷五月天激情在线观看| 亚洲综合色色| 青青草婷婷五月天| 日本久久人| 亚洲五月婷| 色色网站免费在线视频| 丁香激情六月天婷婷| 丁香美女主播视频在线观看| 99riAv1国产在线观看| 色色色五月婷婷| 99精品在线观看| 婷婷在线中文字幕| 免费AV播放| 日日日日做夜夜夜夜无码| 深爱开心激情网| 欧美激情凹凸丁香网| 俺去也五月天| 亚洲精品一区中文字幕乱码| 大香蕉久久婷婷| 99精品自拍视频| 99热在线里有精品| 五月丁香婷婷开心| 亚洲AV免费在线| 丁香狠狠色婷婷久久无码视频| 99ri精品视频在线观看| 国产精品久久久爽爽爽麻豆色哟哟| 天堂在线观看视频| 日本99热| 亚洲激情综合| 美女久久婷婷| 永久思思热在线| 色久五月| 狠狠干,狠狠操| 7EzOBIhNq85TO| 人妻在线观看视频| 六月丁香基地| 影音先锋一区二区三区| 婷婷色色欧美| 第四色色色色色丁香五月天| 91五月天| 婷婷五月天六月丁香| 青草激情综合| www.五月天婷婷| 久久五月网| 99九九视频| www.丁香五月| 99人碰碰碰| 激情婷婷综合| www.99热| 97人人搞| 99性视频| 99热免费18| 丁香五月激情啪啪| 婷婷六月激情| 天天橾夜夜爽| 亚洲亚洲人成综合网络 | 国产精品扒开腿做爽爽爽A片唱戏| 婷婷五月五月丁香| 6月丁香婷婷激情| 中文色婷婷| 九九99偷拍视频| 99 频99热国里只有精品| 66色在线日韩| 狠狠久综合| 另类综合国产| 久思思久视频| 日日噜噜夜夜狠狠久久丁香五月| 久久婷婷五月综合色奶水99啪| 综合五月丁香六月婷婷| 婷婷五月综合丁香久久| 亚洲 五月 婷婷 成人| 激情五月综合婷婷| 99re热精品视频国| 色综合色| 五月熟妇婷婷久久| 八戒青柠影视剧在线观看| 亚洲婷婷久久综合| 日本色天堂| 玖玖玖婷婷婷| 这里只有精品免费视频| 色爱综合五月| AV操一操| 六月天无码网址| 激情色色色| 五月丁香综合成人社区| 欧美激情综合色综合啪啪五月| 热婷婷久| 婷婷月综合| 一起操 91N.com| 婷婷5月九九| 久久婷婷丁香花综合网| 五月婷婷在线综合| 中文字幕成人影视| 久久婷婷五月天蜜桃| www...com黄在线观看| 婷婷五月天伦理| 99久久99综合| 日日.c| 99国产精品久久久久久久久久久| 五月综合在线婷婷图片| 久草五月丁香婷婷综合| 婷婷五月天色综合| 日都一级A片| 青青草成人网| 99黄色性生活| 粉嫩AV久久一区二区三区| 这里只有精品,日韩视频| 久久免费精彩视频| 五他月天啪啪啪| 日日懆天天懆| 91狠狠色丁香| 中文字幕在线观看视频www| 久久66er久久| 中文AⅤ大全| 天天做天天爰天天爽天天无遮挡| 国产肥白大熟妇BBBB视频| 亚洲婷婷丁香五月天激情小说| 五月天婷婷久久| 婷婷色色五月天| 99久久99九九99九九九| 99热这里只有精品 搜| 久久五月天丁香花| 欧美影院婷婷| 婷婷六月色情| 五月丁香激| 成人短视频在线| 97碰碰视频| 情色五月天网站| 99精品视频免费在线播放| av在线资源| 五月婷丁香久久久| 五月丁香网站| 蜜乳久AV| 六月婷婷av| 成人一级片| 婷婷久久五月天| 强奸幻女毛片| 五月丁香偷拍| 天天成人综合视频| 婷婷天堂综合| 色婷五月天| 九色视频这里只有精品| 大香蕉久久久| 色色欧美色色色| 色五月婷婷影院| 色综合婷婷| www,999日本色| 色五月天综合网| 中文字幕AV在线| 亚洲情综合五月天| 中文AV在线播放| 亚洲成人电影aaaa| 亚洲av综合网| 色婷综合| 亚洲激情视频在线观看| 天天插综合| 日韩综合网络男女香蕉a片| 欧美成人精品三区综合A片| 噜噜色噜噜网| 天天插天天日天天爽| 在线99色| 亚洲V国产V欧美V久久久久久| 深爱五月激情| 蜜桃五月天色| 五月丁香va| 天天综合五月天| 夜夜夜夜操| 五月婷婷色影院| 婷婷狠狠综合网入口| 久久综合五月天| 国产婷婷五月天| 99re思思热在线视频| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 久热免费| 九九色影视| 亚洲精品色色| 免费观看亚洲AV片| 停停五月色宗合| 久久色六月| 国产成人亚洲综合A∨婷婷| 狠狠色噜噜狠狠| 人妻性爱| 亚洲熟妇AV综合网五月丁香伊人| jiujiu热在线视频| 大香蕉久久婷婷精品综合| 伊人九九68| 成人午夜无码视频| 婷婷俺去也| 色爱综合网| 99久久er| 色婷五月| www.俺去也com| 亚洲啪视频| 波多野结衣成人作品在线| www.精品99| 人妻激情在线| 色老久久| 任你操精品免费| 狠狠干综合| 久久色9| 日日婷婷不卡| 五月天婷婷综合久久| 操逼五月婷婷| 中文字幕按摩做爰| 亚洲妇女熟BBW| 婷婷五月天开心网| 99操碰| 五月丁香婷婷色| 婷婷色在线视频| 亚洲天堂色色| 99久久99九九99九九九| 婷婷五月天影院| 亚洲无码色色| 久久婷婷五月综合啪| 五月丁香影视| 婷婷色成人| 日韩人妻操逼视频| 天天干天干| 夜夜夜夜夜操| 欧美va在线观看| 丁香婷婷激情五月天无毒不卡蜜桃| 五月丁香六月婷婷综合网缴情| 亚洲网站在线鸭子av| 大香蕉AV在线| 色亭亭五月天网扯| 色综合色色| 在线播放中文字幕| 久久6这里只有精品| 有码人妻久久| 欧美婷婷五月天综合| 色五月激情问网站| 激情五月婷在线精品| 这里只有精品免费视频在线观看| 操熟女成人网| 久久人人妻| 99热这里只| 青青草原福利在线| 色香久久| 丁香六月激情| 9热在线| 久热大香蕉| 天天插天天干| 精品9久| 97碰操| 日韩超碰在线| 五月丁香婷婷无码A∨| 五月丁香六月激情狠狠| 狠狠狠色激情综合适合| 激情综合久久| Caoporn公开| 久色网| 99热啪啪| 亚洲蜜乳AV| 97色婷婷五月天| 婷丁五月| 婷婷五月天AV| 色色综合激情| 香蕉久久国产AV一区二区| 啪啪视频99| 99免费热视频在线| 操丝袜视频影院导航| 日本色爽| 欧美性猛交99久久久久99按摩| 99在线精品免费视频| 精品无码片| 色婷婷久久| 九九亚洲小视频| 五月天色综合| 亚洲乱码日产精品BD| 色婷婷色和| 激情五月天婷婷图| 欧美日本一区二区三区| 99久久综合网| 激情五月天.色网| 婷婷久久五月天丁香| 五月婷婷色丁香| 五月婷在线观看| 丁香婷婷91在线观看视频| av九九| 99热在线看| 激情五月天噢美| 国产成人+亚洲+欧洲| 丁香九月激情| 99精品久| 操逼在线视频| 另类激情综合| 久草婷婷| 久久精品99久久久久久| 99精品小视频| 开心五月深爱五月| 99久在线观看| www.99热这里精品| a免费在线| 韩日在线熟女| 色婷婷在线播放| 中文字幕视频色婷婷| 丁香花五月天激情| 99热这里只有免费| 日本三级中国三级99人妇网站| 人人妖人人97| 五月丁香综合久久| 97久久超碰| 五月婷婷日| 手机AVAV天堂看网| 九九AV| 婷婷激情五月天桃花网| 丁香五月天五码婷婷| 99热日韩| 五月丁香黄色| 五月天激情国产综合婷婷| 青柠影视免费高清电视剧 | 夜夜天天天天天干天天爽| www.久久99| 超碰97久久| 九九爱激情| 98国产精品综合一区二区三区| 国产精品成人网址| 亚洲人人操BD| 激情丁香婷婷| 五月色婷丁香| 亚洲五月天婷婷在线| 色色a| 日韩在线观看亚洲| 99er免费在线观看| 熟女人妻一区二区三区免费看| 久久久激情| 九月婷婷丁香| Blackedraw视频一区二区| 美女va| www久久久| 日本一道久久| AAA久久久| 9热视频在线观看| 国产成人AV在线| 婷婷 亚洲图片 丁香| 99热地址| 丁香五月 激情文学| 婷婷成人小说综合| 九热av| 六月天丁婷婷| 国产成人精品一区二三区熟女在线| 丁香五月天亚洲视频| 色玖玖综合网| 综合色色网| 免费国产视频| 五月丁香婷爱在线| 五月亭大香蕉| 丁香五月综合| 激情综合女人网五月播播| 91丨九色丨东北熟女| 91狠狠色丁香| 五月丁香六月香香蕉| 色色影院黄大片| 亚洲综合色棒| 99九九99九九九视频精品| 伊人色欲五月天| 日日干夜夜干| 欧美成人AAA片一区国产精品| 婷婷四月 成人 狠狠干| 婷婷激情图片| 国产探花AV在线| 五月婷婷久久网| http://www.lingjunshare.com/| 9色小视频在线观看| 五月天五月婷五月激情网| www99在线观看视频| 久久婷婷五| 久久玖玖综合| 色狠狠五月天| 伊人五月婷| 啪啪小说五月天| 色综合大香蕉| 九九色综合九九色| 开心激情久久久久久久| 久久伊人9| jiZZdr| 五月婷婷综合网| 97精品人人A片免费看| 日本a片网址| 人与禽A片啪啪| www.丁香五月| 丁香五月久久| 精品日本视频444| 五月色丁香| 婷婷激情五月综合| 狠狠干狠狠干| 日本高清综合网五月丁香| 九九综合久久| 九九视频在线观看视频在线播放69| 精品女人九九九| 久久er免费视频| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 99热碰碰| 婷婷久久性爱| 九月丁香八月婷婷加勒比| 亚洲色夜| 色丁香五月综合网| 九九热这里只有精品23| 另类国产欧美视频| 色婷婷久久| 国产精品久久久久久五月天加勒比| 色婷婷色| 五月丁香花成人社区| 9l视频自拍9l九色成人| 99性爱视频网站| 超碰av在线| 99久热视频在线| 五月婷婷色色色| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 91美女啪啪| 丁香色婷婷五月天| 五月激情天| www天天干| 婷婷狠狠18禁久久| 国产精品国产成人国产三级| 色激情五月天| 99成人无码| 久久天天天| 久草九九| 免费AV播放| 婷婷五月色播| 色狠久| \\五月天婷婷激情| 婷婷中文字幕在线| 182.t午在线观看| 激情五月天色播| 久热免费视频| 综合激情网激情五月。| 精品99网站| 午夜天堂一区人妻| 丁香五月婷婷五月| 99性视频| 色墦五月丁香| 碰碰女| 99久在线精品99re8| 丁香五月丁香伊人| 日日日影院| 丁香婷婷少妇| 深爱激情九九五月天| 欧美日韩成人在线| 亚洲另类婷婷五月丁香在线播放| 亚洲综合网 665566| 99热国产婷婷| 亚洲操B视频| 影音先锋91资源站| www.yw色| 另类激情四射| 性爱网六月丁香| 五月婷天堂视频| 色婷婷狠狠久久综合五月| 中国丰满熟女A片免费观| 久婷婷婷| 99久久极情精品一区| 伊人激情啪啪| 色婷婷久久综合| 久久99视频| 久热九九| 丁香五月天社区| 九九这里都是精品| 亚洲精品又粗又大又爽A片 | 思思9久久| 黄桃AV无码免费一区二区三区| 亚洲综合色网| 亚洲无码影片| 青草青草久9视频在线视频| 九九色video| WWW.五月com| 美腿丝袜AV天堂网| 欧美天堂久久| 久久综合婷婷| 一个色的综合| 五月天激情电影| 婷香五月激情视频| 婷婷久久久久| 精品久久久999| 天天插综合网| 综合欧美五月婷婷| 99精品网址| 98色花堂98t.R| 五月丁香久久网| 久久五月丁香婷婷| 婷婷五月天激情在线观看| 亚洲色综合性| 久久这里只有精品99| 99在线视频精品| 婷婷午夜| 91黄色五月天视频| 91狠狠色色丁香婷婷综合久久| 99在线视频色版| 伍月婷婷免费视频| 五月天婷婷在线播放| 综合99视频| 激情图片五月天| 熟女少妇内射日韩亚洲| 夜色综合网| 久操婷婷| 欧美婷婷六月丁香综合色| www.91色| 区区欧美你爱| 国产精品国产| 色婷婷电影网| 婷婷激情97| 超碰免费人人| 日本性激情色播| 天天草天天爽| www.99热| 久久久五月婷婷| 亚洲精品网站色视频| 婷婷丁香激情| 久久看婷婷| 丁香五月偷拍| 久久九九中文字幕| 婷婷激情蜜桃玖玖丁香| 亚洲欧美婷婷五月色综合| 久久香蕉网| 美女91一起草| 久久ER视频com| 停婷丁五月在线| 777精品久无码人妻蜜桃| 五月天婷婷激情四射综合| 超碰成人免费| 五月天婷婷爱| 2025神马午夜福利| 五月色婷| 啪啪小说五月天| 成人av免费观看| 玖玖综合玖玖| www天天干| 丁香婷婷基地| 欧美一线视频| 久久这里有精品视频| 色五月天中文字幕| 欧洲色| 女人高潮内射99精品| www激情网站| 插插五月天| 亚洲综合网 665566| 婷婷五月天六月丁香| 亚洲人成网站999久久久综合| 51XX午夜影福利| 无码色色| 大地9中文在线观看免费高清| 婷婷丁香五月91| 激情五月色综合国产精品| 色综合天天| www.97碰碰com| 巴基斯坦粉嫩无码视频| 日韩AV免费电影在线播放| 久久婷综合| 五月丁香啪啪网| 五月成人丁香av91| 五月丁香av在线| 九月婷婷综合| 五月丁香成人| 婷婷黄色| 婷婷大乡焦噜噜| 色色丁香激情五月| 亚洲五月六月婷婷| 26uuuu精品一区二区| 九九在线精点品| 色婷婷www| 台湾无码A片一区二区| 亚洲殴洲精品Av在线| 第一区久久网站| 亚洲精品字幕在线观看 | 婷婷在线网| 秋霞午夜理论| 免费视频无码| 亚洲色爽| 五月天婷婷综合| 久久久A级视频| 久久这里只有精品热在99| 婷婷五月丁香99| 九九精品视频在线6| www.夜夜爱.com| 五月丁香亭亭天天舔| 久久精品99国产精品日本| 免费婷婷| 思思热这里只有精品| 五月婷丁香| 99热在线只有精品| 综合婷婷六月| AⅤ网站在线看| 久久婷婷操| 丁香婷婷浪潮AV久久综合| 五月之婷婷| 丁香九月激情在线视频| 天天色天天干天天插| 少妇2做爰HD韩国电影| 午夜九九电影| 五月丁香在线观看国产| 久久激情五月| av色婷婷| 91九九| 五月开心婷婷| 婷婷伊人綜合中文| 五月婷婷熟女| 99久热这里只有精品| 久久久网站| 日本丁香五月| 九九婷婷五月天影视| 日韩人妻在线播放| 欧美久久网| 99re热在线视频| 亚洲va综合va国产va中文| 丁香五月综合在线| 久在线综合69| 91日本在线观看| 色五月之第四色| 国外亚洲成AV人片在线观看| 亚州欧美国产久精国产99综合视频| 亚洲中文字幕在线观看| 美国色五月天婷婷资源站| 婷婷九色| 91碰碰碰| 伊人干练久| 碰久久精品w| 久久3p| 五月婷色丁香| 综合激情专区| 香蕉久久国产AV一区二区| 天天爽天天摸| 久久色婷婷| 午夜少妇在线观看视频| 天天日天天插| 激情网五夜婷婷| 婷婷综合精品视频97| 婷婷五月色情天| 日本不卡一区二区三区| 婷婷五月天AV| 色婷綜合网| 色婷婷综合电影| 婷五月天天| 五月丁香啪啪网| 亚洲另类视频| 天天日夜夜高潮| 色9999综合久久| 久久综合影院 | 都市激情亚洲| 性一交一乱一交A片久| 操逼巨乳91| 另类图片激情五月天| 亚洲视频久久| 99色爱| www.色色五月天.com| 26UUU欧美激情一区二区| 婷婷久久婷婷| 思思久久99热只有频精品66| 国产精品色色| 天天橾日日橾夜夜橾17| 99热这里只有99| 91丁香色五月| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 嫩草视频观看| 综合色色五月| 久久久久人妻精品| 狠狠色噜噜狠狠狠888| 丁香五月日本| 99久视频| 91日韩美女被插视频| 久久免费高| www.久久99| www,色婷婷| 99爱爱网| 97干资源在线观看| 色婷婷成人做爰A片免费看网站| 婷婷亚洲影院| 99热97| 99热精这里只有精品| 亚洲丁香婷婷五月天综合色| 成人中文字幕在线| Av在线资源| 色婷婷色综合久久精品V| 俺去也婷婷| 婷婷丁香激情综合色情| 五月激情小说| 蜜乳中文字| 色亚洲色宗合| 高清无码 一区 二区 三区| 中文无码婷婷| 99综合自拍| 成人在线网站| 久久精品天| 婷婷五月综合社区在线| 99久热视频在线| 丰满少妇猛烈A片免费看观看 | Av在线不卡一区| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 五月天综合网| 成人在线网址| 伊人激情综合网| 丁香五月激情棕合| 激情文学第四色婷婷丁香五月| 亚洲欧美日韩另类| 丁香五月激情啪啪啪| 成人性生活免费观看。| 婷婷伊人五月天| 婷婷碰碰| 热婷婷av| www.久久色.com| 伊人五月天久久| eeuss人妻| 深爱激情久久| 91狠狠综合久久| 亚洲激情网| 久久亚洲婷婷| 五月丁香美女视频| 青青操avbb| 五月婷婷六月丁香综合视频在线| 人人人操Av| 婷色成人| 艹| 色婷婷影音| 伊人AV五月婷| www.色色色色| 五月丁香六月玩女人| 久9无码视频| 熟女激情网| 9久热| 日日躁夜夜躁狠狠久久AV| 六月成人网| 久久怡红院| 少妇被躁爽到高潮无码文| 久久AV无码精品人妻系列试探| 婷婷丁香六月天| 色爱爱综合网| 国产精品人妻在线网址| 久久大香蕉| 欧美久久五月婷婷| 天天草天天日| 99这里只有精品| 丁香六月激情综合| 色婷婷电影| 丁香六月婷婷激情| 免费人人操| 狠狠情色| 99热国产在| 综合五月激情| 色综合久久天天综合网| 人人爱操| 六月婷欧美丁香综合| 国产精品成人AV在线| 激情五月黄色小说| 可以免费看的av网站| 97影院一级片| 国产亚洲精品久久久久久郑州| 色综合色综合色综合| 九九狠狠干| 色五月婷婷狠狠撸| www,26uuu,c0m,色情| 丁香五月六月综合激情| 人妻久久久| 91精品国产色猫| 亚洲成人一区| 夜夜夜叫天天天做| 丁香激情久久| 婷婷五月欧美综合| 久久9精品| 激情五月色综合国产精品| 丁香五月婷婷基地| 欧美成人AAA片一区国产精品| 熟女国产在线一区二区三区四区| 97久久久| 99热在线只有精品| 9色在线| 狠狠se| 人色五月天婷婷| 五月激情小说| 激情综合网激情五月婷婷| 猫咪伊人久久| 狠狠狠五月婷婷六月丁香| 伊人91| 色五月综合网站| 日日干日日色| 欧洲色色| 七月婷婷色香综合网| 九九热这里只有精品5| 久久人妻伦理| 性色五月天| 曰本aaaaaa丈片| 热这里只有精| 久月婷婷| 成人 九九九九| 婷婷五月天久久久| www.色婷婷.com| 国产毛片精品一区二区色欲黄A片| 久草A片| 丁香五月天网友自拍啪啪啪视频| 五月色婷婷综合| 99re热在线视频观看| 色视五月天婷婷| 五月天精品| 亚洲色色五月天| 婷婷五月天激情AV影院| 欧美槡BBBB槡BBB少妇| 丁香五月激情啪| 丁香婷婷五月天在线视频| 国产成人片| 婷婷精品视频| 91九色丨国产丨爆乳| 九九精品碰| 九九综合久久| 亚洲精品无人区| 日本人妻A片成人免费看片| 久久婷婷五月综合啪| 日本网站久久| 国产色五月| 99噜噜噜在线播放| 欧美激情五月综合| 亚洲第一第二网站| 六月色播| 久久超级碰碰| 99久久.www| www99热| 丁香五月很很肏| 99热九九在线| 五月天开心色色网| WwW天天干| 婷婷五月花| va中文资源在线观看| 日韩视频99| 轮奸综合网| 少妇高潮一区二区三区99欧美| 午夜婷婷久久| 一级二级色大片| 五月天婷婷丁香花| 91丨九色丨白浆| 香蕉伊人综合| 天天爱天天操| 最新av在线观看| 婷婷综合97| 伊人久久五月天| 久99久视频| 九九这里只有精品在线视频| 婷婷丁香六月天| 春色激情| 99精品色色| 亚洲精品久久久无码| 日本婷婷综合精品| www.色五月| 久久66精品| 五月天色色色网| 婷婷五月天在线综合| 日本色超碰| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 涩涩婷婷五月| 色色亚洲| 婷婷综合色图| 啪啪91| 美女婷婷六月色| 99婷五月| 狠狠色成人影片| 在线天堂9| 日本婷婷| 婷婷瑟五月天久久综合| 99热在线播放精品| 99网| 99久免费视频| 婷婷色中文字幕| 亚洲五月天第一综合干| 色五月丁香com| 色五开心五月五月深深爱| 久婷婷色| 亚洲超碰在线| 五月婷精品| 国产精品18久久久| 婷婷五月色综合| 五月丁香花激情综合网| 狠狠色色| 99成人无码| 日都一级A片| 五月天四色房丁香亭亭| 色五月首页| 99精品国产在热久久| 99视频在线精品免费观看2| 欧美图片丁香五月天| 久久曰曰| 天天射色五月天| 中文字幕97超级碰| 精品国产乱码久久久久夜深人妻| 日日狠狠久久偷偷四色综合免费 | se色婷婷视频| 天天澡天天狠天天天做| 99色精品视频| 午夜AV网| 婷婷五月激情图片| 青草热视频这里只有精品| 久久综合网桃花| 五月天婷婷色色| 丁香月六月| a色色色色色| 一级片无码| 婷婷五月天六月丁香| 六月激情婷婷色| 超级碰碰碰久久网站| 91成人性爱视频| 天天舔日日肏夜夜爽| 丁香五月天黄色片| 丁香性爱在线视频| 九九色影视| 99久久精品网| 欧美va视频| 五月停亭久久电影| 开心深爱激情网| 免费视频99| 丁香五月婷婷动漫视频| 亚洲成人在线综合| 国产看真人毛片爱做A片| 伊人激情综合网| 欧美综合激情五月| 精品成人久久久久久久_一二三四视| 久久婷婷五月天丁香| 色五月色五天色情网| 精品五月天| 色五月丁香五月五月婷婷| 干一干xxxx| 琪琪色五月婷婷老师| 亚洲热视频在线| 五月丁香六月综合激情无码软件亮点 | 婷婷色导航| 麻豆精品| 牛牛热这里只有jingpin| 五月婷婷影| 六月丁香五月天| 丁香五月亭亭六月综合激情网| 婷婷五月色图| 色五月色综合| www.夜夜| 人人妻人人澡| 色综合伊人网| 欧美婷婷五月天综合| 色色色色色色色综合| 久热91精品| 欧美亚洲成人在线| 婷婷五月色播天| 国产99久久久国产精品免费看 | 99热老网站| 日日操夜夜操无码免费| 久操乱| 最新高清无码专区| 色五月婷婷影院| 久久久久久9| 五月婷婷亚洲| 26UUU欧美| 99热这里只有精品一| 99久热这里有精品| 激情综合五月丁香| 丁香激情久久| 一级二级色大片| 婷婷六月色| 六月激情婷婷| 91狠狠综合久久| 久月婷婷| 五月丁香亭亭操逼| 9热在线观看| 色五月在线观看| 洗浴中心操B视频| 影音先锋人妻出差| 能直接看的AV网站| 久久人妻情侣| 九九久久综合网站| 第六色在线| 另类丁香五月天区图| 99精品色色| 婷婷国产日本欧美| 欧美成人无码一区二区三区| 99热99日…..| 综合五月草| a网站免费观看| 91操人视频| 亚洲综合在线网站| Www99热| 久久33视频| 婷婷五月天丁香成人社区| 熟女强人妻一区二区三区四区无| 天天色中文字幕女优AV| 五月婷三级片| 91VIP在线观看| 欧美超碰亚洲| 98永久精品| 日韩精品一区二区亚洲AV观看| 4399亚洲视频| 伊人干综合| 大香蕉五月丁香| 天天舔天天摸天天透| 99热这里都是精品| 色在线99| 超碰色色综合| 天天色视频| 五月丁香啪| 久久99最新地址| 亚洲成人网址在线观看| www.激情com| 99日精品视频| 99五月丁香丁| 婷婷五月俺要去| 久久免费视频62| 99A片| 久久久久久久97| 丁香五月欧美| 丁香五月婷婷啪啪视频| 久久九九99.www| 色欲色天天香综合| 亚洲 综合中文| 色综合综合色| 天天干天天干天天操| 色婷婷狠狠18禁| 五月丁香影视| 伊人激情网| 26uuu成人网| 丁香九九九九| 日本久久视频| VA日本视频| 五月天激情AV| 99婷婷国产最新视频| 无码人妻少妇色欲AV一区二区| 色色色九九九五月婷婷| 欧洲亚洲午夜| 99婷婷五月天| 六月丁香激情网| 五月婷婷激情性爱| 免费无码毛片一区二区A片| 亚洲成人av在线观看| 色婷婷99| 五月丁香久久久| 91干在线| 欧美电影在线观看| www.色九月| 成人精品一区二区三区四区五区 | 91chinese在线| 亚洲 成人 电影av在线观看| 99热这里都是精品| 天天日夜夜操五月| 色色国产| 欧美顶级少妇做爰HD| 99视频在线播放大全| 五月婷婷六月激情在线| 热久久这里只有精品| 4399成人黄A片| 日本毛片内射| 激情文学天天| 日熟女| 日日影院 | 婷婷五月电影院| 欧洲综合色| 色色色色热| 9色操| 天天草天天舔| av在线中文| 一区二区成人电影免费播放| 热久久91| 久久A区B区| 五月天婷婷基地| 五月丁香在线观看99| 男女久久婷婷五月天| 久操人妻| 2022人人操人人看| 亚洲五月天天| 91久久1118| 丁香婷婷成年| 欧美噜噜噜草| 看全色黄大色大片| 久久大大香| 久久五月天合网| 99热最新精品| 国产婷婷久久| 青青草深爱激情网| 天天狠狠夜夜狠狠2023| 日本人人草草| 综合五月激情网| 强壮的公次次弄得我高潮A片日本 | 天天se在线视频| 大陆肏屄视频| 色色婷| 婷婷综合网| 5月婷婷6月六月丁香| 99网址在线观看| 五月开心婷婷网| 国产午夜精品一区二区| 婷婷天堂综合网| 大香蕉 婷婷| 激情涩涩网| 日韩啪| 婷婷的色色五月天| 天天干天天操天天爱| 成人国产欧美大片一区| 国产精品美女久久久久AV超清| www.99在线| 国产熟女大叫受不了| 啄木鸟丝袜美女福利视频| 大香伊人久色| 欧美日韓成人亚洲精品另类| 激情婷婷六月天| 热九九精品| 极品另类| 夜色综合网| 六月丁香VA| 欧美色偷偷大香| 成人九九视频| 五月天操逼激情| 婷婷四色五月| 亚洲色五月| 亚洲网站在线鸭子av| 色婷视频| 六月丁香婷| 97在线综合| 久久久久久久97| 精品激情| 久9久9久9久9久9久9| 人人综合久| 婷婷五月天黄色网址| 久久精品99久久久久久| 久久九九激情五月天| 日韩av网址大全| 99惹 精品在线| 色综合综合网| 99热色综合| 婷婷五月天偷拍| 国产人人操| 俺去也婷婷| 黄久久久| 乱码操操| 九九久久五月天综合伊人| 99er这里只有精品| 99无码超碰| 97碰在线视频| 色色婷婷丁香| 玖玖色资源站| 激情五月成年| 婷婷五月激情片| 9久久狠狠的| 亚洲激情免费视频| 日日操夜夜操中国无码| 五月丁香色综合| 日逼影音先锋AV男人资源站| 综合图片色色| 猫咪伊人久久| 九九色婷婷| 久久婷婷五月综合| 五月天天综合| 开心婷婷丁香五月| 激情四射婷婷色色色| 色婷婷狠狠爱| 影音先锋xfplay资源男人网| 亚洲精品V天堂中文字幕| 国产阿姨日皮艹逼内射视频| 中文字幕乱码亚洲精品一区| 色婷婷五月天小说| 五月丁香最新| 91久久婷婷| 狠狠干五月天婷婷网| 白人荫道BBWBBB大荫道| 婷婷精品综合| 伊人网啪啪| 九九人人操| 日日舔夜夜操| 丁香五月婷婷大香蕉| 思思久久99| 五六月丁香激情视频| 天天se在线视频| 97色干| 亚洲一区二区无码蜜乳av| 丁香五月天婷婷91| 久久久久激情| 亚洲网站在线鸭子av| 好叼操在线观看| 99热天堂| 色播丁香五月婷婷操:屄| 婷婷日本色| 大香蕉五月丁香| 九九久久综合网站| 91re色综合视频| 国产 亚洲 在线| 成年人99热| 久久在线大香蕉| 99国产精品久久久久久久久久久| 色亭亭五月天丁香综合AV - 百度 - 百度| 97视频91| 伊人激情综合| 五月丁香色综合|