99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

UFS 3.1協(xié)議深度解析:從分層架構(gòu)到WriteBooster與HPB實(shí)戰(zhàn)

UFS 3.1協(xié)議深度解析:從分層架構(gòu)到WriteBooster與HPB實(shí)戰(zhàn) 1. 項(xiàng)目概述與核心需求解析1.1 為什么要寫UFS 3.1協(xié)議分析UFSUniversal Flash Storage通用閃存存儲在移動設(shè)備和嵌入式系統(tǒng)里已經(jīng)全面普及這幾年從UFS 2.1到UFS 3.0再到UFS 3.1中間還穿插著UFS 2.2這種過渡版本整個演進(jìn)節(jié)奏非常快。我最初接觸UFS 3.1協(xié)議分析的時候手頭正好在做一款旗艦級移動平臺的存儲子系統(tǒng)適配芯片端的主控和UFS 3.1的Flash顆粒之間頻繁出現(xiàn)鏈路協(xié)商異常、命令超時和吞吐量不達(dá)標(biāo)的問題。那時候才發(fā)現(xiàn)光會調(diào)驅(qū)動、看日志遠(yuǎn)遠(yuǎn)不夠必須真正理解協(xié)議層的機(jī)制尤其是UFS 3.1相比老版本引入了哪些新特性、這些新特性又依賴哪些協(xié)議字段和交互流程才能真正定位問題。這篇博文我想做的事是把UFS 3.1協(xié)議分析中最基礎(chǔ)也最關(guān)鍵的框架性內(nèi)容整理出來。它不是一個完整的JEDEC規(guī)范翻譯也不是針對某個廠商主控的調(diào)試手冊而是從協(xié)議分層的視角把UFS 3.1是什么、為什么需要它、它如何工作、調(diào)試時需要盯住哪些點(diǎn)講清楚。適合的讀者包括剛進(jìn)入存儲行業(yè)的嵌入式軟件工程師、做移動平臺BSP底層的同學(xué)、以及需要跟Flash廠商和主控廠商打交道但協(xié)議底子不厚的系統(tǒng)工程師。在展開細(xì)節(jié)之前先用一句話概括UFS 3.1的本質(zhì)UFS是一套完整的“主機(jī)端控制器 協(xié)議命令集 物理鏈路”三位一體的閃存存儲方案3.1版本則是在3.0高速傳輸能力之上補(bǔ)齊了一組面向隨機(jī)讀寫性能、低功耗、大容量場景的增強(qiáng)特性。整個協(xié)議??梢圆鸪扇龑觼砜磻?yīng)用層UFS Command Set、傳輸層UTPUFS Transport Protocol、互連層UICUFS Interconnect每一層都有自己的職責(zé)也是排查問題時的分層邊界。1.2 項(xiàng)目拆分與章節(jié)規(guī)劃我計(jì)劃把UFS 3.1協(xié)議分析分成四個章節(jié)來處理這次先聚焦第一章到第四章的整體脈絡(luò)第一章UFS概述與系統(tǒng)架構(gòu)。搞清楚UFS在系統(tǒng)里的位置、主機(jī)側(cè)和設(shè)備側(cè)的組成、協(xié)議分層模型。第二章傳輸層與命令機(jī)制。深入UPIUUFS Protocol Information Unit、命令描述符、數(shù)據(jù)傳輸流程。第三章物理層與鏈路管理。包括UniPro、M-PHY、鏈路啟動、速率協(xié)商和功耗狀態(tài)切換。第四章UFS 3.1新特性與工程實(shí)踐。分析WriteBooster、HPB、DeepSleep等增強(qiáng)功能在真實(shí)項(xiàng)目里怎么用、怎么調(diào)。這種拆法不是為了按部就班而是遵循實(shí)際工作中的排查路徑先看清系統(tǒng)全貌再定位命令通路接著查鏈路物理層最后回到特性和性能優(yōu)化。很多剛?cè)胄械耐孪矚g一上來就翻UPIU結(jié)構(gòu)體定義結(jié)果被字段淹沒遇到實(shí)際問題仍然無從下手。我比較推薦的服務(wù)順序是架構(gòu) → 命令 → 鏈路 → 特性一步步把黑盒打開。2. UFS 3.1的整體設(shè)計(jì)思路與演進(jìn)邏輯2.1 從eMMC到UFS存儲接口到底變了什么要說清楚UFS 3.1的價值得先回頭看一眼eMMC。eMMC本質(zhì)上是個并行總線接口8位數(shù)據(jù)線半雙工模式讀寫不能同時進(jìn)行。它的命令機(jī)制簡單直接——主機(jī)發(fā)命令設(shè)備執(zhí)行然后通過數(shù)據(jù)總線傳輸。但這種設(shè)計(jì)在高性能場景下很快撞到天花板并行總線頻率提升困難、信號完整性問題隨頻率上升越來越嚴(yán)重、半雙工浪費(fèi)了總線帶寬。UFS方案從誕生那天起就走了一條完全不同的路。它引入了一套類似SATA/NVMe的串行傳輸架構(gòu)底層用M-PHY做物理傳輸U(kuò)niPro做鏈路管理和協(xié)議適配。兩個lane可以同時一個收一個發(fā)全雙工模式等效傳輸效率遠(yuǎn)高于同頻的eMMC。在協(xié)議模型上UFS還參考了SCSI體系結(jié)構(gòu)模型使用命令描述塊CDB 任務(wù)管理函數(shù)的模式這讓它天然支持命令隊(duì)列、亂序執(zhí)行、多任務(wù)調(diào)度。從UFS 2.1到UFS 3.0最大的變化是HS-G4High Speed Gear 4速率的引入。M-PHY在HS-G4速率下每個lane的線速率接近11.6Gbps配合雙lane配置理論上可以達(dá)到單lane約1450MB/s、雙lane約2900MB/s的HS速率這是在考慮了8b/10b編碼開銷后的結(jié)果實(shí)際有效載荷帶寬還需要進(jìn)一步乘以協(xié)議開銷系數(shù)。這個速率等級遠(yuǎn)比UFS 2.1的HS-G3每個lane約5.8Gbps有效帶寬大約725MB/s翻了好幾倍。UFS 3.1又在這個基礎(chǔ)上做了三件大事新增WriteBooster解決寫入性能偏低的問題。它利用SLC Cache機(jī)制把隨機(jī)寫入先吸收到SLC緩沖區(qū)再后臺回寫TLC/QLC區(qū)域大幅降低前端寫延遲。引入HPBHost Performance Booster把部分FTL映射表放到主機(jī)內(nèi)存中緩存減少設(shè)備端加載映射表的開銷提升隨機(jī)讀性能。強(qiáng)化低功耗管理DeepSleep狀態(tài)讓設(shè)備在待機(jī)時可以關(guān)閉大部分模塊供電顯著降低休眠功耗。這些特性不是孤立存在的它們都依賴協(xié)議層的字段和控制機(jī)制來生效。比如WriteBooster需要擴(kuò)展UFS Descriptor中的配置項(xiàng)HPB需要專門的控制命令和UPIU類型來管理主機(jī)端映射緩存。2.2 UFS 3.1系統(tǒng)架構(gòu)與協(xié)議分層模型一個典型的UFS系統(tǒng)由主機(jī)Host和設(shè)備Device兩部分構(gòu)成。主機(jī)端包括應(yīng)用處理器上的UFS Host Controller存儲控制器IP以及配套的軟件?!狶inux內(nèi)核的ufshcd驅(qū)動、SCSI層、塊設(shè)備層。設(shè)備端則是一顆UFS IC通常整合了控制器和NAND Flash或者由獨(dú)立的控制器芯片加上多片NAND組成。從協(xié)議分層來看應(yīng)用層Application Layer定義了UFS命令集UCS、設(shè)備管理器Device Manager和任務(wù)管理器Task Manager。SCSI命令通過UFS封裝成CDB下發(fā)設(shè)備管理器負(fù)責(zé)處理描述符Descriptor、屬性Attribute、標(biāo)志位Flag的讀寫任務(wù)管理器則處理任務(wù)管理請求比如Abort Task。傳輸層UTP負(fù)責(zé)把上層請求封裝成UPIU通過UNIPRO的傳輸服務(wù)訪問點(diǎn)Data Transport Service Access PointDTSAP傳給下面。UTRDUTP Transfer Request Descriptor是核心數(shù)據(jù)結(jié)構(gòu)保存了命令相關(guān)的所有指針和狀態(tài)。互連層UIC由UniPro層和M-PHY物理層組成。UniPro負(fù)責(zé)鏈路啟動、速率協(xié)商、流控和錯誤恢復(fù)M-PHY則負(fù)責(zé)真正的物理信號收發(fā)。調(diào)試時建議用這個分層模型來隔離問題如果命令發(fā)出后沒有任何中斷回應(yīng)優(yōu)先查傳輸層和設(shè)備狀態(tài)如果命令正常但吞吐量低再到UIC層看速率協(xié)商和Lane數(shù)量如果掉電重啟后鏈路穩(wěn)定但系統(tǒng)喚醒時報錯重點(diǎn)查DeepSleep和鏈路恢復(fù)流程。3. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)3.1 UTRD和UPIU讀懂協(xié)議的兩把鑰匙整個UFS傳輸機(jī)制的核心可以濃縮成一句話主機(jī)在內(nèi)存中構(gòu)造UTRDUTRD指向一組UPIU緩沖區(qū)和PRDTPhysical Region Descriptor Table寫Doorbell寄存器通知設(shè)備設(shè)備執(zhí)行完再通過CQCompletion QueueDoorbell和中斷通知主機(jī)。這段話里包含了大量信息逐個拆開看。UTRD的數(shù)據(jù)結(jié)構(gòu)大致包括命令類型命令UPIU、任務(wù)管理請求UPIU等。數(shù)據(jù)方向讀還是寫。一個指向命令UPIU緩沖區(qū)的地址。一個指向響應(yīng)UPIU緩沖區(qū)的地址。PRDT的物理地址和條目數(shù)。總數(shù)據(jù)傳輸字節(jié)數(shù)。PRDT是DMA傳輸?shù)年P(guān)鍵。UFS采用S/G表機(jī)制主機(jī)側(cè)物理內(nèi)存未必連續(xù)系統(tǒng)可以把一次大塊讀寫拆成多個不連續(xù)的物理段每個PRD條目記錄一段物理地址和長度。設(shè)備根據(jù)PRDT拿到數(shù)據(jù)完成寫入或讀取。這里的經(jīng)典坑在于PRDT條目的地址必須是物理地址而且對齊要求很嚴(yán)格通常要求對齊到32字節(jié)或64字節(jié)具體以主控手冊為準(zhǔn)長度字段則是按塊粒度對齊。如果上層傳下來的S/G表項(xiàng)不是塊大小的整數(shù)倍底層驅(qū)動需要處理尾部部分塊這是很多寫DMA路徑的工程師容易漏掉的細(xì)節(jié)。UPIU是UFS傳輸?shù)淖钚 靶欧狻背R婎愋桶∟OP OUT UPIU用于鏈路?;詈统瑫r檢測。COMMAND UPIU承載SCSI命令CDB是正常讀寫命令的載體。RESPONSE UPIU設(shè)備返回的命令執(zhí)行結(jié)果攜帶狀態(tài)、Sense Data長度等信息。DATA IN UPIU / DATA OUT UPIU數(shù)據(jù)階段傳輸分別對應(yīng)讀和寫。TASK MANAGEMENT REQUEST UPIU承載任務(wù)管理請求。QUERY REQUEST UPIU / QUERY RESPONSE UPIU用于設(shè)備管理讀寫Descriptor、Attribute、Flag。每個UPIU都有固定的頭部結(jié)構(gòu)其中LUN邏輯單元號、Task Tag任務(wù)標(biāo)簽、Expected Data Transfer Length期望傳輸長度都是高頻使用字段。排查命令掛起問題時要養(yǎng)成先看Task Tag的習(xí)慣它能把UFS設(shè)備內(nèi)部的任務(wù)和主機(jī)側(cè)提交的任務(wù)一一對應(yīng)起來。3.2 數(shù)據(jù)傳輸流程一次讀命令的完整旅程以一次從UFS設(shè)備讀取4KB數(shù)據(jù)的命令為例完整流程如下上層文件系統(tǒng)或塊層構(gòu)造一個讀請求SCSI層生成READ(10)命令CDB。ufshcd驅(qū)動分配一個UTRD初始化命令UPIU、響應(yīng)UPIU緩沖區(qū)并把本次讀的PRDT填好。驅(qū)動把UTRD的物理地址寫入主機(jī)控制器的UTRLDBRUTP Transfer Request List Doorbell Register置位相應(yīng)bit。設(shè)備端看到Doorbell置位后通過UniPro鏈路讀取UTRD和命令UPIU。設(shè)備解析CDB訪問Flash把讀取到的數(shù)據(jù)組裝成DATA IN UPIU按總長度拆分成多幀傳輸。設(shè)備通過Host Controller的UTRLCLRUTP Transfer Request List Clear Register寄存器清掉Doorbell對應(yīng)bit并產(chǎn)生中斷。主機(jī)在中斷處理中檢查響應(yīng)UPIU的狀態(tài)字段數(shù)據(jù)已經(jīng)由Controller通過DMA直接寫入主機(jī)內(nèi)存。這個流程里面藏著幾個關(guān)鍵點(diǎn)。第一數(shù)據(jù)搬運(yùn)不完全依賴設(shè)備端“發(fā)數(shù)據(jù)包”主機(jī)控制器的DMA引擎會根據(jù)PRDT把從UniPro接收到的數(shù)據(jù)直接搬運(yùn)到系統(tǒng)內(nèi)存。第二UTRLDBR和UTRLCLR的配合是命令生命周期的主線任何一環(huán)卡住都會導(dǎo)致命令超時所以抓日志時這幾個寄存器的歷史值非常有價值。3.3 命令超時的排查思路與現(xiàn)場日志分析在UFS調(diào)試中命令超時是我遇到最多的異常類型。它的表現(xiàn)通常是上層I/O卡住系統(tǒng)日志里出現(xiàn)xxx命令請求超時如Device failed to respond或者任務(wù)管理函數(shù)失敗。排查步驟建議這樣第一步確認(rèn)命令是否真正提交到了設(shè)備側(cè)。抓取UTRLDBR寄存器狀態(tài)如果Doorbell bit一直沒有被清掉說明設(shè)備根本沒從主機(jī)取走任務(wù)。這時問題大多在UIC鏈路或者設(shè)備側(cè)電源狀態(tài)而不是命令本身。第二步查看UIC層的錯誤寄存器比如UniPro的錯誤狀態(tài)寄存器UECPA、UECDL等看是否有物理層調(diào)通、幀重傳、CRC錯誤等記錄。如果有大量CRC錯誤基本可以判定M-PHY信號質(zhì)量出問題需要檢查PCB走線、終端電阻、參考時鐘。第三步確認(rèn)設(shè)備是否處于低功耗狀態(tài)導(dǎo)致沒有及時響應(yīng)。UFS支持多種電源狀態(tài)Active、Idle、Sleep、DeepSleep如果設(shè)備進(jìn)了DeepSleep而主機(jī)側(cè)軟件沒有做喚醒動作命令下發(fā)必然超時。我在實(shí)際項(xiàng)目里碰到過一個很典型的案例系統(tǒng)頻繁休眠喚醒后偶爾出現(xiàn)UFS命令超時。排查下來發(fā)現(xiàn)喚醒路徑中主機(jī)控制器先恢復(fù)了Link但設(shè)備還在DeepSleep狀態(tài)需要額外的設(shè)備喚醒機(jī)制。后來在喚醒處理里增加了對設(shè)備喚醒狀態(tài)的檢查并在鏈路恢復(fù)前先通過DME命令把設(shè)備從DeepSleep拉回Active狀態(tài)問題就再沒復(fù)現(xiàn)過。4. UFS 3.1新特性解析與工程實(shí)踐4.1 WriteBooster的機(jī)制、配置與應(yīng)用場景WriteBooster是UFS 3.1引入的一項(xiàng)提升寫入性能的機(jī)制它的本質(zhì)是在設(shè)備內(nèi)部劃分出一塊SLC單層單元模式的緩沖區(qū)。普通TLC/QLC顆粒寫入時需要分多步編程延遲高而SLC編程只需要一到兩次延遲低得多。WriteBooster把寫入的數(shù)據(jù)先快速寫到SLC緩沖區(qū)然后由設(shè)備在后臺把數(shù)據(jù)搬移到TLC/QLC區(qū)域從而降低主機(jī)側(cè)感知的寫延遲。在Linux內(nèi)核中通過UFS設(shè)備管理器提供的bWB相關(guān)Descriptor和Attribute來配置WriteBooster關(guān)鍵參數(shù)包括bWriteBoosterBufferType緩沖區(qū)類型一般配置為SLC模式。dWriteBoosterBufferSize緩沖區(qū)大小這個值直接由設(shè)備固件決定主機(jī)只能讀取。dWriteBoosterBufferLifeTimeEstSLC緩沖區(qū)的壽命估算可以直觀了解設(shè)備的擦寫壓力。工程上需要特別注意WriteBooster的緩沖區(qū)本質(zhì)上是借用NAND壽命換性能。如果SLC緩沖區(qū)寫滿設(shè)備需要做“強(qiáng)制回寫”Forced Flush這時突發(fā)寫入會被拖慢同時在回寫過程中不能斷電否則存在數(shù)據(jù)一致性風(fēng)險。實(shí)際測試中我會用fio先做小文件隨機(jī)寫壓測觀察前幾十GB的寫入延遲是否明顯低于穩(wěn)定期再對比穩(wěn)定期寫入速度以此判斷WriteBooster是否存在配置問題。4.2 HPB的映射緩存機(jī)制與調(diào)優(yōu)心得HPB的全稱是Host Performance Booster它的出現(xiàn)是因?yàn)閁FS設(shè)備使用NAND時需要一個FTLFlash Translation Layer映射表把邏輯地址轉(zhuǎn)換成物理地址。在TLC/QLC時代映射表本身不小如果設(shè)備端每次讀命令都要查一遍映射隨機(jī)讀性能會受影響。HPB的思路是把映射表的一部分“借”到主機(jī)內(nèi)存中緩存設(shè)備通過UPIU向主機(jī)提供映射表信息主機(jī)下發(fā)讀命令時可以把對應(yīng)的映射條目一起發(fā)給設(shè)備省掉設(shè)備端查表的過程。HPB在Linux內(nèi)核的實(shí)現(xiàn)比較復(fù)雜涉及ioctl接口、hpb相關(guān)sysfs節(jié)點(diǎn)、以及UFS驅(qū)動新增的映射管理邏輯。調(diào)HPB時我踩過幾個坑主機(jī)內(nèi)存中緩存的映射表必須與設(shè)備FTL保持同步否則會產(chǎn)生讀數(shù)據(jù)錯誤。因此設(shè)備端GC垃圾回收導(dǎo)致映射變化時需要向主機(jī)發(fā)送失效通知。HPB區(qū)域不是所有LBA范圍都使能的通常只對設(shè)備指定的一段區(qū)域生效。測試時如果沒有先在設(shè)備上使能HPB區(qū)域后續(xù)所有HPB相關(guān)參數(shù)都不會生效。啟用HPB后隨機(jī)讀性能的提升不是無條件的。在映射表穩(wěn)定、碎片化程度較低的場景下提升幅度能到30%以上但如果設(shè)備本身映射表經(jīng)常更新HPB反而可能因?yàn)榫彺媸幚矶黾娱_銷。4.3 DeepSleep功耗狀態(tài)與喚醒流程UFS 3.1的電源管理狀態(tài)包括Active、Idle、Sleep、DeepSleep。DeepSleep是功耗最極端的模式幾乎關(guān)閉了設(shè)備內(nèi)部除少量喚醒邏輯外的所有供電代價是從DeepSleep恢復(fù)到Active耗時較長耗時可能在幾十毫秒甚至百毫秒級別。系統(tǒng)設(shè)計(jì)時要權(quán)衡短時暫停用Sleep即可長時待機(jī)才應(yīng)該進(jìn)入DeepSleep。在移動平臺上我一般建議這樣配置系統(tǒng)suspend時先把UFS鏈路切到Sleep狀態(tài)。如果預(yù)計(jì)待機(jī)時間較長如超過數(shù)分鐘再通過設(shè)備管理命令把設(shè)備切到DeepSleep。喚醒時主機(jī)控制器先復(fù)位Link然后通過DME命令讓設(shè)備退出DeepSleep再重新啟動鏈路和對齊流程。這個流程里最容易出問題的就是“鏈路先于設(shè)備恢復(fù)”。設(shè)備還處于DeepSleep時如果主機(jī)嘗試通過Link發(fā)送命令會出現(xiàn)dme_error或者命令超時。因此軟件恢復(fù)流程必須嚴(yán)格遵循“設(shè)備先恢復(fù)鏈路后啟用”的順序。5. 常見問題排查技巧與避坑指南5.1 經(jīng)典問題速查表現(xiàn)象可能原因排查方法UFS設(shè)備無法識別供電時序不對、頻率配置錯誤檢查電源軌、參考時鐘抓Link啟動階段的DME錯誤命令超時設(shè)備低功耗未喚醒、鏈路物理異常抓取UTRLDBR狀態(tài)和UIC錯誤寄存器順序讀吞吐量低速率協(xié)商失敗只跑到HS-G1或HS-G2檢查UniPro配置、發(fā)送預(yù)加重/均衡參數(shù)隨機(jī)讀性能差HPB未正確啟用或映射失效頻繁檢查HPB region配置和hit ratio寫入速度突然下跌WriteBooster SLC緩沖區(qū)寫滿觀察Force Flush事件測試穩(wěn)定期寫入性能運(yùn)行一段時間后I/O出錯高溫導(dǎo)致信號完整性劣化排查供電、散熱、M-PHY通道串?dāng)_5.2 抓日志與現(xiàn)場復(fù)現(xiàn)的獨(dú)家技巧在UFS調(diào)試中最有效也最容易被忽視的動作是抓完整的歷史寄存器狀態(tài)。很多工程師遇到超時后直接重啟設(shè)備結(jié)果關(guān)鍵現(xiàn)場丟失。推薦做法是在代碼里保留UFS相關(guān)所有寄存器的環(huán)形緩沖結(jié)構(gòu)包括UTRLDBR、UTRLCLR、UTRSTATUS、UIC錯誤寄存器中斷處理函數(shù)里實(shí)時更新。在命令超時后不立即復(fù)位而是先暫停指令流把環(huán)形緩沖區(qū)的寄存器歷史值打印出來和抓取的波形數(shù)據(jù)對比。這套方法幫我在多個項(xiàng)目里快速鎖定過“中斷丟失導(dǎo)致命令卡死”的問題。中斷丟失的根因往往是設(shè)備發(fā)出的完成中斷與主控側(cè)的中斷mask寄存器配置不匹配或者中斷線在系統(tǒng)suspend/resume過程中被意外shutdown。如果把中斷狀態(tài)寄存器一并打進(jìn)環(huán)形緩沖這類問題的定位時間可以從半天縮短到半小時以內(nèi)。5.3 鏈路質(zhì)量與信號完整性檢測M-PHY是UFS 3.1高性能傳輸?shù)牡鼗:芏嗤掏铝坎贿_(dá)標(biāo)的問題根源不在協(xié)議層而在物理層信號質(zhì)量。判斷信號質(zhì)量可以看三個關(guān)鍵指標(biāo)眼圖、誤碼率、信號完整性抖動。工程環(huán)境下沒有高端示波器時至少可以做兩件事一是檢查UFS控制器上報的CRC錯誤計(jì)數(shù)二是用設(shè)備端回環(huán)測試Loopback驗(yàn)證物理鏈路?;丨h(huán)測試可以分別測PHY到PHY的傳輸以及Controller到Controller的完整通路從而把問題域縮小到固定層面。如果CRC錯誤持續(xù)增長優(yōu)先懷疑終端電阻不匹配或者走線阻抗連續(xù)性不佳而不是懷疑協(xié)議軟件邏輯。6. UFS 3.1協(xié)議分析工具鏈與測試方法6.1 Linux用戶態(tài)工具與協(xié)議跟蹤Linux平臺做UFS測試有幾個常用的用戶態(tài)工具我逐一說明適用場景ufs-utils提供針對UFS設(shè)備管理器的用戶態(tài)工具可以讀取/寫入Descriptor、Attribute、Flag。通過它可以直接觀察WriteBooster的緩沖區(qū)大小、HPB狀態(tài)、設(shè)備壽命信息比直接改內(nèi)核代碼方便很多。fio性能基準(zhǔn)測試的標(biāo)準(zhǔn)工事。UFS測試建議分別測順序讀寫、隨機(jī)讀寫同時加入混合讀寫模式和不同的隊(duì)列深度用隊(duì)列深度1、4、16、32分別觀察性能曲線。blktraceiostat定位請求在塊層的排隊(duì)情況。如果塊層排隊(duì)時間過長說明SCSI層或者UFS驅(qū)動有瓶頸如果排隊(duì)很短但請求始終不完成問題可能在設(shè)備側(cè)。/sys/kernel/debug/ufshcd內(nèi)核UFS驅(qū)動的debugfs節(jié)點(diǎn)。不同平臺暴露的內(nèi)容不一樣但通常包含命令歷史、錯誤狀態(tài)、鏈路速率等關(guān)鍵字段。6.2 性能測試的具體操作流程以fio為例一組有意義的UFS 3.1性能測試步驟是先執(zhí)行blkzone reset或者全盤TRIM確保測試前設(shè)備處于干凈狀態(tài)。用順序讀測試拿上限基準(zhǔn)fio --nameseqread --rwread --bs1m --size2g --iodepth32 --numjobs1 --direct1 --group_reporting。用順序?qū)憸y試觀察WriteBooster生效前后的差異fio --nameseqwrite --rwwrite --bs1m --size2g --iodepth32 --direct1。用隨機(jī)讀寫模擬真實(shí)業(yè)務(wù)fio --namerandrw --rwrandrw --rwmixread70 --bs4k --size2g --iodepth32 --direct1。每次測試前都記錄設(shè)備溫度和dWriteBoosterBufferLifeTimeEst因?yàn)镹AND在高溫下會觸發(fā)溫控降速不記錄溫度容易把溫控降速誤判為協(xié)議問題。這個細(xì)節(jié)我在多次評測中吃過虧室溫從26℃升到42℃后同一塊盤的順序?qū)懶阅艿袈淞藢⒔?0%不明真相時很容易導(dǎo)向錯誤的排查方向。6.3 如何用邏輯分析儀觀測協(xié)議交互如果需要深入觀測UFS協(xié)議交互邏輯分析儀依然是利器。UFS 3.1的HS-G4速率在11.6Gbps等級普通邏輯分析儀完全無法直接采集需要配合廠商的協(xié)議分析儀或者使用M-PHY探針轉(zhuǎn)接板。在分析時重點(diǎn)抓幾個節(jié)點(diǎn)Link啟動階段的M-PHY速率協(xié)商序列。命令下發(fā)階段的UPIU頭字段對比Command UPIU的CDB內(nèi)容。數(shù)據(jù)傳輸階段的DATA OUT UPIU和DATA IN UPIU幀間隔。每次命令完成后的RESPONSE UPIU的Sense Data。協(xié)議分析儀的優(yōu)勢是可以把物理波形自動解碼成協(xié)議字段期間還能統(tǒng)計(jì)各Layer的retry計(jì)數(shù)和錯誤統(tǒng)計(jì)。但它的價格和上手門檻都不低日常調(diào)試還是建議先用軟件層日志縮小范圍確需鏈路級證據(jù)時再上分析儀。7. 從協(xié)議理解到系統(tǒng)優(yōu)化的延伸思考7.1 UFS 3.1之后UFS 4.0的傳承與變化說完UFS 3.1不得不提一句它的后繼者UFS 4.0。UFS 4.0在鏈路速率上翻倍到HS-G5單lane速率約23.3Gbps雙lane理論帶寬可以超過7Gbps同時引入了VRSVariable Rate SuperSpeed之類的電源優(yōu)化機(jī)制和更多針對QLC顆粒的優(yōu)化策略。但底層協(xié)議框架依然延續(xù)了UFS 3.x時代建立的模型UTRD UPIU Doorbell的基本交互方式?jīng)]有變UPDATE的底層機(jī)制沒變。所以現(xiàn)在花時間把UFS 3.1協(xié)議吃透并不會白費(fèi)后續(xù)遷移到UFS 4.0時的學(xué)習(xí)曲線會平滑很多。7.2 與NVMe/UFS架構(gòu)思想的異同做存儲的工程師經(jīng)常會拿UFS與NVMe比較。NVMe是PCIe接口基礎(chǔ)上的協(xié)議棧使用Queue Pair機(jī)制命令提交和完成都通過共享內(nèi)存隊(duì)列完成效率極高。UFS的UTRD機(jī)制在思路上與NVMe有相似之處但UFS還保留了更傳統(tǒng)的門鈴寄存器模式和更細(xì)粒度的電源狀態(tài)管理這是由移動設(shè)備的低功耗需求決定的。在實(shí)際項(xiàng)目中理解這兩套體系的異同很有價值如果你的設(shè)備從移動端轉(zhuǎn)向汽車電子或邊緣計(jì)算場景很可能需要從UFS切到NVMe SSD那時你對Doorbell、Queue、DMA映射、Command Completion這些概念的理解都可以平移復(fù)用差異點(diǎn)只在鏈路層和命令格式上。7.3 后續(xù)可以繼續(xù)深入的方向UFS 3.1協(xié)議分析的內(nèi)容遠(yuǎn)不止這一篇文章能講完。后續(xù)可以展開的深水區(qū)包括UFS設(shè)備描述符/屬性/標(biāo)志位的完整字段解讀、SCSI命令集在UFS上的實(shí)現(xiàn)細(xì)節(jié)、UFS電源管理狀態(tài)機(jī)的完整轉(zhuǎn)移條件、UFS主機(jī)控制器的寄存器級編程指南、Flash轉(zhuǎn)換層FTL對UFS行為的影響、隨機(jī)讀性能優(yōu)化中的HPB演進(jìn)思路。我自己打算接下來抽時間寫第二部分重點(diǎn)講UPIU字段級解析和異常事件處理流程。如果你們在實(shí)踐中有有意思的UFS問題歡迎帶著業(yè)務(wù)場景來討論很多協(xié)議細(xì)節(jié)在規(guī)范里寫得非常隱晦只有在具體問題面前才能暴露出來。我在多個項(xiàng)目里反復(fù)體會到一件事UFS 3.1的穩(wěn)定性上限往往不取決于控制器和Flash的紙面參數(shù)而取決于軟件棧對協(xié)議細(xì)節(jié)的尊重程度。一個DPU字段沒配好、一次低功耗喚醒順序顛倒、一個PRDT對齊沒處理都可能在量產(chǎn)后的隨機(jī)場景里集中爆發(fā)。把協(xié)議吃透本質(zhì)上就是為自己的產(chǎn)品上了一道無形的保險。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产97在线日韩亚洲女人被黑人巨大| 亚洲另类在线观看| 六月丁香AV| 丁香六月无码| 91精品无码| 日本综合色色| 久久久精品婷婷五月天| 色碰碰视频| 激情综合自拍五月婷婷色五月| 婷婷亚洲综合| 丁香五月在线自慰| 久久久精品人妻录| 这里只有精品视频222| 午夜天堂一区人妻| 亚洲最大在线| 亚洲aV写真天天综合网久久| 婷婷五月天天天日日夜夜| 亚洲精品V天堂中文字幕| 婷婷五月天论坛| 操逼巨乳91| 99精品网| 五月婷婷色综图片| 99成人| 另类小说五月天综合| 真实熟女-91九色| 亚洲激情综合| 婷婷五月精品中文字幕| 无码网站视频| 亚洲小说欧美激情| 综合亚洲色色| 狠狠第四色| 日韩在线看AV| 丁香六月婷婷综合| 亚洲中文字幕AV| www.俺去也com| 91色五月| 丁香婷婷久久| 日韩性视频| 婷婷爱五月| 国产精品第一国产精品| 久热婷婷| 思思99热| AA片在线观看视频在线播放| 久久曰曰| 九色视频91疯狂| 五月婷婷深深爱| 99高级会所久久| 五月丁香大相交| 97超级碰碰碰| 色色综合院| 中字幕视频在线永久在线观看免费| 日本精品99| 亚洲天堂爱爱| 亚洲成人综合在线| 最新无毒无码AV| 色综合综合综合| 中文AV网| 久久久中文| 五月天婷婷AV| 在线观看av网站| 第四色26uuu| 五月天久久www| 思思热99er在线视频| 大香蕉啪啪啪| 成人天天爽| 亚洲综合网区| www,av好吊操| 亚洲天天| 日日夜夜干| 播五月开心婷婷欧美综合| 国产亚洲成AV人片在线| 日本婷婷激情四射中文字幕在线观看| 操老逼综合网| 思思热99er| 日日干夜夜干| 欧美操综合| 日韩三级视频一区二区| 97久久超级| 亚洲AV电影美洲AV电影| 六月丁香婷婷视频综合在线观看| 五月丁香久久精品在线观看| 99re思思在线视频| 在线观看玖玖资源免费观看| 人人爱摸视频| 99激情视频| 少妇水多A片太爽了| 国产乱妇乱子在线播视频播放网站| 五月丁香色| 99无码视频| 色婷婷丁香| 婷婷五月无码| 97在线观视频免费观看| 久热超碰91| 综合久久久| 99爽视频| 五月天社区狠狠| 日日噜狠狠| 夜夜躁婷婷AV| 亚洲五月天伊人| 丁香五月狠狠综合欧美| 5月丁香啪啪啪| 丁香婷婷视频一区二区| WWW久久久| www色婷婷| 99色在线视频| 天天操天天曰天天射| 小骚穴电影| 伊人狠狠丁香婷婷综合尤物| 色五月婷婷成人视频| 这里只有精品视频在线观看免费| 丁香五月天综合| 激情床戏| 影音先锋91网站在线观看| 伊人热婷婷| 91打屁股视频网站| 丁香五月六月婷婷综合激情| 五月婷婷六月激情| 超级碰碰视频无码| 色综合天天网| 亚洲五月天婷婷| 91丨九色丨熟女|新版| 国产精品成人AV在线观看春天| 超碰AV成人| 香蕉婷婷色五月| 丁香九月婷婷色| 99热99色| 综合另类视频| 五月丁香六月婷婷网站| 精品亚洲国产成AV人片传媒| 1024成人在线观看| 日日夜夜狠狠操| 久久99综合网| 69精品人人人人人人| 日本色婷婷| 天天操天天操天天操| 婷婷五月天免费视频| 精品人妻久久久久久| 午夜九九九九九九| 99热99这里只有精品| 开心激情综合| 91久久免费| 六月丁香婷婷色综合| 激情五月婷婷五月| 亚洲成人AV电影在线| 五月婷精品| 亚洲精品大片| 伊人网色婷婷五月天| 色V狠狠的干| 深爱五月最新网址| 日本大人久久| 久久这里只有欧美| 99热亚州综合| 婷婷狠狠干| www.色色色com| 久久在线视频只有这里有精品| 久久久久9| 婷婷丁香视频| 五月天婷婷免费视频| 丁香五月天AV在线| 五月丁香六月激情综合欧美| ww超碰在线| 狠狠干五码| 五月丁香狠狠爱| 先锋资源91| jiZZdr| 久久久精品婷婷五月天| 五月情色天| 涩涩五月天| 青青夜夜狠狠夜夜狠狠| 婷婷成人视频| 2020久久婷婷五月| 婷婷狠狠综合网入口| 六月丁香婷婷网| 99久在线精品99re8热| 亚洲色综合| 91色色色18| 久久伦乱| 开心激情站| 丁香六月婷婷一区| 久久97久久99久久综合欧美| 久久婷五月综合色| 婷婷色综合中心站| 九九色播五月丁香| 天天 青草 制服丝袜 在线| 婷婷五月天伊人网| 久久99久久99精品免视看婷婷| 专区无日本视频高清8| 成人羞羞啪啪 全 视频| 羞羞嫩草视频| 99riAv1国产在线观看| 国精产品一区二区三区| www久| 亚洲色综合| 99精彩视频| 伊人五月天日日夜夜久久久天天| 欧洲MV日韩MV国产| 亚洲色热| 精品久久99| 五月婷婷影院| 五月天天天色| 婷婷五月丁香五月| 五月综合激情啪啪啪啪啪| 青青草原福利在线| 91精品久久久久久久| 日本色婷婷| 色情激情五月| www.91在线观看| 久热欧美| 色久五月天| 久久性刺激| 4438激情网| 99热99网| 狠狠99| 丁香五月伊人| 婷婷五月天综合在线 | 逼逼AV| 91人人人人人人人| 丁香五月欧美| 深爱五月激情| 天天草天天爱| 色婷婷久久综| 国产操B| 色婷婷六月| 亚洲热手机在线观看| 亚洲黄色网址| 亚洲中文乱字字幕在线永久| 十一月婷婷激情四射| 五月天婷婷综合久久| 久久艹 五月天| 欧美性爱一区| 天天日天天日天天搞| WWW.亚洲无码| 色色色色综合网| 六月丁香成人网| 婷婷五月天AV| 五月婷婷综合社区| 超极99精品| 99综合在线| 日本在线噜噜| 狠狠色五月激情| 狠狠爱婷婷色| 亚洲超碰青涩| 少妇高潮A片无套内谢麻豆传| 五月天久久婷婷| 五月丁香六月婷婷啪啪综合 | 欧美视频在线观看噜噜| 97色色色色| 狠狠色噜噜色狠狠狠综合色| 五月婷婷色欲| CHINESE熟女老女人HD视频| 久久偷拍综合五月天| 天天拍夜夜撸| 超碰精品在线| 97碰碰视频在线观看免费| 婷婷久综合| 二色av| 婷婷五月天激情在线| 亚洲激情图文小说| 天天日天天舔天天摸| 久久亭亭电影| 九色七七| 开心五月婷婷婷美女| 思思热在线观看| 26UUU欧美| 综合激情综合啪啪| 久久久er热| 超碰在线国产9| 亚洲丁香婷婷| 99综合| 亚洲色情激情丁香五月| 这里只有精品99视频| 婷婷久久综| 99九九免费精品| 99久久人妻精品无码二区| 成人片在线播放| 婷婷五月天激情电影小说| 五月丁香综合精品| 激情小说五月天中文字幕| 91一起操| 综合激情在线观看| 丁香五月天堂网AV| 超碰网站在线观看| Www99热| 五月做爱| www色婷婷com| 91久久五月天| 国产亚洲99久久精品| 99热免费精品| 欧美成人va| 色五月综合网| 九九碰九九爱97| 直接看的av| 天天色综网| www.91九色| 色五月天堂| 丁香五月另类色婷婷麻豆| 天堂五月婷婷| 91色情播放| 五月天激情小说婷婷基地| 丁香八月综合激情| 亚洲人人操BD| 婷婷激情综合| 99久久九九| 色婷婷久久综合中文久久一本| 久久综合婷婷| 欧美性色A片免费免费观看的| 日韩免费视频| 丁香婷婷老司机久操| 五月色婷婷夜色| 国产精品久久久久9999小说| 日本97人人| 碰碰碰97免费精彩视频| 四虎成人精品永久免费AV九九| 成人网站在线观看视频| 十月丁香婷婷| 丁香婷婷色五月| 色综合伊人网| 五月天婷婷在线播放| 五月丁香色色网| 免费无码毛片一区二区A片| 激情AV网| 久久精品夜色噜噜亚洲a∨| 欧美综合123区| 丁香亭亭久久| 天天天天色天天天天天干| 久人操| 99在线视频资源| 狠狠色婷婷7777久| 免费视频这里只有精品| 91九色丨国产丨爆乳| 色婷婷丁香五月| 97在线观视频免费观看| 亚洲视频国产一区| www.狠狠狠.com| 婷婷丁香色情五月天| 婷婷五月天社区| 中文字幕在线观看视频www| 天天干天天爽| 色婷婷五月综合在线| 欧美va精品va老师va| 六月丁香婷婷尤物| 色噜噜婷婷| 99久在线精品99re5热视频| 丁香色色网| 久久97久久99久久综合欧美| 久久婷婷91| 婷婷五月天无码视频| 久久色五月天激情小说| 欧美在线干| 七七久久婷婷| 月婷婷亚洲| 91成人性爱视频| 色色五月婷婷| 亚州色综合| 狠狠艹狠狠艹| 婷婷激情视频| 国产av网| 天天综合图片| 五月天社区| 天天影视天天爽天天草| .精品久久久麻豆国产精品| 一起草av在线观看| 蜜乳国产网站| www婷婷| 1囯产午夜仑鲁鲁| 天搞天天天天天| 91精品久久久久久综合五月天| 大香蕉手机视频| 91 久热| 婷婷免费精品视频| 亚洲中文av| 五月婷九月| 丁香五月丐人妻| 停停五月色宗合| 亚洲激情四射色| 婷婷五月天综合网| 五月婷婷六月激情| 丁香五月婷婷久久久| 美女丁香五月天| 超碰在线观看9| 涩丁香91| 五月婷婷视频28| 亚洲精品字幕在线观看| 丁香六月婷婷激情综合| 99精品在线观看视频| 九九艹女| 狠狠色婷婷六月激情网| 尤物一区二区| 欧洲激情五月天| 可以看的av| 99在线视频播放| 婷婷性爱五月天| 九色99视频| 五月丁香六月婷婷综合免| 激情五月丁香五月| 丁香六月婷月91婷月| 91色色色18| 91丨九色熟女丨首页| 婷婷综合日本| 久久思思热| 九月av在线| 婷婷五月丁综合| 欧美色片中文字幕久久久久| 激情五月婷婷综合网| 九九伊人网| 国产激情视频在线观看| 精品久久艹| 色五月婷婷综合| 久久婷婷亚洲五月天| 99噜噜噜在线播放| 亚洲五月婷天天操| 影音先锋五月婷婷| 久久人妻www| 伊人激情网| 九九激情视频| 人人看人人97| 婷婷综合97| 五月丁香六月婷婷成人| 久久亚洲婷婷| 99er精品| 丁香五月欧美婷婷综合| 十月丁香九月婷婷综合| 国产色99| 97人人干| 激情综合色五月六月婷婷| 中国女人做爰A片| 成人久久天天x资源站| 婷婷丁香六月天| 五月激情综合激情五月| 欧美性爱丁香五月| 99激情视频| 色婷婷a| 人人操日| 六月婷婷狠狠| 久在热99| 九九热精品99| 婷婷丁香色五月天久久88| 中文字幕欧美日韩VA免费视频| 亚洲欧洲自拍图片专区五月天| 小香蕉av| 99爱视频| 国产精品久久在线观看技巧| 婷婷六月综合激情| 亚洲人妻av| 久久久婷婷| 久久欧洲综合网| www五月天com| 九九黄色网| 激情综合网激情五月欧美| 色色草97| 99热免| 欧美五月丁香在线观看| 丁香婷婷五月综合| 99碰碰| 五月丁香狠狠地噜噜噜噜| www.99操.com| 婷婷丁香人妻天天爽| 色大综合| 九九色欲网| 国产毛多水多女人A片| 玖玖资源站蜜臀| 97色欧美| 伊人网色婷婷五月天| 婷婷五月综激情| 五月天婷婷自拍图片在线观看| 久久99久久99www| 久久婷婷综合基地| 亚洲色婷婷视频| 中文字幕在线免费观看视频| 天堂呦 呦百度搜索-百度搜索| av在线免费网站| 婷婷伊人综合| 激情五月婷婷五月| www.minyis.com【JT】实力收量可预付QQ2101460746 | 久久精品综合色| 久热无码| 日韩在线9| 亚洲精品性色| 婷婷她六月天| 日91高清无玛| 热久久999| 六月婷婷激情| 综合色色色| 日韩抽插操逼| 色五月天激情| 色婷婷瘦婷婷日韩| 涩丁香| 狠狠综合网| 99热在线观看亚洲区| 九九色中文| 色五月激情综合网站| 大香蕉综合| 九九色色| 99热在线成人网站| 亚洲AAAA网| 欧美97色| 婷婷趴趴| 人人操婷婷| 国产精品18久久久| 色色射| 天天综合色| 99热这里只有在线| 久久婷婷操| 激情综合五月婷| 狠狠色噜噜狠狠亚洲A∨| www99热| 色综合久| 亚洲五月婷| 久久久久人妻网址| 在热视频精品| 九九热视频免费的| 色婷丨日丨天丨综合久久| 久9视频| 激情视频综合| 97人人搞| 26uuu日韩| 亚洲热久久| 人妻尝试久久久久久久久久久久| 婷婷6月综合网| 色婷婷A| 一起草av在线观看| 丁香五月先锋| 91精品国产99久久久久久天美| 色五月婷婷影视| 人人操婷婷| 狠狠色噜噜狠狠狠狠狠色综合久久| 狠狠爱综合| sS丁香五月婷婷| 色婷婷电影| 91色婷婷综合久久中文字幕二区| 成人av中文字幕| 久久婷婷丁香| 亚洲激情AV| 婷婷六月色开| 五月天激情综合首页| 色色操| 九九黄色网| 99热伊人| 免费日韩99| 欧美激情五月天在线观看| 99热热九九| 狠狠va| 色综合久久88色综合天天人守婷| 五月丁香色五月| 久久伊人日日夜夜| 色色综合色| 亚洲精品永久久久久久| 丁香五月影视| 99热自拍| 亚洲精品国产A久久久久久| 亚洲乱码日产精品BD| 久久色大香蕉| 丁香熟女乱| 久久99大全| 超碰色综合| 黄网在线免费观看| 狠狠久久婷五月综合色| 激情九九这里只有精品| 久久99网址| 丁香婷婷六月天| 成人五月天婷婷| 天天做天天干天天综合网| 国产一级婬片毛片| 成人在线99| 午夜丁香| 大香蕉色婷婷伊人在线| 午夜丁香六月婷| 色色色婷| 森林影视大全,最好看的2019年视频 | 色播jjjj| Av九九| 99热精品10| 丁香五月婷婷激情中文| 色婷五月天| 亚洲熟妇AV乱码在线观看| 91九九九九九九| 狠狠色综合网站久久久久| 欧美综合123区| 五月激情婷婷六月丁香| 天天插综合网| 五月天精品视频| 青草视频在线播放| 色哟哟性爱av| 色吧五月婷婷六月丁香| 亚洲操B| www婷婷| 丁香色色五月| 五月婷婷在线短视频| 五月激情综合深爱| 丁香婷婷久久 | 人人摸人人射| 91碰| 人人操婷婷| 超碰人人在线| 婷婷天天日婷婷| 思思热视频在线| www狠狠爱com| 第四色婷婷最爱| 五月丁香六月激情综合| 婷婷操无码| 97久久久| 涩五月婷婷| 国产又爽又猛又粗的视频A片| 超级碰碰碰碰视频| 五月丁香激情六月| 久操热线| 91久久| 五月天激情网开心网| 色婷婷综合网| 色伊人婷婷| 色综合天天天天做夜夜| 色区久久| 另类图片天天影视在线观看| 99欧州偷拍视频| 欧美va亚洲va在线播放| 激情六月天| 成人av在线网址| 日韩操逼小电影| 五月综合视频| 91精品在线看| 91无码高清| 色色草97| 麻豆五月丁香婷婷| 亚洲妇女熟BBW| 色综合激情| 超碰国产在线观看| 激情综合婷婷久久| 激情综合五月色丁香婷婷 | 久久99热这里只有精品| 2050人人操免费工开爱| 色欲日日躁| 99综合| 激情久久久久久| 亚洲综合色网| 综合激情专区| 久热这里只有精品6| 日韩中出视频| 丁香婷婷伊人| 男同91 | 91精品久久久久久77777| 97人人搞| 婷综合| 91免费看片| 国产精品色| 激情丁香五月AV| www.婷婷.com| www.色色com| 这里有精品2| 久久综合9| 精品国产va久久久| 大香伊人婷婷影院| 九九精品热| 五月亭亭色| 综合网亚洲| 性爱激情小说AV五月丁香花| 婷婷性福五月天| 丁香色影院| 久久久精品人妻| 影音先锋天天日| 激情开心五月天| av无码电影| 大香线蕉伊人| 色综合久| JAPANRCEP老熟妇乱子伦视频 | 激情婷婷综合五月少妇| 大香蕉伊然在亚洲90| 99色视频| 色婷婷成人做爰A片免费看网站 | 9精品视频在线| 激情五月婷| 五月天大香蕉| 免费看欧美成人A片无码| 天天成人五月天| 久久综合五月天激情小说网站| 国产片色| 亚洲AV成人无码电影| 狠狠操天天干| www99热| 国产伦亲子伦亲子视频观看 | 大战熟女丰满人妻AV| 六月天无码网址| 99热九九九九| 欧美日韩成人一区二区| 色情性爱视频网址| 97人碰人操| 月婷婷婷婷五月| 婷婷五月综合在线| 超碰9799| 99激情| 深爱婷婷基地| 日本91在线播放| 天天日天天舔| 激情五月激情综合网一级丸片| 97一区二区| 色婷婷丁香五月| 久久久思思热| 青青久久五月天丁香婷婷| 色色五月天婷婷丁香| 狠狠大香婷婷爱| 九久久九精品视频| 婷色五月天| 日韩一66精品| 色色色色区| 欧美一级色| 天天久| 色波激情五月天| 丁香婷婷婷婷十二月在线观看视频| 色99日韩| 五月婷婷六月基地| 五月丁香啪啪啪| 婷婷黄色网| www色五月| 婷婷五月天在线一区| 涩五月婷婷| 啪啪色激情五月天| 五月丁香成人网| 26uuu国产| 五月丁香激情婷婷综合字幕| 激情五月天综合网| 在线视频九色97| 五月婷婷性爱| 色播播婷婷| 五月丁香六月婷婷在线小说视频| 九九热在线99| 超碰天堂网| 亚洲色网络| 激情婷婷五月| 婷婷色五月色妇| 色999;丁香五月| www九月婷婷| 成人综合网站| 久99热| 深爱激情综合网| 色的色综合| 色婷婷狠狠18禁| 超碰伊人碰婷婷五月| 亚洲三A| 婷婷五月天AV| 在线观看av网站| 五月WWW| 成人色站,在线视频,看片-SS1AV| 超碰9| 激情久久月| 婷婷色色亚洲| 噼里啪啦在线观看免费完整版视频| AV色婷婷| www婷婷| 色婷婷久久综合丁香五月| 97色色色视屏| 激情综合网五月在线播放| 久久亚洲天堂| www.婷婷五月天,com| 日韩AV中文在线观看| 色婷婷色99国产综合精品| 91九色|疯狂|高潮|对白|| 野战毛片三一3| 婷婷丁香色情| 人妻操操色| 五月激情综合婷婷| av在线超清中文| 九九热在线观看6| 婷婷综合色| 亚洲综合草草| 影视av久久久噜噜噜噜噜三级| 婷婷五月天午夜激情影院| 婷婷五月成人社区| 丁香五月天大香蕉啪啪| 先锋影音av色五月天资源站| 国产精品VIDEOSSEX久久发布| 婷婷五月天激情小说| 日韩无码成人电影| 91碰视频| 久热九九| 丁香午夜天| 狠狠干无码| 日日天天干| 99热手机在线精品| 99ri在线视频| 色5月婷婷| 五月婷婷六月激情| 亚洲情综合五月天| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 色五月婷婷五月天| 人与禽A片啪啪| 久久99最新地址| 九色在线五月婷婷网址| 婷婷五月天综合亚洲| 五月激情丁香啪啪| 91制片厂久久久国产电影| 激情五月婷婷丁香| 天天干天天拍| 成人AV免费观看| 久久久激情| 丁香五月性| 午夜不卡久久精品无码免费| 伊人热在线大香蕉| 亚洲情欲久久| av激情在线| 热久久91| 欧美va亚洲va| 五月天婷婷激情春色小说| 久久人妻视步| 丁香五月综合激情性爱| www.99视频| 国产肥白大熟妇BBBB视频| 日本美女97在线视频| 色婷九九九| 久久久香| 婷婷5月色| 9精品一区| 女人被躁到高潮嗷嗷叫小| 99爱这里只有精品| 天天舔天天摸天天射| 综合五月天亚洲婷婷| 激情五月天婷婷| 91久久1118| 亚洲色啪| 人妻狠狠操| 91丨熟女丨首页| 成人国产综合| 丁香五月婷婷动漫视频| 五月丁香六月婷婷综合网缴情| 99色色网| 丁香六月综合激情| www91色网站| 狠狠色狠狠| 五月天无码视屏播放| 亚洲性爱区无码区| 免费国产视频| 成人精品视频99在线观看免费| 婷婷丁香五月基地| 91欧美| 婷婷激情六月中文| 亚洲人成色A777777在线观看| 五月婷婷色综图片| 五月丁久久| 狠狠爱夜夜| aaaaaa片| 亚洲另类视频| 色五月婷婷五月天| 激情五月天婷婷色色色色色色色色色色色| 色五月综合| 亚洲经典小视频| 色吧五月婷婷| 丁香五月天婷婷大香蕉| 婷婷六月丁香在线| 四色AVwww| 五月丁香久久| 婷婷五月婷婷| 国产成人精品一区二三区熟女在线| 碰超在线九色| 丁香五月瑟瑟| 日韩在线9| 亚洲AV久久久久久久久久久久久久久久| 六月丁香啪啪啪| 成人五月天视频播放| 丁香五月人妻| 99热丁香五月| 九九久久视频| 99久久婷婷国产综合| 色婷婷色| 婷婷激情五月综合在线视频| 大香蕉久久| 激情婷婷丁香色五月| 日日色五月天| 婷婷激情社区| 91九色小视频| 色色色色色网站| 人妻丰满精品一区二区A片| 色综合色五月| 婷婷性福五月天| 久久婷婷五月天丁香| 深爱五月婷婷开心中文字幕| 91超级碰在线| 色婷婷人人| 99热日本| 夜夜操狠狠操| 久久香蕉网| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 久婷五月| 啪啪色区| 墨西哥毛片内射精| 色婷婷五月亚洲| 六月婷婷五月丁香| 中文网AV| 99热在这里只有精品| 玖玖婷婷综合| 99热只有| yiqicaoav| 久久 视频这里只有精总| 久久97久久99久久综合欧美| 色婷婷婷婷成人网| 99爱爱| 97亚洲色 torrent magnet| 91成人电影| 五月婷婷综合影院| 一丁香五月天月AV| 亚洲AV成人无码电影| 丁香六月激情国产| 96色婷婷| 日操夜撸| 天啪天啪天啪天啪| 精品五月天| 久热精彩视频98| 激情六月一二| 夜色爱爱亚洲| 婷婷五月色情天| 超碰京东热av男人的天堂| 婷婷五月天激情五月天深爱五月天| 91九色偷拍| 骚货艹网站视频| 色碰97| 五月天婷婷激情综合| 久久久噜噜噜www成人| 天天爱夜夜爽| 久久婷婷亚洲无码一起| 亚洲精品视频电影| 97人人做| 久久99热这里只有精品| 丁香五月天欧洲在线| 九色婷婷| 99 这里只有精品| 久久人人添人人爽添人人片αV| 99热在线观看这里只有精品| 五月天天综合网色婷婷| jizzdr| 婷婷五月综合色拍| 91碰碰碰| 久久99热这里| 人妻激情久久| 99久在线精品99re8热| 夜色综合网| 婷婷激情综合网| 79亚洲精品少妇| 色色色色色色综合网| 丁香婷婷色五月| 91在线日本| 久久综合丁香激情五月| 激情综合五月色在线| 亚洲人操亚洲人| 五月丁香在线观看| 91九色丨国产丨爆乳| 婷婷五月天成人网| 婷婷免费无视频| 色色网91| 99久re热视频精品98| 噜噜色五月| 欧美A片在线视频免费观看| 色五月丁香婷婷| 婷婷五月电影院| 欧美肉大捧一进一出免费视频| 九九热99精品| 九月av在线| 99re思思热久久| 夜夜夜叫天天天做| 婷婷成人在线| 色色无码| 婷婷五月18永久免费视频| 亚洲成人网站在线播放| 99热超碰在线| 丁香六月在线| 激情综合啪啪啪| 男女激情久久| 精品久热| 99亚洲色色| 日本69日人视频| 丁香五月婷婷激情四射深爱激情| 婷婷五月花| 99re思思精品视频在线观看| 久久综合香蕉国产国产蜜臀AV| 婷婷午夜精品久久久| 激情五月丁香色婷婷| 日韩无码91| 搡BBBB搡BBB搡18| 99视频只有精品| 丁香五月色综合色播五月| 久久精品99久久久久久久久| 天天干天天干天天干| 六月丁香综合| 2025中文在线视频字幕免费观看| 1囯产午夜仑鲁鲁| AV中文在线| 日日干日日| 丁香花五月天| 欧美色久| 九月婷婷人人操人人舔人人爱| 婷婷五月天成人| 五月天激情av| 综合亚洲五月天| 色欲婷婷五月天丁香| 日本精品久久久久中文字幕| 五月婷婷色| 五月开心啪啪| 狠狠干综合| 丁香五月综合久久| 1024国产在线| 婷婷网五月天| 中文av网| 亚洲综合狠狠艹| 99色在线| 69久久99精品久久久久| 碰超亚洲| 国产精品国产成人国产三级| 9久久婷婷国产综合精品性色| 丁香五月激情图片| 九九爱这里只有精品| 午夜亚洲国产精品av一区二区| 午夜激情四射影院| 欧美色综合天天久久综合精品 | 欧洲S级在线观看| 婷婷色资源| 国外亚洲成AV人片在线观看| 综合久久婷婷| 婷婷在线播放| 青草少妇激情| 色婷婷亚洲在线| 五月天婷婷自拍图片在线观看| www.99久| 国产午夜精品一区二区| 91 久热| 韩国中文字幕91| 天天拍天天操| 99成人在线观看| 欧美婷婷丁香五月社区| 99精品在线观看视频| 特级片神马电影| 人人色AV| tingting五月天亚洲| 婷婷综合另类小说| 五月丁香狠狠爱| 婷婷色色丁香五月天| 日本一级大片| 亚洲影院婷婷色| 97啪在线观看视频| 强辱丰满人妻HD中文字幕| 婷婷五月色| 丁香五月天之婷婷影院| 超碰精品在线| 天天肏夜夜肏| 色五月成人| 99超级碰免费视频| 久久婷婷伊人| 婷婷丁香五月综合| 香蕉久久国产AV一区二区| 激情综合区| 亚洲另类电影| 色色射| 狠狠色噜噜狠狠狠888| 色九网| 亚洲视频99| 五月丁香偷拍| 天天色播| 97碰碰碰免费公开在线视频| 国产人妻777人伦精品HD| 五月婷在线| 欧美搡BBBBB摔BBBBB| 麻豆WWWCOM内射软件| 久久人人做人人妻人人玩精品va| 玩熟女五十AV一二三区| 久久久久久久11111111111| 在线观看免费观看在线9久| 国产暴力强伦轩1区二区小说| 人妻熟女一区二区AV| 五月婷婷啪啪啪啪| 日韩精品在线观看9| 欧美三级视频下载| 久9热视频| 婷婷伊人中文字幕| 色五月婷婷激情综合网| 婷婷六月色丁香视频在线观看| 丁香五月天婷婷久久综合| 婷婷开心激情综合五月天| 丁香五月综合在线视频| 99视频在线观看网址| 丁香婷婷九月| 天天色天天日| 成人网在线观看视频| 九九热99在线视频| 六月丁香色色| 欧美va精品va老师va| 五月丁香久久综合精品| 丁香五月激情五月开心五月| 囯产精品久久欠久久久久久九大| 婷婷五月丁香久久| 丁香五月综合| 91综合视频丁香| 久久婷婷丁香| 丁香六月婷婷缴情欧美| 婷婷开心综合人妻小说网址| 亭亭五月色男人| AV在线大香蕉| 欧美操人| 日本玖玖在线| 在线成人网站| 婷婷激情五月综合基地| 五月婷婷婷婷网| 色色婷婷丁香| 在线播放人妻| 91久久综合亚洲噜噜成人在线| 日本精品在线噜噜噜| 五月婷婷欲色| 五月天婷婷网站888| 国产成人精品亚洲线观看| 婷婷丁香综合在线| 99热只有精品综合| 玖玖资源天天无码| 久99视频在线观看| 欧美性生交XXXXX无码小说| 丁香五月综合久久| 日日干日日色| 色色色热热热| 99色视频| 海外网站专业操老外| 综合久久婷婷五月丁香| 五月之婷婷| 六月丁香激情网| 99精品综合| 婷婷五月色情天| 丁香婷婷在线| 天天爽夜爽| 热婷婷在线视频| 综合五月丁香久久| 99精品在这里| 五月丁香成人网| 天堂久久性| 天天橾日日橾夜夜橾17| 91婷色| 99re8热精品免费视频| 成人 在线 日韩| 一本伊人色婷| 深爱激情综合网| 五月深情久久| 亚州激情网站无码| 99碰网站| 五月天小说激情| 色综久久AV| 婷婷五月丁香五月| 五月停停大香蕉| 五月丁香综合啪啪| 人人草人人舔| 九九99精品免费播放| 五月天丁香啪啪综合| 色色色com| 五月天婷a在线| 丁香婷婷久久| 婷婷五月天网址| 五月丁香婷婷伊人日韩| 婷婷丁香77777| 欧美日韩成人一区二区| 日本偷拍九九九| 亚洲五月婷婷在线| 这里只有精品免费视频| 另类国产区| 婷婷五月激情在线视频| 国产精品扒开腿做爽爽爽A片唱戏 亚洲爆乳无码精品AAA片蜜桃 | 综合色色网| 午夜不卡久久精品无码免费| 999婷婷综合| 婷婷欧美| 亚洲啪| 5月丁香六月情| 91狠狠色丁香婷婷综合久久精品| 五月婷婷啪啪网| 天天舔夜夜操www com| 这里只有精品久久| 色爱爱综合网| 综合五月亭亭9| 婷婷另类小说| 亚洲激情综合网| 激情五月激情综合网| 欧美A片在线视频免费观看| 亚洲综合丁香婷婷六月天| 丁香五月欧美| 99,色| 五月天丁香网| 狼人婷婷久久| 人人摸人人| 五月丁香激情啪啪网| 思思热国产在线| 五月激情综合网婷婷| http://www.lingjunshare.com/ | 思思热在线播放| 亚洲AV日韩在线观看| 丁香五月综合在线播放| 熟妇内谢69XXXXXA片| 蜜乳.comcom| 狠狠干综合| 99精品视频在线6| 激情婷婷六月天| 五月丁香六月综合情在线观看| www色婷婷| 在线色色| 亚洲色五月| 九九视频免费| 综合激情五月天| 9色在线| 成年人丁香五月| 日日骑夜夜撸| 狠狠操狠狠爱| 丁香五月骚喷水视频| 久久AAAA片一区二区| 五月四色婷婷| 337久久| 激情综合网五月激情| 91窝窝| 99激情| 婷婷五月天综合网| 99在线精品视频| 久久狠色噜噜狠狠狠狠97| 久久精品99国产精品日本| 婷婷玉月丁香五月在线视频| 久99999热视频在线观看免费| 中文aV网| 影音先锋男人AV资源站| 国产综合网在线| 91 原创 在线 九色| 在线看片av| 精品视频这里只有精品| 日本不卡高字幕在线2019| 九九热思思热| 丁J香六月首页| www.五月天婷婷| 深爱五月月天| 99超超碰| 欧洲亚洲精品| 久久人人九九| 99碰碰| 丁香社区婷婷五月| 色婷久| 综合久久99| 99.色| www狠狠com| 99热精品在这里| 亚洲mm色| 丁香社92视频| 97干在线视频| 色五月丁香激情视频| 日本色超碰| PORNY九色9l自拍视频成人| 婷婷五六月丁香| 丁香五月天91| 翔田千里 50岁 无码| 99爱在线| se婷97| 九九性视频| 丁香五月在线观看综合| 婷婷丁香综合| 天天爽夜爽| 四月婷婷丁香| 成人片在线播放| 久久久久久久11111111111| 丁香五月天堂网| 五月在线婷色| 国产综合丁香五月天| 亚洲第一第二网站| 天天狠狠色综合| 久久五月丁香婷婷| 色伊人91在线视频| 97碰碰视频| 久久久月丁香| 射琪琪| 99激情视频| 五月天婷婷综合网| 精品无码色欲AV| 欧美日韩国产伦精品日韩人妻一| 狠狠干综合|