99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

嵌入式外設(shè)不確定性排查:PSRAM、NOR Flash與USB實(shí)戰(zhàn)經(jīng)驗(yàn)

嵌入式外設(shè)不確定性排查:PSRAM、NOR Flash與USB實(shí)戰(zhàn)經(jīng)驗(yàn) 做嵌入式這幾年P(guān)SRAM、NOR Flash、USB這三個(gè)名字我?guī)缀跆焯齑蚪坏?。一個(gè)是內(nèi)存擴(kuò)展一個(gè)是代碼與參數(shù)的存放地一個(gè)是和外部世界通信的接口——聽起來都是再標(biāo)準(zhǔn)不過的外設(shè)??烧嬲阉鼈兘M合在一個(gè)系統(tǒng)里跑穩(wěn)定尤其是要在量產(chǎn)線上批量復(fù)現(xiàn)時(shí)你會(huì)發(fā)現(xiàn)不確定性這三個(gè)字幾乎無處不在。同一顆芯片、同一份代碼有的板子一次過有的板子偶發(fā)枚舉失敗有的設(shè)備低溫下代碼加載直接卡死。這不是玄學(xué)而是這三類器件在物理層和協(xié)議層本身就帶著一批說不準(zhǔn)的行為工程上如果不去理解這些不確定性就會(huì)在排障時(shí)走很多彎路。這篇文章把我這些年調(diào)PSRAM、NOR Flash、USB時(shí)踩過的坑、驗(yàn)證過的方法和最終沉淀下來的排查套路一次性整理出來適合正在做MCU/嵌入式Linux產(chǎn)品方案的工程師也適合剛?cè)胧諷TM32、ESP32等平臺(tái)、被外設(shè)穩(wěn)定性問題折磨的新手。內(nèi)容不追求面面俱到重點(diǎn)是把為什么會(huì)出現(xiàn)不確定性和怎么把它管住講透看完你至少能少熬夜調(diào)幾個(gè)Bug。1. 一個(gè)翻車現(xiàn)場(chǎng)引出的三個(gè)不確定性1.1 項(xiàng)目背景PSRAM、NOR Flash、USB為什么會(huì)湊到一起先還原一下我經(jīng)歷過的一個(gè)典型場(chǎng)景。某款帶屏的IoT產(chǎn)品主控選了帶PSRAM擴(kuò)展的MCU方案PSRAM用來跑UI緩沖和音頻緩沖固件放在一顆8MB的NOR Flash里上電后由Bootloader從Flash搬運(yùn)到內(nèi)部SRAM/PSRAM執(zhí)行同時(shí)設(shè)備通過USB Device接口連接電腦既要做USB虛擬串口CDC做日志輸出還要支持DFU固件升級(jí)。這個(gè)組合在今天其實(shí)非常常見。PSRAM解決內(nèi)存不夠用NOR Flash解決代碼和參數(shù)怎么可靠存放USB解決怎么跟PC交互。三者看似各管一攤但在實(shí)際調(diào)試中它們會(huì)互相作用USB枚舉瞬間的電流波動(dòng)能干擾PSRAM的供電NOR Flash擦除時(shí)被USB的中斷打斷可能導(dǎo)致擦除流程異常PSRAM初始化沒完成時(shí)USB描述符中斷來了系統(tǒng)直接死機(jī)。要理清這些就得先把每一類器件的不確定性單獨(dú)拿出來看。1.2 所謂不確定性到底指的是什么我理解的不確定性不是量子力學(xué)那種真隨機(jī)而是指器件的某個(gè)行為在datasheet的典型條件下是確定的但在真實(shí)系統(tǒng)里因?yàn)楣╇?、溫度、時(shí)序、代碼順序、總線復(fù)用等原因結(jié)果變得難以預(yù)測(cè)。具體分四類時(shí)序不確定性上電穩(wěn)定時(shí)間、指令間隔、擦寫完成時(shí)間都有最小/最大范圍超時(shí)和欠時(shí)都可能出錯(cuò)。電氣不確定性信號(hào)沿的抖動(dòng)、電源紋波、PCB寄生參數(shù)、線纜阻抗等會(huì)讓數(shù)據(jù)采樣點(diǎn)在臨界區(qū)浮動(dòng)。協(xié)議狀態(tài)不確定性USB枚舉、Flash狀態(tài)機(jī)、PSRAM刷新等都有內(nèi)部狀態(tài)外部事件如中斷、掉電切入時(shí)狀態(tài)機(jī)會(huì)落在不可預(yù)期的位置。上下文不確定性同樣的代碼在不同主頻、不同編譯器優(yōu)化等級(jí)、不同GPIO初始化順序下行為不同。這類最坑因?yàn)閺?fù)現(xiàn)困難。這四類不確定性的背后是物理和協(xié)議的復(fù)雜機(jī)制。后面三章我會(huì)逐個(gè)拆解并且給出實(shí)操層面的管住它們的辦法。2. PSRAM的藏著掖著刷新與時(shí)序的不確定性2.1 先說原理PSRAM為什么叫偽SRAMPSRAMPseudo SRAM偽靜態(tài)隨機(jī)存儲(chǔ)器的存儲(chǔ)核心其實(shí)是DRAM只是外部接口做成了SRAM的樣子。你不需要像用SDRAM那樣去管理行激活、預(yù)充電、刷新這些細(xì)節(jié)直接像SRAM一樣讀寫就行。代價(jià)是芯片內(nèi)部有一個(gè)隱藏的刷新邏輯它會(huì)周期性對(duì)存儲(chǔ)單元做刷新。這個(gè)刷新過程對(duì)使用者來說是不可見的但它會(huì)對(duì)總線的可用帶寬產(chǎn)生影響。某些時(shí)候你讀一個(gè)地址正好碰上內(nèi)部刷新周期返回?cái)?shù)據(jù)的延遲就會(huì)比平時(shí)大一點(diǎn)。這就是PSRAM第一個(gè)不確定性的來源——訪問延遲不是恒定值。另一個(gè)層面SPI接口的PSRAM比如APS6404、LY68L6400、IPS6404在MCU項(xiàng)目里用得越來越多。它的好處是引腳少、布線簡(jiǎn)單但代價(jià)是協(xié)議里引入了等待周期Latency的概念。讀操作發(fā)出命令后數(shù)據(jù)并不會(huì)立刻出現(xiàn)在MOSI上而是要等若干個(gè)dummy cycle。這個(gè)dummy cycle的數(shù)量又跟工作頻率、指令模式、芯片配置有關(guān)。配置錯(cuò)了要么讀到全0要么數(shù)據(jù)錯(cuò)位而且不同廠家的芯片行為還不完全一樣非常容易出問題。2.2 初始化與讀寫時(shí)最容易踩的時(shí)序坑SPI PSRAM的初始化一般分幾步上電等待VCC穩(wěn)定至少幾百微秒到1ms具體看型號(hào)、發(fā)送復(fù)位命令、發(fā)送設(shè)置命令比如設(shè)置Quad模式、設(shè)置延遲、設(shè)置驅(qū)動(dòng)強(qiáng)度、讀取設(shè)備ID確認(rèn)芯片在線、然后才能正常讀寫。很多人在上電后立刻讀寫PSRAM結(jié)果讀回的ID是錯(cuò)的或者讀到的數(shù)據(jù)偶發(fā)錯(cuò)誤就是因?yàn)樯想姺€(wěn)定時(shí)間不夠芯片內(nèi)部狀態(tài)還沒準(zhǔn)備好。讀寫時(shí)序上最容易被忽略的是寫使能機(jī)制。PSRAM和Flash一樣寫操作前通常需要發(fā)送Write Enable0x06命令然后才能執(zhí)行Page Program等寫命令。如果你在代碼里漏了這一步或者中斷在寫使能之后、寫命令之前插入導(dǎo)致時(shí)序被拉長(zhǎng)某些芯片會(huì)判定操作非法數(shù)據(jù)就沒寫進(jìn)去。實(shí)測(cè)中這類問題在SPI時(shí)鐘開得越高時(shí)越明顯因?yàn)闀r(shí)序裕量變小了。還有一個(gè)坑是刷新與DMA的配合。SPI PSRAM內(nèi)部刷新時(shí)會(huì)暫緩來自外部總線的訪問這在單次CPU讀寫上感覺不到但如果你用DMA做大批量傳輸而且DMA的超時(shí)設(shè)置比較緊就可能偶發(fā)超時(shí)。別問我怎么踩到的——調(diào)試一塊PSRAM上的攝像頭圖像緩沖區(qū)時(shí)圖像正常了99%但每隔幾秒就閃一幀花屏最后查到DMA配置里把PSRAM讀寫超時(shí)設(shè)成了實(shí)時(shí)性要求更高的數(shù)值放寬后問題消失。2.3 實(shí)測(cè)幾個(gè)典型的PSRAM翻車場(chǎng)景場(chǎng)景一低溫下初始化失敗。有一批板子在常溫實(shí)驗(yàn)室一切正常放到-20℃環(huán)境做老化測(cè)試大概有3%的板子啟動(dòng)后內(nèi)存檢測(cè)失敗。排查發(fā)現(xiàn)是PSRAM上電穩(wěn)定時(shí)間在低溫下變長(zhǎng)了固件里固定的延時(shí)不夠。把初始化前的等待從500μs加到了2ms并增加了讀取ID后校驗(yàn)的邏輯失敗率歸零。這里要注意datasheet給的是典型值工程上要做覆蓋全溫區(qū)的裕量設(shè)計(jì)。場(chǎng)景二Quad模式讀出來是亂的。當(dāng)時(shí)為了提升刷新率把PSRAM切到Quad I/O模式結(jié)果屏幕開始出馬賽克。檢查發(fā)現(xiàn)是切換模式后后續(xù)所有訪問命令都要帶上模式位Mode Bit但代碼里只有部分路徑寫了模式位另一條DMA訪問路徑?jīng)]帶導(dǎo)致芯片一直在不同模式間橫跳。這類問題最好的排查方法就是抓SPI波形逐個(gè)命令比對(duì)不要猜。場(chǎng)景三PSRAM和外部Flash共享SPI總線的沖突。某些低成本方案會(huì)讓PSRAM和SPI NOR Flash掛在同一個(gè)SPI控制器上用片選分開。如果片選切換之間沒有留足夠的時(shí)間一般要求CS拉高再拉低之間至少有個(gè)小延時(shí)兩條總線上的設(shè)備可能被對(duì)方的殘余信號(hào)干擾。我一般至少留250ns~500ns。實(shí)測(cè)某些芯片對(duì)CS釋放后的保持時(shí)間非常敏感少了它偶爾就會(huì)出現(xiàn)Flash寫入失敗或PSRAM數(shù)據(jù)錯(cuò)亂。3. NOR Flash的慢性子擦寫壽命與掉電的不確定性3.1 NOR和NAND別再傻傻分不清討論NOR Flash之前先回應(yīng)很多新手朋友問過的問題NAND Flash和NOR Flash到底有什么區(qū)別簡(jiǎn)單版回答NOR可以按字節(jié)/字隨機(jī)讀取讀得快、可靠性高適合直接XIP執(zhí)行代碼但寫和擦除很慢容量做大之后成本高NAND按頁(yè)讀寫寫入擦除快、容量大、成本低但隨機(jī)讀取延遲高、壞塊多、需要文件系統(tǒng)層做壞塊管理和ECC不適合直接執(zhí)行代碼。所以產(chǎn)品里通常拿NOR放Bootloader和固件拿NAND或eMMC放文件系統(tǒng)和大塊數(shù)據(jù)。但要說清不確定性必須補(bǔ)充一個(gè)深層區(qū)別NOR Flash的存儲(chǔ)單元是浮柵晶體管擦除操作靠Fowler-Nordheim隧穿把電子從浮柵里拉出來編程操作則往浮柵里注入電子。隧穿和注入都是概率性物理過程所以擦除和編程時(shí)間天然有浮動(dòng)。datasheet里會(huì)給出典型值和最大值比如Sector Erase典型值45ms最大值400ms這個(gè)最大不是隨隨便便寫的你不等夠狀態(tài)機(jī)就可能沒走完。3.2 上電、擦寫、復(fù)位里那些說不準(zhǔn)的環(huán)節(jié)NOR Flash在上電時(shí)有一段Power-On Reset時(shí)間期間器件對(duì)命令不響應(yīng)。如果你在上電后立即發(fā)JEDEC ID讀取命令0x9F很多芯片會(huì)返回垃圾數(shù)據(jù)或者直接不拉低MISO。我見過一堆代碼在Bootloader里讀Flash ID來校驗(yàn)硬件版本結(jié)果因?yàn)檠訒r(shí)不夠讀回0xFFFFFFFF就誤報(bào)硬件錯(cuò)誤。解決方法是上電后至少延時(shí)幾十毫秒再訪問Flash并且對(duì)ID做多重校驗(yàn)。擦寫流程里最容易被坑的是狀態(tài)寄存器的寫保護(hù)位。SPI NOR Flash為了保證可靠性默認(rèn)會(huì)對(duì)狀態(tài)寄存器做非易失寫保護(hù)Status Register ProtectSRP位。很多人拿到新片直接發(fā)擦除命令結(jié)果怎么擦都擦不動(dòng)因?yàn)閃P#引腳被拉高時(shí)寫保護(hù)生效。不同的芯片默認(rèn)保護(hù)級(jí)別也不同比如W25Q系列默認(rèn)BP位為0、不保護(hù)主存儲(chǔ)區(qū)但某些國(guó)產(chǎn)芯片出廠BP位是設(shè)置好的所以兼容性測(cè)試一定要做讀取狀態(tài)寄存器這步。這個(gè)我在后面速查表里還會(huì)提。還有一個(gè)經(jīng)常被忽略的點(diǎn)4字節(jié)地址模式。容量超過16MB的Flash默認(rèn)上電大多在3字節(jié)地址模式訪問高16MB地址時(shí)必須發(fā)命令切換到4字節(jié)地址模式B7h有些芯片是帶Entry/Exit的。切換命令本身是非易失的還是易失的芯片間也有差異。如果你用的是類似MX25L25645G這樣的芯片一定要查清楚上電后的默認(rèn)地址模式否則燒錄地址超過16MB時(shí)數(shù)據(jù)會(huì)寫到錯(cuò)誤的位置。3.3 量產(chǎn)燒錄與掉電保護(hù)的實(shí)操要點(diǎn)量產(chǎn)場(chǎng)景下NOR Flash不確定性最典型的表現(xiàn)是燒錄中途掉電固件變成磚。對(duì)此我的做法是固件里設(shè)計(jì)A/B雙分區(qū)加啟動(dòng)標(biāo)志位新固件先寫到B區(qū)全部寫完并校驗(yàn)通過后再更新啟動(dòng)標(biāo)志指向B區(qū)如果中途掉電Bootloader檢測(cè)到標(biāo)志無效自動(dòng)回退到A區(qū)。這套流程看起來多占一倍的Flash空間但換來的是現(xiàn)場(chǎng)幾乎不再出現(xiàn)救磚任務(wù)。對(duì)于沒有雙分區(qū)空間的低成本產(chǎn)品至少要保證先擦后寫過程中意外掉電后Bootloader能檢測(cè)到固件區(qū)校驗(yàn)失敗并進(jìn)入DFU等待狀態(tài)而不是直接跳到空代碼區(qū)執(zhí)行。此外擦除/編程的超時(shí)處理一定要用輪詢WIP位 最大超時(shí)兜底的方式。WIPWrite In Progress位在狀態(tài)寄存器1的最低位bit 0每次發(fā)0x05命令讀狀態(tài)寄存器bit 0為1表示忙輪詢到0表示操作完成。很多工程師只做一次性等待固定延時(shí)這在溫度漂移和芯片批次差異面前早晚會(huì)翻車。輪詢邏輯本身很簡(jiǎn)單但要注意輪詢間隔一般建議100μs左右防抖次數(shù)按datasheet最大值的1.5~2倍來設(shè)這樣既不會(huì)過早超時(shí)報(bào)錯(cuò)也不會(huì)卡死系統(tǒng)。4. USB的社交枚舉、驅(qū)動(dòng)與協(xié)議的不確定性4.1 枚舉一次連接本質(zhì)上是一場(chǎng)握手談判要理解USB的不確定性先要理解它的本質(zhì)USB是一種主機(jī)主動(dòng)、設(shè)備被動(dòng)響應(yīng)的協(xié)議。設(shè)備插入后主機(jī)通過D/D-電平變化檢測(cè)到設(shè)備連接然后對(duì)設(shè)備地址0發(fā)起一系列控制傳輸Get Device Descriptor、Set Address、Get Configuration Descriptor等這個(gè)過程叫枚舉。枚舉的成功與否取決于設(shè)備能否在150ms左右的時(shí)間窗口內(nèi)按照主機(jī)期望的節(jié)奏響應(yīng)每一個(gè)請(qǐng)求。不確定性就藏在這個(gè)過程里。任何一個(gè)環(huán)節(jié)慢了、錯(cuò)了、超時(shí)了主機(jī)就會(huì)認(rèn)為設(shè)備異常要么報(bào)告無法識(shí)別的USB設(shè)備要么設(shè)備在設(shè)備管理器里反復(fù)嘆號(hào)。更要命的是不同主機(jī)控制器Intel、AMD、ASMedia、瑞薩對(duì)時(shí)序的嚴(yán)格程度不一樣同一臺(tái)設(shè)備在A電腦上插入即用在B電腦上就是不穩(wěn)定。這也是USB調(diào)試最磨人的地方——你沒法保證用戶手上的電腦形態(tài)。4.2 設(shè)備端常見枚舉失敗硬件、描述符、時(shí)鐘設(shè)備端導(dǎo)致枚舉失敗的原因按我踩坑的頻率排序D/D-上拉電阻不對(duì)全速設(shè)備Full Speed 12Mbps需要在D上拉1.5kΩ到3.3V低速設(shè)備在D-上拉。如果用MCU內(nèi)部上拉阻值偏差會(huì)導(dǎo)致主機(jī)檢測(cè)不到連接。很多MCU比如STM32系列內(nèi)部集成了這個(gè)上拉但需要軟件在檢測(cè)到VBUS后再使能順序錯(cuò)了設(shè)備就不出現(xiàn)在總線上。時(shí)鐘精度不夠USB全速要求源時(shí)鐘誤差在±0.25%以內(nèi)高速更是要到±0.05%。這個(gè)精度直接決定位時(shí)間對(duì)不對(duì)很多低成本MCU用內(nèi)部RC振蕩器跑USB會(huì)偶發(fā)枚舉失敗換外部晶振后就好了。我遇到過一批板子用內(nèi)部HSI跑STM32F407的USB虛擬串口90%能枚舉成功10%需要拔插兩次才行最后全部改成外部25MHz晶振問題消失。描述符錯(cuò)誤描述符里任何一個(gè)長(zhǎng)度、端點(diǎn)地址、接口數(shù)量不匹配主機(jī)都可能拒絕設(shè)備。尤其是CDC虛擬串口需要類特殊描述符Union Functional Descriptor、Call Management Functional Descriptor等少一個(gè)或者順序不對(duì)Windows會(huì)直接報(bào)告該設(shè)備無法啟動(dòng)Code 10。排查這類問題最有效的是用USB協(xié)議分析儀或抓包軟件下面細(xì)說。供電不足設(shè)備從USB口取電如果板載外圍太多、瞬間電流超過500mAUSB 2.0標(biāo)準(zhǔn)主機(jī)端口會(huì)過流保護(hù)。這個(gè)屬于電氣不確定性但復(fù)現(xiàn)率不低、誤判率也高排查時(shí)先量一下設(shè)備實(shí)際功耗。4.3 主機(jī)端驅(qū)動(dòng)與工具從FT232R到Wireshark主機(jī)端最常見的不確定性來自驅(qū)動(dòng)。USB轉(zhuǎn)串口芯片F(xiàn)T232R、FT231X、CP2102N、CH340這些本身很成熟但驅(qū)動(dòng)安裝不上、版本沖突、簽名問題能讓人折騰半天。我自己處理這類問題的小技巧優(yōu)先用官方驅(qū)動(dòng)不要用第三方萬(wàn)能驅(qū)動(dòng)。FTDI的驅(qū)動(dòng)對(duì)FT232R/FT231X支持很完善Silicon Labs的CP2102N驅(qū)動(dòng)也比較干凈。裝了驅(qū)動(dòng)后在設(shè)備管理器里看端口號(hào)是否出現(xiàn)、驅(qū)動(dòng)版本是否匹配。如果設(shè)備在設(shè)備管理器里顯示未知設(shè)備先用USB Device Tree Viewer去看設(shè)備到底有沒有成功枚舉——它能顯示設(shè)備處于什么狀態(tài)、拿到了什么地址、配置描述符解析是否正常。如果是枚舉成功了但驅(qū)動(dòng)沒加載那是驅(qū)動(dòng)問題如果連配置都沒有那是設(shè)備端問題。抓包分析用Wireshark加USBPcap。很多人以為Wireshark只能抓網(wǎng)絡(luò)包其實(shí)它配合USBPcap可以抓USB總線上的URBUSB Request Block能看到主機(jī)發(fā)了什么請(qǐng)求、設(shè)備回了什么數(shù)據(jù)。排查枚舉失敗時(shí)非常有用。我舉一個(gè)真實(shí)的排查案例一塊板子的USB虛擬串口在Windows 10上穩(wěn)定但升級(jí)到Windows 11后偶發(fā)斷連。用Wireshark抓包發(fā)現(xiàn)新系統(tǒng)會(huì)周期性發(fā)送Get Status請(qǐng)求設(shè)備端響應(yīng)偶爾超過150ms超時(shí)于是主機(jī)把設(shè)備斷開重枚舉。最后定位是USB中斷服務(wù)函數(shù)里有一個(gè)耗時(shí)很長(zhǎng)的Flash擦除操作擦除期間USB中斷被屏蔽了請(qǐng)求得不到及時(shí)響應(yīng)。把Flash擦除拆成多段、每段之間開中斷問題解決。這個(gè)案例正好能說明USB的不確定性很多時(shí)候不是USB本身的問題而是系統(tǒng)里其他設(shè)備的時(shí)序問題傳染給了USB。4.4 Host、Device、OTG三模式的區(qū)別與選擇關(guān)于USB Host模式、Device模式和OTG很多新手容易混淆。直接說結(jié)論Host模式負(fù)責(zé)供電、管理枚舉類似電腦那端接口用A型口Device模式是被動(dòng)響應(yīng)類似U盤、手機(jī)那端接口用B型口或Micro-BOTG則在一條線纜上通過ID引腳識(shí)別自己是Host還是Device適合手機(jī)、平板這種需要角色動(dòng)態(tài)切換的設(shè)備。嵌入式產(chǎn)品選型時(shí)如果只是給PC當(dāng)外設(shè)用Device模式即可STM32F407這類MCU的USB模塊做虛擬串口非常方便。如果需要直接插U盤、鍵鼠就得用Host模式這時(shí)候要考慮VBUS供電能力、根集線器開銷和驅(qū)動(dòng)棧復(fù)雜度會(huì)上升一個(gè)量級(jí)。OTG模式適合既想連PC又想插U盤的產(chǎn)品但要注意ID引腳的檢測(cè)邏輯以及角色切換時(shí)總線的重新枚舉處理不好會(huì)出現(xiàn)插上電腦沒反應(yīng)、反插又不能用的怪問題。量產(chǎn)時(shí)我通常建議固定角色的產(chǎn)品不要用OTG直接按Host或Device設(shè)計(jì)能省掉一半的疑難雜癥。5. 三個(gè)子系統(tǒng)聯(lián)動(dòng)時(shí)的不確定性傳染5.1 USB OTG燒寫Flash量產(chǎn)場(chǎng)景下的鏈路梳理搜索熱詞里有一條USB OTG燒寫NAND Flash這確實(shí)是量產(chǎn)和售后經(jīng)常會(huì)用到的形式主機(jī)通過USB把固件發(fā)給設(shè)備設(shè)備里的Bootloader再把固件寫入NOR/NAND Flash。這里面每一環(huán)都帶著前面幾章講到的不確定性很容易做個(gè)所謂燒錄成功率99%的上位機(jī)結(jié)果現(xiàn)場(chǎng)就是不停有人燒錄失敗。我建議把整條鏈路梳理成可觀測(cè)的環(huán)節(jié)再設(shè)計(jì)容錯(cuò)USB枚舉是否成功、設(shè)備是否收到完整固件包CRC校驗(yàn)、Flash擦寫是否完成WIP輪詢、寫入后回讀校驗(yàn)是否通過。任何一個(gè)環(huán)節(jié)失敗都要有明確反饋和重試機(jī)制。我還習(xí)慣在燒錄協(xié)議里加入分塊序號(hào)CRC設(shè)計(jì)單塊失敗則重傳單塊而不是整包重傳Flash擦除采用按扇區(qū)擦除而不是整片擦除這樣即使掉電已傳完的分區(qū)還能保留支持?jǐn)帱c(diǎn)續(xù)傳。這套方案在代工廠和售后現(xiàn)場(chǎng)用下來燒錄失敗率從千分之一級(jí)別降到了幾乎不可見。5.2 共享SPI總線與電源域時(shí)的彼此干擾很多中型MCU只有1~2個(gè)SPI外設(shè)PSRAM和NOR Flash共用同一SPI總線、用不同CS片選的情況非常常見。這種方案省引腳但換來的是時(shí)序耦合。最大的坑是兩個(gè)設(shè)備對(duì)片選釋放后的保持時(shí)間要求不同PSRAM往往要求CS拉高后至少幾十納秒才能再次拉低而某些NOR Flash要求更長(zhǎng)。如果你在寫完P(guān)SRAM后立刻切到Flash操作系統(tǒng)里又有其他中斷插入CS之間的間隔就可能不夠?qū)е翭lash識(shí)別到異常的SPI通信偶發(fā)地錯(cuò)誤寫入或狀態(tài)寄存器被改。另外PSRAM是DRAM核心刷新期間對(duì)供電紋波比較敏感NOR Flash擦除時(shí)電流會(huì)突然沖高如果兩個(gè)器件共用一個(gè)LDO擦除瞬間的電流尖峰會(huì)把PSRAM的供電電壓拉低輕則刷新失敗丟數(shù)據(jù)重則系統(tǒng)復(fù)位。我通常會(huì)給它們分別配LDO或至少加大Bulk電容并在PCB布局上讓PSRAM的退耦電容盡量靠近電源引腳。5.3 一次USB枚舉把系統(tǒng)搞崩的排查實(shí)錄最后分享一個(gè)印象很深的聯(lián)調(diào)事故。設(shè)備上電后如果先讓PSRAM完成初始化再開USB一切正常但如果USB先被主機(jī)檢測(cè)到、枚舉中斷先來了而PSRAM還沒初始化完系統(tǒng)就會(huì)在USB中斷服務(wù)里訪問未初始化的PSRAM觸發(fā)總線錯(cuò)誤直接HardFault。排查時(shí)一開始完全沒頭緒現(xiàn)象是偶發(fā)死機(jī)且發(fā)生在插拔USB時(shí)。后來在HardFault中斷里打印出出錯(cuò)地址發(fā)現(xiàn)出錯(cuò)地址落在PSRAM映射區(qū)域內(nèi)才把矛頭指向初始化順序。修復(fù)方案有兩種要么在PSRAM初始化完成前不使能USB中斷要么在USB中斷處理里加一個(gè)PSRAM就緒標(biāo)志的保護(hù)。我最后選了第二種因?yàn)閷?duì)系統(tǒng)啟動(dòng)時(shí)間更友好。同時(shí)還加了一個(gè)調(diào)試開關(guān)可以在初始化階段通過串口打印每個(gè)外設(shè)的就緒狀態(tài)避免再次出現(xiàn)這種無聲無息的初始化順序問題。這個(gè)案例很能說明三個(gè)子系統(tǒng)單獨(dú)看都沒問題湊在一起就會(huì)出現(xiàn)不確定性傳染。排障的時(shí)候不要只盯著USB協(xié)議棧也要看它調(diào)用的資源內(nèi)存、Flash、時(shí)鐘是不是還沒準(zhǔn)備好。6. 排查方法論與避坑速查表6.1 把玄學(xué)變成科學(xué)的四個(gè)步驟這類多外設(shè)聯(lián)動(dòng)的不確定性問題最忌憑感覺改代碼。我總結(jié)了一套流程按順序執(zhí)行大部分問題都能收斂。第一步固定現(xiàn)場(chǎng)。復(fù)現(xiàn)異常時(shí)記錄供電電壓、環(huán)境溫度、固件版本、操作序列最好能截圖或錄屏。不能復(fù)現(xiàn)的問題先不要?jiǎng)哟a先想清楚當(dāng)時(shí)的輸入條件。第二步分層隔離。把系統(tǒng)切成獨(dú)立模塊逐層驗(yàn)證。USB枚舉失敗先查設(shè)備端能否單獨(dú)枚舉成功再查驅(qū)動(dòng)再查協(xié)議Flash擦寫異常先單獨(dú)驗(yàn)證Flash讀寫再驗(yàn)證文件系統(tǒng)層不要一上來就懷疑某一層。第三步加觀測(cè)點(diǎn)。在代碼里加日志、狀態(tài)寄存器快照、錯(cuò)誤計(jì)數(shù)。很多偶發(fā)問題其實(shí)是狀態(tài)被覆蓋了加上觀測(cè)點(diǎn)后能看到真正出錯(cuò)的位置。觀測(cè)點(diǎn)要盡量輕量不要改變?cè)袝r(shí)序否則可能測(cè)不出來。第四步做對(duì)照實(shí)驗(yàn)。改一個(gè)變量跑一批測(cè)試統(tǒng)計(jì)成功率。改兩個(gè)以上變量結(jié)果就很難歸因了。比如懷疑是PSRAM刷新問題還是USB驅(qū)動(dòng)問題就分別做只跑PSRAM壓測(cè)和只跑USB枚舉測(cè)試對(duì)比數(shù)據(jù)。6.2 問題速查表癥狀、原因、排查手段下面這個(gè)表是我在項(xiàng)目群里經(jīng)常貼出來的基本覆蓋了這三個(gè)子系統(tǒng)的常見問題癥狀可能的不確定性來源建議排查手段上電后Flash ID讀錯(cuò)或全F上電復(fù)位時(shí)間不夠、供電不穩(wěn)加大上電延時(shí)讀ID前先發(fā)復(fù)位指令校驗(yàn)IDFlash擦除不成功寫不進(jìn)去狀態(tài)寄存器寫保護(hù)SRP/BP位、WP#引腳被拉高讀狀態(tài)寄存器按需發(fā)解鎖命令檢查WP#硬件Flash擦寫偶發(fā)失敗系統(tǒng)死機(jī)擦寫時(shí)間超過預(yù)置延時(shí)、共享SPI總線沖突改成WIP輪詢最大超時(shí)兜底檢查CS切換間隔16MB以上Flash地址錯(cuò)亂3字節(jié)/4字節(jié)地址模式切換遺漏確認(rèn)芯片上電默認(rèn)模式按芯片手冊(cè)發(fā)模式切換命令PSRAM初始化失敗/數(shù)據(jù)錯(cuò)誤上電穩(wěn)定時(shí)間不足、Latency配置錯(cuò)、模式位漏設(shè)增大穩(wěn)定延時(shí)讀ID校驗(yàn)抓SPI波形比對(duì)命令序列PSRAM偶發(fā)花屏/數(shù)據(jù)錯(cuò)亂DMA超時(shí)設(shè)置較短、共享總線干擾、電源紋波放寬DMA超時(shí)CS間隔加長(zhǎng)檢查供電退耦USB枚舉偶爾失敗時(shí)鐘精度不足、D上拉時(shí)序不對(duì)、線纜過長(zhǎng)換外部晶振檢查上拉使能時(shí)機(jī)換短線測(cè)試USB在Windows上嘆號(hào)描述符錯(cuò)誤、驅(qū)動(dòng)異常、供電不足用USB Device Tree Viewer查狀態(tài)抓Wireshark包量電流USB虛擬串口偶發(fā)斷連USB中斷響應(yīng)超時(shí)、系統(tǒng)其他任務(wù)占用時(shí)間過長(zhǎng)檢查中斷服務(wù)耗時(shí)拆分長(zhǎng)任務(wù)調(diào)整中斷優(yōu)先級(jí)USB OTG燒錄Flash失敗鏈路中未做CRC/分塊斷點(diǎn)、Flash擦寫沒確認(rèn)上位機(jī)和固件都加CRC分塊重傳機(jī)制輪詢WIP確認(rèn)6.3 我這些年用下來最順手的工具與習(xí)慣工具方面硬件上我建議備常用的邏輯分析儀至少16通道、100MHz以上、USB協(xié)議分析儀預(yù)算不足可以先用WiresharkUSBPcap替代、支持模擬/數(shù)字雙通道的示波器。軟件上USB Device Tree Viewer、Wireshark、總線抓取工具、串口調(diào)試助手這幾個(gè)常備。Flash和PSRAM排障時(shí)邏輯分析儀抓SPI波形基本一抓一個(gè)準(zhǔn)比盲改代碼高效太多。習(xí)慣上我有幾個(gè)一直堅(jiān)持的做法。第一所有外設(shè)初始化代碼都做成可配置、可打印狀態(tài)的調(diào)試接口跑起來后先看狀態(tài)再看現(xiàn)象。第二關(guān)鍵行為Flash擦寫、USB枚舉、PSRAM初始化都加超時(shí)監(jiān)控和錯(cuò)誤上報(bào)寧可多打印幾行日志也不要讓錯(cuò)誤被吞掉。第三凡是涉及延時(shí)的地方全部都寫成宏或配置文件方便做全溫區(qū)、全電壓測(cè)試時(shí)批量調(diào)整。最后也是最重要的遇到玄學(xué)問題先忍住不亂改按上面四步走絕大多數(shù)問題都能在一個(gè)小時(shí)內(nèi)定位到物理層面或協(xié)議層面的真實(shí)原因。我個(gè)人這幾年的體會(huì)是PSRAM、NOR Flash、USB這類標(biāo)準(zhǔn)外設(shè)之所以還讓人頭疼不是因?yàn)樗鼈儽旧碛卸鄰?fù)雜而是因?yàn)樗鼈兏髯缘牟淮_定性疊加在一起時(shí)會(huì)呈現(xiàn)出系統(tǒng)級(jí)的詭異現(xiàn)象。把每個(gè)子系統(tǒng)的物理原理、時(shí)序邊界吃透再配合結(jié)構(gòu)化的排查方法那些看似隨機(jī)的問題其實(shí)都能收斂成確定的Bug。最后再分享一個(gè)小技巧在所有涉及等待外設(shè)就緒的代碼里我都會(huì)留一個(gè)帶時(shí)間戳的日志把每個(gè)階段的等待時(shí)間打印出來。這樣在復(fù)現(xiàn)故障時(shí)只要看一眼日志就能知道到底是哪個(gè)環(huán)節(jié)的時(shí)間裕量不夠比抓瞎式排查快得多。希望這篇內(nèi)容能幫你在下個(gè)項(xiàng)目里少踩幾個(gè)坑。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
97操碰人免费| www99热| 婷婷激情五月天小说| 五月婷婷丁香大香蕉| 丁香婷婷六月天| 色婷婷六月精品| 99超级碰碰| 精品亚洲国产成AV人片传媒| 泰州成人视频| www.久久99| 丁香五月久久综合| 婷婷深爱色五月| 91色吧网| 九久久精品视频99| 在线免费观看激情视频| 久婷婷久草| 色五月婷婷久久| 婷婷婷婷婷婷婷五月丁香| 久久er视频6| 日韩三十六页| 东北熟女视频99| 亭亭五月丁香五月天激情| 草综合14| www婷婷| 天天拍夜夜爽日日| 丁香五月婷婷激情视频播放| 这里只有在线精品| 熟女乱论网| 女人天堂久久| 久久99网址| 91黄色五月天视频| www.夜夜爱.com| 极品少妇XXXX精品少妇偷拍| 做爰丰满少妇1313| 极品少妇高潮啪啪AV无码| 香蕉国产2013| 天天射综合网站| 五月在线| 啪啪激情网| 51国精产品自偷自偷综合| 99视频精品全部免费观看| 久久婷婷五月天激情新地址| 日韩 欧美 国产 一区 二区| 国产26uuu视频| 婷婷五月情色| 逼里香不卡| 婷婷五月天色综合| 婷婷五月天激情免费在线观看| 69色色视频| 天天天日天天天干| 亚洲六月婷婷| 囯产精品久久欠久久久久久九大| 性av| 色婷婷五月影视| 五月停停99| AV在线免费观看不卡| 五月丁香综合| 婷婷色五月综合| 丁香婷婷AV| 国产精自产拍久久久久久蜜 | 婷婷性爱| 五月婷婷色色爱| 亚洲狠狠终合停停终合| 大香蕉婷婷久久| 91欧美日韩综合| 欧美色婷婷| 中文字幕婷婷五月天| 激情综合自拍五月婷婷色五月| 996er在线观看| 亚洲 激情 中文| 69五月天视频| 丁香五月天社区| 99热碰碰热| 婷婷天堂综合| 激情五月天。| 色欲久久综合| 婷婷色5月激情网| 丁香六月综合激情| 琪琪色综合网站| 影音先锋男士资源网一区| 日韩AV成人电影| 六月婷婷色色色| 天天激情5月天亚洲| 亚洲 在线 性爱| 开心婷婷五月中文字幕组| 五月天天爽| 九色91国产| 丁香五月综合| 五月婷激情影院| 五月婷婷黄色| 丁香五月婷婷综合精品素人| 久久久久久久久月丁| 五月丁香婷久久| 最新久久网址| 天天日夜夜曹| 成人五月丁香花| WWW色色色COm| 狠狠插狠狠插| 伊人喵咪a V| 婷婷娌伦网| 五月激情日本在线| 婷婷在线精品| 五月婷婷丁香六月| 国产精品热搜丁香五月婷婷| 精品一二三区久久AAA片| 色婷婷很很丝袜| 九九自拍网| 春色激情第四色| AA久久| 少妇水多A片太爽了| 天堂网色婷婷| 激情六月婷| 婷婷色五月天在线观看| 91.com男女操| 99精品国产在热久久婷婷| 亚洲乱码日产精品BD| 海外网站专业操老外| 亚洲综合网激情小说| 色婷婷丁香AV综合| 色婷婷亚洲婷婷| 激情四射五月天| 激情婷婷激情在线不卡| 麻豆123区| 亚洲av网站| www99精品日韩| 狠狠操狠狠爱| 综合色播| 五月婷婷五月丁香综合| 99热色精品| 熟女91九色| 亚洲最大五月天成人网| 99网址在线观看| 婷婷五月天美女| 夜夜久久综合网| 免费黄网不卡AV| 丁香五月天导航| 久久性爱视频| 超碰人人91| 亚洲五月花| 亚洲春色奇米影视| 婷婷丁香综合成人| 五月婷狠狠| 五月激情视频网| 三级黄网站| 97人妻碰碰碰久久香蕉| 九月婷婷综合| 色五月久久成人婷婷| 五月婷婷中文字幕| 亚洲五月天天| 国产精品第一国产精品| 五月香六月婷| 999久久久国产精品| 99色最新在线视频网站| 欧美日韩中国| 欧美色99| 色婷婷成人丁香| 久久婷婷亚洲| 婷婷激情欧美| www.91AV.COM| 丁香六月啪啪| 色青五月天| 97在线99| 另类图片五月天| 色射7856五月天激情四射| 五月婷婷免费看| 久久久亚洲成人无码A片| 日日插日日干| 亚洲旡码| 人人人操 超碰| 狠狠草综合网| 久九色| 丁香五月激情综合| 午夜激情五月| 五月丁香操婷逼| 97色婷| xxxx五月| 色婷婷综合影院| www.久久| 婷婷五月草| 91视频五月丁香| 婷婷午夜天| 婷婷丁香五月天欧美| 色狠狠色噜噜AV天堂五区| 99人人操人人摸| 久久婷婷的综合色丁香五月| 99综合视频一体| 婷婷开心激情综合五月天| 97人操| 五月婷婷色| 丁香六月 人妻| 秋霞九九无码| 日本99久久| 成年人99热| 性爱网六月丁香| 色九九综合| 日日操,日日爽| 婷婷九九色| 五月丁香婷婷综合| 99色色最新视频| 久久五月热| 五月婷丁香| 婷婷五月天深爱| 五月天堂色色| 9色91视频| 婷婷激情在线| 婷婷五月天啪啪| 91婷婷| 五月婷婷综合激情小说| 啪啪啪大香蕉| 中文久久婷婷| 女人天堂 AV| 色丁香五月婷婷| 五月丁香综缴情性爱| 亚洲色碰| 91色涩| www.五月天激情| 色五月天激情| 久久九精品| 专区无日本视频高清8| 99热99热在线| 深爱激情六月| 五月婷婷丁香六月在线| 五月六月丁香婷婷在线观看| 5月激情天| 黑人无码一区| 青青久久大香蕉| 日本乱子人伦在线视频| 五月丁香六月色| 五月丁香色婷婷| 婷婷综合五月色播| 5月婷婷激情6月| 亚洲旡码| 99在线视频播放| 综合网狠狠| av网站不卡在线| 精品久久人妻| 婷婷综合网站| 噼里啪啦在线观看免费完整版视频| 深爱激情丁香五月| 久久sp免费视频| 人妻体体内射精一区二区| 婷婷六月激情| 综合久久综合| 国产激情综合五月久久| 79精品视频在线观看,| 少妇性按摩无码中文A片| 涩涩涩.com| 午夜九九电影| 99亚洲色| 99热只有这里有精品| 夜丁香五月婷婷| 天天色官网| 国产精品久久久久久五月天加勒比| 天天拍夜夜撸| 丁香五月综合在线播放| 中文在线视频久1| 开心综合激情综合| 色色亚洲视频| 九九亚洲综合| 婷婷五月伦理| 骚。com| 国产精品成人av在线观看春天| 丁香五月视频在线观看| 青青草六月丁香| 五月丁香久久激情网| 操笔无码| 激情五月婷婷老师| 99热这里只有精品1025| 五月婷婷性爱| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 激情婷婷丁香色五月| 丁香伊人激情| 色综合色色| 婷婷色色丁香五月天| 五月丁香婷婷综合视频| 婷婷六月天| 亚洲成人免费电影| 婷色综合| 五月丁香激情啪啪| 婷婷五月丁香成人| 五月丁香六月婷综合成人综合| 婷婷刺激综合| 婷婷五月天激情综合| 噜噜噜精品欧美成人在线观看| 亚洲综合婷婷六月丁香五月| 97干97色| 国产性爱大片久久| 欧美日本VA| 婷婷成人综合五月| 五月丁香成人| 亚州第一黄网| 五月丁香久久网| 日韩久久这里只有精品| 色欲天天综合| 8050一级网| 五月激情婷婷综合| 五月天激情日色在线| 激情五月婷婷网| 六月婷久久| 婷婷五月在线视频| 国产精品成人AV在线| 丁香婷婷五月天网站| 婷婷激情欧美| 香蕉综合网| 美女被操一区二区| 成人婷婷桔色| 色五月天丁香婷婷| 丁香青青五月天| 婷婷六月色| 婷婷色五月天在线观看| 伊人无码高清| 99在线精品观看99| 91九色中文| 国产AV一区二区三区日韩| av第一二区| tingting五月天亚洲| 五月天综合| 大地9中文在线观看免费高清| 丁香六月婷婷色XXXXX| 激情综合4月| 停婷丁五月在线| 国产精品色色| 99er日韩| 欧美婷婷丁香五月社区| 99热大| 激情五月婷婷色综合| 99re热在线观看| 国产五月视频| 99综合婷婷五月| 日本美女上人| 99干日本| 五月丁香婷婷色色色| 色婷婷综合久久| 99er这里只有精品| 色五月欧美| 99九九在线观看免费| 五月丁六月香| 就爱日五月天| 色狠久| 成人中文网| 五月色婷婷在线观看| 玖玖午夜视频| 亚洲熟女色| 深爱五月激情| 亚洲AV电影av| 丁香五月激情视频| 五月综合激情网| 欧美噜一噜| 欧美S码亚洲码精品M码| 提提热五月天婷婷| 91制片厂久久久国产电影| tingting五月天亚洲| 能直接看的av网站| 综合五月天亚洲婷婷| 婷婷五月丁香综合| 新久久五月天激情| 国产毛片精品一区二区色欲黄A片| 九月激情网| 日本美女上人| 国产99美少妇| 国产毛片精品一区二区色欲黄A片 99国产在线精品视频 | 婷婷五月天成人基地| 裸体做A爰片毛片A片免费| 婷婷亚洲日本| 337p大胆噜噜噜噜噜91Av| 综合色五月天| 婷婷亚洲色| 久久精品爱爱| 欧美A级成人婬片免费看理论| 思思99精品视频在线观看| 色噜噜狠狠色综无码久久合欧美| 人妻肉射免费观看| 成人一区在线观看| 99爱爱| 九九精品热| 色综合99| 丁香五月亚洲天堂| WWW,五月| 国产精品涩涩涩视频网站| 午夜 外网 精品 在线| 国产偷人爽久久久久久老妇APP| 丁香婷停五月激情综合深爱| 五月婷婷色色网址| 丁香六月婷婷久久综合| 九九操综合网| 五月天综合激情网| 风流少妇A片一区二区蜜桃| 激情网开心网| 91精产一区三区免费观看| 人人妻人人澡| 婷婷亚洲在线| 91一起操| 国成人网| 日本婷婷| 色婷婷www| 大香蕉伊人99| 九色在线五月婷婷网址| 久久婷婷五月综合伊人| 亚洲综合婷婷| 99热伊人| 久草婷妨| 五月丁香在线| 伊人五月天| www.sd-xiangsu.cpm| av一区免费看| 大香蕉九九| 另类小说激情五月天| 91丨九色丨东北熟女| 99视频| 日韩一级网站| 婷婷五月天成人综合网| 色五月天影视| 欧美日韩成人在线网站| 不卡的AV网站| 日韩操人| 91se在线视频| 夜夜干夜夜操| 天天干天天 亚洲| 五月天婷婷綜合院| 91久久九九| 日本色五月| 激情五月天开心总和网| 亚洲五月丁| 日本美女上人| 日韩黄色AV无码| 国产亚洲在线观看| 无码人妻激情| 久久久无码精品成人A片小说 | 欧美日韩成人免费在线| 色色色色色色色五月| 夜夜爱网站| 91视频综合网| 色婷婷五月视频| 少妇日麻屄| 91丨九色丨熟女丰满| 婷婷丁香无码专区| 专区无日本视频高清8| 99久久婷婷国产综合| 婷婷成人五月天成人文学小说| 久久这里在精品视频| 操人久久| 97色热| 欧美婷婷九月| 五月亭久久无码视频| 黄色热99| 色婷青青| 狼人伊人天堂| 丁香激情综合| 91丁香色| 婷婷亚洲在线| 婷婷综合国产| 日本在线wwww| 99久久久久久久| 97人人操人人拍| yazhoujiqingav| 亚洲V国产V欧美V久久久久久 | 婷婷中文综合网| 怡红院AV亚洲一区二区三区H | 97干网站| 久热9| 亚洲无码另类| 九九色精品| 天天干一干| 五月天桃色深爱网| 欧美人与性动交CCOO| 综合网亚洲| 99热网站| 欧美成人猛片AAAAAAA| 色婷婷六月| 伊人久久艹| 99无码| 大地资源色婷婷视频在线| 丁香啪啪| 中文婷婷狠狠| 亚洲综合无码| 丁香五月综合久久八| 五月天婷婷色五月天| 五月香蕉婷婷| 99国产这里只有精品| 久久99激情丁香婷婷小说网| 成人在线日韩欧美| 夜夜骑夜夜操| 色婷婷丁香女女| 国产人人操| 高清成人综合| 久久五月丁香伊人青草| 久久久久久丁香五月| 五月综合缴情网| 婷婷五月草| 99人碰碰碰| 久热久| 无码成人播放器| 伦乱人妻| 丁香五月性| 激情综合五月.....| 狠狠五月综合在线| 婷婷五月丁香综合| 春色激情| 五月婷婷欧美| 99热在线观看免费| 伊人五月天在线| 婷婷丁香六月天| 五月婷婷在线视频观看| 九九这里都是精品| 亚洲成人丁香花| 4399在线日本A片| 亚洲亚洲激情| 婷婷综合视频| 激情内射人妻1区2区3区| 久久一级免费黄色片| 激情四射五月天| 深爱激情av| 久婷| 五月激情婷婷四射| 丁香六月婷婷缴情欧美| 国产精品色婷婷久久久精品| 亚洲深喉aV| 丁香五月天狠狠操| 91小黄书网址在线观看| 五月丁香婷婷基地| 伊人色五月| 久久久婷丁香五月| 人妻无码精品一区| 亚洲婷婷久久综合| 色五月婷婷激情| AV性爱网| 色碰碰视频| 天天干天天爽天天操| 激情伊人五月天| 美女xx不卡| 婷婷一本和五月丁香| 欧洲一区二区| 97久久超视频| 中文字幕乱轮| 成人网在线观看视频| 久久综合激情| 五月婷婷丁香五月 | 天天干天天干天天| 日本三级第一页| 六月婷婷之青青草| 婷婷婷婷色| 丁香久月婷| 色噜噜婷婷| 亚洲久热| 日日操夜夜爽白洁| 日本99久久| 97碰成超视频免费视频| 色婷婷成人五月| 欧美性生交A片免费看| 久久激情视频99| 成人婷婷| 五月丁香激情综合啪啪| 99综合| 婷婷5月久久综合网站| 丁香五月另类小说在线阅读| 久久思思热| 色婷婷电影网| 99色精品视频| 另类激情综合| 国产五月丁香在线| 欧美交换配乱吟粗大25P| 色噜噜狠狠色综合AV兰草影视| 91视频一起草| 99热精品在线播放| 天天插天天插| 成人婷婷五月天| 九热视频| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 日韩xx在线| 99色色视频| 五月天婷综合| av久热| 啪啪91| 五月丁香天堂网| 五月激情啪啪| 青青青在线视频国产| 色婷婷精品小视频| 丁香六月在线综合| 五月丁香婷婷AV| 在线观看av网站| 伊人五月天综合网| 五月丁香六月婷综合成人综合| 精品在线| 婷婷五月激情基地| 国产精品色色| 四色综合网| 成人在线日韩| 噜噜久| 色婷婷色| 午夜大香蕉| 天天插综合在线| ..真实国产乱子伦毛片| 99综合| 91久热| 激情网五月天| 激情五月婷婷丁香综合网| 婷婷成人在线| 色五月婷婷网| 色吧五月婷婷| 91碰视频| www.婷婷com| 日日夜夜干| 精热在线综合网| 任你躁XXXXX麻豆精品| 直接看的av| 成人做爰A片免费看网站找不到了| 粉嫩AV久久一区二区三区| 99色最新在线视频网站| 女婷久久| 五月婷婷性爱网| 婷婷五月丁香久久| www.激情五月天| 久久电影4399| 苗黎美女四级成人版一级二级毛片| 天天插,天天射| 九九九日本熟女| 婷婷丁香九色| 色色五月婷婷| 久久亚洲激情五码| 第2色五月婷| 99伊人婷婷在线| www.99热| 激情视频网址| 无码人妻一区| www.思思99热| 日韩啪啪视频| HD久久精品视频| 开心五月婷婷激情| 婷婷六月天天| 亚洲欧美一区二区三区四区爱爱动图| 亚洲国产精品成人免费一区久久久在线观看AAAA | 色婷婷丁香五月| 五月丁香六月婷婷亚洲激情综合| 五月丁香综合成人社区| 亚洲六月综合激情久久下卡| 深爱婷婷网| 天天综合精品| 79色色| 春色激情第四色| 六月婷婷色综合| 婷婷丁香综合| 97碰碰叉| 1024操逼| 婷婷色情 | 丁香五月手机在线| 97香蕉碰碰人妻国产欧美| 九九精品在线网| 久久性爱视频免费| 久久这里都是精品免费| 丁香五月婷婷亚洲综合精品| 超级碰碰碰碰视频| 欧美激情久| www.91av.com| 国产精产国品一二三在观看| 五月综合激情| 丁香五月社区| 亭亭玉月丁香| 日日夜夜狠狠| 天天干天天做| 亚洲婷婷五月天| 天天色亚洲| 久久精典| 深爱五月激情网| 九洲一级A片| 五月 激情视频| 亚洲AV成人无码电影| 人人操超碰| 激情九月婷婷九月| 五月丁香久久激情综合| 色吧网综合| 欧美黄色一级| 热久久婷婷| 五月丁香婷婷99| 婷婷色一二三区波多野结衣| 色婷婷性爱| av在线免费网站| 手机旧版看人妻1025| 思思99久久| 日韩成人av在线| 91天天操天天干天天射| wWwCom夜操wwW| 99精品无码视频| 立川无码av| 国产六月婷婷| 五月天基地| 色小说五月天| 67194成I人在线观看线路1| 99热日韩| 五月丁香婷婷啪啪| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 女同激情久久av久久| 成人av免费观看| 天天五月香欧美| 狠狠狠激情网| 五月色婷婷综合| 中文字幕av在线| 九九久久99| 成人免费黄色短视频| 日本久久极品| 久久er视频6| 亚洲综合干| 色J香五月天| 色综合中文| 激情综合色| 96丁香婷婷九月蜜桃综合久久| 九九综合88| 中文字幕在线免费| 能看的AV网站| 婷婷五月天影院| 国产67194| 日韩啪啪自拍| 婷婷五月丁香综合亚洲| 亚洲丁香网| 欧美色97| 午夜无码熟熟妇丰满人妻| 91婷婷五月丁香碰| 五月婷婷丁香五月亚洲色| 婷婷丁香五月综合激情小说| 丁香五月成人| 婷婷基地成人五月天| 中文字幕黄色片| 色狠狠色狠狠| 99久久99久久综合| 丁香五月 性爱| 婷婷丁香五月天婷婷| 岛国AV网站| 激情综合五| 欧美人人超级碰| 婷婷九月激情| 综合伊人久久| 色九四色| 久久九九怡红院| 99久久激情视频| 色情五月综合婷婷| 欧美色97| 五月深爱网| 99无码视频| 五月天婷婷綜合院| 天天爽天天摸| 久久精彩视频| 久久婷婷成人| 婷婷性色| 日韩在线视频9色| 丁香五月综合高清在线| 97干婷婷| 中文av在线观看| 五月综合六月丁| 色五月激情网| 激情图片婷婷| 国产va视频| 国产精品天天狠天天看| 丁香六月色婷婷欧美| 91超级碰在线| 热久69| 《蜘蛛女》梁铮1995| 国精产品一区一区三区免费视频 | 五月丁香婷中文| 9久久精品| 亚洲综合婷婷| 性色婷婷| 五月婷婷久久大香蕉| 亚洲热久久| 碰超亚洲| 色色丁香激情五月| 99热人人艹| 婷婷综合在线观看视频| 超pen个人视频97| 婷婷色五月天第7色| 色综合五月天| 色之综合网| 99热这里只有精品免费| 久久五月天激情美女| 丁香五月天啪啪| 精品久久99码| 人妻久久久久久| 五月开心婷婷极品激情| 婷婷丁香人妻天天爽| 精品思思久久| 五月天激情综合网| 色婷婷色五月丁香| 国产乱子轮XXX农村| 六月色五月天天婷婷| 国产成人精品一区二三区熟女在线 | 九久久九精品视频| 婷婷精品性性性性性性性| 色色999三级片| 婷婷色欧美激情| 丁香五月 无码| 婷婷俺去也| 九热...av| 日日干天天爽| 欧洲日韩一区二区三区| 亚洲日比视频| 天天在线XXX| 91碰| 丁香婷婷综合激情五月色| 五月丁香成人版| www久久久久久久| 久久色亭亭五月天| 中文字幕黄色片| 1000部毛片A片免费观看| 久久久五月激| 一起操 91N.com| 操操天堂| 五月激情另类| www狠狠爱com| 在线播放中文字幕| 五月深爱婷婷| avv在线| 婷婷99| 99热精品综合| 4399欧美另类视频| 色偷偷五月天| 婷婷五月天亚洲丁香| 九九干视频| 色色色网站| 亚洲色婷婷五月| 亚欧州精品视频| 国产成人精品一区二三区熟女在线 | 91viP在线看| 激情小说五月天中文字幕| 国产三级在线播放| 色九月婷婷| 久久婷婷五月天激情唯美| 九九热99视频在线| 欧美日本免费一道免费视频 | 91碰视频| 思思热再线视频| 婷婷五月综合久久中文字幕| 久久小说网| 影视av久久久噜噜噜噜噜三级| 日本人妻丁香婷婷久久寝取熟女五月| 九九精品婷| 激情丁香五月| 激情网五月天| 日逼免费视频 | 欧美婷婷综合| 天天日天天插| 九九99精品视频| 伊人婷婷五月| 狠狠大香婷婷爱| 丁香六月天婷婷| 99热免费| 秋霞成人毛片一级A片| 九色色| 色欲婷婷夜夜| 99亚洲精品视频| 五月天丁香色色| 天天爽夜爽| 日本婷婷| 这里只有精品视频一区| www久久99com| 久久久99婷婷久久久久久| 九九99精品免费播放| 九九色热| 97操视频| 六月激情综合| 天天天天爽爽天干| 色婷婷伦理| site:hcxsz888.com| 成年视频免费观看| 婷婷福利影院| 麻豆观看夏晴子| 操操啪| 欧美成人A片AAA片在线播放| 婷婷五月花| 亭亭五月色男人| 99热精国产这里只有精品| 五月天伊人av| 天天干,天天舔| 激情婷婷丁香五月天| 综合激情四射一theav| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 大香蕉人妻| 久久99激情| 狠狠干综合| 停婷丁五月在线| 婷婷伊人五月天| www.五月天社区| 日日夜夜综合| 性生活视频98791| 另类综合国产| www狠狠| 五月激情婷婷播播网| 一本久久亚洲五月婷婷| 综合激情网五月激情| 99 热国产在| 天天色月| 亚洲精99| 婷婷天天插天天爱| 午夜九九电影| 精品少妇蜜臀91| 国产精品久久久久久五月天加勒比| 春色激情第四色| 婷婷丁香基地在线| 激情五月婷婷中文字幕| 99精品在线下载| 久久婷婷在线| 五月天婷婷丁香社区| 天天久综合| 天天爽夜爽| 五月天激情小说| 狠狠久久婷五月| 五月婷婷色五月| 五月丁香综合网| 嫩BBB搡BBBB榛BBBB| 9国产在线视频| 五月丁香狠狠爱婷婷综合| Y11111111111少妇电影院| 97国产精品女人碰碰| 欧美色碰| 99操中文视频| 日操| 淫荡综合网| 91精品久久久久、久五月天| 午夜成人综合| 婷婷五月丁香基地| 极品少妇高潮啪啪AV无码| av大片在线| 色五月色五天色情网址| 操逼三区| 五月色婷婷亚洲| 婷婷激情六月中文| 夜夜综合色| 五月停停999| 婷婷五月综合在线| www.韩日视频| 天天射天天干天插色综合| 99热成人永久免费| 婷婷六月伊人| 九九热中文| 噼里啪啦在线观看免费完整版视频 | 色婷婷88| 色婷婷成人做爰A片免费看网站 | 激情五月天丁香| 激情五月婷婷伊人| 色婷婷丁香九月| 99自拍视频| 综合五月激情| 婷婷激情性爱| 婷婷五月在线影院| 99re免费在线视频| 五月婷婷伦理| 日韩1区2区| 丁香五月天啪啪| 91碰操| 五月开心婷婷极品激情| 色丁香六月| 亚洲综合五月天婷婷| 综合久久五月| 婷婷丁香五月av| 婷婷五月天堂| 九九热精品视频在线观看| 国产综合丁香五月天| 亚洲国产色婷婷| 深爱综合网| 亚洲字幕AV一区二区三区四区| 97婷婷丁香| 国产精品色一哟哟| 国产成人网址| 日韩无码亚欧无码| 亚洲激情 久久| 成人AV中文字幕| 婷婷色五月91啪啪| 超碰碰碰碰| 五月天婷婷在线视频| 97在线观视频免费观看 | 婷婷月五天在线在线看| 五月丁香六月婷婷激情视频在线观看免费| 丁香激情五月天| 99热99美国在线观看| 1010日日无码| 五月丁香综合啪啪| 任我肏| 日本五月天激情| 亚洲日韩操B| 99这里有精品视频3| 久久人人九| 麻豆忘忧草午夜| 3p日韩网站视频| www.夜夜操| 欧日韩成人| 五月天婷婷丁香基地在线观看| 久久婷婷五月综合色区| 亚洲色五月天是什么| 亚洲五月花| 成人av在线网站| 51国精产品自偷自偷综合| 爱穴久久| 亚洲久久婷婷| 国产成人精品一区二三区熟女在线| 成人噜噜网| www九九热| 日本一毛片| 99热这里只有99| 久久婷婷内射| 99ri视频在线播放| 激情五月六月| 丁香五月天天| 婷婷五月天在线视频网站| 国内在线99视频| 五月婷婷激情综合网| www.cao.com久久| 丁香五月无码| 亚洲婷婷综合视频| 色色色9| 国产a视频| 丁香色五月天| 色婷婷精品视频| 九九热在线视频| 熟女啪啪视频| 97婷婷狠狠| 大香蕉啪啪| 99久久九九| 婷婷丁香六月综合激情站| 思思热这里只有精品| 久久五月天激情美女| 综合五月天| 天天综合.com| 大香蕉 婷婷| 五月花综合视频| 婷婷九月丁香天堂丁香天堂| www.天天干| 国産精品| 91丨九色丨43老版熟女| 婷婷五月丁香高清无码| 色狠狠色综合久久久绯色aⅴ影视| 婷婷六月久久| 99久久偷拍视频| 久久久这里有精品| 欧美99视频| 亚洲无码色色| 婷婷深爱五月天在线| 激情综合网激情五月婷婷| 亚洲热久久| 伊人www22综合色| 99热这里只有精品55| 精品福利911| 6 9式性爱视频在线播放| 婷婷色操| 18av天堂| 99精品久久久久久| 色五月婷婷大香蕉| 综合97五月| 亚洲激情四射色| 久久综合五月天| WWW.天天日| 婷婷色五月大香蕉在线| 思思热视频在线| 婷婷成人综合| 婷婷婷狠狠| 激情图片婷婷丁香五月| 五月丁香婷成人网| 大香伊人婷婷影院| 综合色情网| 丁香五月婷婷亚洲另类| 亚洲婷婷婷| 青青草免费公开视频| 亚洲99精品欧美一区| 欧美99热| 五月激情综合婷婷| av九九| 99热亚洲精品66| 色欲久久综合| 99re资源在线视频导航| 97中文在线| 五月丁香六月情婷婷久久| 在线成人视频免费| 伊人在线视频| 精品99在线| 婷婷操逼网| AV色婷婷| 真实的国产乱XXXX在线91| 久久婷婷影院| 日韩欧美一级大黄网站| 俺来也综合网精品一区| 91窝窝| 五月丁香婷婷啪啪| 永久免费一区二区三区| 操日本人妻视频| 五月婷网| 欧美久久久久久久久中文字幕| 色五月婷婷色| 26UUU欧美激情一区二区| 五月丁香六月合| 综合五月婷婷| 97超级碰碰碰| 欧美五月停| 天天爽天天爽| 99精品在线观看视频| 操一操| 这里只有精品,日韩视频| 一区二区乱码视频| 五月色丁香婷婷综合| 国产欧美性成人精品午夜| 国产激情综合五月久久| 精品人妻伦一二三区久久| 日韩乱玛久久| 伊人五月久久| 人人澡天天色天天做| 超碰93在线观看| 激情超碰网| 欧美亚洲色色色色| 五月激情综合网| 色五月激情婷婷| 九九色大香蕉| 99热这里只有精品4| 天天擼久久擼在线| 千人斩操逼| 99热综合在线| 99日本精品视频热| 日本人人干| 丁香综合久久| 久久九九经典| 五月天大香焦| 91聚色综合网| 色网五月婷婷| 人妻无码视频网| 亚洲日本韩国| 久久精品国产一区二区三区四区| 丁香五月影院| 99热精品在线播放| 男人天堂99| 五月激情婷婷综合| 五月综合丁香婷婷| 日韩欧美成人片| 欧美久久网| 精品久热69| 99riAv1国产在线观看| 五月丁香婷婷婷激情爱爱| 久久婷婷五月综合色丁香| 日本在线va| 五月天激情国产综合婷婷婷| 日日干日日| 99热热这里只精品996小说| 婷婷激情图片| 色婷婷a| 欧美日韩99| 日日天天干| 九九色综合| 五月天婷婷基地| 99无码视频| 深爱激情六月天| 超碰国产在线观看| 风流少妇A片一区二区蜜桃| 五月天婷婷综合| 亚洲12p| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 韩国久久少妇视屏| 99亚洲无码| 午夜婷婷久久| 久久丁香| 欧美黑人巨大性生话| 欧美三级巜人妻互换| 丁香深五月婷婷| 日本在线视频播放91| 亚洲热视频在线| 日韩免费视频| 中文字幕丰满乱孑伦无码专区| 涩玖玖免费视频| 嫩模aV在线| 久热这里只有精品在线观看 | 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | A久久| 91无码一区人妻A片蜜| 日本nghangse中文字幕| 久久久性爱网| 涩涩五月天综合| 婷婷五月婷婷五月| 人人草人人舔| 9久久精品| 九月性爱网| 五月丁香啪啪综合| 五月色 亚洲| 97人人射| 99热99色| 日日影院 | 国产小网站| 激情五月天黄色小说| 五月婷婷免费视频| 成人免费高清在线播放| 日韩人妻无码专区| 九一牛视频探花| 级情九色| 亚洲最大五月六月丁香婷婷| 91丨九色丨熟女|老版| 在线观看免费视频| 欧美操逼天堂| 人人舔人人色人人高潮| 青青草激情网| 丁香九月激情| 在线看av| 五月青青草综合| 五月丁香在线| 亚洲乱码日产精品BD| 午夜婷婷久久| 五月欧美色色五月| 色婷婷丁香| 五月天啪啪网| 婷婷丁香五月天哟啪| 开心色五月天久久久久久久| 五月激情婷婷在线| 婷婷香蕉视频| 2025中文在线视频字幕免费观看| 五月婷婷成人| 少妇人妻偷人精品无码视频新浪 | 五月丁香六月综合情在线观看| 久久成人人妻| 丁香五月激情网| 久久98热re| 91久久婷婷人人澡草| 开心激情婷婷| 五月丁香六月婷婷久久肏| 天天日夜夜夜操操操操| 激情视频网址| avv在线| 久久久久人无码人妻| 日韩无码色色| 97人人爱人人操| 狠狠干思思热| 另类在线| 久久婷婷亚洲| 亚洲激情另类| 婷婷综合在线网| 97涩涩丁香五月天| 五月天com| 丁香婷婷色色| 婷婷十月激情综合网| 激情婷婷丁香| 成人必爱视| 五月天婷婷在线观看| WWW,五月| 五月婷婷六月色| 31色区视频免费看| 天天操夜夜玩!| 99精品无码| 久久色五月天| 99热精品在线| 婷婷内射视频在线| www.五月天| 综合www色| 亚洲成人在线五月天| 日本eVa一区=区视频| 久久这里只有精品07| www.婷婷.com| 久热婷婷| 久草婷婷| 久久人操| 激情九月综合| 五月婷精品| 91色色色| 久久综合九九| 五月天国产| 久久久久久久综合狠狠综合| 六月综合婷婷开心伊人| 亚洲九区| 婷婷五月色播放| 久99热| 99热精品在线观看| 天天日日人| 日本欧美成人片AAAA| 婷婷五月开心中文字幕色| 熟妇人妻中文字幕无码老熟妇| 狠狠擼综合| 91制片厂久久久国产电影| 99视频这里有精品免费观看|