99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Cortex-M HardFault定位實戰(zhàn):從異常模型到現(xiàn)場追蹤

Cortex-M HardFault定位實戰(zhàn):從異常模型到現(xiàn)場追蹤 最近一直被HardFault折騰得頭皮發(fā)麻的兄弟或者剛接觸Cortex-M系列芯片、對異常處理機制還有點懵的新手這篇文章就是給你寫的。做嵌入式開發(fā)尤其是基于Cortex-M內核的MCU開發(fā)幾乎沒人能繞開HardFault這個坎。它不像普通邏輯Bug那樣能靠肉眼掃代碼看出來往往是程序跑著跑著突然就掉進一個死循環(huán)調試器一停PC指針指到一個莫名其妙的地址看門狗又跟著湊熱鬧整個系統(tǒng)直接癱瘓。我最早被HardFault支配的時候項目工期緊板子還只有一塊只能靠復位大法續(xù)命后來踩的坑多了才慢慢摸清楚這套異常處理機制的脾性。其實Cortex-M的異常和中斷處理是一個非常精巧的系統(tǒng)你把它搞明白了HardFault定位就是一道送分題。這篇文章不聊虛的直接從內核異常模型講起把HardFault的根因、Cortex-M異常處理流程、借助Keil MDK進行現(xiàn)場追蹤和調試的完整套路都掰開揉碎講清楚。無論你是用STM32、GD32還是其他Cortex-M內核的國產MCU這套方法論全部通用保證你下次再遇到HardFault能少掉一大半頭發(fā)。1. 先吃透Cortex-M異常處理模型1.1 異常和中斷的底層關系很多初學者會把“異常”和“中斷”當成一回事其實在Cortex-M內核里這兩個概念有明確的層級關系。從ARM官方手冊的定義來看異常Exception是所有打斷CPU正常執(zhí)行流程事件的統(tǒng)稱而中斷Interrupt只是異常的一個子集專指由外部引腳或內部外設觸發(fā)的那一類。Cortex-M3/M4內核把異常源按編號排了一張表編號越小優(yōu)先級越高這里說的優(yōu)先級是數(shù)字大小和實際優(yōu)先級高低相反。0號是棧頂?shù)刂?號是復位異常2號是NMI不可屏蔽中斷3號是硬故障HardFault4到10號分別是MemManage、BusFault、UsageFault以及幾個保留項11號是SVCall14號是PendSV15號是SysTick再往后就是外部中斷IRQ了也就是我們平時在STM32里配置的EXTI、UART、TIM等中斷。為什么要先講這張表因為HardFault在異常向量表里的位置是固定的3號它的優(yōu)先級默認是-1比除NMI和復位之外的所有異常都要高。這就意味著一旦觸發(fā)HardFault除了NMI能插一腳其他任何中斷都沒法搶占它處理器會立刻跳轉到HardFault_Handler。反過來如果某個異常的處理程序在執(zhí)行過程中出了問題而它的優(yōu)先級又比HardFault低那么就會被HardFault吞掉不會再報原來的錯誤。這里有個非常容易踩的坑很多人在寫中斷服務函數(shù)的時候發(fā)現(xiàn)程序跑飛了但調試器彈出來的窗口指向的是HardFault_Handler于是就開始在HardFault里找原因。其實真正的錯誤源頭很可能是你的某個外設中斷里干了不合法的事HardFault只是被拉來“背鍋”的。所以定位HardFault的第一步是搞清楚它是主動觸發(fā)還是被動吞掉。1.2 異常處理的硬件自動壓棧機制Cortex-M在處理異常時有一個和傳統(tǒng)MCU內核比如51、AVR完全不同的特點硬件自動壓棧。也就是說當異常發(fā)生時CPU會自動把xPSR、PC、LR、R12、R3-R0這8個寄存器壓入當前使用的??臻g這個過程不需要軟件干預是在異常入口處由硬件完成的一整套流水線操作。壓棧之后處理器會做什么它會從向量表中取出對應異常的處理函數(shù)地址跳轉過去執(zhí)行。這個過程叫異常返回準備硬件會把LR設置成一個特殊的值叫做EXC_RETURN這個值不是一個真實的內存地址而是一個帶有特殊含義的標記。比如0xFFFFFFF9表示從線程模式使用主棧指針MSP返回0xFFFFFFFD表示從線程模式使用進程棧指針PSP返回0xFFFFFFF1表示從處理模式返回。如果你用了FPU比如Cortex-M4F還會看到0xFFFFFFE9和0xFFFFFFED這類帶FPU擴展位標記的值。理解這個機制對HardFault調試至關重要。因為當你停在HardFault_Handler里時當前棧頂保存的就是觸發(fā)異常那一刻的“案發(fā)現(xiàn)場”——那8個寄存器的值。只要能正確解讀這些值就能還原出CPU在異常發(fā)生前到底在執(zhí)行什么代碼PC指針指到哪個函數(shù)LR是哪個調用者以及R0-R3傳了什么參數(shù)。這套方法在后面我會詳細演示。1.3 為什么要理解異常模型而不是背流程有人可能會說我知道了HardFault的向量號是3也知道了硬件壓棧但這些對我的實際調試有什么幫助有而且?guī)椭艽?。舉個實際例子。我曾經調一個電機驅動板現(xiàn)象是運行幾十秒后系統(tǒng)死機復位后又能跑一會兒。一開始我以為是看門狗問題關了看門狗再跑還是會死。后來我把硬件壓棧的知識用上在HardFault_Handler里把當前棧指針的值讀出來然后按8個字32位系統(tǒng)一個字是4字節(jié)的偏移找到異常發(fā)生前的PC值再在反匯編窗口里定位到這個PC對應的代碼位置結果發(fā)現(xiàn)是在一個電機電流采樣的DMA中斷里代碼試圖訪問一個已經關閉了時鐘的外設寄存器。問題的根源是時鐘門控配置順序錯了導致中斷觸發(fā)時外設時鐘被關掉了總線訪問直接觸發(fā)BusFault又被HardFault吞掉。如果我不懂異常模型和壓棧機制單靠肉眼一行行看代碼這種隨機死機的問題可能要排查好幾天。但有了這套底層知識半小時不到就能鎖定肇事代碼。這就是我為什么堅持先講原理再講實戰(zhàn)的原因原理通了所有所謂的“疑難雜癥”都會變得有跡可循。2. HardFault根因大盤點到底是哪些場景最容易觸發(fā)2.1 存儲訪問類異常越界、未對齊、非法地址Cortex-M內核的存儲系統(tǒng)有一個特點它把存儲訪問錯誤細分為好幾類在System Control BlockSCB里有三個非常關鍵的故障狀態(tài)寄存器分別是可配置故障狀態(tài)寄存器CFSR、硬故障狀態(tài)寄存器HFSR和故障地址寄存器MMFAR/BFAR。CFSR又拆成三個子區(qū)域內存管理故障狀態(tài)寄存器MMFSR、總線故障狀態(tài)寄存器BFSR、用法故障狀態(tài)寄存器UFSR。實際調試里最常見的HardFault觸發(fā)原因匯總下來大概有這么幾類野指針訪問指針未初始化或者指向已經釋放的內存讀寫的時候直接踩到非法地址。數(shù)組越界尤其是寫入越界覆蓋了相鄰變量或者棧上的關鍵數(shù)據(jù)導致返回地址被破壞PC跳飛。棧溢出任務棧分配太小調用層級一深或者局部變量一多棧指針直接頂穿棧底寫到了不可訪問的區(qū)域。未對齊訪問Cortex-M3及以上內核雖然支持部分非對齊訪問但對某些指令比如LDRD/STRD、LDM/STM以及訪問外設寄存器時非對齊會直接觸發(fā)UsageFault或者BusFault。訪問不存在的地址映射了外設的區(qū)域但外設時鐘沒開或者地址本身超出MCU的地址空間。前面兩類是新手最容易踩的也是面試官最愛問的因為它們能反映一個人對內存布局的理解程度。我見過太多這樣的代碼定義一個全局數(shù)組存數(shù)據(jù)然后根據(jù)某個變量對數(shù)組進行寫入變量算出來是負數(shù)直接越界寫到了數(shù)組前面的內存。在Cortex-M上這種越界寫有時候不會立刻觸發(fā)HardFault而是靜默地破壞了相鄰變量的值等程序邏輯表現(xiàn)出來的時候離真正的錯誤點已經很遠了。2.2 異常嵌套與優(yōu)先級配置的經典坑Cortex-M內置了嵌套向量中斷控制器NVIC它允許高優(yōu)先級中斷搶占低優(yōu)先級中斷。這個機制本身是好的但如果你在中斷服務函數(shù)里做了不該做的事就會引發(fā)連鎖反應。最常見的幾個坑第一中斷服務函數(shù)里調用printf。printf內部涉及文件系統(tǒng)級別的緩沖操作有些庫實現(xiàn)里不是可重入的。低優(yōu)先級中斷正在執(zhí)行printf的過程中被打斷高優(yōu)先級中斷里又調用了printf兩個printf的上下文互相踩踏棧上的返回地址被破壞程序直接HardFault。這個問題在帶RTOS的環(huán)境里更明顯因為每個任務的棧是獨立分配的但中斷棧在裸機環(huán)境下就是主棧大家共用。第二中斷里操作浮點寄存器。Cortex-M4F有FPUFPU的寄存器保存是惰性的默認情況下中斷不保存FPU上下文只有真正用到浮點指令時才觸發(fā)自動保存。如果你在主程序里用了FPU又在中斷里用了FPU而RTOS的任務切換沒處理好FPU上下文就會出現(xiàn)FPU狀態(tài)寄存器值錯亂導致計算結果完全不對甚至觸發(fā)UsageFault。第三優(yōu)先級分組不一致。NVIC優(yōu)先級分組寄存器AIRCR可以配置優(yōu)先級的分組方式比如是“搶占優(yōu)先級4位子優(yōu)先級0位”還是“搶占優(yōu)先級3位子優(yōu)先級1位”。如果代碼里不同模塊分別在初始化時往AIRCR里寫分組配置后寫的會覆蓋先寫的整個系統(tǒng)的優(yōu)先級設定就會被攪亂某些原本應該被屏蔽的低優(yōu)先級中斷突然搶占了高優(yōu)先級中斷時序錯亂最終可能引發(fā)HardFault。2.3 指令執(zhí)行類異常未定義指令、除零、狀態(tài)切換失誤還有一類HardFault是從指令執(zhí)行層面觸發(fā)的這類問題在啟用優(yōu)化等級之后尤其難以復現(xiàn)。典型場景包括函數(shù)指針調用錯誤函數(shù)指針被寫入了一個非法地址跳轉過去之后取到的指令全是不合法編碼觸發(fā)UsageFault。跳轉到Thumb/ARM狀態(tài)混亂Cortex-M只支持Thumb指令集如果某個函數(shù)指針的最低位置0了表示ARM狀態(tài)處理器在取指時就會出錯。這個在C代碼里很難遇到但在匯編或者從應用里跳轉到Bootloader的時候容易出問題。除零操作Cortex-M默認情況下整數(shù)除零不觸發(fā)異常但如果軟件里開啟了DIV_0_TRP位除零就會觸發(fā)UsageFault進而被HardFault吞掉。未對齊的棧操作比如SP指針沒有保持8字節(jié)對齊在某些需要對齊訪問的LDRD/STRD指令上會直接觸發(fā)異常。這些場景有一個共同特點它們在正常代碼流程上是不會出現(xiàn)的往往是因為某個內存被破壞導致PC跳到了錯誤的位置執(zhí)行了錯誤的指令。所以當你發(fā)現(xiàn)HardFault是因為取到了一個未定義指令不要急著去查這條指令在哪里而應該去查是誰把PC弄過去的——大部分情況是函數(shù)返回地址被篡改少部分是函數(shù)指針被污染。3. 調試實戰(zhàn)一套可復制的HardFault定位方法論3.1 現(xiàn)場恢復從Keil5中提取異常前PC值很多人遇到HardFault的第一反應是直接在HardFault_Handler里打斷點然后點Run讓它停在斷點處。這個思路有一半是對的但如果你只在HardFault_Handler里打斷點你會發(fā)現(xiàn)一個尷尬的問題程序每次復位跑進HardFault_Handler停下來的位置幾乎永遠是同一個地方那就是HardFault_Handler的第一行匯編指令。這個信息量太少了你根本不知道是誰觸發(fā)它的。正確的做法是當程序停在HardFault_Handler時先從寄存器窗口讀取當前的SP值。關鍵點來了怎么知道這個SP是MSP還是PSP看LR寄存器如果LR的值是0xFFFFFFF9說明當前在處理模式用的是MSP如果LR的值是0xFFFFFFED說明異常返回目標是線程模式且使用PSP那當前用的棧指針需要從進程棧指針寄存器里單獨讀取。拿到SP之后從SP指向的地址開始向上讀取內存前8個字就是異常發(fā)生前硬件自動壓棧的現(xiàn)場偏移0是R0偏移4是R1偏移8是R2偏移12是R3偏移16是R12偏移20是LR偏移24是PC偏移28是xPSR。在Keil的Memory窗口里輸入SP地址直接就能把這8個值讀出來。其中最重要的是偏移24處的PC它就是異常發(fā)生那一刻CPU正在執(zhí)行的指令地址。這個步驟在Keil5里操作非常簡單程序停在HardFault_Handler后打開View菜單里的Registers窗口找到SP再打開Memory窗口輸入SP的值回車就能看到一長串數(shù)據(jù)。把偏移24個字處即地址SP0x18的數(shù)值取出來這個就是我們要找的PC。然后在Disassembly窗口里輸入這個PC地址回車就能看到對應的匯編指令再對照源代碼窗口基本就能定位到肇事代碼行。3.2 深入理解EXC_RETURN別被LR騙了在HardFault現(xiàn)場讀取寄存器時有一個細節(jié)容易讓人迷惑在壓棧數(shù)據(jù)偏移20處確實有一個LR但它不是異常發(fā)生前的調用者LR。這個LR是CPU在進入異常時自動壓棧的它保存的是觸發(fā)異常那一條指令的“返回地址”準確說是觸發(fā)異常的指令地址加上一定偏移可能指向BL指令的下一條指令地址也就是調用者真正要返回去執(zhí)行的地方。而CPU當前的LR寄存器里保存的是一個EXC_RETURN它根本不是一個真實地址。我見過很多人在HardFault調試時看到寄存器窗口里LR的值是0xFFFFFFF9然后把它當作調用鏈里的一個函數(shù)地址拿來查結果在反匯編窗口里輸入這個地址之后發(fā)現(xiàn)根本查不到有效代碼——因為0xFFFFFFF9就不是一個地址。所以一定要記住異常現(xiàn)場的調用關系要看壓棧數(shù)據(jù)里的舊LR而不是當前的LR寄存器。當前LR寄存器里那個0xFFFFFFF9/0xFFFFFFED是用來告訴硬件“異常返回時用什么模式、用哪個棧指針”的。如果你用的是帶FPU的Cortex-M4F或M7壓棧的數(shù)據(jù)結構會不一樣。當異常發(fā)生時硬件檢測到當前上下文使用了FPU會自動多壓18個字16個FPU寄存器S0-S15加FPSCR加一個保留字。這種情況下SP指向的第一組8個字仍然是R0-R3、R12、LR、PC、xPSR但在這組數(shù)據(jù)之后緊接著的是FPU寄存器區(qū)。判斷是否發(fā)生了FPU壓棧看EXC_RETURN的最后一位如果是1表示有FPU壓棧。比如0xFFFFFFED這個值最后一位已經無法直接區(qū)分但對照寄存器窗口的EXC_RETURN位或者直接看壓棧數(shù)據(jù)的長度都能確認。3.3 借助CFSR、HFSR和BFAR/MMFAR縮小故障范圍光拿到PC還不夠我們需要知道HardFault為什么被觸發(fā)。前文提到過的故障狀態(tài)寄存器此刻就是最重要的證據(jù)來源。在Keil5里通過Peripherals菜單下的Core Peripherals、Fault Reports窗口能看到一份易讀的故障信息匯總。這個窗口會把CFSR里的每一位解析成人話比如“Instruction Bus Error”“Data Bus Error”“Unaligned Access”等還會顯示HFSR里的FORCED位是否置1以及保存了觸發(fā)總線故障或內存管理故障的具體地址的BFAR、MMFAR。如果你不想開圖形窗口也可以在Watch窗口手動添加寄存器表達式(volatile unsigned long)0xE000ED28就是CFSR的地址0xE000ED2C是HFSR0xE000ED38是BFAR0xE000ED34是MMFAR。我自己調試時有一套固定流程先讀HFSR看FORCED位是不是1。如果是說明下面肯定有一個具體的可配置異常被觸發(fā)過繼續(xù)讀CFSR對應子區(qū)域。如果CFSR里的MMFSR有置位說明是內存管理故障結合MMFAR的值看是訪問了哪個地址。如果BFSR有置位說明是總線故障結合BFAR看地址。如果UFSR有置位比如UNALIGNED位為1說明是未對齊訪問結合PC反匯編看具體是哪條指令。這里有一個值得注意的點如果BFAR/MMFAR的值是0并不意味著沒有訪問故障而是意味著CPU沒有捕獲到有效的故障地址。這種情況經常發(fā)生在指令預取階段也就是CPU去取一條非法指令時發(fā)生了總線錯誤這時候不會更新BFAR。所以要結合PC一起判斷不能只看地址寄存器。3.4 基于LR的調用?;厮菁记赡玫疆惓G暗腜C和舊LR之后我們其實已經能確定是哪個函數(shù)里出的問題。但如果PC落在一個比較靠后的工具函數(shù)里比如memcpy或一個數(shù)學庫函數(shù)內部光是看到PC還不夠——我們需要知道是誰調用了這個函數(shù)才能理解整個觸發(fā)鏈路。這個時候就要用到調用?;厮?。手動回溯的原理是棧指針SP指向的壓棧數(shù)據(jù)里偏移20處保存的是進入異常前的LR它指向調用者的下一條指令沿著這個“函數(shù)返回地址”的鏈條再往上追一級需要知道當前函數(shù)的棧幀是怎么建立的。Cortex-M的AAPCS過程調用標準規(guī)定函數(shù)入口處通常會有PUSH {r4, lr}這樣的指令也就是把被調用者保存寄存器R4-R11和鏈接寄存器LR都壓到棧上。如果我們在異常前的PC處往回看幾條指令能確認這個函數(shù)確實有PUSH {lr}操作那么當前SP加上壓棧偏移再往里找就能找到上一層函數(shù)的LR以此類推能還原出完整調用鏈。在Keil5里更簡單的方案是直接使用Call Stack窗口。當程序停在HardFault_Handler時打開View—Call Stack WindowKeil會根據(jù)當前棧內容自動解析調用鏈。但注意自動解析有時候依賴調試信息如果你開啟了較高的優(yōu)化等級比如-O2/-O3很多棧幀信息被優(yōu)化掉了Keil解析出來的調用關系可能不準甚至會報錯。這種情況下手動從壓棧數(shù)據(jù)里讀PC和LR是唯一可靠的方法這也是我把手工回溯放在這里重點講的原因。3.5 Keil5中的高效輔助調試手段除了上面這些偏底層的分析方法Keil5本身還提供了一些非常實用的輔助功能用好了能大幅提升定位效率。第一個是硬件斷點和數(shù)據(jù)斷點。如果HardFault的觸發(fā)和某個特定變量的寫入相關可以在Keil里給這個變量打數(shù)據(jù)斷點Data Breakpoint這樣當代碼試圖修改這個變量時CPU會立刻停下來調用棧就是完整的調用者信息。這在排查棧溢出和數(shù)組越界寫時特別有效。數(shù)據(jù)斷點數(shù)量有限Cortex-M3/M4一般支持4個但用來盯一兩個關鍵變量足夠了。第二個是異常窗口Fault Reports結合邏輯分析儀。Keil5的Fault Reports不僅能顯示CFSR/HFSR的解析結果還能顯示是哪個異常號觸發(fā)的。配合邏輯分析儀窗口觀察若干GPIO電平可以判斷異常發(fā)生的時間和外部事件的時序關系。比如之前排查一個通信模塊隨機死機的問題我用GPIO在中斷入口和出口各翻轉一次然后用邏輯分析儀抓異常發(fā)生時刻附近的引腳電平很快發(fā)現(xiàn)是兩路中斷的優(yōu)先級配置反了導致高優(yōu)先級中斷在低優(yōu)先級中斷的臨界區(qū)里被觸發(fā)破壞了協(xié)議棧的狀態(tài)機。第三個是棧使用量檢測。在Options for Target—Target窗口里勾選“Use MicroLIB”并在Linker頁面勾選“Use Memory Layout from Target Dialog”然后在代碼里調用__get_MSP()和__get_PSP()讀取當前棧指針比對棧底地址就能計算出剩余??臻g。配合Keil的“Stack Usage”分析編譯后從View—Analysis Window—Stack Usage看可以評估每個函數(shù)的棧消耗。這個功能在排查棧溢出HardFault時非常直觀基本能把問題縮小到具體任務。4. 常見問題與排查技巧實錄4.1 一個典型問題no cortex-m sw device found結合熱搜詞里出現(xiàn)頻率很高的一個問題“no cortex-m sw device found”這類問題雖然不算HardFault本身但和HardFault調試強相關。最簡單的情形是程序跑飛后進入HardFault然后你點Keil的Debug按鈕結果彈出“no cortex-m sw device found”根本連不上調試器。這通常不是調試器壞了而是目標芯片在死機狀態(tài)下把SWJ調試端口占用了或者時鐘配置被改掉了調試器復位之后握不上手。解決辦法分兩種。如果目標芯片還在響應復位可以在Keil的Debug—Settings里把Reset and Run選項打開或者在連接失敗時按住目標板上的復位鍵然后點擊Debug在松開的瞬間讓它握上SWD握手信號。更穩(wěn)妥的方案是用一個腳本文件在調試器初始化時先讓芯片保持在復位狀態(tài)配置好SWD速度后再釋放復位。對于STM32系列有些型號還支持通過BOOT0拉高進入系統(tǒng)Bootloader模式此時內核運行在出廠固件上SWD端口必然是釋放的連接成功后把BOOT0拉回低電平就能正常刷固件和調試了。如果你用的是國產MCU比如GD32、AT32這些SWD連接失敗的原因還要多排查一個讀保護。很多國產芯片默認出廠時讀保護是使能的或者你在調試過程中不小心開啟了讀保護級別1這會導致調試器無法通過SWD訪問內核。解決辦法是用對應的燒錄工具執(zhí)行全片擦除解除讀保護。我在一次GD32的調試中就遇到過程序跑到某處觸發(fā)了HardFault但重置之后居然連不上調試器最后發(fā)現(xiàn)是代碼里某段錯誤的存儲區(qū)寫操作意外修改了選項字節(jié)把讀保護打開了。4.2 HardFault發(fā)生的時機隨機如何復現(xiàn)和抓取HardFault最折磨人的一點是它有時候不是100%復現(xiàn)的。你在調試器下跑幾十次都好好的一上電裸跑可能幾分鐘就死一次。這類“幽靈式”死機通常有幾種原因時序相關的資源競爭中斷和主循環(huán)同時訪問共享變量、堆棧踩踏發(fā)生在特定函數(shù)調用組合下、以及硬件外設的偶發(fā)錯誤狀態(tài)。我的經驗是先開啟MPU內存保護單元來構造一個隔離環(huán)境。Cortex-M3及以上內核幾乎都帶MPU配置它可以給不同內存區(qū)域設置訪問權限。比如把棧區(qū)所在的內存塊設置為只讀的一旦發(fā)生棧越界寫入MemeManage異常會立刻觸發(fā)——這個異??梢酝ㄟ^中斷向量直接跳轉配合調試器的斷點能精準捕獲到越界寫入的第一現(xiàn)場。這個技巧對排查棧溢出簡直不要太爽不用靠猜直接讓硬件替你盯著。如果復現(xiàn)是隨機的還可以利用Cortex-M內核的異常返回機制做“二次觸發(fā)”設計。簡單說在HardFault_Handler里不直接死循環(huán)而是把MSP的值修正為初始值然后重新跳轉到復位向量讓系統(tǒng)軟復位。這樣雖然程序重啟了但在重啟前把故障現(xiàn)場的關鍵寄存器PC、LR、CFSR、BFAR通過一個保留內存區(qū)域保存下來系統(tǒng)恢復后可以通過串口打印或者調試器查看。這種方式在生產環(huán)境下是終端產品的一個保底方案正常運行時不打斷業(yè)務故障出現(xiàn)時能把現(xiàn)場留給工程師。4.3 Keil5里遇HardFault的幾條高效操作口訣我把自己多年Debug開發(fā)過程里驗證過的操作整理成了幾條口訣式清單配合上面講的方法論使用定位HardFault基本能控制在幾分鐘內一是“一定位、二看壓、三讀故障”。所謂一定位是讓程序停在HardFault_Handler時先別慌通過寄存器窗口和棧信息定位當前SP二看壓是讀取壓棧的8個字拿到異常發(fā)生前的PC和LR三讀故障是看CFSR/HFSR的解析結果確認屬于哪類故障并抓住BFAR/MMFAR。二是“先棧后碼”。排查HardFault時優(yōu)先檢查棧的完整性看SP地址是否落在合法區(qū)間內壓棧內容里PC是否指向一個合理代碼地址比如ROM范圍內LR是否指向一個有效的調用者。很多時候棧已經被踩得面目全非PC指向的是一個類似于0x0800xxxx的保留地址說明返回地址被覆蓋了這時候與其去分析那條非法PC不如順著棧底往上找看哪個區(qū)域被寫入了不該寫的數(shù)據(jù)往往能揪出越界寫和緩沖區(qū)溢出。三是“優(yōu)化等級降一降”。HardFault和編譯器優(yōu)化等級的關系非常密切。很多代碼在高優(yōu)化等級-O2以上下行為和-O0完全不同因為編譯器可能會省去一些邊界檢查、重排表達式、把局部變量直接映射到寄存器。當你用-O0能跑通、用-O2就HardFault時先別懷疑芯片也別盲目加volatile——先看反匯編確認是不是優(yōu)化導致了某個變量在你預期的時間點還沒被寫回內存或者某個中斷里讀取的共享標志被優(yōu)化成了寄存器緩存。實在不行對可疑模塊單獨關閉優(yōu)化這是最直接的止損手段。四是“多路檢查不迷信單點現(xiàn)象”。舉個例子有些HardFault彈窗時當前PC停在HardFault_Handler函數(shù)調用棧窗口里顯示的都是HardFault_Handler附近的信息僅憑這個現(xiàn)象你可能會以為是HardFault_Handler自己的代碼問題。其實不然因為編譯器把故障代碼編進了同一個文件調試器展示的調用棧信息是“物理上等價”的。正確做法是回到現(xiàn)場數(shù)據(jù)層面以壓棧PC和CFSR為準不要被調試器的可視化結果帶偏。4.4 從HardFault再往前一步寫一個故障記錄模塊追著HardFault打補丁是被動的我更推薦每個項目在開發(fā)階段就內置一個故障記錄模塊代碼量不大但能在后續(xù)所有調試中節(jié)省大量時間。這個模塊的核心就兩件事第一在HardFault_Handler里把現(xiàn)場數(shù)據(jù)PC、LR、SP、CFSR、HFSR、BFAR/MMFAR、R0-R3、R12、xPSR保存到一個固定的內存區(qū)域第二把保存的現(xiàn)場數(shù)據(jù)在系統(tǒng)重啟后通過串口或者調試信息輸出出來。存儲區(qū)域的位置需要動一點腦筋。如果直接定義一個全局結構體變量那么它會被編譯器分配到RAM的某個位置如果RAM的初始化過程出問題現(xiàn)場數(shù)據(jù)可能被覆蓋掉。更穩(wěn)妥的方案是用鏈接腳本手動指定一個保留區(qū)域放在棧頂?shù)刂分盎蛘咄ㄟ^__attribute__((section(.noinit)))標記到不掉電的SRAM段。這樣即使系統(tǒng)重啟了只要不掉電現(xiàn)場數(shù)據(jù)還能讀到。串口打印的時候建議用十六進制原始格式不要做太復雜的格式化因為故障模式下堆棧狀態(tài)可能不穩(wěn)定用太復雜的庫反而容易二次故障。我習慣的格式是FAULT_INFO PC0x08001234 LR0x08004567 SP0x20000ABC CFSR0x00008200 HFSR0x40000000 BFAR0x00000000 MMFAR0x20000000 R00x00000001 R10x00000000 ...打印完之后再根據(jù)PC地址去工程里定位具體代碼位置配合反匯編基本就能鎖定問題。這個模塊建議在項目初期就加上成本極低但收益巨大。順便說一句如果你的項目用了RTOS故障記錄模塊里最好也保存當前任務句柄或任務名信息因為很多HardFault和任務切換相關知道是哪個任務出事的排查范圍能縮小很多。4.5 常見問題速查表現(xiàn)象可能原因排查要點解決建議HardFault_Handler里PC指向非法地址棧溢出或返回地址被篡改檢查棧頂和SP差值、壓棧區(qū)的PC值增大??臻g檢查緩沖區(qū)越界CFSR的BFSR位置位BFAR不為0數(shù)據(jù)訪問觸發(fā)了總線故障看BFAR訪問的是哪個地址檢查外設時鐘、地址空間合法性CFSR的UNALIGNED位置位開啟了對未對齊訪問的陷阱定位到具體訪問指令檢查數(shù)據(jù)結構對齊或關閉該陷阱HFSR的FORCED位置位CFSR全0嵌套異常導致無法上報檢查異常返回和棧狀態(tài)減小中斷里復雜操作增加棧深度出現(xiàn)HardFault后連不上調試器SWD接口被占用或讀保護開啟按復位鍵連接檢查選項字節(jié)短接NRST或使用Bootloader模式優(yōu)化后才能復現(xiàn)HardFault編譯優(yōu)化引入了時序/內存差異反匯編關鍵函數(shù)對比-O0和-O2局部關優(yōu)化或重寫臨界區(qū)邏輯HardFault伴隨FPU相關異常FPU上下文保存不完整檢查RTOS任務切換對FPU的處理開啟FPU惰性壓?;騿⒂萌蝿占塅PU保存表格里列出的這幾種情況基本覆蓋了我日常開發(fā)中九成的HardFault問題。尤其是第一條“返回地址被篡改”我再單獨多說一句它在?;厮輹r表現(xiàn)特別迷惑因為PC壞得很徹底反匯編窗口跳到一片空白或保留區(qū)域。遇到這種情況不要死磕PC回到棧區(qū)往上找看棧里有沒有出現(xiàn)“很規(guī)律”的填充數(shù)據(jù)比如0xA5A5A5A5或全0這種填充數(shù)據(jù)往往是緩沖區(qū)沒有初始化或者棧保護魔數(shù)從它們被破壞的位置就能反推是哪一段越界寫導致的。5. 寫在最后的心得跟HardFault打了這么多年交道我最大的體會是它不是一個“玄學問題”而是有一套固定邏輯鏈路的工程問題。你越是靠運氣去復位、重試它就越折磨你你越是把異常模型、壓棧機制、故障狀態(tài)寄存器這些底層知識吃透它反而越聽話甚至能變成你定位內存問題、時序問題的一把利器。最后再分享一個我每次都會檢查的細節(jié)在寫中斷服務函數(shù)時盡量讓代碼保持短小精悍不在中斷里做printf、malloc、延時這類操作每個中斷都加上對參數(shù)合法性的檢查對共享變量加上保護。這些老生常談的規(guī)則每一條背后其實都是HardFault的血淚教訓。認真去執(zhí)行你開發(fā)中遇到的HardFault概率至少能降一半。剩下的一半用前面講的那套方法也能快速定位、體面收場。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
综合五月婷婷| 六月色丁香婷婷| 婷婷成人网五月天| 色五月婷婷AV| 97碰91| 九九热婷婷| 国产阿姨日皮艹逼内射视频 | 丁香五月在线视频黑人| 日本的α片xxxwww| 高清不卡一区| 五月丁香婷婷综合久久| 久久九九亚洲| 五月综合激情图片| 在线五月婷| www.操.com| 操骚货在线| 密乳视频| 9这里只有精品| 色狠狠综合| 9久热| 六月婷婷国产| 精品视频99看在线视频| 丁香六月啪| 五月日韩中文字幕| 亚洲乱码日产精品BD| 久久怡红院| 伊人丁香五月| 久鲁鲁色网| 久久九九经典| 美女婷婷激情亚洲| 成人在线观看国产| av中文网| 97干干干丁香| www.色五月| 激情婷婷丁香五月天| 五月综合影院| 日日日影院| 成人超碰AV| 色噜噜五月天| 超碰9| 91九九热| 国产婷婷久久| 天堂久久性| www.lchjjc.com| 五月天婷婷成人网| 开心五月婷婷激情| av九九| 久久婷婷六月综合| 婷婷在线播放| 亚洲亚洲人成综合网络| 99色综合| 五月丁香六月激情| 五月天丁香花婷婷| 综合伊人久久| 黄色五月婷婷| 五月天激情黄色小说在线观看 | 2022久久婷婷| 99re青青草| 国产高潮白浆一区二区| 天堂网色色| 日本婷婷色| 日韩在线看AV| 五月天激情综合网| 影音先锋噜一噜| 伊人综合色干| 六月丁香五月婷婷首页| 婷婷日日天天| 亚洲第79页| 有哪些A片网站| 人人爽人人爽人人爽人人爽| 婷婷五月色情天| www,26uuu,c0m,色情| 色婷婷亚洲在线| 色婷綜合网| 五月丁香婷婷五月色| VA五月激情在线| 99热99ai| 丁香婷婷在线| 99热青青草| www,天天干| 99热8| 狠狠干综合| 亚洲无AV在线中文字幕| 日本情色一区二区| 激情综合五月激情17| 五月丁香婷婷无码A∨| 婷婷六月插屄激情| 99久久婷婷五月综合| 99精品在线| 我爱大香蕉| 99视频自拍| 人人操AV| 色噜久| 色综合久久88色综合天天看| 色亚洲视频| 久久婷婷欧美| AAA久久| 激情五月天色播| 97在线观看| 欧美三级大片AA在线看| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 色婷婷成人| 91嫩草国产线观看亚洲一区二区| w婷婷五月婷婷w| 久久婷婷五月天| 69婷婷丁香午夜| 五月天网站免费欧美| 97人人操人人爽| 五月天社区| 久久ri精品视频| 丁香九月婷婷综合| 五月天综合婷婷| 欧美va视频| 亚洲视频在线网站| 激情综合播播| 欧美精产国品一二三区| 91久久九九| 五月丁香六月婷| 日日操,夜夜撸| www,久久久| 色五月婷婷在线观看第一页舔| 婷婷丁香色情| 天天日夜夜曹| 性爱技巧五月| RenRenSe在线视频网站| 五月丁香五月综合欧美| 91婷婷搞| 综合一区二区三区| 色444综合网| 九九热这里有精品视频| 久9视频| 丁香伊人五月色婷婷五十路| 激情婷婷五月基地| 99re6热在线精品视频播放速度 | 久久五月婷综合| 乱码操操| 婷婷五月天久久久| 色色五月天丁香婷婷| 丁香五月亚洲综合| 色综合久久久无码中文字幕999| 婷婷五月天色色| 色色色综合色| 2015WWW永久免费观看播放| 成人色站,在线视频,看片-SS1AV| 五月婷婷婷| 日韩无码乱轮| 玖玖午夜视频| 色域五月婷婷丁香| 黄色AV日韩| 六月激情网| www.婷婷,com| 亚洲人成网站999综合| 丁香五月婷婷亚洲综合精品在线| 欧美大片免费播放器| 97天堂| 久操热线| 99在线er热| 色综合大香蕉| 五月婷婷在线短视频| 超碰成人av| 狠爱婷色| 激情文学久久| 性色播| 五月亭亭开心网| 免费亚洲婷婷中文字幕| 六月婷婷激情| 青青草视频福利| 九九亚洲天堂| 九九热最新地址| 丁香五月婷婷国产在线| 99热这里都是精品| 中文字幕在线免费观看视频| 久热超碰| 日本久久爱| 亚洲情欲久久| 久久婷婷激情| 五月婷婷香蕉| 丁香五月婷婷www..com| 9精品在线| 婷婷爱爱蜜臀天天操| 91综合色| 激情综合激情五月| 一本色道久久综合狠狠躁小说| 99这里| 欧美性久| 97操碰| 另类小说婷婷色| 2025神马午夜福利| 丁香婷婷五月色成人网站| 99re免费在线视频| 五月天激情国产综合婷婷婷| 欧州色色| 亭亭五月丁香综合欧美| 夜色热久| 大香蕉伊人久久| 91玖玖| 97自拍视频在线| 日批在线看| 婷婷五月超碰| 色播丁香| 91婷婷丁香五月| 麻豆科斗777| 久cao香蕉影院| 丁香五月Av| 91久久综合亚洲鲁鲁五月天| 丁香五月婷婷免费视频| 狠狠综合久久| 婷婷久久亚洲| 99re这里只有精品免费| 日本色色网站| 九九婷| 丁香五月天电影| 67194成I人在线观看线路1| 九九aV| 婷婷射婷婷舔| bbwcuckold精品熟妇| 久久精品凹凸分类| 播播网色播播| 欧美影院婷婷| 五月天国产| www.粉嫩av.com| 久久性都花花世界成人免费视频| 亚洲综合婷婷| 超碰人人操人人干| 播播网色播播| 婷婷.com| 婷婷五月婷婷五月天| 婷婷激情视频| 色婷婷综合丁香五月天| 日日操夜夜擼| 无码免费人妻A片AAA毛片西瓜| 123草逼网| 五月丁香六月花| 久久99网站| 婷婷成人av| 日本猛少妇色XXXXX猛叫| 99re6久热只有精品6在线直播| 色五月丁香五月五月婷婷| 玖玖@三月天天丁香婷婷| 超碰AV在线| 五月天色婷婷激情| 五月情婷婷| 久久久久久久久久久久久久人妻视频 | 婷婷丁香色女人| 亚洲无码播放| 色婷操逼| www五月天激情com| 成人色五月天婷婷| 久久婷婷激情四射五月天| 久久婷婷五月| 三级三久久线久久99久目本WW| 亚洲 无码 中文字幕 中出| av人人操| 丁香激情五月少妇| 亚洲超级碰| 91妻人人爽人人看片| 五月天激情视频| 色五月丁香六月资源站| 碰碰碰97免费精彩视频| 亚洲色图81p| av一区二区电影免费在线观看| 白人荫道BBWBBB大荫道| 午夜天堂一区人妻| 亚洲欧洲另类图片| 久久久久久婷| 91se在线观看| 99网址在线看| 丁香婷婷精品视频| 婷婷五月天AV激情| 26uuu亚洲色| 丁香五月六月婷婷自拍| 99福利视频| www.狠狠狠狠| 淫水导航| 99热亚洲精品| 天天操综合网| 狠狠婷婷综合| 色99婷婷五月天| 激情婷婷网| 五月天色站| 91丨人妻丨国产丨丝袜| 激情综合九月| 久久这里只有精品5| 丁香六月天AV| 五月天婷婷人妻| 亚洲狠狠干| 五月丁香婷婷综合网| 国产成人亚洲综合A∨婷婷| 色婷婷国产精品综合在线观看| 五月天丁香成人| 五月婷婷基地| 欧美五月停| 欧美日韩精品一区二区三区钱| 99ri视频在线观看| 五月丁香啪| 99高级会所久久| 欧美英丁香开心快乐六月天网| 天天干天天操| 91色在线/日韩| 另类视频五月天| 99热10在线高清播放| 97艹| 伦乱美欧| 99热久| 99自拍视频在线| 丁香五月天激情综合| 中文字幕日本最新乱码视频| 97干在线播放| 黄色99网| 大香蕉九操| www.久久久久| 五月天三级久久| 狠狠舔| 夜夜爽天天日| www.色婷婷.com| 色色网站日本91| 五月丁香欧美综合| 玖玖资源天天无码| 99久re热视频精品98| 久久久久久9热不雅视频| 91chinese 在线| 丁香六月婷婷综合激情欧美 | 五月婷婷色| 91jiuseshunv| www 五月天 com| 五月天婷婷影院| 99性爱| 欧美超碰人人| 五月婷婷网站| 成人午夜视频精品一区| 日本片日本片祼观看网站在线看中文版网页在线看 | 丁香六月婷婷| 97超级操操| 九九免费视频在线| 综合激情五月丁香| 欧美超级视频97| 丁香五月天激情小说| 婷婷精品在线| 亚洲乱码w在线观看| 狠狠擼综合| 色在线99| 99偷拍视频在线日本| 99色丁香婷婷综合网| 五月婷婷AV| 韩日AV片| 亚洲欧州色情在线观看| 97很鲁在线视频| 丁香五月另类色婷婷麻豆| 欧美色色色色色色色| 亚洲操操操| 91ncm视频| 激情五月天伊人av| 69久久久| 天天爽天天干天天| 婷婷丁香色女人| 六月婷婷狠狠| 精品一二三区久久AAA片| 激情黄色小说色五月| 久久A热| 噜噜在线| 色播五月婷婷综合| 亚洲成av人影院| 久久五月综合| 1024日韩| 国熟女视频| 色婷婷网| 激情网狠狠干| 久爱综合| 五月婷婷啪| 日逼AV影音先锋男人资源站| 亚洲婷婷六月天| 深爱激情五月天| 视频这里只有精品| 嫩草AV久久伊人妇女超级A| 色五月丁香六月资源站| 涩五月婷婷| 五月丁香怕怕综合| 99riav 亚洲| 婷婷天天综合| 日逼影音先锋男人AV资源站| 日韩五月天婷婷| 国产人妻人伦精品一区二区| 噜噜噜噜在线| 久久伊人婷| 野战毛片三一3| 超碰成人AV| 婷婷五月激情中文字幕| 六月99天天婷婷激情综合| 综合激情视频| 五月婷婷干| 综合久久狠狠| 97极品在线| 日本三级中国三级99| 99热.com| 99视频精品全部免费观看| 久操欧美在线观看97| 婷婷丁香五月综合激情视频| 久久婷婷五月综合激情国产| 久久婷婷视频| 五月天五月天成人网亭亭成人色网站| 99久re热| 激情六月天| 狠狠五月天激情| 极品九九九九九九| 婷婷五月天AV| 91成人性爱视频| 女婷久久| 97人人操人人插| 久色大| 天天做天天爱天天搞| 精品一区二区三区免费毛片爱| 丁香五月av在线| 4438国产免费看| 日韩成人免费电影| 婷婷五月天成人综合网| 丁香五月天堂| 久久五月天丁香花| 亚洲五月天激情| 夜夜骑天天玩天天日| 婷婷激情人妻| 射满了还射免费在线观看 -午夜版全集-新视觉影院 | 日韩在线观看网址| 99九九在线| 久久五月丁香综合17C| 色月丁| 狠狠操狠狠操AV| 五月天堂在线| 亚洲色9| 久久九九99.www| 九九这里都是精品| 99精品免费| 久这里只有精品| 去色色五月天| 久久久国产精品黄毛片| 色色激情| 六月丁香婷婷综合狠狠爱夜夜爱| 午夜电影网VA内射| 六月婷婷六月天天在线免费| 伊人玖玖综合| 大香蕉丁香五月| 亚洲五月天激情| 久久精品只有这| 开心久久xxx色| 激情宗合 激情宗合| 国产亚洲精品AAAAAAA片| 91狠狠色丁香| 丁香六月婷婷色XXXXX| 日本本土色网第一区| 人人插9| 五月婷婷久久大片| 中文成人在线| 亚洲色综合| 五月婷婷色播| 五月丁香婷婷婷激情爱爱| 五月婷婷六月爱| 激情网第九色| 玖玖在线视频福利| 超爽内射| 国内一级精品| 色色九区| 色色色色色色色色色色色色色五月天| 久久探花91swag| 中字幕视频在线永久在线观看免费 | www,99热在线观看| 天天综合网~91| 成人美女网| 99∨VTV| 色五月天综合网| 六月久久婷婷| 五月色丁香| 五月激情六月丁香| 久久色亭亭五月天| 激情綜合網址| 色色五月天丁香| 婷婷五月天激情电影| 激情六月丁| 日日操夜夜骑| 婷婷五月激情网| AVDV久久| 色偷偷色婷婷| 欧美69色| 久热伊人9| 久久午夜丁香| 99狠狠操一| 婷婷色在线播放| 国产精品成人网站| 伊人婷婷五月天av| 99re这里只有精品99| caop在线视频| 久久久er热| 色综合xx| 丁香婷婷激情网站| 久久伦乱| 日日夜夜天天| 天堂久久久久天堂网| 五月日韩中文字幕| 国产日产亚洲系列最新| 久久丁香婷婷色情综合| 99久久www| 久久婷婷六月综合| www婷婷亚洲| 欧美婷婷五月| 五月婷婷深深爱| 亚洲午夜av| 啊v视频在线观看| 五月开心播播网| 五月婷婷综合色啪首页| 99九九综合久久九九| 琪琪秋霞| 99热这里只有精品5| 狼人狠狠操| 国产这里只有精品| 五月婷婷黄网站大全| 日韩情色在线观看| 五月丁香日本片| 综合色色婷婷| 五月天婷婷免费| 国产午夜精品一区二区三区嫩草| 婷婷第一页| 99ri在线观看视频| 欧美日韩中国| 婷婷五月天亚洲精品| 自拍盗摄 另类| 天天爽天天| 操比激情五月| 天天摸天天做天天爱天天爽| 性爱五月婷| 99亚洲无码| 大鸡巴伊人网| 丁婷婷五月天在线播放| 影音先锋综合网| 色婷婷的五月天| 婷香狠狠爱五月| 五月天婷婷网站888| 激情人妻综合| 久久人妻精品| 日日操,夜夜撸| 激情五月天福利| 少妇人妻人伦A片| www.五月激情.com| 日本狠狠爽| 丝袜大香蕉| 婷婷五月天激情综合| 亚洲亚洲人成综合网络| 99er免费在线观看| 久久99久久99久久99| h在线看免费版在线看| 五月丁香六月香香蕉| 图片区 小说区 区 亚洲五月| 99亚洲欧洲| 色色影院黄大片| 婷婷五月丁香六月| 五月婷婷在线播放| 婷婷五月色| 97伦乱| 久久538| 激情五月综亚网| 熟女网站久久| 69人妻人人澡人人爽久久| 亚洲色婷婷五月天| 久久在线大香蕉| 夜夜天天天天天干天天爽| 日本在线99| 婷婷五月激情基地| 五月丁香色综合| 婷婷天堂站| 五月丁香六月色| 五月婷婷九| 色婷婷丁香特级性爱视频| 成人 在线 日韩| 色综合久久无码| 亚洲成人av中文| 色婷婷性爱网| 婷婷丁香六月天| 九九无毛| 日韩综合天堂| 五月婷婷新网站| 亚洲在线资源| 99er日韩| 五月丁色AV| 婷婷六月丁香激情| 免费亚洲成人电影AV| 无码激情AAAAA片-区区| 九九色精品| 九九碰九九爱97| 久久综合丁香| 久久综合爱| 99免费热在线精品| www.五月天婷婷姐姐| 亚洲激情99| 国产色色网站网址| 久久这里99| 天天日夜夜操五月| 99九九精品| 色噜噜狠狠色综合日日| 久婷| 精品欧美一区二区三区久久久| 中文毛片无遮挡高潮免费| 色婷青青| 99丁香五月婷| 深爱五月天天| 日本九九视频| 欧美电影在线播放| 中文在线成人| 婷婷六月网| 另类激情首页| 99无码视频| 久久精品日| 激情婷婷五月亚洲| 9精品在线| 五月丁香 狠狠爱| 九九色色| 久久婷婷五月天激情四射| 97人人操人人干| 成人免费视频一区| 艹| 婷香五月激情视频| 婷婷综合日本| se99视频| 久久桃花网色婷婷| 婷婷5月开心6月| 丁香六月五月天| 99精品在线| 五月婷天堂视频| 五月婷婷开心色伊人| 先锋资源91| 成人国产网| 欧美97p| 国产免费性爱| 五月婷婷中文网| 国产成人精品一区二区三区视频| 亚洲视频色色| 国产精产国品一二三在观看| 色婷婷手机在线| 欧美影院婷婷| 色色色999| 色中色综合| 亚洲精品视频电影| 99色在线视频观看| 99操视频| 五月天婷婷综合网| 久久九九精彩| 六月丁香婷婷五月| 丁香五月av| 超碰AV在线| 综合网色| 激情婷婷在线中文字幕| 天天干电影| 77777亚洲午夜久久| 色五月婷婷一二| 色很久综合| 九九99热久久精品66中文字幕| www. 五月. com| 丁香六月综合| 99热九九这里只有精品| 粉嫩AV久久一区二区三区| 夜夜操夜夜姧| 丁香五月婷婷Av| caop在线视频| 米奇影视五月天| 999九九九久久久99HD| 久久9视频欧美| 国产美女精品| 影音先锋天天日| 精品一区二区三区免费毛片爱| 婷婷五月激情五月激情| a网站免费观看| 婷婷九月丁香中文| 五月婷无码| 天天操天天插| 丁香六月综合激情| 一本道综合网| 欧洲精品爱爱| 色网站9| 激情五月综合亚洲另类| 狠狠色噜噜| 人人操人人操919999| www.99热| 欧美色色色色色色色色色色| 婷婷五月天亚洲天堂| 六月婷婷视频| 密着浓厚中出乚交尾GvG935| 国产精品社区| 色婷婷综合视频| 日 日干 日日做| 成人一级片| 久久五月天丁香| 国产亚洲精品AAAAAAA片| 五月天婷婷爱| 亚洲视频五区| 99精品一二三四视频| 五月天综合在线| 丁香五月五婷| 五月激情婷婷丁香天堂| 26uuuuuuuu国产| 99久久激情视频| 色偷偷色婷婷| 五月婷婷在线观看黄| 五月天四色房丁香| 99这里只有免费的小视频在线观看| 99久在线精品99re5热视频| 极品人妻VIDEOSSS人妻| 国产精品久久久久久久久久| 超碰狠狠干99| 日本44久久在线| 99∨VTV| 国产精品久久久爽爽爽麻豆色哟哟| 这里只有精品久久| 免费无码毛片一区二区A片| 亚洲综合五月| 黄桃AV无码免费一区二区三区| 精品人妻伦九区久久AAA片| 91久久久久久久久久18| 日本三日本三级少妇三级66| 久婷久婷激情肉| 色哟哟精品| 欧洲日韩一区二区三区| 99这里有精品| 丁香网站| 丁香五婷| 六月婷婷网站| 97碰碰人人| 五月婷婷深深爱| 五月天啪啪啪| 人妻无码精品一区| 婷婷五月天桃花网| 99九无网码| 亚洲 激情 中文| 色99网| 99热这里只有精品22| 天天综合精品| 国产精品国产| 91大屁股| 丁香五月社区| 日本啪啪天堂| 丁香五月精品| 韩日另类| 人妻五月天激情开心网| 婷婷在线精品| 狠狠色噜噜色狠狠狠综合色| 热99精品视频在线观看| 26uuu精品一区二区| 婷五月天影院| 国产裸舞福利资源在线视频| 天天舔天天摸天天射| 丁香五月婷综合网| 狠狠色婷婷| 色九亚洲| 日本色爽| 日韩啪图| 久久偷拍综合五月天| 小香蕉av| 狠狠干五月丁香| 99精品在线观看视频| 超碰成人免费| 大色鬼综合| 丁香五月婷婷久久久| 五月激情网络| 99热这里只有精品8| 久操干| 欧美成人色婷婷| 七七久久婷婷| 五月天综合在线观看| 在线亚洲综合网| 99热在这里只有精品| 亚洲有码在线视频| 色狠狠999综合| 久久久91| 中文字幕丰满孑伦无码专区| 五月天激情婷婷丁香| 丁香五月婷婷综合激情啪啪啪| 天天干天天干天天干天天干天| 婷婷丁香五月天色色| 天天日天天爽| 丁香六月婷婷综合| 大香蕉综合视频在线| 99热精品免费在线观看| Caop在线| 五月婷婷中文| 色综合久久伊伊婷婷五月| 202丰满熟女妇大| 99'无码| 五月丁香天堂| 99热这里只有精品66| 免费国产VA国产免费| 字幕网AV中文字幕| 国产成人AV在线播放| 欧美成人无码高清一区二区三区| 久久3级片| 99免费热视频在线| 丁香五月亚综合图片| 激情网第九色| 好色婷婷| 热久久这里只有三级视频| 色五月综合| 99热只有这里才是精品| 美女网黄| 99久精品| 日操熟女| 色伦专区97中文字幕| 亚洲AV综合在线观看| 婷婷欧美| 激情伊人五月天| 久久99热这里只有精品 | 久久婷婷六月综合综合| 色婷婷六月| 久久九区| 色色色网站| 亚洲射激情| 久青青久| 99九九久久| 大香蕉大香蕉在线影院| 亚洲精品444久久久久久| 婷婷色色网站| 91久女| 五月丁香综缴情性爱| 亚洲字幕AV一区二区三区四区| 亚洲精品V天堂中文字幕| 九九碰九九爱97超碰| 九九激情网| 另类激情中文| 久久视频在线视频| 五月丁香综合激情| 久久久久9| 强壮公让我夜夜高潮A片视频| 亚洲天堂色色| 99精品视频在线观看| 八戒青柠影视剧在线观看| 欧洲色| 亚洲成人日韩无码精品| 狠狠爱青青草| 久热99久热| 97人妻超级碰碰碰碰碰| 精品欧美性爱超级爽| 亚洲激情四射色| 亚洲成人网址在线观看| 超碰色女人| 综合色影院| 99 热国产在| 少妇久久诱惑视频| 99热日| 亚洲12p| 超碰精品国产首页| 日韩99色| 爽天天天天天天天| 丁香五月影院| 97热这里精品在线视频| site:hcxsz888.com| 色日本丁香婷婷| www.国产色| 五月丁香六月激情| 日本黄色三级片内射| 97碰碰人人视频| 国产伦理精品高清在线观看网站一区二区 | 日韩成人影片在线观看| 亚洲中文丁香| 91免费看片| 91丨九色丨老熟女激情| 婷婷六月综合在线| 另类专区在线观看| 九九热123| 精品久热| 亚洲丁香五月天视频| 国产精品久久久爽爽爽麻豆色哟哟| 丁香五月天网友自拍啪啪啪视频| 大香蕉九九| 热久久色| 亚洲精品激情| 久久婷鲁| 五月丁香六月情| 五月婷婷综合在线视频| 天天操天天日天天爽| 色99在线| 可以免费看av网站| 亚洲综合激情五月久久| 99色视频在线观看最新| 五月天播播中文字幕| 51精品国自产在线| 丁香婷婷六月婷婷六月婷婷六月婷婷| 丁香九九九九| 九九色影视| 99精品自拍| 久久99这里只有精品| 婷婷五月花| 蜜乳A√| 五月婷婷碰碰| 婷婷综合成人| a在线观看| 日韩一级片| 欧美日韩999| 激情综合婷婷| 亚洲色爽| 91精品视频男人的天堂| 天天澡天天狠天天天做| 亚洲六月色婷婷| 99色婷婷| 五月丁香香蕉| 五月丁香婷婷在线综合蜜桃| 久久综合26p| aaa久久| 五月丁香六月日逼| 人妻22p| 中出内射的人妻视频| 2005天天干天天1| 欧美三级欧美一级| 激情五月天无码| 婷婷婷五月香蕉| 亚洲激情五月天| 2025色婷婷| tingtingjiqingwuyue| 五月停性愛| 激情五月天婷婷| 婷婷五月深爱五月| 日本一级黄色电影| 丁香久久在线| 色久女| 99热99色| tingtingzonghewang| 五月 激情视频| 91人人人人人人人| 综合五月天| 91久久99久久91熟女精品| 亚洲热综合| 色噜噜狠狠狠综合曰曰曰| 日本va欧美va欧美va精品| 日韩AC在线免费观看| 色五月婷婷久久| 激情第四色| 五月婷久久在线| 高清无码.com| 综合色五月天| 色婷婷导航| 乱码操操| 97碰在线| 欧美婷婷六月丁香综合色| 婷婷五月激情的图片| 久久久五月天婷婷成人网| 色99色| 国产肥白大熟妇BBBB视频| 激情五月天视频| 任你草| 激情综合网五月丁香| 日韩AAAAA| 综合网啪| 色五月五月婷婷| 亚洲婷婷五月天| 大伊香蕉精品视频在线| 五月精品99综合| 丁香六月婷婷开心婷婷网| 操婷婷基地| 国产精品岛国片在线观看免费| 99免费青青蜜臀| 偷拍91九色| 1024手机在线观看看片_日韩精品| 大香蕉婷婷丁香| 狠狠搞五月天| 天天草天天日| 欧美五月丁香| 99热国产| 日本91在线播放| 伊人久久大香蕉网| 色色激情五月天| 色的色综合| 激情五月色播五月| 天天日天天色| 综合激情四射一theav| 九九热在线观看6| 99成人免费视频| 99热在线观看精品| 五月婷婷激情在线| 色色婷婷五月| 丁香五月婷婷婷婷欧美综合| 婷婷丁香激情五月天色色| 日本一毛片| 香蕉97碰碰碰欧美| 欧美黑人大吊| 欧美啪啪9| 91丁香色五月| Av性爱网| 日日爽夜夜爽| av九九| 在线观看欧美| 99re在线免费视频| 六月丁香综合网| 七七色色综合| 人人综合色| 先锋男人99资源| 婷婷亚洲综合| 九九伊人网| 九色PORNY9l原创自拍| 一级二级色大片| 五月婷婷开心亚州在线| 五月天偷拍| 一区中文字幕电影| 开心五月综合激情综合五月| 欧美色五月| 97日在线视频| 欧美色九| 六月婷婷激情图片| 五月丁香啪啪啪综合网| 欧洲不卡视频| 亚洲激情综合| 九九成人精品免费视频| 无码人妻激情| 日日干五月天婷婷| 可以看的av| 色婷婷中文字母五月丁香| 婷婷综合五月| 色五月天在线| 九九超碰人人| 婷婷色色五月天| 五月天激情站| 亚洲视频一区| 婷婷深爱网| 欧美婷婷九月| 婷婷黄色| 亚洲性图一区二区| 色五月婷婷五月天激情综合| 五月天婷婷爱| 婷婷五月天国产手机在线视频观看| 成人无码髙潮喷水A片| 五月婷婷在线网站| 狠狠爱夜夜| 激情婷婷五月| 不卡影院午夜理论片| 日本一毛片| 成人免费120分钟啪啪| 这里只有精彩视频| 97干在线视频| 婷五月天| 婷婷五月天影院| 天天爽天天摸天天爱| 思思热久久阴99| WWW色色色COM| 91啪啪| 日韩超碰在线| 六月色丁香中文字幕| 丁香色婷婷| 97人碰人操| 婷婷五月天丁香| 丁香六月婷婷综合| 五月婷久久在线| www.婷婷网| www.99日本| 激情精品久久| 97超碰,人人舔,人人操,人人摸| 九九精品网| 亚洲性爱99在线| 天天色月| www.婷婷五月| 香蕉伊人综合| 性色综合网| 色综啪啪| 99热草草| 亚洲愉拍99热成人精品| 99热在线观看| 婷婷在线精品| 婷婷五月天社区| 五月丁香婷婷综合| 另类小说五月天| 99热这里是精品| 久久婷婷色| 久久五月激情综合| 日日操天天操| 人人操插| 国产精品日日躁夜夜躁| 五月婷婷六月天| 夜夜骑夜夜操| 久久久av久av久片一区二区| 狠狠精品干练久久久无码中文字幕| 久99久视频| 三人荫蒂添的好舒服A片| AA片在线观看视频在线播放 | 国内婷婷丁香社区在线播放| 888精品福利地址| 森林影视大全,最好看的2019年视频 | 人人草人人爱手机视频看看| 色操b| 99这里只有精品视频| 操人91| 色亭亭影园| 久久色五月| 久久er九九| 天天爽天天摸| 啪啪激情综合| 中文字幕无码人妻少妇免费视频 | 九九九激情网| 婷婷99狠狠躁天天| 欧美美女国产日韩一区二区久| 丁香婷婷色五月天| 中文字幕AV在线播放| 午夜无码熟熟妇丰满人妻 | 欧美色必爱| 五月天第四色开心色播| 久久偷拍综合五月天| 亚洲成人免费电影| 五月天婷婷丁香人人操91| 99小视频| 九九热精品| 激情五月婷婷综合秋霞| 色婷婷综合久久久久| 九热视频在线伦| 逼逼AV| 天天干一干| 亚洲乱码w在线观看| 亚洲综合五月天综合| 99热日韩| 人人妻人人澡人人爽| 久久婷婷亚洲五月天| 99热97| 9色在线| 99色视频在线| 日本丰满久久| 婷婷五月天美女视频| 激情五月天色播| 激情深愛五月視頻| 婷婷色在线| av九九| 4399在线日本A片| 日韩精品超碰在线观看| 日本狠狠网| 超碰高清在线| 国产精品电影网| 午夜成人天堂久久无码日韩久久| 天天透天天爱| 91丨九色丨老农村| 大天天伊人| www.zbzhongsen.com| 九九综合| 亚洲激情淫网| 日韩专区五月天婷婷丁香| 操人妻90p| 91人久| 九九热经典视频在线观看| 色色色色丁香| 无码髙清| 99色区| 婷婷六月天| 91色综合网| 麻豆科斗777| 秋霞av吧| 色99视频| 成人欧美一区二区三区在线观看| 男女av免费看| 亭亭色网| 六月天无码网址| 五月天大香蕉AV| 99精品免费视频| 亚洲狠狠狠| 91色久| 日本一级黄色片。| 五月天综合激情网| 婷婷色播综合五月| 丁香五月婷婷Av| 五月丁香久久| 天天做天天爱天天爽| 欧美狠狠草| 日本毛片内射| 四川女人毛多水多A片| av色婷婷| 伊人五月天在线| 综合激情网| 99人妻碰碰碰久久久久| 99亚洲天堂| 六月婷婷综合| 这里只有精品网站| 激情综合网,五月| 无码se| 婷婷精品在线| 91色逼| 人人操人人看97干| 色99久草在线| 国产真实乱了老女人视频| 激情五月综合网最新| 五月性色| 婷婷色正月| 天天做天天爱天天玩夜夜爽| 深爱婷婷色| www.99色| 97人人搞| 国产67194| 激情婷婷久久| 六月婷婷啪啪| 色综合大香蕉| 日本久久高清| 色综合99| 国产五月婷| 久久久久人妻中文| 天天做天天爱天天做| 丁香五月乱中文字幕| 五月丁香婷婷激情视频| 激情婷婷五月| 涩涩涩五月天| 丁香五月婷婷色情综合| 99在线精品免费视频| 99网| 色综啪啪| 碰超在线九色| 亚洲愉拍99热成人精品| 久久只有精| 五月天社区狠狠| 久久婷丁香五月| 99热99在线| A片试看50分钟做受视频| 不卡成人免费| 色综合综合色| 色五月五月天| 这里只有精品视频在线| av在线资源| 国产女18毛片多18精品| 五月久久婷婷| 战争与艾拉电影免费观看| 思思热在线视频精品| 天天爽人人综合免费7799| 熟女国产在线一区二区三区四区| 色五月婷婷基地| 色亭亭五月天网扯| 精品99在线| 97操操网| www.天天色综合| 天天色天天日天天舔| 双性美人被调教到喷水A片| 日韩在线一级| 四色女婷婷| 色色婷| 日本片日本片祼观看网站在线看中文版网页在线看 | 亚洲爆乳无码精品AAA片蜜桃| 色99视频| 99偷拍视频在线日本| 久久久五月天| 天天做好综合色| 天堂伊人干| 婷香五月网在线| 五月丁香| 色域五月婷婷丁香| 色色色综合| 五月婷婷亚洲色图| 综合网五月天123| 丁香五月激情综合| 久久这里都是精品免费| 丁香伊人网| 任你擦免费视频| AV人人操| 丁香花婷婷五月天| 噜噜噜精品欧美成人在线观看| 五月天综合| 热久久思思热思思| 五月丁香久久| 我爱宗和色| 久久婷婷五月综合激情国产| 一本大道伊人AV久久综合| 91碰碰碰| www,奇米影视| 国产激情在线| 色在线五月天免费| 欧美啪啪网| 丁香五月综合| 日日操夜夜骑| 色婷婷丁香五月天| 丁香五月婷婷影视先锋| 91玖玖| 五月开心啪啪| 大香蕉啪啪| 91国产精品视频播放| 大香蕉520| 噜噜色婷婷|