99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

madExcept 5 FS:First Chance異常捕獲與崩潰報(bào)告實(shí)踐

madExcept 5 FS:First Chance異常捕獲與崩潰報(bào)告實(shí)踐 簡(jiǎn)介madExcept 5 FS 是一套專為 Delphi 開發(fā)者設(shè)計(jì)的異常處理組件源碼版用于捕獲程序運(yùn)行中的各類異常、生成堆棧跟蹤信息并提供錯(cuò)誤報(bào)告能夠與 Delphi IDE 無縫集成適合需要快速定位 Bug、提升軟件穩(wěn)定性的中高級(jí)開發(fā)場(chǎng)景。壓縮包共 77.07MB包含 3509 個(gè)文件其中有 pas 源碼、dfm 窗體、dpk/dproj 工程文件等可供直接閱讀修改的開發(fā)素材也有 dcu 編譯單元、bpl 運(yùn)行包、lib 靜態(tài)庫以及大量 h/hpp 頭文件等編譯產(chǎn)物兼顧源碼學(xué)習(xí)與實(shí)際使用并附有安裝與測(cè)試方法說明文檔。目前已有 424 人學(xué)習(xí)下載。借助 FullSource 特性使用者能深入剖析異常捕獲、堆棧解析與錯(cuò)誤報(bào)告生成等內(nèi)部實(shí)現(xiàn)也可根據(jù)項(xiàng)目需求自定義組件行為豐富的平臺(tái)支持文件有助于適配不同 Delphi 版本對(duì)想研究異常處理機(jī)制或擴(kuò)展組件功能的開發(fā)者是一部實(shí)用的參考。1. madExcept 5 FS先于崩潰發(fā)生的那一次攔截這幾年在群里幫人看閃退報(bào)告見得最多的不是“彈了錯(cuò)誤框”而是“程序無聲無息就沒了”。日志停在最后一條業(yè)務(wù)操作Windows 事件查看器里只有一句 Access violation地址是0x0041AB2連哪個(gè)函數(shù)都沒寫。madExcept 5 FS 就是沖這個(gè)痛點(diǎn)去的。FS 在 madExcept 體系里指 First Chance 異常處理不等程序走到未處理異常、被系統(tǒng)強(qiáng)制終止的 Second Chance 階段而是在異常對(duì)象剛拋出的那一刻先攔一道把調(diào)用棧、寄存器、線程現(xiàn)場(chǎng)全部拍下來再根據(jù)你的策略決定是吞掉、記錄還是放行。適合那些線上閃退不可復(fù)現(xiàn)、客戶端反復(fù)被卸載、DLL 邊界出問題又背黑鍋的 Delphi/CBuilder 項(xiàng)目。這一篇直接講怎么把它接進(jìn)工程、怎么把報(bào)告變成能定位問題的證據(jù)鏈。2. 為什么 FS 意味著“第一機(jī)會(huì)”異常處理鏈路與選型2.1 First Chance 與 Second Chance同一場(chǎng)事故的兩個(gè)時(shí)間點(diǎn)Windows 的異常分發(fā)機(jī)制分兩輪。第一輪叫 First Chance異常拋出后系統(tǒng)先讓進(jìn)程內(nèi)的頂層異常處理器Top-Level Exception Handler過目這時(shí)候調(diào)用棧還是完整的、局部變量還沒被清理、異常源地還沒被棧展開破壞是拿現(xiàn)場(chǎng)證據(jù)的黃金窗口。如果沒有任何處理器決定攔截系統(tǒng)進(jìn)入第二輪 Second Chance按默認(rèn)規(guī)則終止進(jìn)程這時(shí)再掛接的捕獲邏輯拿到的棧已經(jīng)部分失效甚至只剩一個(gè)地址。madExcept 5 FS 做的事就是在第一輪里插入自己的處理器。它先把異常鏈上的上下文全部記錄成結(jié)構(gòu)化報(bào)告然后問你要不要把這個(gè)異?!跋钡?。這個(gè)機(jī)制的價(jià)值在于傳統(tǒng) try-except 只能抓到當(dāng)前線程當(dāng)前代碼塊里的異常一旦異??邕^模塊邊界、被某個(gè)框架層吞了或者發(fā)生在后臺(tái)線程業(yè)務(wù)層根本感知不到FS 模式是從異常發(fā)生的源頭直接接住不依賴你在每一處業(yè)務(wù)代碼里手動(dòng)包保護(hù)層。FS這個(gè)后綴對(duì)應(yīng)的就是這一整套 First Chance 采集與分發(fā)能力而不是某個(gè)獨(dú)立 IDE 插件。理解這一點(diǎn)很關(guān)鍵你裝進(jìn)工程的是一個(gè)異常采集框架配置的靈活性核心在回調(diào)函數(shù)的請(qǐng)求與放行邏輯上。2.2 什么項(xiàng)目值得上 madExcept 5 FS三條選型判據(jù)不是所有項(xiàng)目都需要把崩潰報(bào)告做成產(chǎn)品級(jí)基礎(chǔ)設(shè)施。團(tuán)隊(duì)小、發(fā)布頻率低、用戶量小到崩潰日志可以靠用戶口述的項(xiàng)目直接套個(gè) showmessage 也能撐。如果你正在做以下三類項(xiàng)目之一madExcept 5 FS 就值得投進(jìn)去第一類是面向大量終端用戶的工具軟件或業(yè)務(wù)客戶端用戶環(huán)境五花八門缺 DLL、顯卡驅(qū)動(dòng)沖突、輸入法注入都可能觸發(fā)崩潰復(fù)現(xiàn)只能靠現(xiàn)場(chǎng)報(bào)告。第二類是含多線程、插件化或依賴第三方 DLL 的系統(tǒng)崩潰線程棧必須追溯到模塊邊界。第三類是對(duì)質(zhì)量和響應(yīng)速度有要求的項(xiàng)目領(lǐng)導(dǎo)要的是“這周修復(fù)率提升了多少”而不是“我們還在找復(fù)現(xiàn)步驟”。從我接觸的項(xiàng)目看還有一個(gè)隱性的判斷條件項(xiàng)目是否有持續(xù)集成環(huán)境。madExcept 5 FS 給出的報(bào)告質(zhì)量取決于符號(hào)文件與構(gòu)建產(chǎn)物的對(duì)應(yīng)關(guān)系臨時(shí)編譯一次就想靠它定位效果會(huì)打五折這點(diǎn)后面第 4 章會(huì)展開。2.3 把 madExcept 5 掛進(jìn)工程的最小路徑常見做法是通過 IDE 的組件安裝機(jī)制把 madExcept 編譯進(jìn)設(shè)計(jì)環(huán)境里然后在工程文件中手動(dòng)引入兩個(gè)運(yùn)行時(shí)單元。最小改動(dòng)量下你的工程文件末尾會(huì)變成這個(gè)樣子program KClient; uses Vcl.Forms, madExcept in ..\madExcept\madExcept.pas, madExceptHook in ..\madExcept\madExceptHook.pas, KMainForm in KMainForm.pas {MainForm}; {$R *.res} begin Application.Initialize; Application.CreateForm(TKMainForm, MainForm); Application.Run; end.madExcept單元提供異常報(bào)告生成與接口定義madExceptHook負(fù)責(zé)在初始化階段把 FS 處理器注冊(cè)進(jìn)系統(tǒng)異常分發(fā)鏈。把這兩個(gè)單元放在 uses 列表靠前的位置是為了保證它們的初始化代碼先于你的業(yè)務(wù)單元執(zhí)行否則在異常處理器注冊(cè)完成之前發(fā)生的崩潰依然會(huì)漏網(wǎng)。工程文件改完后重新編譯并運(yùn)行一次主動(dòng)制造一個(gè)除零異常試試。默認(rèn)配置下madExcept 5 會(huì)彈出它自帶的崩潰報(bào)告對(duì)話框里面有完整的調(diào)用棧和異常類型。若彈不出來先確認(rèn)這兩個(gè)單元確實(shí)被編進(jìn)dcu輸出目錄再確認(rèn) IDE 里沒啟用“忽略特定異常類型”的過濾設(shè)置。這一步跑通之后我們?cè)僬?FS 模式的自定義回調(diào)。3. 配置 FS 模式從默認(rèn)彈窗到自定義處理回調(diào)3.1 用全局 Hook 接管 First Chance 異常madExcept 5 默認(rèn)行為是攔截未處理異常并顯示報(bào)告對(duì)話框但這不適合所有場(chǎng)景發(fā)布版客戶端不該把技術(shù)報(bào)告直接懟在用戶臉上而且有些異常是“可控但需要被記錄”的比如文件被占用、網(wǎng)絡(luò)瞬斷、配置項(xiàng)格式錯(cuò)誤。FS 模式給了你一個(gè)注冊(cè)全局回調(diào)的入口讓每個(gè)異常在第一時(shí)間先經(jīng)過你的代碼。常見做法是調(diào)用RegisterExceptionHandler它的聲明如下function RegisterExceptionHandler( Handler: TExceptionHandler; ThreadMode: TThreadMode; Event: TExceptionEvent): Integer;回調(diào)函數(shù)的實(shí)現(xiàn)聽起來抽象落地下來一般長(zhǎng)這個(gè)樣子function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; var report: TStringList; begin // First Chance 階段handled 輸出參數(shù)決定異常是否被吞掉 if exceptIntf.ExceptionClass EInOutError then handled : True // 文件寫入類異常記錄但不崩 else handled : False; // 其他異常照常拋出進(jìn)入 Second Chance report : TStringList.Create; try report.Text : exceptIntf.BugReport; report.SaveToFile(D:\logs\crash_ FormatDateTime(yyyymmdd_hhnnss, Now) .txt); finally report.Free; end; Result : True; end;代碼里的handled是最容易理解錯(cuò)的參數(shù)。設(shè)為True表示這個(gè)異常已經(jīng)被你處理了系統(tǒng)不會(huì)再向上拋程序繼續(xù)往下跑設(shè)為False表示你只是“看了一眼”并記錄了現(xiàn)場(chǎng)異常繼續(xù)正常傳播流程。Result表示是否接管默認(rèn)的 madExcept 報(bào)告界面——返回True時(shí)你自己寫了文件就要關(guān)掉它的默認(rèn)彈窗否則用戶會(huì)看到兩層輸出。注冊(cè)這回調(diào)的最佳位置是工程文件begin塊的最前面或者主窗體OnCreate里只注冊(cè)一次initialization RegisterExceptionHandler(MyFSHandler, stDontSync, epMainThread); end.stDontSync表示回調(diào)不主動(dòng)做線程同步適合只做內(nèi)存操作和文件寫入的輕量邏輯若你在回調(diào)里要訪問 VCL 控件或調(diào)用需要消息循環(huán)的代碼改成stSync會(huì)更穩(wěn)代價(jià)是可能阻塞當(dāng)前線程一小段時(shí)間。epMainThread限定只在主線程上觸發(fā)回調(diào)后臺(tái)線程崩潰則會(huì)進(jìn)入默認(rèn)流程對(duì)全局記錄需求更強(qiáng)的項(xiàng)目我一般會(huì)注冊(cè)兩個(gè)回調(diào)主線程一個(gè)工作線程一個(gè)分別處理。3.2 上下文信息讓崩潰報(bào)告自帶現(xiàn)場(chǎng)崩潰報(bào)告如果只有調(diào)用棧你只能知道“在哪個(gè)函數(shù)崩了”不知道“用戶當(dāng)時(shí)在做什么”。madExcept 的接口里暴露了一些上下文屬性但更可靠的業(yè)務(wù)上下文還得靠自己在回調(diào)里補(bǔ)充。我一般會(huì)在回調(diào)里讀取一個(gè)全局對(duì)象的狀態(tài)把它拼進(jìn)報(bào)告文件function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; var lines: TStringList; ctx: TKContextInfo; begin ctx : TKContextInfo.GetInstance; lines : TStringList.Create; try lines.Add(UserID ctx.UserID); lines.Add(CurrentForm ctx.CurrentFormName); lines.Add(NetworkState ctx.NetworkState); lines.Add(LastAction ctx.LastActionLog); lines.Add(--- bug report start ---); lines.Add(exceptIntf.BugReport); lines.SaveToFile(ctx.LogDir fs_ FormatDateTime(yyyymmdd_hhnnss, Now) .log); finally lines.Free; end; handled : False; // 只記錄不吞異常 Result : True; end;把業(yè)務(wù)上下文放在LastActionLog里是個(gè)好習(xí)慣。很多閃退是特定操作序列觸發(fā)的比如“上傳圖片后立即切換賬套”如果你有操作埋點(diǎn)報(bào)告里就能直接看到最后一步動(dòng)作。這個(gè)變量每執(zhí)行一個(gè)關(guān)鍵操作就覆蓋寫入一次不用記全量日志避免文件體積失控。3.3 報(bào)告內(nèi)容與文件落盤的參數(shù)取舍FS 回調(diào)里最忌諱的事情是“什么都往報(bào)告里塞”。調(diào)用棧、線程列表、模塊列表、CPU 寄存器、系統(tǒng)信息全部打進(jìn)去一份報(bào)告能到幾百 KB高頻崩潰時(shí)磁盤和網(wǎng)絡(luò)都會(huì)被拖死。我的經(jīng)驗(yàn)是分兩個(gè)級(jí)別一種是把BugReport完整落盤保留所有細(xì)節(jié)僅限開發(fā)版或內(nèi)測(cè)版開啟另一種是發(fā)布版只記錄異常類型、異常地址、模塊名、調(diào)用棧前十幀和業(yè)務(wù)上下文。后者的信息量足夠定位 80% 的崩潰文件體積控制在 10 KB 以內(nèi)上傳快、干擾少。落盤目錄要選用戶有寫權(quán)限的路徑不要硬編碼D:\logs否則用戶以普通權(quán)限運(yùn)行時(shí)報(bào)告根本寫不進(jìn)去。用GetEnvironmentVariable(LOCALAPPDATA)拼一個(gè)KClient\CrashReports目錄是可移植且安全的選擇。目錄不存在就創(chuàng)建創(chuàng)建失敗則退回到臨時(shí)目錄這層容錯(cuò)必須做因?yàn)楫惓;卣{(diào)本身就是程序處于不穩(wěn)定狀態(tài)不要再讓文件系統(tǒng)問題掩蓋真正要排查的事故。4. 根據(jù)崩潰報(bào)告定位問題?;厮?、線程現(xiàn)場(chǎng)與符號(hào)文件4.1 讀懂 BugReport 的關(guān)鍵字段madExcept 5 生成的報(bào)告結(jié)構(gòu)大致固定我一般在排障時(shí)只盯著幾個(gè)欄位看表格字段含義定位價(jià)值Exception Class異常類型如 EAccessViolation判斷是邏輯問題還是系統(tǒng)級(jí)內(nèi)存問題Exception Message異常附帶信息經(jīng)常直接寫著越界下標(biāo)或文件名Exception Address崩潰指令所在的模塊偏移結(jié)合符號(hào)表換算成函數(shù)名Call Stack從崩潰點(diǎn)向外的調(diào)用鏈解決“哪條路徑調(diào)到這里”的問題Threads所有線程的??煺张挪槎嗑€程協(xié)作導(dǎo)致的崩潰Modules加載的模塊列表及版本排查 DLL 沖突、補(bǔ)丁不一致報(bào)告里最騙人的是Exception Message為空的 Access Violation。地址直接指向某個(gè)系統(tǒng) DLL 內(nèi)部看起來像第三方庫的鍋但順著Call Stack看前兩條棧幀往往會(huì)回到你自己的消息處理函數(shù)。?;厮菔抢斫獗罎⒙窂降闹骶€索而不是只看落點(diǎn)地址。4.2 符號(hào)表與版本映射讓地址變函數(shù)名崩潰日志里如果只有00401234這種裸地址對(duì)現(xiàn)代項(xiàng)目來說基本等于廢紙。madExcept 要把地址解析成函數(shù)名依賴編譯時(shí)生成的調(diào)試符號(hào)。Delphi/CBuilder 的鏈接器選項(xiàng)里一般提供 map 文件的開關(guān)把詳細(xì)模式打開后編譯器會(huì)輸出完整的映射關(guān)系表madExcept 在崩潰時(shí)查找該表即可還原函數(shù)名。工程交付時(shí)記得把每次構(gòu)建的 map 文件或調(diào)試符號(hào)與 exe 一并歸檔。這里的規(guī)矩是報(bào)告里的模塊版本號(hào)和構(gòu)建號(hào)必須能對(duì)應(yīng)到唯一一份符號(hào)文件。我習(xí)慣在工程里加一個(gè)構(gòu)建版本常量并定義到資源或全局變量里const BUILD_ID 20250607_1300_trunk_4a3f2c;回調(diào)里把這個(gè)BUILD_ID寫進(jìn)報(bào)告頭部歸檔符號(hào)文件時(shí)文件名也帶同一個(gè)BUILD_ID。線上反饋回來看報(bào)告里的構(gòu)建號(hào)找符號(hào)文件幾秒鐘就能對(duì)上。4.3 一個(gè)真實(shí)定位流程的三步走第一步先把報(bào)告里的Exception Address和Call Stack前三條記錄抄出來。第二步用報(bào)告里的BUILD_ID找到對(duì)應(yīng)的 map 文件把裸地址換算成函數(shù)名這一步 madExcept 報(bào)告里通常已經(jīng)替你做了——前提是發(fā)布構(gòu)建時(shí) map 文件沒有被剝離。第三步打開源碼定位到那個(gè)函數(shù)重點(diǎn)看這幾點(diǎn)是否有對(duì)空對(duì)象解引用、是否有無符號(hào)整數(shù)比較、是否有回調(diào)函數(shù)在跨模塊傳遞時(shí)被錯(cuò)誤約定調(diào)用。碰到Call Stack本身就殘廢的報(bào)告比如只在崩潰點(diǎn)有一條記錄后面全是Unknown大概率是優(yōu)化編譯把棧幀給省略了或者你的 hook 觸發(fā)在異常鏈已經(jīng)展開之后。這時(shí)候不要硬解地址轉(zhuǎn)而看Modules欄位確認(rèn)崩潰模塊是否帶調(diào)試版本號(hào)再檢查編譯器優(yōu)化選項(xiàng)。報(bào)告里那份Threads列表也別忽略。很多“偶爾崩一次”的現(xiàn)場(chǎng)主線程棧是正常的反而是某個(gè)工作線程停在了釋放對(duì)象的代碼上。如果團(tuán)隊(duì)里多線程代碼量大且頻繁 new/free 對(duì)象FS 報(bào)告里帶出線程棧會(huì)省掉你掛調(diào)試器復(fù)現(xiàn)一下午的時(shí)間。5. 避坑madExcept 5 FS 集成中常見的五個(gè)翻車現(xiàn)場(chǎng)5.1 現(xiàn)象一DLL 崩潰只出現(xiàn)“外部地址”現(xiàn)象主程序用 madExcept加載的一個(gè)業(yè)務(wù) DLL 里崩了報(bào)告里只顯示Unknown module和一個(gè)裸地址無法換算函數(shù)名。原因DLL 工程沒有編譯 madExcept 相關(guān)單元主程序拿不到 DLL 的符號(hào)表另外系統(tǒng)異常分發(fā)經(jīng)過模塊邊界時(shí)DLL 里的棧幀格式不會(huì)被主程序的 hook 完整解析。解決給 DLL 工程也加上 madExcept 相關(guān)單元并開啟同樣的符號(hào)輸出配置。發(fā)布時(shí)確認(rèn) DLL 的 map 文件與 DLL 本體同版本歸檔。若 DLL 是第三方且無符號(hào)文件則在報(bào)告里至少記錄模塊名與版本號(hào)反向聯(lián)系廠商時(shí)也算有據(jù)可查。5.2 現(xiàn)象二FS 回調(diào)里寫文件導(dǎo)致遞歸崩潰現(xiàn)象異常發(fā)生后回調(diào)函數(shù)里寫日志日志文件被占用或無權(quán)限寫文件操作又拋出異常madExcept 再次進(jìn)回調(diào)進(jìn)入無限遞歸程序徹底卡死。原因回調(diào)函數(shù)本身沒有做異常隔離。FS 回調(diào)運(yùn)行在系統(tǒng)的異常分發(fā)鏈上任何一環(huán)再拋異常都會(huì)重新進(jìn)入分發(fā)入口。解決回調(diào)函數(shù)整體包一層裸 try-except任何異常都吞掉確?;卣{(diào)自己永遠(yuǎn)不拋文件寫入前先判斷目錄可寫寫不進(jìn)去就放棄絕不讓日志行為本身變成新的事故源頭function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; begin try // 原有邏輯 except // 記錄回調(diào)失敗次數(shù)不再做任何操作 end; handled : False; Result : True; end;5.3 現(xiàn)象三優(yōu)化編譯后?;厮輰?duì)不上行號(hào)現(xiàn)象用戶現(xiàn)場(chǎng)報(bào)告的調(diào)用棧能列出函數(shù)名但點(diǎn)開源碼行號(hào)指向的位置和實(shí)際崩潰邏輯明顯不對(duì)。原因編譯器開了內(nèi)聯(lián)和幀指針省略優(yōu)化某些棧幀被優(yōu)化合并madExcept 依據(jù)靜態(tài)符號(hào)表換算出的行號(hào)是近似值不是精確落點(diǎn)。解決定位問題時(shí)把函數(shù)名當(dāng)作線索而非最終答案重點(diǎn)看崩潰點(diǎn)所在函數(shù)整體邏輯。對(duì)懷疑有問題的單元單獨(dú)關(guān)閉優(yōu)化重新編譯做一次定向?qū)Ρ?。這不是 madExcept 的 bug是符號(hào)還原的固有精度問題理解為它給的是“案發(fā)附近區(qū)域”而不是“精確坐標(biāo)”就能少走彎路。5.4 現(xiàn)象四報(bào)告發(fā)送阻塞主線程二次鎖死現(xiàn)象加了 FS 回調(diào)后崩潰現(xiàn)場(chǎng)偶爾變成“卡死不動(dòng)”任務(wù)管理器顯示進(jìn)程無響應(yīng)。原因回調(diào)里直接發(fā)了 HTTP 請(qǐng)求把崩潰報(bào)告?zhèn)鹘o服務(wù)端。崩潰發(fā)生時(shí)主線程狀態(tài)本身不穩(wěn)定同步網(wǎng)絡(luò)請(qǐng)求一直等超時(shí)界面消息循環(huán)被阻塞用戶感知為假死。解決回調(diào)內(nèi)不要做任何網(wǎng)絡(luò)操作只負(fù)責(zé)落盤。程序下次正常啟動(dòng)時(shí)掃描崩潰報(bào)告目錄用后臺(tái)線程統(tǒng)一上傳上傳成功再刪文件。這個(gè)模式也叫本地落地加延遲上報(bào)是客戶端崩潰采集的常見做法。5.5 現(xiàn)象五打包時(shí)機(jī)不對(duì)報(bào)告里全是“Unknown”現(xiàn)象測(cè)試機(jī)上報(bào)的報(bào)告完全正常發(fā)布給用戶后全變成Unknown function和裸地址。原因發(fā)布包使用 Release 配置編譯且關(guān)閉了 map 文件輸出madExcept 運(yùn)行時(shí)沒有任何符號(hào)可查。解決發(fā)布配置里也保留 Detailed map 文件生成只是不給最終用戶分發(fā)而已——直接把 map 文件歸檔到構(gòu)建服務(wù)器內(nèi)部存儲(chǔ)。同時(shí)確認(rèn)構(gòu)建機(jī)上沒有開啟“生成輕量調(diào)試信息”之類的減配選項(xiàng)。這個(gè)問題在快速迭代的小團(tuán)隊(duì)里幾乎每個(gè)月都能踩到一次屬于典型的因?yàn)椤鞍l(fā)布要精簡(jiǎn)”而誤刪關(guān)鍵排障數(shù)據(jù)。6. 進(jìn)階把崩潰報(bào)告變成持續(xù)可用的工程質(zhì)量數(shù)據(jù)6.1 用版本號(hào)與構(gòu)建 Mark 給報(bào)告打標(biāo)早期接入 madExcept 時(shí)我見過一個(gè)項(xiàng)目報(bào)告文件存了幾千個(gè)命名全是crash_20250501_230011.log解析時(shí)根本分不清版本。后來我們做了一件事把構(gòu)建號(hào)、分支名、編譯時(shí)間全部塞進(jìn)報(bào)告文件名和文件頭排序和歸因一下就清楚了。function BuildReportFileName: string; var tag: string; begin tag : Format(%s_%s_%s, [BUILD_ID, APP_VERSION, COMPILE_TIME]); Result : GetEnvironmentVariable(LOCALAPPDATA) \KClient\CrashReports\ tag _ FormatDateTime(yyyymmdd_hhnnss, Now) .txt; end;發(fā)布后每天掃一次報(bào)告目錄按BUILD_ID分組統(tǒng)計(jì)崩潰次數(shù)哪一次構(gòu)建增量引入的崩潰增量立刻顯現(xiàn)。別小看這步它把“收到一份崩潰日志”變成“一周崩了 47 次其中 39 次在新版本”的決策信息。6.2 本地落盤加延遲上傳的可靠發(fā)送模式報(bào)告最終是要匯總到服務(wù)端的。常見做法是寫一個(gè)后臺(tái)線程每次啟動(dòng)時(shí)遍歷崩潰報(bào)告目錄文件逐條上傳成功后移動(dòng)到 backup 目錄或直接刪除。上傳接口要冪等同一條報(bào)告重復(fù)提交時(shí)服務(wù)端按報(bào)告唯一 ID 去重。我在最近一個(gè)模擬項(xiàng)目X里給上傳線程加了一個(gè)簡(jiǎn)單限制單次最多處理 20 份報(bào)告處理完退出線程避免程序啟動(dòng)瞬間被大量歷史報(bào)告占滿網(wǎng)絡(luò)。崩潰報(bào)告是有時(shí)效性的優(yōu)先傳當(dāng)天的歷史存量排后。線程里每傳完一條就Sleep(300)給主線程留資源這在低配用戶機(jī)上尤其重要。還有一個(gè)習(xí)慣值得分享每季度把報(bào)告里的Exception Class做一次分布統(tǒng)計(jì)。曾經(jīng)有個(gè)客戶端項(xiàng)目翻來覆去都是同一個(gè)數(shù)組越界問題開發(fā)組修了一版上線后統(tǒng)計(jì)看該類異常環(huán)比降了 90%那個(gè)數(shù)據(jù)比任何測(cè)試報(bào)告都有說服力。崩潰報(bào)告系統(tǒng)不是修一次就完事的它的價(jià)值隨時(shí)間線性累積前提是你把構(gòu)建號(hào)、符號(hào)文件、報(bào)告歸檔這套動(dòng)作養(yǎng)成肌肉記憶。這條路我走下來最大的教訓(xùn)只有一個(gè)——hook 要接得早符號(hào)要存得住報(bào)告不要當(dāng)場(chǎng)發(fā)。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99久久九九| 五月婷婷色啪| 超碰免费成人网站| 天天看片日日夜夜| 青青草成人网| 少妇丁香婷婷 | 99热网站| 激情五月六月婷婷综合啪啪| 久久小说| 天天日天天日天天搞| 人妻久久久久久| 精a品a视a频| 天天天天天日| 丁香五月天激情网址| 欧美美女视频| 五月丁香六月激情狠狠| 人人摸人人操人人爱| 婷婷激情鹿城五月天| 久久人妻熟女一区二区| 五月天色裸体视频| 亚州综合色| 日本va欧美va国产激情| 婷婷久久夜| http:色情日本com| 91婷婷丁香五月| 久久jiuwww| 五月丁香亭亭操逼| 久久这里在精品视频| 久热A片| 好激情在线综合网| 九九热这里只有精品23| 欧洲MV日韩MV国产| 日韩色五月| 综合日本婷婷| 五月天开心色情网| 激情五月综合视频| 日本操片| 激情综合亚洲| 手机旧版看人妻1025| 97自拍视频在线| 色婷婷在线视频| 6月丁香婷婷激情| 久久综合久色欧美综合狠狠| 色五月天丁香| 丁香六月天婷婷色| 色狠狠综合网| 国产毛片精品一区二区色欲黄A片| 激情五月婷婷网| 久久加勒比| 狠狠狠狠狠| 99热6这里只有精品| 91九色丨国产丨爆乳| 狠狠操狠狠操| 久久五月天色婷婷| 九九精品视频在线6| 色欧美日| 婷婷五月激情网| 五月婷婷丁香五月亚洲色| 91在线观看www| 国产激情综合五月久久| 激情亚洲婷婷| cc精品国产性传播| 九九九热精品| 国产99久久久国产精品免费看| 99久久久久久www| 久久99视频| 精品夜夜澡人妻无码AV| 大天天伊人| www,8050,午夜三级| 日本无码专区| 日本狠狠干| 人人干女人| 伊人午夜综合色啪| 99在线精品观看99| 亚洲成人无码片| 99激情视频| 久久欧洲综合网| 在线国产精品色| 丁香久久五月婷综合| 色婷婷婷婷| 狠狠插狠狠插| 色播五月丁香婷婷| 久久中文人妻系列| 婷婷啪啪| 伦乱天堂| 六月婷婷啪啪| 丁香五月婷婷激情97| 99精彩视频| 六月丁香婷婷视频综合在线观看| 99啪在线| wwww.色婷婷| 五月天激情国产综合婷婷| 思思99热| 丁香色综合| 综合激情五月天| 亚洲成人网站在线| 超碰国产AV| 色色色1网址| 色偷偷综合| www.99日本| 亚洲视频图片婷婷五月| 欧美色播综合在线观看| 3pAV| 丁香九月婷婷| 久久性视频| 丁香伊人五月色婷婷五十路| 男同91 | 丁香激激情网| 这里只有精彩小视频视频网站| 五月婷婷导航| 亚洲AV第二区国产精品| 五月婷婷丁香啪啪| 碰97久久| 97久久人人| 红桃91人妻爽人妻爽| 久机视频这只有精品| 激情丁香五月天图片| 欧美视频在线观看噜噜| 亭亭玉立国色天香| 欧美狠狠草| 六月丁香婷婷综合狠狠爱夜夜爱| 伊人网大香| 9九色首页| 99日视频在线| 久热天堂| 91久久五月天| 色色色色色五月| 久九男女天堂| www婷婷色| 综合色色五月| 超爽内射| 欧美激情中文字幕| 五月丁香久久网| www.亚洲激情.com| 影音先锋美国A| 九九九九精品精| 国产免费性爱| 九九99九九精品视频| 色在线免费观看| 97涩婷婷| 99狠狠操一| www一起操| 日本色99| 国产精产国品一二三在观看| 内射干少妇亚洲69XXX| 最近免费中文字幕大全高清大全1| 久操无码| 狠狠丁香| 图片区 小说区 区 亚洲五月| 99热只有这里有精品| 很很干天天干| 任你躁XXXXX麻豆精品| 久久精品凹凸分类| 少妇婷婷五月天| 另类亚洲电影| 91成人电影| 97成人超碰免| 亚洲AV人人操| 丁香婷婷六月天| 色色综合视频| www,色婷婷| 亚洲色综合| 任你日视频| 色色国产| 日韩成人AV在线播放| 婷婷五月丁香综合| http:色情日本com| 久久久久久久久久久44| 色播丁香| 丁香六月天婷婷开心综合| 色色色免费视频| 久青操| 超碰人人在线| 日韩精品无码一区二区| 成人免费视频一区| 婷婷八月激情| 99热费观看| 97人人操| 中文字幕日本最新乱码视频| 玖玖婷婷婷丁香五月| 九久9精品| 色视五月天婷婷| 婷婷五月另类网站| 色五月激情五月| 变态 另类 在线| 国产色99| 精品久久人妻热| 六月丁香五月激情亚洲AV| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 亚洲熟妇AV乱码在线观看| 99婷婷综合| 五月婷婷激情性爱| 高清无码中文字幕aVDV| www.亭亭五月天| 91黄操| 亚洲无AV在线中文字幕| 色哟哟www| 99er免费在线观看| 人人人人人人人草| 4399成人黄A片| 亚洲黄网AV| www.99精品在线| 婷婷五月天伦理| 这里只有精品在线视频在线观看| 丁香婷婷基地| 天天干在线播放| 欧在线一区| 97操在线视频| 亚洲99精品欧美一区| 人人摸人人搞| AVV黄| 日韩色色色99| 操人久久| 九九色网| 亚洲色综合| 激情综合色婷婷啪啪六月天| 五月天婷婷丁香| Av在线资源| 日韩成人精品中文字幕| 色XX综合网| 色色射| 中文字幕av网站| 国产欧美日韩性爱| 亚洲人妻电影| 99只有精品| 欧美碰碰碰| 丁香五月天激情网址| 99这里只有精品|v| 亚洲精品国产熟女久久久| 五月婷婷丁香啪啪| 国产婷婷五月色情综合| 亚洲字幕AV一区二区三区四区| 激情五月色婷婷| 精品99爱免费视频在线观看| 99这里只有精品|v| 97黑人精品区| 综合久久人妻| 91丨九色丨国产打屁股| 丁香六月天婷婷色| 天天拍天天做视频| 97干在线视频| 成人免费在线电影| 亚洲最大视频| 1024AV视频| 色综合中文| 美女婷婷六月色| 激情五月天综合网| 色天堂操| 五月花在线观看视频| 国产毛多水多女人A片| 中文字幕九九九九| 久久精品人妻| 久99999热视频在线观看免费| VA色婷婷| 91黄址| 31色区视频免费看| m色激情网| 婷婷狠狠操| 婷婷射图| 色婷婷免费视频| 超碰成人在线免费观看| 九九热这里只有精品31| ..真实国产乱子伦毛片 | 色色色9| 婷婷九色| 婷婷五月天无码| 婷婷婷婷色| 激情图片99| 激情小说五月欧美亚洲丁香| 五月激情四射网站| 黄色大片又大粗又爽| 少妇搡BBBB搡BBB搡毛茸茸 | 丁香久久九九99| 丁香社区婷婷五月| 99视频在线9| 丁香色播五月天| 91九九| 丁香五月婷婷狠狠色| 六月婷婷啪啪| 婷婷99中文字幕| a久久| 婷婷之玖玖| 洗浴中心操B视频| 国产精品久久久久久喷浆| 婷婷基地成人五月天| 狠狠草狠狠草| 色五月丁香五月五月婷婷| 狠狠色综合网站久久久久| 丁香花五月天激情| 五月天久久久| 五月天婷婷色在线视频免费观看| 日本三级大片| 操逼巨乳91| 99这里只有精| 五月婷婷导航| 99ri精品视频在线观看| 色 免费网站视频| 九九热AV| 五月婷婷成人网首页| 久久婷婷五月天| 99这里只有精品视频在线| 狠狠干综合| 久青青久| 成人做爰A片免费看网站找不到了| 亚洲综合新99视频| 久久久国产精品黄毛片| 色婷婷五月天天天干天天操天天爽| 五月婷婷综合激情小说| 99re思思久久| 中文字幕,综合,91| 99热这里全是精品| 婷婷爱综合| 精品夜夜澡人妻无码AV| 久热A| 免费播放AV| 五月丁香六月色| 人妻aV在线| 激情丁香六月| 丁香五月婷婷六月婷婷| 国产精品涩涩涩视频网站| 天天模,夜夜模夜夜爽| 激情文学综合婷婷五月天丁香花| 开心激情网五月| 综合九九久久| 日韩无码专区| 丁香五月婷婷动漫| 91伦| 亚洲六月色婷婷| www.五月婷婷久久.com| 五月综合色| 99er在线观看| 色婷亚洲| 啪啪啪综合网| 天天爱天天做综合| 国产精品成人网站| 激情综合五月| 99秘 在线| 欧美在线视频99| 色婷五月天网站| 丁香五月激情啪啪啪啪| 丁香五月婷婷亚洲综合精品| 99久久a线观| 天堂久久久久天堂网| 亚洲女婷婷五月基地综合久久久| 爆乳熟女-区二区三区| 天天干天天做| 欧美激情五月天婷婷| 国产看真人毛片爱做A片| 99热久| 久久婷婷综| 丁香六月激情综合| 日本色色视频| 久久最新色色色| 久久99热网| 婷婷丁香五月婷婷| 成人必爱视| 亚洲综合色婷婷文学| 97操碰在线视频| 五月婷俺去也| 影院久久久| www.超碰在线| 亚洲五月丁香综合网| 色天堂婷婷| 九色啦蜜臀| 99er精品| 色色网91| 狠狠狠狠狠狠| 激情五月天网站| 五月天激情站| 婷婷五月天丁香激情| 五月激情六月丁香| 久久丁香五月| 天天免费成年人视频| 亚洲无码猫咪| 9久热| 99在线小视频| 久久aaa| 日曰躁夜夜躁2026| 超碰人人操人人干| 丁香六月色婷婷综合| 日韩性视频| 日韩成人影片网站| 午夜免费试看| 99re视频精品| 成人羞羞啪啪 全 视频| 久久婷婷五月综合精品蜜芽| 激情综合视频| 天天操天天操| 久久婷婷夜| 久久久人妻| 天天舔天天爽| 久久五月激情网| 成人网在线视频| AA片在线观看视频在线播放| 成人在线不卡| 婷婷开心久久| 深爱激情九九五月天| 婷婷五月天丁香社区| 国产人妻777人伦精品HD| 91九色中文| 亚洲九九在线| 婷婷四月 成人 狠狠干| 中文字幕欧美久久| 97涩婷婷婷婷基地| 五月综合久久| 婷婷在线视频| 美国十月色婷婷在线观看| 欧美色六月婷婷| 97碰碰视频在线观看免费| 99热爆在线| 久久六月综合| 婷婷五月激情的图片| 欧美综合五月丁香六月婷| 五月天激情综合网| 五月婷婷婷| 欧美三日本三级少妇三99| 啪啪啪啪五月天| 五月色丁香| 热久综合| 欧美顶级少妇做爰HD| 91丨九色丨熟女丰满| 99黄色| 五月婷色| 99re热99| 影音先锋 一区| 丁香婷婷天堂| 亚洲爆乳无码精品AAA片蜜桃| 91久久| 婷婷丁香十月| 久久66成人网站| 色情·com| 国产成人在线精品| 99人妻碰碰碰久久久久| 亚洲色图五月丁香五月婷婷| 免看黄大片AA | www.五月丁香| 91九色国产| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 五月天激情啪啪| 日日夜夜综合| 婷婷九月丁香久久| www婷婷色情网| 青草青草久热这里只有精品| 99色色网| 高清视频一区| 天天色丁香| 91视频免费后入强操| 久久久9久| 日曰躁夜夜躁2026| 99ER热精品视频| 欧美在线视频99| 夜夜爽天天爽| 婷婷五月天色播| 91婷婷丁香| 日本色色网站| 色婷婷88| 激情性爱五月天| 亚洲AV人人操| 玖玖无码中文| 日韩亚洲视频| 亚洲人妻av| 97九色| 91精品久久久久久77777| 综合色影院| 色五月五月婷婷| 九九热只有精品| 日韩操逼小电影| 日日夜夜天天爽| 26uuu欧美亚洲日韩| 婷婷五月天激情综合| 影音先锋女人av鲁色资源网小说免费 | 丁香五月婷婷手机| 丁香六月婷婷一区二区三区| 99视频在线精品免费观看2| 久久精品视频9| 丁香欧美| 婷婷五月天啪啪| 日操夜撸| 亚洲综合99| 青青草成人网| 色婷久| 婷婷丁香花五月天| 三级黄网站| 五月丁香六月成人| 婷婷在线精品| 99在线精品免费视频| 午夜69成人做爰视频| 日韩免费视频| 91久女| 久久亭亭电影| 99色日本| 秋霞性爱AV| 日韩欧美五月丁综合| 激情五月,色五月| 日本激情ⅩXX免费视频| 丁香五月天殴美激情| 热99久久这里只有精品| 99热在线观看免费| 网站免费一站二站| 综合网色| 亚洲色无码A片一区二区麻豆| 五月天婷婷丁香成人网| 9热在线视频| 日本欧美国产| 色一区高清| 六月亚洲| 日日天天干| 91久久九久久九久久九久久九久久| 久九色| 夜夜操狠狠操| 偷拍九九热| 色婷狠狠| 人人澡玖玖一| www.狠狠狠狠| 五月婷婷六月丁香色| 99爱爱网| 久热9| 久久九九99视频| 婷婷99丁香| 日本99视频| 亚洲五月天伊人| 综合五月丁香六月婷婷| 亚洲综合久| 色五月激情网| 超级碰人人操人人干| 96精品久久久久久久久| 草操AV在线| 激情五月婷婷综合色播小说| 综合激情在线| 中文字幕精品无码一区二区| 五月天色站| 另类图片天天影视在线观看| 热这里| 亚洲AV日韩无码| 国产精品美女久久久久AV超清| 美女久久天堂| 成人av免费观看| 婷婷开心综合人妻小说网址| 视频一二区| 激情久久久| 99热免费18| 色婷婷综合久久久久| ...婷婷国产成人亚洲日韩| 日韩视频99| 色婷婷www| 91丁香色| 五月停亭六月,六月停亭的英语| 精品无码人妻一区| 婷婷少妇激情| 婷婷97色| 久久曰曰| 色婷婷婷婷| 五月天色综合| 91精品综合久久久久久五月天| 狠狠操综合| 丁香五月婷婷俺也要去| 99啪啪| 日本三级日本黄色| 九九热99re8热免费观看 | 色欲香综合网| A片一曲| 五月丁香六月激情| 超碰av在线| av中文网站| 五月丁香六月欧美综合网站| 综合久久综合综合| 在线VA视频| 69色婷婷| 99网址在线观看| 91九色精品熟女内射| 午夜电影网VA内射| 99热综合网| 久久码久久无清| 婷婷五月激情基地| 五月久久婷婷| 婷婷五月a| 日日夜夜青青草| 久草大| 伊人激情网| 五月丁香va| 操日视频| 影音先锋AV男人站| www.狠狠狠.com| 性爱网五月天| 亚洲婷婷综合视频| 六月色色婷婷| 婷婷五月天AV| 99在线热| 五月天社区婷婷丁香社区| 99re欧美精品| 99亚洲综合| 9久国产精品| 色九九九综合| 色 五月俺去也| se99视频| 婷婷久久性爱| 99热97| 综合久久五| bbwcuckold精品熟妇| 超碰成人在线观看| 大香蕉七区| 亚洲va欧美va国产综合久久久| 日韩啪啪网| 色婷婷久久综合| 日本狠狠色| 懂色av粉嫩AV蜜臀AV| 二人电影免费版在线观看| 婷婷五月天久久| 99色日本| 色偷偷综合| 影音先锋一区二区资源站| 亚洲五月婷婷在线| 另类图片五月天| 91碰| 亚洲AV人人操| 婷婷丁香五月91| 五月丁香777| 日韩国产AV播放| 久热视频这里只有精品68| 色优久久| 凹凸7777操操操| 超碰在线99| 欧美久久婷婷| 日韩狠狠色| 伊人9在线| 人妻啪啪啪| 亚洲视频在线观看区| 97韩国久久电影院| 五月天社区婷婷| 五月丁综合在线观看| 狠狠操狠狠插| 国产精品久久在线观看技巧| 日日夜夜干| 六月亚洲婷婷6月中文字幕| 亚洲色网址| 婷婷六月丁香激情| 五月激情综合网| 婷婷丁香色五月亚洲| www.超碰| 亚洲色9| 色九区| 麻豆科斗777| 亚洲操逼网| 丁香六月 婷婷六月| 九九热九九| 婷婷 久综合| 五月丁香激情综合| 天天爽天天弄| 最近免费中文字幕大全高清大全1 色狠狠色噜噜AV天堂五区 | 亚洲天堂啪啪| 丁香五月日韩| 久久五月视频| 五月婷婷六月丁香| 少妇激情五月婷婷| 大香伊人久色| 婷婷五月天狠狠搞干| 9 1大香蕉| 99只有这里有精品在线视频| 婷婷丁香花五月天| 色婷婷综合网| 九九热这里有精品23| 国产乱妇无乱码大黄AA片| 五月丁香婷色| 九日日夜夜69| 婷婷久久丁香| 五月天综合激情网| 色色A| 综合五月草| 熟女人妻一区二区三区免费看| 婷婷五月永远18免费久久久| 中文AV网站| 熟女激情五月天| 91艹人| 日韩九九| 婷婷六月天精品| 99操不停| 亲子乱AV一区二区三区下载| 日本a片网址| 国产无套精品一区二区| 99国产这里只有精品| 99玖玖人人| 亚洲成人综合在线| 成人色五月天| 久久99jiu9| 涩综合网| 青青操avbb| 97日本在线播放| 五月天成人综合| 婷婷天堂站| 国产乱子轮XXX农村| 夜夜操激情| 日韩日比视频| 人妻久久久久久| 丁香五月综合网亚洲综合欧美狠狠| 狠狠久久婷婷| 久久久噜噜噜久久人妻| 欧美日本一区二区三区| 色综合香蕉| www.99热| 丁香五月色欲| 色色丁香婷婷| 九九9久九9国产视频| 六月婷婷综合| 亚洲激情 久久| 热99.com婷婷| 91一起操| 天天透天天摸天天舔| 五月婷婷色啪| 免费看欧美成人A片无码| 美女妹子后射视频网站在线观看| 在线成人网站| 综合福利网| 人妻视频在线| 伊人五月久久| 色色五月婷婷久久| 亚洲精品V天堂中文字幕| 色婷婷www| 99热伊人| 精品五月花| 综合色五月| 开心婷婷五月中文字幕组| 丁香婷婷五月六月久久| 五月天色小说| 9999三级片| 噜噜噜噜在线| 97操碰视频| 男人大jjc女人免费视频| 大香蕉啪啪| 欧美婷婷五月天综合| 五月天婷婷操逼视频| 国产真人做爰视频免费| 97人妻碰碰碰久久香蕉| 成人狠狠成人狠狠成人狠狠成人狠狠| 六月丁香综合| 中文字幕不卡网站| 天天狠天天叉| 亚洲视频色婷婷| 成人婷婷桔色| 日韩av在线免费观看| 免费无码毛片一区二区A片| 超碰97免费在线| 成人狠狠成人狠狠成人狠狠成人狠狠| 91色在线/日韩| 超级碰碰碰久久网站| 欧美精品18| 色天五月天在线观看视频| 99成人网站| 91精品久久久久久久久久久久| 蜜乳久AV| 天天日天天干天天操| 婷婷五月六月丁香| 婷婷五月丁香五月天| 色综合久久天天综合网| www九月婷婷| 最近中文字幕2019视频1| 久久久性爱视频| 婷婷五月天激情丁香| 久久国产性爱A V| 五月丁香欧美综合| 91av无码| 成人中文网| 五月丁香婷婷综合网| 欧美影院| 久热视频这里只有精品| 5月色亭亭视频| 激情综合区| 99九九热视频免费| 任我干视频在线观看| 六月丁香婷| 五月丁香久久网| 久久a热| 五月婷婷乱| 五月婷婷天天色| 日韩成人免费电影| 超碰不卡在线| 奇米四色五月天| 91精品国产综合久久久不卡电影| 婷婷五月激情中文字幕| 熟女网站久久| 思思久久精品| 色人妻五月| 丁香五月婷婷动漫| 开心久久五月天| 日本色道视频网站| aaa久久| 无码九九九九| 91伦| www.夜夜爱.com| AV大片在线播放| 伊人激情AV一区二区三区| 激情婷婷| 超碰成人免费| 大香蕉天堂| 六月婷婷五月丁香| 久久久这里有精品| 六月丁香五月天| 成人色色视频| 五月丁香婷庭在线| 久色中文| 日日干干天天干| 激情五月婷婷网在线观看| 婷婷五月天激情网址| 色999五月色| 日本综合色色| 成人午夜无码视频| 色婷婷丁香| 九九AV在线| 91丨九色丨白浆秘| 99riAV国产精品视频| 欧美色色色色色色| 97人妻碰碰碰久久| 停停五月色宗合| 亚洲操B视频| 色九综合| 色婷久| 铁牛TV人妻| av在线免费网站 | 一本道在线电影| 婷婷五月花| 少妇性BBB搡BBB爽爽爽视頻| 婷婷五月天成人| www.色五月| 乱精品一区字幕二区| 国产AV国片偷人妻麻豆| 一本色道久久88综合日韩精品| 欧洲第一无人区观看| 夜夜穞天天穞狠狠穞AV美女按摩| 99精品偷自拍| 熟女人妻视频| 激情图片亚洲| 五月婷婷欧洲| 日韩伊人大香蕉| 婷婷色操| 日本三级中国三级99| 日韩色久| 色亚洲无码| 第二色AⅤ| www.日日夜夜| 婷婷久久亚洲| 99热国产免费| 久久婷婷五月综合伊人| 我爱大香蕉| 丁香六月综合激情| 亚洲妇女熟BBW| 婷婷香蕉精品| 欧美日韩国产成人在线| 97在线干| 综合AV在线| 青青夜夜狠狠夜夜狠狠| 久色中文| 狠狠色综合精品视频在线| 丁香久久久| 综合五月婷婷| 狠狠色婷婷| Av狠狠色丁香婷| txt五月激情四射网综合俺也来了| 97成人在线视频精品| 婷婷午夜精品久久久| 狠狠艹狠狠艹| 五月丁香六月婷婷久久久综合| 六月丁香VA| 婷婷五月天堂| 丁香六月综合激情| 黄色片avv| 五月婷婷成人| 开心五月婷婷五月| 26uuu国产精品| 99视频在线精品免费观看2| www999日韩精品| 丁香五月欧美| 婷婷5月久久综合网站| WWW·色色色·COM| 丁香五月天天哦| 丁香婷婷久久老熟女综合网| 狠狠草狠狠草| 99熟女| 少妇人妻人伦A片| 色久99| 91久久久久久| 欧美成人网婷婷综合在线| 日韩无码色色| 五月激情站| 午夜微拍福利| 丁香六月久久| 六月丁香婷婷尤物| 天天色天天操天天射| 天天天干夜夜夜操| 婷婷丁香五月天之开心少妇| 99狠狠操一| 精品婷婷五月视| 激情综合网五月天| 婷婷五月天基地| 97操碰在线97| 色色色色五月天| 密乳视频| 午夜激情综合| 久久精品凹凸分类| 91色综合网| 色丁香在线视频| 色五月婷婷五月天| 丁香六月综合激情| 天堂五月婷婷| 五月综合激情图片| 96丁香六月婷婷蜜桃综合久久| 天天弄天天操| txt五月激情四射网综合俺也来了| 玖玖在线视频福利| 亚洲欧美一区二区三区四区爱爱动图| 五月天婷婷久久| www.色欲丁香婷婷| 大香蕉520| 丁香五月综合网亚洲综合欧美狠狠 | 超碰男人色| 久久AV无码精品人妻系列试探| 99精品超在线播放| 黄涩毛片| 国产成人在线精品| 久操香蕉| 九九国产精视频| 人人爽天天爽| 国产乱子轮XXX农村| 成人精品人妻| 我要看激情五月天| 99热在线精品观看| 日噜噜色| 5月色亭亭视频| 大香蕉伊人99| 高清a片基地| 五月丁香综合啪啪啪啪啪| 久久这里有精品| 五月婷婷丁香六月| 五月天激情网址| 五月婷婷无码专区| 中文字幕 码精品视频网站| 久久99精品久| 色小说婷婷五月天天天| 99久热在线精品| 婷婷黄色网| 99精品视频在线免费观看| 五月婷婷九九热| 日本色啪| 婷婷基地成人五月天| 26uuu丁香婷婷五月| 日比视频91| 欧美五月丁香在线| 九色无码| 午夜]香婷婷深深爱| 天天免费成年人视频| 玖玖色综合网| 综合久久伊人| 六月丁香婷婷色69| 五月丁香六月激情在线| 综合色网站| 99热久久这里只有精品2010| 国产精品VIDEOSSEX久久发布| 玖玖爱综合网| 几激情五月婷婷色五月色天堂| 做爰丰满少妇1313| 色五月综合网| 97色天堂| 久久婷婷大香蕉| 开心五月婷婷在线视频免费观看| 婷婷丁香五月天激情| 久久久久久久久99精品| 欧美五月丁香| 丁香六月婷婷操逼网| 婷婷色无码| 色欲一区二区三区精品A片| 人人操人人爽成人AV| 99免费视频网| 亚洲 在线 另类| sS丁香五月婷婷| 九九aV| 伊人色综合久久久| 丁香六月成人| 亚洲狠狠爱婷婷| 五月天婷婷在线啪啪视频| 综合网天天| 色播六月| 大香蕉久久久| 大香蕉操操| 日韩色色视频| 97碰操| 丁香五月婷婷激情蜜桃| 国产黄色在线观看| 丁香五月色综合色播五月| 性爱视频99| 337p大胆噜噜噜噜噜91Av| 99热综合网| 九九色播五月丁香| 欧美婷婷五月天| 婷婷五月丁香综合瑟瑟| 天堂婷婷丁香六月网| 亚洲精品又粗又大又爽A片| 人妻狠狠操| 色色A| 亚洲小视频免费播放| 91色五月| 欧美精品啪啪| 91超碰在线观看| 91视频精品99| 伊人www22综合色| 日本WWW九九九| 大香蕉久久婷婷精品综合| 91久久九色| 天天做天天爱| 婷婷综合影院| 日韩在线观看亚洲| 免费AV在线| 久久丁香五月| 99精品视频偷拍| 99re免费精品视频| 五月丁香91| 中文字幕在线播放视频| 五月丁香免费视频| 狠狠色婷婷777| 久久狠狠欧美| 久久精彩视频| 色黑鬼导航| 亚洲亚洲人成综合网络 | 丁香婷婷激情| 99在线观看视频精品| 疯狂做受XXXX高潮A片动画| 五月丁香婷婷综合激情基地| 国产精品A成V人在线播放| 五月四色色| 久cao香蕉影院| 婷婷五月天成人网站| 丁香av网| 丁香五月天之婷婷影院| 第四色五月婷婷| 五月婷婷99热| 五月天啪啪| 超碰碰碰碰| 天天天添天天操| 久久婷婷免费| 久久开心五月天激情| 哇嘎成人久久| 欧美在线97| 久久五月天色婷婷| 亚洲精品99| 五月丁香久久呀| 久久综合55| 99re这里只有| 丁香五月中文字幕| 丁香五月色| 五月激情久久综合| 婷婷天堂综合网| 99国产精品久久久久久久久久久 | 中美月韩免费A片| 亚洲另类在线观看| 五月天另类综合网| 亚洲AV成人精品网站在线播放| 怡红院一二三| 96精品久久久久久久久| 99无码视频| 3p日韩网站视频| 亚洲视频另类| 狠狠五月激情丁香六月| 大香蕉啪啪网| 99国产精品白浆在线观看免费| 五月综合六月婷婷| 综合激情专区| 深爱五月激情五月| 五月丁香婷中文字幕 | 开心五月天激情网站| 人人插9| 色色色热热热| 五月婷婷激情中心| 91无码高清| 日日干天天| 五月天婷婷青青草| 激情视频综合| 中文字幕在线日亚州9| 淫荡工a| 超碰三级片| 99碰碰| 激情小说五月欧美亚洲丁香| 久久婷网| 九九热视频在线观看| 国产日韩亚洲欧美在线观看| 99久久婷婷五月综合| 久久久中文| 婷婷视频在线| 夜夜 操无码| 99年操人人爽| 激情综合一| site:901-07.com| 久久久久久久久久久jjjj| 婷婷综合视频| 91操色| 婷婷久久18| 五月丁香在线| 婷婷五月激情天| 色亚洲无码| 九月婷婷人人操人人舔人人爱| 五月婷啪啪| 丁香五月第九色| 久热精品在看| 亚洲激情网| 婷婷五月天激情文学| 激情五月综合色| 人人操人人妻| 国产亚洲99久久精品| 五月丁香啪啪综合网| 日本三久久| 国产伦亲子伦亲子视频观看| 色色色热热热| 草美女在线观看视频在线播放| 久热在线观看视频9| 色偷偷五月天| 丁香六月色婷婷| 激情六| 大香婷婷| 中文字幕人成乱码在线观看| 99热只有这里有精品| yazhou seshipin| 亚州综合色| AA片在线观看视频在线播放| 色婷婷88| 五月丁香激情欧洲啪啪| 热九九精品| 97涩婷婷婷婷基地| 狼人久草| 五月婷婷,狠狠操| 夜夜骑日日夜夜| 在线你懂的亚洲欧| 色婷青青| 婷婷五月天精品| 色日本五月天| 性 色 婷婷| 久碰婷婷视频| 五月天婷婷丁香成人网| 色色色色色综合| 色五月婷婷在线观看| 成人久久天天x资源站| 热99免费在线| 五月丁香婷婷钟和色图| 99爱视频免费| 日本婷婷| 99re这里有精品手机在线| 丁香久久| 91性人人| www.wuyuetian啪啪| 丁香五月天色婷婷| 五月丁香六月婷婷激情视频在线观看免费 | 婷婷丁香五月色偷偷| 热热色色五月天婷婷| 色色亚洲| 91色逼| 丁香五月综合AV在线| 很很操很很操| 五月婷亚洲精品AV天堂| 伊人久久大香线蕉综合网站| 国产乱人偷精品人妻A片| 操操碰| 开心婷婷五月| 国语精品探花| 五月丁香拍拍激情综合| 亚洲成人AV在线观看| 色五月开心久久网| 国产偷人爽久久久久久老妇APP| 91性高潮久久久久久久久| 亚洲成人五月天| 日本在线噜噜| 色婷婷视频| 另类小说五月天| 欧美性久| 大香人妻| 欧美性爱丁香五月| 无码色| 99热这里只有精品16| 精品人妻在线| 综合激情五月天六月婷免费视频| 日日干日日s| 丁香五月婷婷六月婷婷| 日本一级特黄大片AAAAA级| 丁香六月亚洲| 91丨九色丨国产| 午夜精品久久久久久久爽| 婷婷五月天网| 久草婷婷| 99re视频在线播放| 五月婷婷激情综合av| 天天射夜夜爽| 婷婷久久久| 久久九九综合| 99色热视频| 婷婷五月天av| 精品色| dingxiangtingtingliuyue| 色综合五月在线| 99这里精品| 99在线er热| 久久五月婷| 91婷婷丁香| 超碰97干| 第四色大香蕉| 香蕉97碰碰碰超视精品| 丁香色情五月综合激情| 色五月丁香91| 一级片操逼视频| 99视频这里有精品| 成人精品视频99在线观看免费| 九九在线精点品| 色婷婷狠狠| 激情五月天婷婷| 99操逼| 婷婷丁香在线| 九九AV| 五月丁香啪| 99久久婷婷| 久久激情五月| 久久香蕉网| 五月天婷婷在线观看| 99色婷婷视频| 99re热视频这里只精品| 这里只有精品在线观看视频| 久草五月天| 九九亚洲| 九九Av| 夜精品无码A片一区二区蜜桃| 被强行糟蹋的女人A片| 国产国产乱老熟女视频网站97| 欧洲色区| 一级片操逼视频| 亚洲精品**不卡在线播he| 亚洲AV成人一区二区在线观看| 1级欧美日韩| 在线播放成人| www.com色播五月天| 91人碰| 九九99精品视频| 色狠狠色| 日本怕怕视频| 五月婷婷久久激情 | 嫩草AV久久伊人妇女超级A| 蜜桃人妻无码AV天堂三区| 国产毛片精品一区二区色欲黄A片| 性欧美大战久久久久久久83| 超碰九热| 丁香社92视频| 久婷婷五月综合欧美| 日本 欧美在线| 欧美日韩一a.无| 天天草狠狠擦| 国产熟女日日骚五月丁香爱| 中文字幕乱轮| 99久久这里只有精品| 黄色五月婷婷| 婷婷深爱五月| 少妇水多A片太爽了| 六月丁花香啪啪激情欧美| 永久天堂日本| 日本在线99| 91操人视频| 婷婷丁香五月天欧美| 成人丁香婷婷五月天| 五月天开心婷婷激情网站 | www.日本91| 五月丁香美女视频| 五月天 综合 在线| 亚洲综合婷婷六月丁香五月| 天天干天天插| 色五月首页| 99精品偷自拍|