99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

madExcept 5 FS:First Chance異常捕獲與崩潰報(bào)告實(shí)踐

madExcept 5 FS:First Chance異常捕獲與崩潰報(bào)告實(shí)踐 簡(jiǎn)介madExcept 5 FS 是一套專為 Delphi 開發(fā)者設(shè)計(jì)的異常處理組件源碼版用于捕獲程序運(yùn)行中的各類異常、生成堆棧跟蹤信息并提供錯(cuò)誤報(bào)告能夠與 Delphi IDE 無縫集成適合需要快速定位 Bug、提升軟件穩(wěn)定性的中高級(jí)開發(fā)場(chǎng)景。壓縮包共 77.07MB包含 3509 個(gè)文件其中有 pas 源碼、dfm 窗體、dpk/dproj 工程文件等可供直接閱讀修改的開發(fā)素材也有 dcu 編譯單元、bpl 運(yùn)行包、lib 靜態(tài)庫以及大量 h/hpp 頭文件等編譯產(chǎn)物兼顧源碼學(xué)習(xí)與實(shí)際使用并附有安裝與測(cè)試方法說明文檔。目前已有 424 人學(xué)習(xí)下載。借助 FullSource 特性使用者能深入剖析異常捕獲、堆棧解析與錯(cuò)誤報(bào)告生成等內(nèi)部實(shí)現(xiàn)也可根據(jù)項(xiàng)目需求自定義組件行為豐富的平臺(tái)支持文件有助于適配不同 Delphi 版本對(duì)想研究異常處理機(jī)制或擴(kuò)展組件功能的開發(fā)者是一部實(shí)用的參考。1. madExcept 5 FS先于崩潰發(fā)生的那一次攔截這幾年在群里幫人看閃退報(bào)告見得最多的不是“彈了錯(cuò)誤框”而是“程序無聲無息就沒了”。日志停在最后一條業(yè)務(wù)操作Windows 事件查看器里只有一句 Access violation地址是0x0041AB2連哪個(gè)函數(shù)都沒寫。madExcept 5 FS 就是沖這個(gè)痛點(diǎn)去的。FS 在 madExcept 體系里指 First Chance 異常處理不等程序走到未處理異常、被系統(tǒng)強(qiáng)制終止的 Second Chance 階段而是在異常對(duì)象剛拋出的那一刻先攔一道把調(diào)用棧、寄存器、線程現(xiàn)場(chǎng)全部拍下來再根據(jù)你的策略決定是吞掉、記錄還是放行。適合那些線上閃退不可復(fù)現(xiàn)、客戶端反復(fù)被卸載、DLL 邊界出問題又背黑鍋的 Delphi/CBuilder 項(xiàng)目。這一篇直接講怎么把它接進(jìn)工程、怎么把報(bào)告變成能定位問題的證據(jù)鏈。2. 為什么 FS 意味著“第一機(jī)會(huì)”異常處理鏈路與選型2.1 First Chance 與 Second Chance同一場(chǎng)事故的兩個(gè)時(shí)間點(diǎn)Windows 的異常分發(fā)機(jī)制分兩輪。第一輪叫 First Chance異常拋出后系統(tǒng)先讓進(jìn)程內(nèi)的頂層異常處理器Top-Level Exception Handler過目這時(shí)候調(diào)用棧還是完整的、局部變量還沒被清理、異常源地還沒被棧展開破壞是拿現(xiàn)場(chǎng)證據(jù)的黃金窗口。如果沒有任何處理器決定攔截系統(tǒng)進(jìn)入第二輪 Second Chance按默認(rèn)規(guī)則終止進(jìn)程這時(shí)再掛接的捕獲邏輯拿到的棧已經(jīng)部分失效甚至只剩一個(gè)地址。madExcept 5 FS 做的事就是在第一輪里插入自己的處理器。它先把異常鏈上的上下文全部記錄成結(jié)構(gòu)化報(bào)告然后問你要不要把這個(gè)異?!跋钡?。這個(gè)機(jī)制的價(jià)值在于傳統(tǒng) try-except 只能抓到當(dāng)前線程當(dāng)前代碼塊里的異常一旦異??邕^模塊邊界、被某個(gè)框架層吞了或者發(fā)生在后臺(tái)線程業(yè)務(wù)層根本感知不到FS 模式是從異常發(fā)生的源頭直接接住不依賴你在每一處業(yè)務(wù)代碼里手動(dòng)包保護(hù)層。FS這個(gè)后綴對(duì)應(yīng)的就是這一整套 First Chance 采集與分發(fā)能力而不是某個(gè)獨(dú)立 IDE 插件。理解這一點(diǎn)很關(guān)鍵你裝進(jìn)工程的是一個(gè)異常采集框架配置的靈活性核心在回調(diào)函數(shù)的請(qǐng)求與放行邏輯上。2.2 什么項(xiàng)目值得上 madExcept 5 FS三條選型判據(jù)不是所有項(xiàng)目都需要把崩潰報(bào)告做成產(chǎn)品級(jí)基礎(chǔ)設(shè)施。團(tuán)隊(duì)小、發(fā)布頻率低、用戶量小到崩潰日志可以靠用戶口述的項(xiàng)目直接套個(gè) showmessage 也能撐。如果你正在做以下三類項(xiàng)目之一madExcept 5 FS 就值得投進(jìn)去第一類是面向大量終端用戶的工具軟件或業(yè)務(wù)客戶端用戶環(huán)境五花八門缺 DLL、顯卡驅(qū)動(dòng)沖突、輸入法注入都可能觸發(fā)崩潰復(fù)現(xiàn)只能靠現(xiàn)場(chǎng)報(bào)告。第二類是含多線程、插件化或依賴第三方 DLL 的系統(tǒng)崩潰線程棧必須追溯到模塊邊界。第三類是對(duì)質(zhì)量和響應(yīng)速度有要求的項(xiàng)目領(lǐng)導(dǎo)要的是“這周修復(fù)率提升了多少”而不是“我們還在找復(fù)現(xiàn)步驟”。從我接觸的項(xiàng)目看還有一個(gè)隱性的判斷條件項(xiàng)目是否有持續(xù)集成環(huán)境。madExcept 5 FS 給出的報(bào)告質(zhì)量取決于符號(hào)文件與構(gòu)建產(chǎn)物的對(duì)應(yīng)關(guān)系臨時(shí)編譯一次就想靠它定位效果會(huì)打五折這點(diǎn)后面第 4 章會(huì)展開。2.3 把 madExcept 5 掛進(jìn)工程的最小路徑常見做法是通過 IDE 的組件安裝機(jī)制把 madExcept 編譯進(jìn)設(shè)計(jì)環(huán)境里然后在工程文件中手動(dòng)引入兩個(gè)運(yùn)行時(shí)單元。最小改動(dòng)量下你的工程文件末尾會(huì)變成這個(gè)樣子program KClient; uses Vcl.Forms, madExcept in ..\madExcept\madExcept.pas, madExceptHook in ..\madExcept\madExceptHook.pas, KMainForm in KMainForm.pas {MainForm}; {$R *.res} begin Application.Initialize; Application.CreateForm(TKMainForm, MainForm); Application.Run; end.madExcept單元提供異常報(bào)告生成與接口定義madExceptHook負(fù)責(zé)在初始化階段把 FS 處理器注冊(cè)進(jìn)系統(tǒng)異常分發(fā)鏈。把這兩個(gè)單元放在 uses 列表靠前的位置是為了保證它們的初始化代碼先于你的業(yè)務(wù)單元執(zhí)行否則在異常處理器注冊(cè)完成之前發(fā)生的崩潰依然會(huì)漏網(wǎng)。工程文件改完后重新編譯并運(yùn)行一次主動(dòng)制造一個(gè)除零異常試試。默認(rèn)配置下madExcept 5 會(huì)彈出它自帶的崩潰報(bào)告對(duì)話框里面有完整的調(diào)用棧和異常類型。若彈不出來先確認(rèn)這兩個(gè)單元確實(shí)被編進(jìn)dcu輸出目錄再確認(rèn) IDE 里沒啟用“忽略特定異常類型”的過濾設(shè)置。這一步跑通之后我們?cè)僬?FS 模式的自定義回調(diào)。3. 配置 FS 模式從默認(rèn)彈窗到自定義處理回調(diào)3.1 用全局 Hook 接管 First Chance 異常madExcept 5 默認(rèn)行為是攔截未處理異常并顯示報(bào)告對(duì)話框但這不適合所有場(chǎng)景發(fā)布版客戶端不該把技術(shù)報(bào)告直接懟在用戶臉上而且有些異常是“可控但需要被記錄”的比如文件被占用、網(wǎng)絡(luò)瞬斷、配置項(xiàng)格式錯(cuò)誤。FS 模式給了你一個(gè)注冊(cè)全局回調(diào)的入口讓每個(gè)異常在第一時(shí)間先經(jīng)過你的代碼。常見做法是調(diào)用RegisterExceptionHandler它的聲明如下function RegisterExceptionHandler( Handler: TExceptionHandler; ThreadMode: TThreadMode; Event: TExceptionEvent): Integer;回調(diào)函數(shù)的實(shí)現(xiàn)聽起來抽象落地下來一般長(zhǎng)這個(gè)樣子function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; var report: TStringList; begin // First Chance 階段handled 輸出參數(shù)決定異常是否被吞掉 if exceptIntf.ExceptionClass EInOutError then handled : True // 文件寫入類異常記錄但不崩 else handled : False; // 其他異常照常拋出進(jìn)入 Second Chance report : TStringList.Create; try report.Text : exceptIntf.BugReport; report.SaveToFile(D:\logs\crash_ FormatDateTime(yyyymmdd_hhnnss, Now) .txt); finally report.Free; end; Result : True; end;代碼里的handled是最容易理解錯(cuò)的參數(shù)。設(shè)為True表示這個(gè)異常已經(jīng)被你處理了系統(tǒng)不會(huì)再向上拋程序繼續(xù)往下跑設(shè)為False表示你只是“看了一眼”并記錄了現(xiàn)場(chǎng)異常繼續(xù)正常傳播流程。Result表示是否接管默認(rèn)的 madExcept 報(bào)告界面——返回True時(shí)你自己寫了文件就要關(guān)掉它的默認(rèn)彈窗否則用戶會(huì)看到兩層輸出。注冊(cè)這回調(diào)的最佳位置是工程文件begin塊的最前面或者主窗體OnCreate里只注冊(cè)一次initialization RegisterExceptionHandler(MyFSHandler, stDontSync, epMainThread); end.stDontSync表示回調(diào)不主動(dòng)做線程同步適合只做內(nèi)存操作和文件寫入的輕量邏輯若你在回調(diào)里要訪問 VCL 控件或調(diào)用需要消息循環(huán)的代碼改成stSync會(huì)更穩(wěn)代價(jià)是可能阻塞當(dāng)前線程一小段時(shí)間。epMainThread限定只在主線程上觸發(fā)回調(diào)后臺(tái)線程崩潰則會(huì)進(jìn)入默認(rèn)流程對(duì)全局記錄需求更強(qiáng)的項(xiàng)目我一般會(huì)注冊(cè)兩個(gè)回調(diào)主線程一個(gè)工作線程一個(gè)分別處理。3.2 上下文信息讓崩潰報(bào)告自帶現(xiàn)場(chǎng)崩潰報(bào)告如果只有調(diào)用棧你只能知道“在哪個(gè)函數(shù)崩了”不知道“用戶當(dāng)時(shí)在做什么”。madExcept 的接口里暴露了一些上下文屬性但更可靠的業(yè)務(wù)上下文還得靠自己在回調(diào)里補(bǔ)充。我一般會(huì)在回調(diào)里讀取一個(gè)全局對(duì)象的狀態(tài)把它拼進(jìn)報(bào)告文件function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; var lines: TStringList; ctx: TKContextInfo; begin ctx : TKContextInfo.GetInstance; lines : TStringList.Create; try lines.Add(UserID ctx.UserID); lines.Add(CurrentForm ctx.CurrentFormName); lines.Add(NetworkState ctx.NetworkState); lines.Add(LastAction ctx.LastActionLog); lines.Add(--- bug report start ---); lines.Add(exceptIntf.BugReport); lines.SaveToFile(ctx.LogDir fs_ FormatDateTime(yyyymmdd_hhnnss, Now) .log); finally lines.Free; end; handled : False; // 只記錄不吞異常 Result : True; end;把業(yè)務(wù)上下文放在LastActionLog里是個(gè)好習(xí)慣。很多閃退是特定操作序列觸發(fā)的比如“上傳圖片后立即切換賬套”如果你有操作埋點(diǎn)報(bào)告里就能直接看到最后一步動(dòng)作。這個(gè)變量每執(zhí)行一個(gè)關(guān)鍵操作就覆蓋寫入一次不用記全量日志避免文件體積失控。3.3 報(bào)告內(nèi)容與文件落盤的參數(shù)取舍FS 回調(diào)里最忌諱的事情是“什么都往報(bào)告里塞”。調(diào)用棧、線程列表、模塊列表、CPU 寄存器、系統(tǒng)信息全部打進(jìn)去一份報(bào)告能到幾百 KB高頻崩潰時(shí)磁盤和網(wǎng)絡(luò)都會(huì)被拖死。我的經(jīng)驗(yàn)是分兩個(gè)級(jí)別一種是把BugReport完整落盤保留所有細(xì)節(jié)僅限開發(fā)版或內(nèi)測(cè)版開啟另一種是發(fā)布版只記錄異常類型、異常地址、模塊名、調(diào)用棧前十幀和業(yè)務(wù)上下文。后者的信息量足夠定位 80% 的崩潰文件體積控制在 10 KB 以內(nèi)上傳快、干擾少。落盤目錄要選用戶有寫權(quán)限的路徑不要硬編碼D:\logs否則用戶以普通權(quán)限運(yùn)行時(shí)報(bào)告根本寫不進(jìn)去。用GetEnvironmentVariable(LOCALAPPDATA)拼一個(gè)KClient\CrashReports目錄是可移植且安全的選擇。目錄不存在就創(chuàng)建創(chuàng)建失敗則退回到臨時(shí)目錄這層容錯(cuò)必須做因?yàn)楫惓;卣{(diào)本身就是程序處于不穩(wěn)定狀態(tài)不要再讓文件系統(tǒng)問題掩蓋真正要排查的事故。4. 根據(jù)崩潰報(bào)告定位問題?;厮?、線程現(xiàn)場(chǎng)與符號(hào)文件4.1 讀懂 BugReport 的關(guān)鍵字段madExcept 5 生成的報(bào)告結(jié)構(gòu)大致固定我一般在排障時(shí)只盯著幾個(gè)欄位看表格字段含義定位價(jià)值Exception Class異常類型如 EAccessViolation判斷是邏輯問題還是系統(tǒng)級(jí)內(nèi)存問題Exception Message異常附帶信息經(jīng)常直接寫著越界下標(biāo)或文件名Exception Address崩潰指令所在的模塊偏移結(jié)合符號(hào)表換算成函數(shù)名Call Stack從崩潰點(diǎn)向外的調(diào)用鏈解決“哪條路徑調(diào)到這里”的問題Threads所有線程的??煺张挪槎嗑€程協(xié)作導(dǎo)致的崩潰Modules加載的模塊列表及版本排查 DLL 沖突、補(bǔ)丁不一致報(bào)告里最騙人的是Exception Message為空的 Access Violation。地址直接指向某個(gè)系統(tǒng) DLL 內(nèi)部看起來像第三方庫的鍋但順著Call Stack看前兩條棧幀往往會(huì)回到你自己的消息處理函數(shù)。?;厮菔抢斫獗罎⒙窂降闹骶€索而不是只看落點(diǎn)地址。4.2 符號(hào)表與版本映射讓地址變函數(shù)名崩潰日志里如果只有00401234這種裸地址對(duì)現(xiàn)代項(xiàng)目來說基本等于廢紙。madExcept 要把地址解析成函數(shù)名依賴編譯時(shí)生成的調(diào)試符號(hào)。Delphi/CBuilder 的鏈接器選項(xiàng)里一般提供 map 文件的開關(guān)把詳細(xì)模式打開后編譯器會(huì)輸出完整的映射關(guān)系表madExcept 在崩潰時(shí)查找該表即可還原函數(shù)名。工程交付時(shí)記得把每次構(gòu)建的 map 文件或調(diào)試符號(hào)與 exe 一并歸檔。這里的規(guī)矩是報(bào)告里的模塊版本號(hào)和構(gòu)建號(hào)必須能對(duì)應(yīng)到唯一一份符號(hào)文件。我習(xí)慣在工程里加一個(gè)構(gòu)建版本常量并定義到資源或全局變量里const BUILD_ID 20250607_1300_trunk_4a3f2c;回調(diào)里把這個(gè)BUILD_ID寫進(jìn)報(bào)告頭部歸檔符號(hào)文件時(shí)文件名也帶同一個(gè)BUILD_ID。線上反饋回來看報(bào)告里的構(gòu)建號(hào)找符號(hào)文件幾秒鐘就能對(duì)上。4.3 一個(gè)真實(shí)定位流程的三步走第一步先把報(bào)告里的Exception Address和Call Stack前三條記錄抄出來。第二步用報(bào)告里的BUILD_ID找到對(duì)應(yīng)的 map 文件把裸地址換算成函數(shù)名這一步 madExcept 報(bào)告里通常已經(jīng)替你做了——前提是發(fā)布構(gòu)建時(shí) map 文件沒有被剝離。第三步打開源碼定位到那個(gè)函數(shù)重點(diǎn)看這幾點(diǎn)是否有對(duì)空對(duì)象解引用、是否有無符號(hào)整數(shù)比較、是否有回調(diào)函數(shù)在跨模塊傳遞時(shí)被錯(cuò)誤約定調(diào)用。碰到Call Stack本身就殘廢的報(bào)告比如只在崩潰點(diǎn)有一條記錄后面全是Unknown大概率是優(yōu)化編譯把棧幀給省略了或者你的 hook 觸發(fā)在異常鏈已經(jīng)展開之后。這時(shí)候不要硬解地址轉(zhuǎn)而看Modules欄位確認(rèn)崩潰模塊是否帶調(diào)試版本號(hào)再檢查編譯器優(yōu)化選項(xiàng)。報(bào)告里那份Threads列表也別忽略。很多“偶爾崩一次”的現(xiàn)場(chǎng)主線程棧是正常的反而是某個(gè)工作線程停在了釋放對(duì)象的代碼上。如果團(tuán)隊(duì)里多線程代碼量大且頻繁 new/free 對(duì)象FS 報(bào)告里帶出線程棧會(huì)省掉你掛調(diào)試器復(fù)現(xiàn)一下午的時(shí)間。5. 避坑madExcept 5 FS 集成中常見的五個(gè)翻車現(xiàn)場(chǎng)5.1 現(xiàn)象一DLL 崩潰只出現(xiàn)“外部地址”現(xiàn)象主程序用 madExcept加載的一個(gè)業(yè)務(wù) DLL 里崩了報(bào)告里只顯示Unknown module和一個(gè)裸地址無法換算函數(shù)名。原因DLL 工程沒有編譯 madExcept 相關(guān)單元主程序拿不到 DLL 的符號(hào)表另外系統(tǒng)異常分發(fā)經(jīng)過模塊邊界時(shí)DLL 里的棧幀格式不會(huì)被主程序的 hook 完整解析。解決給 DLL 工程也加上 madExcept 相關(guān)單元并開啟同樣的符號(hào)輸出配置。發(fā)布時(shí)確認(rèn) DLL 的 map 文件與 DLL 本體同版本歸檔。若 DLL 是第三方且無符號(hào)文件則在報(bào)告里至少記錄模塊名與版本號(hào)反向聯(lián)系廠商時(shí)也算有據(jù)可查。5.2 現(xiàn)象二FS 回調(diào)里寫文件導(dǎo)致遞歸崩潰現(xiàn)象異常發(fā)生后回調(diào)函數(shù)里寫日志日志文件被占用或無權(quán)限寫文件操作又拋出異常madExcept 再次進(jìn)回調(diào)進(jìn)入無限遞歸程序徹底卡死。原因回調(diào)函數(shù)本身沒有做異常隔離。FS 回調(diào)運(yùn)行在系統(tǒng)的異常分發(fā)鏈上任何一環(huán)再拋異常都會(huì)重新進(jìn)入分發(fā)入口。解決回調(diào)函數(shù)整體包一層裸 try-except任何異常都吞掉確?;卣{(diào)自己永遠(yuǎn)不拋文件寫入前先判斷目錄可寫寫不進(jìn)去就放棄絕不讓日志行為本身變成新的事故源頭function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; begin try // 原有邏輯 except // 記錄回調(diào)失敗次數(shù)不再做任何操作 end; handled : False; Result : True; end;5.3 現(xiàn)象三優(yōu)化編譯后?;厮輰?duì)不上行號(hào)現(xiàn)象用戶現(xiàn)場(chǎng)報(bào)告的調(diào)用棧能列出函數(shù)名但點(diǎn)開源碼行號(hào)指向的位置和實(shí)際崩潰邏輯明顯不對(duì)。原因編譯器開了內(nèi)聯(lián)和幀指針省略優(yōu)化某些棧幀被優(yōu)化合并madExcept 依據(jù)靜態(tài)符號(hào)表換算出的行號(hào)是近似值不是精確落點(diǎn)。解決定位問題時(shí)把函數(shù)名當(dāng)作線索而非最終答案重點(diǎn)看崩潰點(diǎn)所在函數(shù)整體邏輯。對(duì)懷疑有問題的單元單獨(dú)關(guān)閉優(yōu)化重新編譯做一次定向?qū)Ρ?。這不是 madExcept 的 bug是符號(hào)還原的固有精度問題理解為它給的是“案發(fā)附近區(qū)域”而不是“精確坐標(biāo)”就能少走彎路。5.4 現(xiàn)象四報(bào)告發(fā)送阻塞主線程二次鎖死現(xiàn)象加了 FS 回調(diào)后崩潰現(xiàn)場(chǎng)偶爾變成“卡死不動(dòng)”任務(wù)管理器顯示進(jìn)程無響應(yīng)。原因回調(diào)里直接發(fā)了 HTTP 請(qǐng)求把崩潰報(bào)告?zhèn)鹘o服務(wù)端。崩潰發(fā)生時(shí)主線程狀態(tài)本身不穩(wěn)定同步網(wǎng)絡(luò)請(qǐng)求一直等超時(shí)界面消息循環(huán)被阻塞用戶感知為假死。解決回調(diào)內(nèi)不要做任何網(wǎng)絡(luò)操作只負(fù)責(zé)落盤。程序下次正常啟動(dòng)時(shí)掃描崩潰報(bào)告目錄用后臺(tái)線程統(tǒng)一上傳上傳成功再刪文件。這個(gè)模式也叫本地落地加延遲上報(bào)是客戶端崩潰采集的常見做法。5.5 現(xiàn)象五打包時(shí)機(jī)不對(duì)報(bào)告里全是“Unknown”現(xiàn)象測(cè)試機(jī)上報(bào)的報(bào)告完全正常發(fā)布給用戶后全變成Unknown function和裸地址。原因發(fā)布包使用 Release 配置編譯且關(guān)閉了 map 文件輸出madExcept 運(yùn)行時(shí)沒有任何符號(hào)可查。解決發(fā)布配置里也保留 Detailed map 文件生成只是不給最終用戶分發(fā)而已——直接把 map 文件歸檔到構(gòu)建服務(wù)器內(nèi)部存儲(chǔ)。同時(shí)確認(rèn)構(gòu)建機(jī)上沒有開啟“生成輕量調(diào)試信息”之類的減配選項(xiàng)。這個(gè)問題在快速迭代的小團(tuán)隊(duì)里幾乎每個(gè)月都能踩到一次屬于典型的因?yàn)椤鞍l(fā)布要精簡(jiǎn)”而誤刪關(guān)鍵排障數(shù)據(jù)。6. 進(jìn)階把崩潰報(bào)告變成持續(xù)可用的工程質(zhì)量數(shù)據(jù)6.1 用版本號(hào)與構(gòu)建 Mark 給報(bào)告打標(biāo)早期接入 madExcept 時(shí)我見過一個(gè)項(xiàng)目報(bào)告文件存了幾千個(gè)命名全是crash_20250501_230011.log解析時(shí)根本分不清版本。后來我們做了一件事把構(gòu)建號(hào)、分支名、編譯時(shí)間全部塞進(jìn)報(bào)告文件名和文件頭排序和歸因一下就清楚了。function BuildReportFileName: string; var tag: string; begin tag : Format(%s_%s_%s, [BUILD_ID, APP_VERSION, COMPILE_TIME]); Result : GetEnvironmentVariable(LOCALAPPDATA) \KClient\CrashReports\ tag _ FormatDateTime(yyyymmdd_hhnnss, Now) .txt; end;發(fā)布后每天掃一次報(bào)告目錄按BUILD_ID分組統(tǒng)計(jì)崩潰次數(shù)哪一次構(gòu)建增量引入的崩潰增量立刻顯現(xiàn)。別小看這步它把“收到一份崩潰日志”變成“一周崩了 47 次其中 39 次在新版本”的決策信息。6.2 本地落盤加延遲上傳的可靠發(fā)送模式報(bào)告最終是要匯總到服務(wù)端的。常見做法是寫一個(gè)后臺(tái)線程每次啟動(dòng)時(shí)遍歷崩潰報(bào)告目錄文件逐條上傳成功后移動(dòng)到 backup 目錄或直接刪除。上傳接口要冪等同一條報(bào)告重復(fù)提交時(shí)服務(wù)端按報(bào)告唯一 ID 去重。我在最近一個(gè)模擬項(xiàng)目X里給上傳線程加了一個(gè)簡(jiǎn)單限制單次最多處理 20 份報(bào)告處理完退出線程避免程序啟動(dòng)瞬間被大量歷史報(bào)告占滿網(wǎng)絡(luò)。崩潰報(bào)告是有時(shí)效性的優(yōu)先傳當(dāng)天的歷史存量排后。線程里每傳完一條就Sleep(300)給主線程留資源這在低配用戶機(jī)上尤其重要。還有一個(gè)習(xí)慣值得分享每季度把報(bào)告里的Exception Class做一次分布統(tǒng)計(jì)。曾經(jīng)有個(gè)客戶端項(xiàng)目翻來覆去都是同一個(gè)數(shù)組越界問題開發(fā)組修了一版上線后統(tǒng)計(jì)看該類異常環(huán)比降了 90%那個(gè)數(shù)據(jù)比任何測(cè)試報(bào)告都有說服力。崩潰報(bào)告系統(tǒng)不是修一次就完事的它的價(jià)值隨時(shí)間線性累積前提是你把構(gòu)建號(hào)、符號(hào)文件、報(bào)告歸檔這套動(dòng)作養(yǎng)成肌肉記憶。這條路我走下來最大的教訓(xùn)只有一個(gè)——hook 要接得早符號(hào)要存得住報(bào)告不要當(dāng)場(chǎng)發(fā)。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
91丨九色丨东北熟女| 思思久ren热| 99热这里只有精品1025| 色五月视频,小说| 色综合久久88| 人妻VideOssS人妻| 亚洲小视频免费观看| 国产精产国品一二三在观看| 丁香六月在线| 天天射综合网天天插| 4399精品一区二区| 婷婷五月综合国产精品| 在线播放成人网站| 六月婷婷综合| 五月激情综合五月| 五月天婷a在线| 极品另类| 丁香五月婷婷香| 天天弄天天爽| 久久综合爱| 玖久久网站| 丁香久久| 久久五月激情综合| 婷婷五月天在婷| 五月色丁香| 丁香五月婷婷图片综合| 99国产精品久久久久久久久久久| 色婷婷婷婷| 啪啪小说五月天| 丁香五月综合色婷婷| 丁香五月婷婷五月| 久久久A级视频| 成人丁香婷婷| 五月天操逼激情| 色婷婷六月天| 色婷婷电影网| 亚洲激情另类| 91人碰| 国产高清RV综合aVa| 亚洲丁香花色| 91九九| 色一情一乱一乱一区9| 久久精品国产AV一区二区三区 | 久久99国产综合精品免费| 91操熟女| 开心深爱激情网| 26.uuu丁香五月婷婷| 四月婷婷丁香| 久久婷婷六月综合资源| 激情五月婷婷伊人| 日本va欧美va欧美| 五月天最新网| 色九月婷婷丁香| 亚洲五月天婷婷在线| caopeng97日韩| 五月开心婷婷网| 欧美色色色色色色色| 97爱综合| 99热都是精品| 天天天天天日| 99色热| 伊人婷婷五月天| 五月激情网站| 26uuu成人网| 色噜噜婷婷| 久久久久人无码人妻| 青青热久精品视频在线观看| 互月天综合| 爱婷婷久久视频| 另类图片五月天婷婷| 丁香六月天婷婷在线| 久久婷婷成人视频| 丁香五月婷婷天激情| 99热大片| 激情六月丁| 99热99这里免费的精品| 俺去也婷婷| 五月婷婷丁香五月婷婷丁香| 大香蕉手机视频| 深爱开心激情| 岛国AAAV| 丁香六月激情四射| 午夜丁香六月婷| 这里只有免费的精品| 丁香五月天成人| 99热日韩| 激情婷婷五月| 婷婷六久久| 日韩 mm 不卡| 97碰在线视频| 久久婷婷网址| 六月丁香婷婷五月天| 天天日天天干天天爱| 99热国产在| 丁香五月天激情综合网| 日亚二欧美| 5月婷婷6月六月丁香| 色噜噜狠狠色综无码久久合欧美| 国产激情视频在线观看| 日本9区视频| 久久婷婷夜| 97人妻碰碰碰久久香蕉| 五月天激情网图片 - 百度| 日日操人人操| 成人午夜无码视频| 亲子乱AV-区二区三区| 99人人精品| 国产 码在线成人网站| 大狠狠在线| 亚洲综合婷婷六月丁香五月| 玖玖爱伊人| 超碰在线99| 秋霞九九无码| 五月丁香六月日逼| 激情四射婷婷| 伊人激情综合| 六月亚洲婷婷6月中文字幕| sewuyuejiqingwang| 激情网婷婷五月天| 丁香久久久| 天天色综合综合| 色欲久久久久久综合网综合网| 五月婷婷在线免费观看| 色婷婷久久视屏| 五月丁香婷婷网网网网| AⅤ色区| 婷婷五月天狠狠色| 99热午夜精品| 六月丁香啪| 五月丁香淫淫婷婷婷| 五月婷婷啪啪啪| 曰韩少妇内射免费播放| 五月丁香婷婷色色| 日本丁香五月| 99精品国产在热久久| 狠狠久久婷婷| 丁香五月天啪啪激情综和网| 五月天色五月| 91久久久久久久久久久| 亚洲丁香婷婷丁香五月天激情| 色五月五月婷婷| 丁香五月婷婷亚洲激情四射| 欧美熟女乱又伦| 久久3p| WW婷婷五月天com| 嫩模aV在线| 日逼免费视频 | 激情开心五月婷婷| 久热久| 玖玖资源在线视频| 超碰人人摸人人操| 91dy.av| aa久久| 超碰一区二区| 久久九九蜜| 丁香五月久久| 丁香五月 综合| 色综合色色色| 久9热在线免费观看| 天天色天天色天天色天天色天天色天天色| 五月婷婷五月| 丁香五婷婷| 伊人啪啪网| 97碰碰碰免费公开在线视频| 久久五月丁香激情综合| 无码激情AAAAA片-区区| 婷婷成人综合免费视频| 国产成人精品一区二区三区视频| 九九视频这里只有精品在线播放| 97在线视频观看| 六月丁香大香蕉| 思思99热| 五月天丁香综合| 欧美五月婷婷| 视频1区2区| 五月播播| 99久久97久久欧美综合网| 亚洲中文乱字字幕线在永久| 色99xx| 日韩操逼小电影| 久婷婷视平| 久久国产一区二区三区| 天天艹天天综合网| 五月激情综合网| 综合激情伊人影视在线| 婷婷五月成人| 午夜国产精品AV在线播放| 国产精品久久久久久久久久| 天天擼久久擼在线| www.色色com| 丁香五月天激情AV| 99操网站| 亚韩在线视频| 国产xxxxx在线观看| 五月天激情小说| 无毒黄色网址| 丁香五月先锋| 婷婷伊人綜合中文字幕| 青柠影视免费高清电视剧| 五月婷婷亚洲综合网| 欧美色综合天天久久综合精品| 深爱五月天婷综合| 就爱日五月天| 日韩狠狠色| 99天堂网| www,婷婷,com| 五月丁香婷婷婷激情爱爱| 1024亚洲| 99久久这里只有精品| WWW五月婷婷| 欧美丰满熟妇BBB久久久| 激情 婷婷 丁香五月天| 欧美日韩成人一区二区| 五月天激情网图片| 九九精品re免费视频| 婷婷社区五月天| 丁香五月日韩| 人人摸人人干| 午夜五月天| 很很操很很操| 99日本视频| 99久久性爱| 五月花成人网| 久久狠婷婷| 99久久9| 色婷婷丁香五月在线| 天天插天天射| 天天射影院| 人妻熟妇国产精品| 色碰97| 久久99久久99精品免观看粉嫩| 97操在线视频| 婷婷五月久久| 99久久激情视频| 六月香五月婷| 色婷婷免费观看| 丰满少妇猛烈A片免费看观看| 99热这里只有精品13| 五月婷免费视频| 思思热视频在线观看| 亭亭色天香| 九九在线精品| 欧美天堂久久| 丁香五月精品| 99热99思午夜精品| 99九九99九九九视频精彩| 婷婷久草| 久久综合丁香五月| 色色色1网址| 久99热| 六月婷婷狠狠做| 色婷婷丁香AV综合| 五月综合激情婷婷六月色窝| 99啪99| 综合五月天天天天天五月| 人人操操| 加勒比久热| 五月天婷婷久久| 五月天综合激情网| 色五月开心开心五月激情五月| 大香线蕉伊人| 欧美性交一区二区三区| 在线成人va| 99免费| 久久久久综合激动五月天| 婷婷丁香亚洲色综合91| 婷婷99狠| 久操乱| 色婷婷五月综合| 精品乱码久久久久| 五月婷婷福利| 就爱啪啪婷婷| 侠女刀之记忆电影在线看免费| 1024成人在线观看| 久久一伦| 极品少妇婷婷五月| 九九色婷婷Av| 欧美一级a | 欧美天堂久久| www91精品| 美女久久婷婷| AAA亚洲AV| 丁香婷婷五月天网站| 丁香婷色| 色婷婷影视99| 五月天激情日色在线| 欧美成人精品A片免费一区99| 色婷婷丁香五月| 激情丁香五月婷婷| 亚洲另类视频| 色五月丁香婷婷| 色欲丁香久久| 激情久久五月网| 大香蕉五月天婷婷| 六月丁香啪啪| 久操无码| 久久天天天| 五月丁香成年黄色| 九九九午夜视频| 丁香婷婷婷婷十二月在线观看视频| 4399无码视频| 黄色av网站在线免费播放| 成人做爰A片免费看视频| 五月色丁香| 九九热最新视频| 激情小说五月天| 另类综合激情| 欧美色五月| 五月色婷婷影院| 天天操夜夜操| 精品久久99码| 丁香五月天激情综合| 丁香五月色情| 婷婷五月天久草在线| 婷婷五月丁香图片人人操| 四川BBB搡BBB搡多人乱亂| BBWCUCKOLD精品熟妇| 噼里啪啦完整版中文在线观看| 五月丁香婷婷综合网| 超碰人人色| 婷婷五月天激情四射| 色色激情五月天| 五月天偷拍| 六月婷婷日| 五月天婷婷开心| 99人人操人人摸| 色五月综合婷婷| 亚洲激情精品| 精品成人a v无码内射| 久久九九色| 色五月婷婷操逼| 色停停香蕉视频| 六月激情婷婷| #NAME?| 欧美婷婷精品激| a九九热www| 久久五月天精品视频| 激情校园 亚洲| 亭亭五月激情亚洲在线| 无码任你操| 开心激情站| 欧美日韩成人在线| 欧美三级大片AA在线看| 色婷小说| 久久黄A片| 丁香婷婷啪啪啪| 亚洲天堂aaaa| 成人国产欧美大片一区| 日韩aⅴ视频| 色情婷| 天天弄天天爽| 丁香五月激情视频在线| 97影院一级片| 桃色五月婷婷| 九九aV| 婷婷五月天天| 97人人干人人操| 疯狂做受XXXX高潮A片| 超碰在线50| 久久久婷婷五月亚洲97号色| 开心五月深爱五月婷| 久久丁香五月| 天天综合网在线| 67久久| 九九九九毛片| 强伦轩人妻一区二区电影| 五月激情综合网| 免费无码毛片一区二区A片| 日本综合99| 婷婷精品在线| 欧美25p| 欧洲色色| www.婷婷.com| 丁香五月欧美色综合| 91九色在线| 99碰碰| 亚洲有码在线视频| 色色色欧美色色| 九九热啪啪| 五月停停大香蕉| 九九碰九九爱97| 这里只有精品9| 婷丁香五月天| 96色婷婷| 丁香五月综合在线| 色色色99| 五月激情婷婷综合| 五月婷婷综合视频| 99久久婷婷综合| 狠狠色性| 丁香五月性| 色玖玖综合| 天天日,夜夜爽| 五月婷婷无码| 98色花堂98t.R| 色婷婷丁香五月高清在线| 超碰在线中文字幕| 久久人五月| 五月丁香九九九综合| 日本久久精品18| 日韩三十六页| 丁香婷在线| 国产成人一区二区三区在线观看 | 九月性爱网| 色播综合| 9l视频自拍九色9l视频自拍九色9l社区| 久久婷婷一级片| 五月激情另类| 天堂成人A片永久免费网站| 丁香五月婷婷基地| 99人碰碰碰| 狠狠色色色| 久色视频首页| 国产偷人爽久久久久久老妇APP| 97精品欧美91久久久久久久| 亚洲在线资源| 日韩国产AV播放| 五月天婷婷久久综合| 99热综合| 激情网 五月天| 大香蕉啪啪啪| 开心婷婷中文字慕| 99∨VTV| 大香蕉九九| 成人免费在线电影| 婷婷丁香激情综合色情| 99天堂网| 五月丁香六月日逼| 国产av一区二区三区| 婷婷免费成人视频| 亚洲在线免费成人| 色色五月婷| 九九精品在线网| 丰满少妇猛烈A片免费看观看| 激情网站五月| 国产毛片欧美毛片久久久| 五月丁香六月婷婷综合| 天天摸天天做天天爱天天爽| 亚洲Av成人在线观看| 色99网站| 大香蕉五月天婷婷丁香91| 色你久久| 欧洲永久精品| 九九性视频| 开心四月婷婷在线色播播| 精品国产乱码久久久久夜深人妻 | 99热九九这里只有精品| 亚洲爆乳无码精品AAA片蜜桃| 成人小说 五月天 婷婷| 婷婷丁香色女人| 九九热视频精品| 国产亚洲99久久| 色色五月天丁香| 久久曰曰| 亚洲精品白浆高清久久久久久| 秋霞电影理论| 任你干嘛免费视频播放| 任你爽视频| 激情深爱婷婷网| 久99婷婷色综合| 天天干狠狠| 中文资源在线a | 182TV大香蕉| 久久免费9| 色综合色色| 亚洲中文乱字字幕线在永久| 五月色亚洲| 丁香六月婷婷色XXXXX| 色婷綜合网| 五月婷婷www| 色婷丁香| wwwwww.色| 99福利导航| 天天弄天天操| 五月婷婷啪啪综合网| 婷婷在线免费| 成人午夜视频精品一区| 播播网色播播| 天天色综合色| 成人中文字幕在线| 无码一区精品一区视频| 婷婷情色五月天| 丁香婷婷激情五月色| 97色碰碰公开视频| 五月天激情网图片| 天天草比天天爽| 国产精品日日躁夜夜躁| 黄色三级毛片中字| AV在线大香蕉| 色五XX| 久操操| 99ri精品在线观看| 色五月激情综合网| 在线天堂9| 六月婷婷网站| 久99久视频免费观看| 精品久久久人妻| 亚洲天堂aaa| 丁香五月婷婷五月天在线| 一区中文字幕电影| 激情婷婷丁香| 97人人搞| 中文字幕婷婷五月天在线观看| 婷婷五月成人| 超碰a女人的天堂| 亚洲电影在线观看| 九九热这里只有精品6| 五月色丁香视频精品| 五月婷婷在线短视频| 免费AV在线网址| 亚洲精品国产A久久久久久| 91婷婷在线| 婷婷五月天啪啪| 色色色综合视频| 91碰碰视频| www.夜夜操| 日韩av在线电影| 色婷婷激情五月天| 婷婷五月丁香五月天| 婷婷综合精品| www.久久爱.c n| 日本色啪| 9+1视频网址| 婷婷九月激情| 成人在线日韩欧美| 五月亭亭开心网| 丁香婷婷在线| 五月色网| 激情五月综合免费| www.五月婷婷久久.com| 五月天婷婷基地综合网| 67久久| 国产肥白大熟妇BBBB视频| 婷婷成人五月天| 激情色色| 激情图片五月天| 五月丁香久久久久| 久久五月丁香婷婷| 婷婷狠狠操| 97福利视频| 97碰超级人人看| 日日爽夜夜爽| 色色色色色色色色色色色色色97| 色婷婷AV在线| 婷婷午夜精品久久久| 97干网站| 高清不卡一区| 五月天婷婷在线视频| 99热这里只有精品66| 婷婷射综合| 五月天色综合| 激情五月天影院| 26uuu成人网| 狠狠操狠狠| 久9视频| EEUSS鲁片一区二区三区| 99这里只有精品|v| 国产精品VIDEOSSEX久久发布| 狠狠狠狠狠狠| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 热99热9| 久久AV电影| 激情五月丁香综合网站| 色播五月天激情| 狠狠色婷婷777| 99热精品无码| av久热| 99色在线| 亚洲欧洲中文日韩久久AV乱码| 久色精品| 欧美激情综合五月色丁香| 久久大国产香蕉| 91趴趴| 性热视频99精品| 亚洲色五月婷婷| 性色婷婷| 久久久18| 激情影院免费视频婷婷五月天 | 激情综合五月丁香| a性生活久久无| 综合久久综合五月天婷婷| 亚洲日比视频| 丁香婷婷五月六月久久| 六月婷婷综合| 99热大片| www.婷婷,com| 777精品久无码人妻蜜桃| 亚洲视频一区| 97AV人人插人人操| 草综合网| 久久性爱视频这里只有精品 | 午夜日韩久久久网站| 婷婷五月情| 色婷婷最爱五月| 停停五月丁香| 亚洲AV网址| 国产肥白大熟妇BBBB视频| 伊人久久大香线蕉亚洲五月天,| 热99精品视频五月| 91婷婷五月天综合视频| 久婷婷色| 91男同视频| 超碰9| 26UUU亚洲欧美| 国产精品色色| 国外亚洲成AV人片在线观看| 婷婷综合一二三| 国产xxxxx在线观看| 手机看片日日做夜夜| 丁香狠狠色婷婷| 精品无码久久久久久久久 | 成人国产欧美大片一区| www.九九婷婷| 这里只有精品99视频| 开心婷婷五月| 少妇真实被内射视频三四区| 操逼三区| 久久这里只有国产视频| 婷婷开心激情| www.99热这里精品| 精品少妇蜜臀91| 91九色视频| 五月丁香色色色| 丁香五月激情宗合网| 成年人看Va免费视频| 九九热精品| 一级黄在线| 综合久久婷婷| 99色视频在线| 色亭亭九月| www.激情在线| 日韩无码成人电影| 97久久久免费福利网址| AV五月婷婷露脸| 亚洲综合五月天婷婷丁香| 丁香久月婷| 26uuu另类亚洲欧美日本一| 五月丁香六月激情综合| 久久九九玖玖| 99热精品99| 成人小说色图婷婷五月| 婷婷丁香人妻| 能看的AV| AV九九| 色老久久| 五月丁香六月婷婷久久肏| 国产婷婷五月天| 国产精品久久久久久妇女6080| 久久曰曰| 大香蕉五月天婷婷| 色七七九九| 99视频在线精品| 老司机视频lsj爱就色| 婷婷综合五月激情| 开心五月深爱五月| 久青操| 亚洲激情另类| 九九99在线| 激情深爱综合网| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 五月婷婷丁香综合,亚洲天堂| 五月丁香激情综合网官网| 色婷婷久久综合中文久久一本| 五月天婷婷操逼视频| 青青草五月天| 婷婷五月色惰| 婷婷五月天成人| 一起草av在线观看| 国产毛片精品一区二区色欲黄A片| 丁香色五月AV在线| www.色婷婷| 人妻激情视频| 成人在线不卡| 99re热精品在线视频| 九九热最新| 欧美天天爽| 六月丁香久久| 五月丁香六月激情狠狠| 久久大国产香蕉| 丁香五月激情综合啪啪| 婷婷激情五月视频| 久热 91| 热久久91| 久99| 五月婷丁香亚洲| 久久艹网| 色综合久久99色| 色五月激情网| 精品一二三区久久AAA片| 夜夜做天天爽| 丁香五月婷婷色综合| 久久激情五月网| 影音先锋91视频| 婷婷婷婷婷婷婷婷| 91九色精品熟女内射| 久久色情| 99视频在线精品免费观看2| www,超碰| 婷婷五月天激情四射| 狠狠艹狠狠艹| 97色精品视频 | 99热在线中文字幕| 六月激情婷婷色| 婷婷5月久久综合网站| 五月丁香六月婷婷在线观看| 99ri视频在线播放| 亚洲激情另类| 五月成人综合| 综合AV在线| 99国产精品白浆在线观看免费 | 色性综合| 久综合4| 天天肏天天肏天天肏| 丁香婷婷五月天色综合| 欧美一级a | 色婷婷天堂| 激情五月丁香五月| 99久久激情视频| 亚洲五月婷婷| 岛国在线观看91| 久久婷婷人人| 小视频一区| 久久天堂| 9热网站| 99资源在线视频| 成人色五月天| 超碰在线视屏| 琪琪色网址| 色综合激情| 婷婷五月天欧美图片在线播放电驴| 婷婷射图五月天| 天天日色情| 激情综合啪啪| 婷婷日日夜夜| 久久久久婷婷五月热综合| 亚洲色区17| 欧美成人精品A片免费一区99| 色播五月网| 婷婷五月免费观看| 97精品在线| 天天日色情| www.夜夜| 日本久久精品18| 天天日人人爽| 国产激情久久| 視频福利乱色| 婷婷亚洲在线| 国产67194| 丁香五月综合激情性爱| 亚洲综合色五月| 99色色热| 五月天色图| 97人妻碰碰碰久久久久-最近国语高清| 婷婷亚洲综合| 婷婷的99视频网站| 亚洲这里只有精品| 五月综合缴情网| www.99热国产| 97干在线| 日本色天堂| 久久的爱大香蕉| 99热 日韩| 五月综合激情综合久| 超碰人人色| 97五月婷婷| 成人免费视频一区| 香蕉婷婷五月| 少妇高潮A片无套内谢麻豆传| 婷婷久久五月丁香| 天天做天天爱天天高潮| 99亚洲色色| 天天综合永久| 激情综合网,婷婷| 99天堂网| 日韩欧洲亚洲| 国产一级片| www.久久久久久久| 色婷婷AV在线| 亚洲av无码精品色午夜| 欧美丁香五月| 人妻操日日| 丁香伊人五月色婷婷五十路| 国内熟女黄色系列| 五月综合久久| 日日夜夜狠狠| 色墦五月丁香| 亚洲AV免费在线| 天天天天操| 99精品在线观看视频| 久久丁香五月婷婷| 亚洲超碰在线| 国产亚洲99久久精品| 4399在线日本A片| 人妻熟妇国产精品| 九九久久精品| 开心深爱激情网| 99热这里全都是精品| 99色天堂| 丁香五月激情网| 99ER热精品视频| 性做爰A片免费视频A片直播 | 狠狠干在线| 来吧亚洲综合网| 久久99热这里只频精品6学生| 色色色热热热| 激情亚洲婷婷| 香蕉婷婷| 久久婷婷五月综合色奶水99啪| 婷婷久久五月天丁香| 色婷婷久久| 99九九在线精品热动漫| 久久九色| 色婷婷久久| 免费视频WWW在线观看网站| 国产日产亚洲系列最新| 91在线观看九区| 操日本色| 日韩av在线电影| 色婷婷99| 日韩av干| 综合久久五月天| 色五月超碰| 天堂资源欧日浪女在线播放| 性爱AV天堂| 九九热思思热| 五月丁香婷婷综合视频| 国产激情在线| 天天爱天天做天天操| 北京熟妇搡BBBB搡BBBB| 97超级碰人人| 99色日本| 伍月婷婷免费视频| 开心五月婷| 色播五月天激情| 99精品久久| 成人网站在线观看视频| 九九热青草| 97婷婷色| 国内久久婷婷| 久操婷婷| 热这里| 丁香 亚洲 久久| a久久| 人妻免费网站| 99热九九在线| 婷婷五月丁香六月伊人网| 丁香五月综合在线| 婷婷综合成人| 精品人妻伦一二三区久久| 丁香九月色| 麻豆精品| 成人五月天色天堂| 婷婷五月亚洲一本在线丁香| 久久人人看| www99精品日韩| 国産精品| 欧美久久婷婷| 五月天激情四射| 九九99精品免费播放| 激情综合99| 先锋资源 996| 久色五月| 天天操天天曰| 人人97操| 婷婷五日b| 成人电影AV在线观看| 99久久国产宗和精品1上映| 人人干人人操外国| 婷婷爱综合| 噜噜久| 婷婷五月色播| 操人视频91| 亚洲成人综合在线| 在线综合婷婷| 第四色激情网| 婷婷丁香五月天色色| 99小精品| 九九干视频| 久久久久久99日本| 91人人网| 五月成人天| 久久婷婷色| 久久总和99| 色五月婷婷激情| 亚洲视频一区| 久久丁香五月综合六月激情红杏视频| 五月天婷婷在线观看| 丁香网站| 九九色婷婷| 久久这里有精品视频| 思思热在线视频精品| 色婷婷a v| 黄色激情五月天| 欧洲色色| 丁香婷婷五月人体| 九九九九九无码| 五月天综合久久| 久99婷婷色综合| 欧日韩AV| 金桔一区二区ab地址| 婷婷激情综合| 丁香花综合永久入口| 国产激情久久久| 激情爱爱网站超大免费| 色九月丁香婷婷蜜桃在线观看| 综合激情啪啪| 久久草大香蕉| 青青草色在线视频观看| 色五月激情网| 免费在线a| 啄木鸟丝袜美女福利视频| 久久er99热精品一区二区| 二色av| 色色五月婷| 婷婷五月天综合久久| 五月丁花六月丁香综合| 色婷婷狠狠18yy| 夜夜做夜夜愛| 久久久婷丁香五月| 狠狠色激情综合| 夜精品无码A片一区二区蜜桃| 色狠狠五月天| 亚洲综合色色| AA丁香综合激情| 天天天天天日| 99热只有精品综合| 夜夜操夜夜操| 开心久久xxx色| 成人精品在线| 欧美日韩大黄| 亚洲国产精品VA在线看黑人| 另类婷婷丁香| 九九九九九九热| 天天色域综合网| 色婷婷亚洲综合天堂| 五月丁香在线偷拍视频| www.91五月| 亚洲夜夜操| www99精品在线观看| 色婷婷五月视频| 婷婷伊人五月丁香天堂网| 五月天色丁香| 欧美激情中文字幕| 综合婷婷久久| 99激情网| 色狠狠色噜噜AV天堂五区 | 丁香五月成人社区| 99热这里在线精品| AA片在线观看视频在线播放 | 五月天激情小说| 五月婷婷丁香大陆免费| 亚洲视频综合网| 婷婷射婷婷舔| 免费操超碰| www,26uuu,c0m,色情| 97色色综合| 五月婷婷丁香在线| 丁香婷婷免费| 色情网综合| 久久婷婷五月综合色丁香| 玖玖爱资源站| 婷婷色导航| 婷婷五月天综合色| 色爱99| 色偷偷综合| 99热精品10| 色色色com| 久久久免费精彩视频| 亚洲操B视频| 五月激情天| 青青草蜜臀| 九九精品碰| 97色婷婷| 亚洲综合激| 久久婷婷五月综合色和| 99无吗| 久久免费精品小视频| 四川BBB搡BBB爽爽视频| 久久六月综合| 99热免费精品| 极品少妇XXXX精品少妇偷拍| 涩涩涩五月天| 亚洲色婷婷| 成人国产网| 97九色| 先锋资源 996| 九九精彩久久| 开心激情色婷婷五月天| 97艹| 丁香久久| 色激情五月天| 色婷婷av在线| 丁香五月婷中字在线| 激情五月天影院| 五月丁香久久综合| WWW.久久久久久久久久久久久| 丁香五月天之婷婷影院| 五月天综合图片| 色婷婷综合网| 久久婷婷六月综合综合| 在线观看国产高清视频免费网站| 久草热在线视频| 亚洲色婷婷婷婷人人爽| 亚洲在线操| 综合久久婷婷| 日本久久人| www.五月天色色.com| 日韩一区二区A片免费观看| 丁香婷婷色九月| 久久九九99亚洲国产久精综合| 91超级碰在线视频| 成人av免费观看| 欧美激情VA永久在线播放| 六月香五月婷| 在线中文字幕视频| 香蕉色色网| 丁香色婷婷| 六月丁香激情网| 九九久久精品| 日韩AV成人电影| 99福利导航| 五月婷六月婷婷| 国内裸舞二区| 婷婷性爱网| 干一干xxxx| 婷婷五月天综合久久日| 九九热精品| 日本丁香五月| 激情婷婷丁香五月天| 色婷婷婷婷五月天| 天天做天天爱天天搞| 五月天停停日日| 色天使久久综合| 八戒青柠影视剧在线观看| 丁香五月欧美| 丁香五月五月婷婷五月天激情四射| 91操片| 亚洲色图在线视频| www.91热久久| 无码激情AAAAA片-区区| 久久久久人妻网址| 99色网站| 日本爆乳片手机在线播放| 五月婷婷激清网| 5月丁香综合网| 亚洲精品无码久久| 丁香六月婷婷开心| 日韩精品一品二区三区的使用体验| 婷婷黄色网| 欧美婷婷丁香社区在线播放| 久草热久草在线视频| 丁香成人五月天| 久久婷婷热| 五月婷婷激情性爱| 日本美女五月天| 美女五月狠狠| 99无码黄色视频| 久久久精品人妻录| 亚洲国产精品综合色区| 深爱五月天天| 五月天婷婷色小说| 最新精品视频99| 五月婷成人| 狠狠干五月天婷婷网| 97五月综合网| 一起肏在线视频| 性爱网五月婷婷| 亚洲乱码日产精品BD在线观看| 久久久97| 色综合女人99| 色五月婷婷色| 狠狠干五月| 丁香五月花影院| 婷婷色婷婷| 婷婷五月天在线观看| 国产精品国产| 久久久婷婷五月亚洲97号色| 成人在线网址| 五月天激情小说网| 婷婷五月天成人| 久婷五月| 色哟哟精品| 久99| 欧美槡BBBB槡BBB少妇| 91精品国产综合久久久不卡电影| 99re在线播放| 亚洲av电影在线| 超极99精品| 久久婷婷综合五月| 色综合久久8| 九九色网| 人妻激情视频| 色9999日韩国产| 亚洲国产成人在线| 精品久色| 五月丁香六月婷婷色| 婷婷五六日| 99日韩网站| 免费精品99| 日本五月婷| 精品一二三区久久AAA片| 久久综合五月天激情小说网站 | 六月丁香影院| 激情丁香六月| 丁香五月色五月婷婷宗合| 99热精品中文字幕| AA久久| 99操无码视频观看| 丁香五月社区| www.天天干| 91熟妇大香蕉| 九九热99免费视频| 五月丁香激情四射综合| 91精品电影18T| 丁香婷婷六月在线资源观看| 五月婷婷,狠狠操| 狠狠色成人影片| 婷婷五月色播天| 婷婷五月天久久综合88| 丁香五月精品视频| 婷婷五月天资源| 婷婷在线综合| 久久97| 久月久在线视频| 亚洲综合视频网| 丁香久色| 五月婷婷丁香五月| 99在线69| 伊人爱爱日本| 欲色人妻| 超碰色女| 99久.| 亚洲另类噜噜| 99热在线精品观看| 黄色av网站在线免费播放| 六月丁香啪啪啪| 综合激情开心五月| 国产性av| 激情综合五| 五月丁香久久网| 婷婷五月天免费| 99视频在线观看欧| 亚洲天堂啪啪| 五月天激情四射| 丁香狠狠色婷婷| 色婷婷六月开心中文字| 91丨九色丨国产打屁股| 老师高潮流白浆喷水的A片| 996热re视频精品视频| 天天天天天天天操| 五月叮香啪| 日本久久人| 婷婷丁香高潮了| 日本一级特黄大片AAAAA级| 五月天婷a在线| 日韩操人| 婷婷色正月| 激情内射人妻1区2区3区| 丁香婷婷老司机久操| 思思久久96热在精品国产,| 婷婷色九月| 丁香五月激情啪啪| 丁香五月综合激情啪啪| 思思热在线精品视频网站| 色五月丁香婷婷| 神马欧美精| 99久久思思| 五月天色丁香| 97热在线精品| 午夜精品777| 五月天激情网图片| 天天色2017| 丁香亚洲婷婷五月| 国产无套精品一区二区| 丁香五月婷婷啪啪视频| 久月丁香爱婷婷综合| 大香蕉中文| 九九99久久| 婷婷丁香18| 九九这里是免费的视频5| 久久人妻www| 婷婷五月在线影院| 这里只有精品,日韩视频| 天天爽日日爽夜夜爽| 欧美色色色色色色色色色色影视| 丁香六月综合激情| 九九热这里只有精品9| www.99热国产| 五月丁香六月激情| 操b视频在线观看一区二区| 色婷婷六月精品| 另类视频在线| WWW.99视频| www婷婷| 99精品偷自拍| 青青草tp| 亚洲天堂啪啪| 久婷婷五月天影院| 开心激情五月天网| 久久婷婷七月丁香| 精品综合久久久久久五月天| 色婷婷久久| 99五月丁香丁| 99啪啪| 久久婷婷五月综合| 色婷婷色99国产综合精品| 丁香六月啪啪啪| 免费亚洲婷婷五月| 久久艹 五月天| 森林影视大全,最好看的2019年视频| 99热这里是精品| 男女99免费视频| 婷婷久久五月| 五月婷婷激情综合| 97精品欧美91久久久久久久| 综激情网| 色色色色色色色色五月先| 影音先锋按摩| 色综合久久888| 五月婷婷熟女| 国产91资源在线| 开心五月天私房婷婷| 六月婷婷综合| 色五月婷婷五月天激情综合| 另类小说色婷婷| 亚洲成人网站在线| 深爱激情五月婷婷| 永久的网站AAAA| 色婷视频| 狠狠干在线视频| 91人无码久久久久久| 亚洲另类视频| 性热视频99精品| 色婷网| 亚洲综合视频天天精品| 香蕉AV777XXX色综合一区| 激情综合4月| 日本精品人妻无码77777| 97韩国久久电影院| 六月婷婷最新网址| 深爱激情综合网| 五月丁香激情四射综合| 99热色精品| 无码网| 亚洲成av人影院| 婷婷五月噜噜| 国产三级片91| 久草热在线视频| 婷婷六月五月天综合| 97亚洲精品| 91精品久久久久久| 99热在线免费观看精品| 9 7总站超级碰免费视频| 五月丁香成人视频| 九九色99| 色五月五月婷婷| 天天搞夜夜叫| 人妻免费网站| 99热精品综合| 啪精品| 乱色色色| 丁香五月六月综合激情| 色色a| 超碰在线成人| 人人播| 五月天 另类图片|