99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

UFS 3.1協(xié)議深度解析:從分層架構(gòu)到WriteBooster與HPB實(shí)戰(zhàn)

UFS 3.1協(xié)議深度解析:從分層架構(gòu)到WriteBooster與HPB實(shí)戰(zhàn) 1. 項(xiàng)目概述與核心需求解析1.1 為什么要寫UFS 3.1協(xié)議分析UFSUniversal Flash Storage通用閃存存儲在移動設(shè)備和嵌入式系統(tǒng)里已經(jīng)全面普及這幾年從UFS 2.1到UFS 3.0再到UFS 3.1中間還穿插著UFS 2.2這種過渡版本整個演進(jìn)節(jié)奏非常快。我最初接觸UFS 3.1協(xié)議分析的時候手頭正好在做一款旗艦級移動平臺的存儲子系統(tǒng)適配芯片端的主控和UFS 3.1的Flash顆粒之間頻繁出現(xiàn)鏈路協(xié)商異常、命令超時和吞吐量不達(dá)標(biāo)的問題。那時候才發(fā)現(xiàn)光會調(diào)驅(qū)動、看日志遠(yuǎn)遠(yuǎn)不夠必須真正理解協(xié)議層的機(jī)制尤其是UFS 3.1相比老版本引入了哪些新特性、這些新特性又依賴哪些協(xié)議字段和交互流程才能真正定位問題。這篇博文我想做的事是把UFS 3.1協(xié)議分析中最基礎(chǔ)也最關(guān)鍵的框架性內(nèi)容整理出來。它不是一個完整的JEDEC規(guī)范翻譯也不是針對某個廠商主控的調(diào)試手冊而是從協(xié)議分層的視角把UFS 3.1是什么、為什么需要它、它如何工作、調(diào)試時需要盯住哪些點(diǎn)講清楚。適合的讀者包括剛進(jìn)入存儲行業(yè)的嵌入式軟件工程師、做移動平臺BSP底層的同學(xué)、以及需要跟Flash廠商和主控廠商打交道但協(xié)議底子不厚的系統(tǒng)工程師。在展開細(xì)節(jié)之前先用一句話概括UFS 3.1的本質(zhì)UFS是一套完整的“主機(jī)端控制器 協(xié)議命令集 物理鏈路”三位一體的閃存存儲方案3.1版本則是在3.0高速傳輸能力之上補(bǔ)齊了一組面向隨機(jī)讀寫性能、低功耗、大容量場景的增強(qiáng)特性。整個協(xié)議??梢圆鸪扇龑觼砜磻?yīng)用層UFS Command Set、傳輸層UTPUFS Transport Protocol、互連層UICUFS Interconnect每一層都有自己的職責(zé)也是排查問題時的分層邊界。1.2 項(xiàng)目拆分與章節(jié)規(guī)劃我計(jì)劃把UFS 3.1協(xié)議分析分成四個章節(jié)來處理這次先聚焦第一章到第四章的整體脈絡(luò)第一章UFS概述與系統(tǒng)架構(gòu)。搞清楚UFS在系統(tǒng)里的位置、主機(jī)側(cè)和設(shè)備側(cè)的組成、協(xié)議分層模型。第二章傳輸層與命令機(jī)制。深入UPIUUFS Protocol Information Unit、命令描述符、數(shù)據(jù)傳輸流程。第三章物理層與鏈路管理。包括UniPro、M-PHY、鏈路啟動、速率協(xié)商和功耗狀態(tài)切換。第四章UFS 3.1新特性與工程實(shí)踐。分析WriteBooster、HPB、DeepSleep等增強(qiáng)功能在真實(shí)項(xiàng)目里怎么用、怎么調(diào)。這種拆法不是為了按部就班而是遵循實(shí)際工作中的排查路徑先看清系統(tǒng)全貌再定位命令通路接著查鏈路物理層最后回到特性和性能優(yōu)化。很多剛?cè)胄械耐孪矚g一上來就翻UPIU結(jié)構(gòu)體定義結(jié)果被字段淹沒遇到實(shí)際問題仍然無從下手。我比較推薦的服務(wù)順序是架構(gòu) → 命令 → 鏈路 → 特性一步步把黑盒打開。2. UFS 3.1的整體設(shè)計(jì)思路與演進(jìn)邏輯2.1 從eMMC到UFS存儲接口到底變了什么要說清楚UFS 3.1的價值得先回頭看一眼eMMC。eMMC本質(zhì)上是個并行總線接口8位數(shù)據(jù)線半雙工模式讀寫不能同時進(jìn)行。它的命令機(jī)制簡單直接——主機(jī)發(fā)命令設(shè)備執(zhí)行然后通過數(shù)據(jù)總線傳輸。但這種設(shè)計(jì)在高性能場景下很快撞到天花板并行總線頻率提升困難、信號完整性問題隨頻率上升越來越嚴(yán)重、半雙工浪費(fèi)了總線帶寬。UFS方案從誕生那天起就走了一條完全不同的路。它引入了一套類似SATA/NVMe的串行傳輸架構(gòu)底層用M-PHY做物理傳輸U(kuò)niPro做鏈路管理和協(xié)議適配。兩個lane可以同時一個收一個發(fā)全雙工模式等效傳輸效率遠(yuǎn)高于同頻的eMMC。在協(xié)議模型上UFS還參考了SCSI體系結(jié)構(gòu)模型使用命令描述塊CDB 任務(wù)管理函數(shù)的模式這讓它天然支持命令隊(duì)列、亂序執(zhí)行、多任務(wù)調(diào)度。從UFS 2.1到UFS 3.0最大的變化是HS-G4High Speed Gear 4速率的引入。M-PHY在HS-G4速率下每個lane的線速率接近11.6Gbps配合雙lane配置理論上可以達(dá)到單lane約1450MB/s、雙lane約2900MB/s的HS速率這是在考慮了8b/10b編碼開銷后的結(jié)果實(shí)際有效載荷帶寬還需要進(jìn)一步乘以協(xié)議開銷系數(shù)。這個速率等級遠(yuǎn)比UFS 2.1的HS-G3每個lane約5.8Gbps有效帶寬大約725MB/s翻了好幾倍。UFS 3.1又在這個基礎(chǔ)上做了三件大事新增WriteBooster解決寫入性能偏低的問題。它利用SLC Cache機(jī)制把隨機(jī)寫入先吸收到SLC緩沖區(qū)再后臺回寫TLC/QLC區(qū)域大幅降低前端寫延遲。引入HPBHost Performance Booster把部分FTL映射表放到主機(jī)內(nèi)存中緩存減少設(shè)備端加載映射表的開銷提升隨機(jī)讀性能。強(qiáng)化低功耗管理DeepSleep狀態(tài)讓設(shè)備在待機(jī)時可以關(guān)閉大部分模塊供電顯著降低休眠功耗。這些特性不是孤立存在的它們都依賴協(xié)議層的字段和控制機(jī)制來生效。比如WriteBooster需要擴(kuò)展UFS Descriptor中的配置項(xiàng)HPB需要專門的控制命令和UPIU類型來管理主機(jī)端映射緩存。2.2 UFS 3.1系統(tǒng)架構(gòu)與協(xié)議分層模型一個典型的UFS系統(tǒng)由主機(jī)Host和設(shè)備Device兩部分構(gòu)成。主機(jī)端包括應(yīng)用處理器上的UFS Host Controller存儲控制器IP以及配套的軟件?!狶inux內(nèi)核的ufshcd驅(qū)動、SCSI層、塊設(shè)備層。設(shè)備端則是一顆UFS IC通常整合了控制器和NAND Flash或者由獨(dú)立的控制器芯片加上多片NAND組成。從協(xié)議分層來看應(yīng)用層Application Layer定義了UFS命令集UCS、設(shè)備管理器Device Manager和任務(wù)管理器Task Manager。SCSI命令通過UFS封裝成CDB下發(fā)設(shè)備管理器負(fù)責(zé)處理描述符Descriptor、屬性Attribute、標(biāo)志位Flag的讀寫任務(wù)管理器則處理任務(wù)管理請求比如Abort Task。傳輸層UTP負(fù)責(zé)把上層請求封裝成UPIU通過UNIPRO的傳輸服務(wù)訪問點(diǎn)Data Transport Service Access PointDTSAP傳給下面。UTRDUTP Transfer Request Descriptor是核心數(shù)據(jù)結(jié)構(gòu)保存了命令相關(guān)的所有指針和狀態(tài)。互連層UIC由UniPro層和M-PHY物理層組成。UniPro負(fù)責(zé)鏈路啟動、速率協(xié)商、流控和錯誤恢復(fù)M-PHY則負(fù)責(zé)真正的物理信號收發(fā)。調(diào)試時建議用這個分層模型來隔離問題如果命令發(fā)出后沒有任何中斷回應(yīng)優(yōu)先查傳輸層和設(shè)備狀態(tài)如果命令正常但吞吐量低再到UIC層看速率協(xié)商和Lane數(shù)量如果掉電重啟后鏈路穩(wěn)定但系統(tǒng)喚醒時報錯重點(diǎn)查DeepSleep和鏈路恢復(fù)流程。3. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)3.1 UTRD和UPIU讀懂協(xié)議的兩把鑰匙整個UFS傳輸機(jī)制的核心可以濃縮成一句話主機(jī)在內(nèi)存中構(gòu)造UTRDUTRD指向一組UPIU緩沖區(qū)和PRDTPhysical Region Descriptor Table寫Doorbell寄存器通知設(shè)備設(shè)備執(zhí)行完再通過CQCompletion QueueDoorbell和中斷通知主機(jī)。這段話里包含了大量信息逐個拆開看。UTRD的數(shù)據(jù)結(jié)構(gòu)大致包括命令類型命令UPIU、任務(wù)管理請求UPIU等。數(shù)據(jù)方向讀還是寫。一個指向命令UPIU緩沖區(qū)的地址。一個指向響應(yīng)UPIU緩沖區(qū)的地址。PRDT的物理地址和條目數(shù)。總數(shù)據(jù)傳輸字節(jié)數(shù)。PRDT是DMA傳輸?shù)年P(guān)鍵。UFS采用S/G表機(jī)制主機(jī)側(cè)物理內(nèi)存未必連續(xù)系統(tǒng)可以把一次大塊讀寫拆成多個不連續(xù)的物理段每個PRD條目記錄一段物理地址和長度。設(shè)備根據(jù)PRDT拿到數(shù)據(jù)完成寫入或讀取。這里的經(jīng)典坑在于PRDT條目的地址必須是物理地址而且對齊要求很嚴(yán)格通常要求對齊到32字節(jié)或64字節(jié)具體以主控手冊為準(zhǔn)長度字段則是按塊粒度對齊。如果上層傳下來的S/G表項(xiàng)不是塊大小的整數(shù)倍底層驅(qū)動需要處理尾部部分塊這是很多寫DMA路徑的工程師容易漏掉的細(xì)節(jié)。UPIU是UFS傳輸?shù)淖钚 靶欧狻背R婎愋桶∟OP OUT UPIU用于鏈路?;詈统瑫r檢測。COMMAND UPIU承載SCSI命令CDB是正常讀寫命令的載體。RESPONSE UPIU設(shè)備返回的命令執(zhí)行結(jié)果攜帶狀態(tài)、Sense Data長度等信息。DATA IN UPIU / DATA OUT UPIU數(shù)據(jù)階段傳輸分別對應(yīng)讀和寫。TASK MANAGEMENT REQUEST UPIU承載任務(wù)管理請求。QUERY REQUEST UPIU / QUERY RESPONSE UPIU用于設(shè)備管理讀寫Descriptor、Attribute、Flag。每個UPIU都有固定的頭部結(jié)構(gòu)其中LUN邏輯單元號、Task Tag任務(wù)標(biāo)簽、Expected Data Transfer Length期望傳輸長度都是高頻使用字段。排查命令掛起問題時要養(yǎng)成先看Task Tag的習(xí)慣它能把UFS設(shè)備內(nèi)部的任務(wù)和主機(jī)側(cè)提交的任務(wù)一一對應(yīng)起來。3.2 數(shù)據(jù)傳輸流程一次讀命令的完整旅程以一次從UFS設(shè)備讀取4KB數(shù)據(jù)的命令為例完整流程如下上層文件系統(tǒng)或塊層構(gòu)造一個讀請求SCSI層生成READ(10)命令CDB。ufshcd驅(qū)動分配一個UTRD初始化命令UPIU、響應(yīng)UPIU緩沖區(qū)并把本次讀的PRDT填好。驅(qū)動把UTRD的物理地址寫入主機(jī)控制器的UTRLDBRUTP Transfer Request List Doorbell Register置位相應(yīng)bit。設(shè)備端看到Doorbell置位后通過UniPro鏈路讀取UTRD和命令UPIU。設(shè)備解析CDB訪問Flash把讀取到的數(shù)據(jù)組裝成DATA IN UPIU按總長度拆分成多幀傳輸。設(shè)備通過Host Controller的UTRLCLRUTP Transfer Request List Clear Register寄存器清掉Doorbell對應(yīng)bit并產(chǎn)生中斷。主機(jī)在中斷處理中檢查響應(yīng)UPIU的狀態(tài)字段數(shù)據(jù)已經(jīng)由Controller通過DMA直接寫入主機(jī)內(nèi)存。這個流程里面藏著幾個關(guān)鍵點(diǎn)。第一數(shù)據(jù)搬運(yùn)不完全依賴設(shè)備端“發(fā)數(shù)據(jù)包”主機(jī)控制器的DMA引擎會根據(jù)PRDT把從UniPro接收到的數(shù)據(jù)直接搬運(yùn)到系統(tǒng)內(nèi)存。第二UTRLDBR和UTRLCLR的配合是命令生命周期的主線任何一環(huán)卡住都會導(dǎo)致命令超時所以抓日志時這幾個寄存器的歷史值非常有價值。3.3 命令超時的排查思路與現(xiàn)場日志分析在UFS調(diào)試中命令超時是我遇到最多的異常類型。它的表現(xiàn)通常是上層I/O卡住系統(tǒng)日志里出現(xiàn)xxx命令請求超時如Device failed to respond或者任務(wù)管理函數(shù)失敗。排查步驟建議這樣第一步確認(rèn)命令是否真正提交到了設(shè)備側(cè)。抓取UTRLDBR寄存器狀態(tài)如果Doorbell bit一直沒有被清掉說明設(shè)備根本沒從主機(jī)取走任務(wù)。這時問題大多在UIC鏈路或者設(shè)備側(cè)電源狀態(tài)而不是命令本身。第二步查看UIC層的錯誤寄存器比如UniPro的錯誤狀態(tài)寄存器UECPA、UECDL等看是否有物理層調(diào)通、幀重傳、CRC錯誤等記錄。如果有大量CRC錯誤基本可以判定M-PHY信號質(zhì)量出問題需要檢查PCB走線、終端電阻、參考時鐘。第三步確認(rèn)設(shè)備是否處于低功耗狀態(tài)導(dǎo)致沒有及時響應(yīng)。UFS支持多種電源狀態(tài)Active、Idle、Sleep、DeepSleep如果設(shè)備進(jìn)了DeepSleep而主機(jī)側(cè)軟件沒有做喚醒動作命令下發(fā)必然超時。我在實(shí)際項(xiàng)目里碰到過一個很典型的案例系統(tǒng)頻繁休眠喚醒后偶爾出現(xiàn)UFS命令超時。排查下來發(fā)現(xiàn)喚醒路徑中主機(jī)控制器先恢復(fù)了Link但設(shè)備還在DeepSleep狀態(tài)需要額外的設(shè)備喚醒機(jī)制。后來在喚醒處理里增加了對設(shè)備喚醒狀態(tài)的檢查并在鏈路恢復(fù)前先通過DME命令把設(shè)備從DeepSleep拉回Active狀態(tài)問題就再沒復(fù)現(xiàn)過。4. UFS 3.1新特性解析與工程實(shí)踐4.1 WriteBooster的機(jī)制、配置與應(yīng)用場景WriteBooster是UFS 3.1引入的一項(xiàng)提升寫入性能的機(jī)制它的本質(zhì)是在設(shè)備內(nèi)部劃分出一塊SLC單層單元模式的緩沖區(qū)。普通TLC/QLC顆粒寫入時需要分多步編程延遲高而SLC編程只需要一到兩次延遲低得多。WriteBooster把寫入的數(shù)據(jù)先快速寫到SLC緩沖區(qū)然后由設(shè)備在后臺把數(shù)據(jù)搬移到TLC/QLC區(qū)域從而降低主機(jī)側(cè)感知的寫延遲。在Linux內(nèi)核中通過UFS設(shè)備管理器提供的bWB相關(guān)Descriptor和Attribute來配置WriteBooster關(guān)鍵參數(shù)包括bWriteBoosterBufferType緩沖區(qū)類型一般配置為SLC模式。dWriteBoosterBufferSize緩沖區(qū)大小這個值直接由設(shè)備固件決定主機(jī)只能讀取。dWriteBoosterBufferLifeTimeEstSLC緩沖區(qū)的壽命估算可以直觀了解設(shè)備的擦寫壓力。工程上需要特別注意WriteBooster的緩沖區(qū)本質(zhì)上是借用NAND壽命換性能。如果SLC緩沖區(qū)寫滿設(shè)備需要做“強(qiáng)制回寫”Forced Flush這時突發(fā)寫入會被拖慢同時在回寫過程中不能斷電否則存在數(shù)據(jù)一致性風(fēng)險。實(shí)際測試中我會用fio先做小文件隨機(jī)寫壓測觀察前幾十GB的寫入延遲是否明顯低于穩(wěn)定期再對比穩(wěn)定期寫入速度以此判斷WriteBooster是否存在配置問題。4.2 HPB的映射緩存機(jī)制與調(diào)優(yōu)心得HPB的全稱是Host Performance Booster它的出現(xiàn)是因?yàn)閁FS設(shè)備使用NAND時需要一個FTLFlash Translation Layer映射表把邏輯地址轉(zhuǎn)換成物理地址。在TLC/QLC時代映射表本身不小如果設(shè)備端每次讀命令都要查一遍映射隨機(jī)讀性能會受影響。HPB的思路是把映射表的一部分“借”到主機(jī)內(nèi)存中緩存設(shè)備通過UPIU向主機(jī)提供映射表信息主機(jī)下發(fā)讀命令時可以把對應(yīng)的映射條目一起發(fā)給設(shè)備省掉設(shè)備端查表的過程。HPB在Linux內(nèi)核的實(shí)現(xiàn)比較復(fù)雜涉及ioctl接口、hpb相關(guān)sysfs節(jié)點(diǎn)、以及UFS驅(qū)動新增的映射管理邏輯。調(diào)HPB時我踩過幾個坑主機(jī)內(nèi)存中緩存的映射表必須與設(shè)備FTL保持同步否則會產(chǎn)生讀數(shù)據(jù)錯誤。因此設(shè)備端GC垃圾回收導(dǎo)致映射變化時需要向主機(jī)發(fā)送失效通知。HPB區(qū)域不是所有LBA范圍都使能的通常只對設(shè)備指定的一段區(qū)域生效。測試時如果沒有先在設(shè)備上使能HPB區(qū)域后續(xù)所有HPB相關(guān)參數(shù)都不會生效。啟用HPB后隨機(jī)讀性能的提升不是無條件的。在映射表穩(wěn)定、碎片化程度較低的場景下提升幅度能到30%以上但如果設(shè)備本身映射表經(jīng)常更新HPB反而可能因?yàn)榫彺媸幚矶黾娱_銷。4.3 DeepSleep功耗狀態(tài)與喚醒流程UFS 3.1的電源管理狀態(tài)包括Active、Idle、Sleep、DeepSleep。DeepSleep是功耗最極端的模式幾乎關(guān)閉了設(shè)備內(nèi)部除少量喚醒邏輯外的所有供電代價是從DeepSleep恢復(fù)到Active耗時較長耗時可能在幾十毫秒甚至百毫秒級別。系統(tǒng)設(shè)計(jì)時要權(quán)衡短時暫停用Sleep即可長時待機(jī)才應(yīng)該進(jìn)入DeepSleep。在移動平臺上我一般建議這樣配置系統(tǒng)suspend時先把UFS鏈路切到Sleep狀態(tài)。如果預(yù)計(jì)待機(jī)時間較長如超過數(shù)分鐘再通過設(shè)備管理命令把設(shè)備切到DeepSleep。喚醒時主機(jī)控制器先復(fù)位Link然后通過DME命令讓設(shè)備退出DeepSleep再重新啟動鏈路和對齊流程。這個流程里最容易出問題的就是“鏈路先于設(shè)備恢復(fù)”。設(shè)備還處于DeepSleep時如果主機(jī)嘗試通過Link發(fā)送命令會出現(xiàn)dme_error或者命令超時。因此軟件恢復(fù)流程必須嚴(yán)格遵循“設(shè)備先恢復(fù)鏈路后啟用”的順序。5. 常見問題排查技巧與避坑指南5.1 經(jīng)典問題速查表現(xiàn)象可能原因排查方法UFS設(shè)備無法識別供電時序不對、頻率配置錯誤檢查電源軌、參考時鐘抓Link啟動階段的DME錯誤命令超時設(shè)備低功耗未喚醒、鏈路物理異常抓取UTRLDBR狀態(tài)和UIC錯誤寄存器順序讀吞吐量低速率協(xié)商失敗只跑到HS-G1或HS-G2檢查UniPro配置、發(fā)送預(yù)加重/均衡參數(shù)隨機(jī)讀性能差HPB未正確啟用或映射失效頻繁檢查HPB region配置和hit ratio寫入速度突然下跌WriteBooster SLC緩沖區(qū)寫滿觀察Force Flush事件測試穩(wěn)定期寫入性能運(yùn)行一段時間后I/O出錯高溫導(dǎo)致信號完整性劣化排查供電、散熱、M-PHY通道串?dāng)_5.2 抓日志與現(xiàn)場復(fù)現(xiàn)的獨(dú)家技巧在UFS調(diào)試中最有效也最容易被忽視的動作是抓完整的歷史寄存器狀態(tài)。很多工程師遇到超時后直接重啟設(shè)備結(jié)果關(guān)鍵現(xiàn)場丟失。推薦做法是在代碼里保留UFS相關(guān)所有寄存器的環(huán)形緩沖結(jié)構(gòu)包括UTRLDBR、UTRLCLR、UTRSTATUS、UIC錯誤寄存器中斷處理函數(shù)里實(shí)時更新。在命令超時后不立即復(fù)位而是先暫停指令流把環(huán)形緩沖區(qū)的寄存器歷史值打印出來和抓取的波形數(shù)據(jù)對比。這套方法幫我在多個項(xiàng)目里快速鎖定過“中斷丟失導(dǎo)致命令卡死”的問題。中斷丟失的根因往往是設(shè)備發(fā)出的完成中斷與主控側(cè)的中斷mask寄存器配置不匹配或者中斷線在系統(tǒng)suspend/resume過程中被意外shutdown。如果把中斷狀態(tài)寄存器一并打進(jìn)環(huán)形緩沖這類問題的定位時間可以從半天縮短到半小時以內(nèi)。5.3 鏈路質(zhì)量與信號完整性檢測M-PHY是UFS 3.1高性能傳輸?shù)牡鼗:芏嗤掏铝坎贿_(dá)標(biāo)的問題根源不在協(xié)議層而在物理層信號質(zhì)量。判斷信號質(zhì)量可以看三個關(guān)鍵指標(biāo)眼圖、誤碼率、信號完整性抖動。工程環(huán)境下沒有高端示波器時至少可以做兩件事一是檢查UFS控制器上報的CRC錯誤計(jì)數(shù)二是用設(shè)備端回環(huán)測試Loopback驗(yàn)證物理鏈路?;丨h(huán)測試可以分別測PHY到PHY的傳輸以及Controller到Controller的完整通路從而把問題域縮小到固定層面。如果CRC錯誤持續(xù)增長優(yōu)先懷疑終端電阻不匹配或者走線阻抗連續(xù)性不佳而不是懷疑協(xié)議軟件邏輯。6. UFS 3.1協(xié)議分析工具鏈與測試方法6.1 Linux用戶態(tài)工具與協(xié)議跟蹤Linux平臺做UFS測試有幾個常用的用戶態(tài)工具我逐一說明適用場景ufs-utils提供針對UFS設(shè)備管理器的用戶態(tài)工具可以讀取/寫入Descriptor、Attribute、Flag。通過它可以直接觀察WriteBooster的緩沖區(qū)大小、HPB狀態(tài)、設(shè)備壽命信息比直接改內(nèi)核代碼方便很多。fio性能基準(zhǔn)測試的標(biāo)準(zhǔn)工事。UFS測試建議分別測順序讀寫、隨機(jī)讀寫同時加入混合讀寫模式和不同的隊(duì)列深度用隊(duì)列深度1、4、16、32分別觀察性能曲線。blktraceiostat定位請求在塊層的排隊(duì)情況。如果塊層排隊(duì)時間過長說明SCSI層或者UFS驅(qū)動有瓶頸如果排隊(duì)很短但請求始終不完成問題可能在設(shè)備側(cè)。/sys/kernel/debug/ufshcd內(nèi)核UFS驅(qū)動的debugfs節(jié)點(diǎn)。不同平臺暴露的內(nèi)容不一樣但通常包含命令歷史、錯誤狀態(tài)、鏈路速率等關(guān)鍵字段。6.2 性能測試的具體操作流程以fio為例一組有意義的UFS 3.1性能測試步驟是先執(zhí)行blkzone reset或者全盤TRIM確保測試前設(shè)備處于干凈狀態(tài)。用順序讀測試拿上限基準(zhǔn)fio --nameseqread --rwread --bs1m --size2g --iodepth32 --numjobs1 --direct1 --group_reporting。用順序?qū)憸y試觀察WriteBooster生效前后的差異fio --nameseqwrite --rwwrite --bs1m --size2g --iodepth32 --direct1。用隨機(jī)讀寫模擬真實(shí)業(yè)務(wù)fio --namerandrw --rwrandrw --rwmixread70 --bs4k --size2g --iodepth32 --direct1。每次測試前都記錄設(shè)備溫度和dWriteBoosterBufferLifeTimeEst因?yàn)镹AND在高溫下會觸發(fā)溫控降速不記錄溫度容易把溫控降速誤判為協(xié)議問題。這個細(xì)節(jié)我在多次評測中吃過虧室溫從26℃升到42℃后同一塊盤的順序?qū)懶阅艿袈淞藢⒔?0%不明真相時很容易導(dǎo)向錯誤的排查方向。6.3 如何用邏輯分析儀觀測協(xié)議交互如果需要深入觀測UFS協(xié)議交互邏輯分析儀依然是利器。UFS 3.1的HS-G4速率在11.6Gbps等級普通邏輯分析儀完全無法直接采集需要配合廠商的協(xié)議分析儀或者使用M-PHY探針轉(zhuǎn)接板。在分析時重點(diǎn)抓幾個節(jié)點(diǎn)Link啟動階段的M-PHY速率協(xié)商序列。命令下發(fā)階段的UPIU頭字段對比Command UPIU的CDB內(nèi)容。數(shù)據(jù)傳輸階段的DATA OUT UPIU和DATA IN UPIU幀間隔。每次命令完成后的RESPONSE UPIU的Sense Data。協(xié)議分析儀的優(yōu)勢是可以把物理波形自動解碼成協(xié)議字段期間還能統(tǒng)計(jì)各Layer的retry計(jì)數(shù)和錯誤統(tǒng)計(jì)。但它的價格和上手門檻都不低日常調(diào)試還是建議先用軟件層日志縮小范圍確需鏈路級證據(jù)時再上分析儀。7. 從協(xié)議理解到系統(tǒng)優(yōu)化的延伸思考7.1 UFS 3.1之后UFS 4.0的傳承與變化說完UFS 3.1不得不提一句它的后繼者UFS 4.0。UFS 4.0在鏈路速率上翻倍到HS-G5單lane速率約23.3Gbps雙lane理論帶寬可以超過7Gbps同時引入了VRSVariable Rate SuperSpeed之類的電源優(yōu)化機(jī)制和更多針對QLC顆粒的優(yōu)化策略。但底層協(xié)議框架依然延續(xù)了UFS 3.x時代建立的模型UTRD UPIU Doorbell的基本交互方式?jīng)]有變UPDATE的底層機(jī)制沒變。所以現(xiàn)在花時間把UFS 3.1協(xié)議吃透并不會白費(fèi)后續(xù)遷移到UFS 4.0時的學(xué)習(xí)曲線會平滑很多。7.2 與NVMe/UFS架構(gòu)思想的異同做存儲的工程師經(jīng)常會拿UFS與NVMe比較。NVMe是PCIe接口基礎(chǔ)上的協(xié)議棧使用Queue Pair機(jī)制命令提交和完成都通過共享內(nèi)存隊(duì)列完成效率極高。UFS的UTRD機(jī)制在思路上與NVMe有相似之處但UFS還保留了更傳統(tǒng)的門鈴寄存器模式和更細(xì)粒度的電源狀態(tài)管理這是由移動設(shè)備的低功耗需求決定的。在實(shí)際項(xiàng)目中理解這兩套體系的異同很有價值如果你的設(shè)備從移動端轉(zhuǎn)向汽車電子或邊緣計(jì)算場景很可能需要從UFS切到NVMe SSD那時你對Doorbell、Queue、DMA映射、Command Completion這些概念的理解都可以平移復(fù)用差異點(diǎn)只在鏈路層和命令格式上。7.3 后續(xù)可以繼續(xù)深入的方向UFS 3.1協(xié)議分析的內(nèi)容遠(yuǎn)不止這一篇文章能講完。后續(xù)可以展開的深水區(qū)包括UFS設(shè)備描述符/屬性/標(biāo)志位的完整字段解讀、SCSI命令集在UFS上的實(shí)現(xiàn)細(xì)節(jié)、UFS電源管理狀態(tài)機(jī)的完整轉(zhuǎn)移條件、UFS主機(jī)控制器的寄存器級編程指南、Flash轉(zhuǎn)換層FTL對UFS行為的影響、隨機(jī)讀性能優(yōu)化中的HPB演進(jìn)思路。我自己打算接下來抽時間寫第二部分重點(diǎn)講UPIU字段級解析和異常事件處理流程。如果你們在實(shí)踐中有有意思的UFS問題歡迎帶著業(yè)務(wù)場景來討論很多協(xié)議細(xì)節(jié)在規(guī)范里寫得非常隱晦只有在具體問題面前才能暴露出來。我在多個項(xiàng)目里反復(fù)體會到一件事UFS 3.1的穩(wěn)定性上限往往不取決于控制器和Flash的紙面參數(shù)而取決于軟件棧對協(xié)議細(xì)節(jié)的尊重程度。一個DPU字段沒配好、一次低功耗喚醒順序顛倒、一個PRDT對齊沒處理都可能在量產(chǎn)后的隨機(jī)場景里集中爆發(fā)。把協(xié)議吃透本質(zhì)上就是為自己的產(chǎn)品上了一道無形的保險。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久免费操| 99免费在线视频| 丰满老熟妇BBBBB搡BBB| 婷婷五月丁香综合| 久久性爱激情| 五月天婷婷激情| 丁香五月综合亚洲| 丁香无五月网| 97碰碰叉| 婷婷五月影院| 欧美婷婷丁香五月社区| 性爱视频99| 久久停停超碰| 182TV大香蕉| 丁香五月天成人| 亚洲免费99| 婷婷五月天AV激情| 月婷婷亚洲| www九月婷婷| 丁香五月影院| 激情五月影院| 天天干天天干天天干天天干天天干天天干天天| 久久综合爱| cao视频,现在观看| 五月丁香激情综合网官网| 久久婷婷六月综合| 人妻av在线| 狠狠五月天激情| 91AV婷婷| 超碰二区| 亚洲欧洲国产精品| 婷婷涩涩五月天| AV中文在线| 婷婷五月激情在线视频| 五月天狠狠草| 九九色热视频| 丁香六月婷婷色XXXXX| 丁香五月婷婷成人色区| 五月婷婷六月爱| 二色av| 99热最新国内| 日本欧特黄色刺激一区影视久精品无码| 99热99在线| 久久色亭亭五月天| 人妻aV在线| 人人人舔人人人操人人人摸人人人97| 日本欧美国产| 五月婷婷免费看| 色婷婷五月天综合网| 淫荡家庭AV| 六月大香蕉| 九九色婷婷Av| 五月激情婷婷国产精品久久久久久| 五月丁久久| 五月天激情小说| 丁香成人五月天| 色五月婷婷在线| 天天日 天天草| 久久婷婷五月天亚洲欧美| 九九这里精品| 激情六月综合| 亚洲精品国产成人AV在线| 婷婷欧美激情综合| 五月综合久久| 色99最新网址| 丁香色综合| 色噜噜五月天| 欧洲亚洲免费视频9| 天天操天天日天天爱| 一级精品999WWW| 色五月婷婷自拍| 182TV大香蕉| 婷婷久久五月天丁香| 日本狠狠网| 夜夜撸日日操| 亚洲综合另类| 伊人超碰在线| 五月天激情小说| 五月婷在线| 99国产小视频2013| 这里只有精品视频99| 丁香婷婷色| 丁香五月伊人| 久久精品99国产精品日本| 色五月综合网| 精品综合爱| 国产日韩av片| 九色视频这里只有精品| 五月天伊人久久久久| 丁香色六月婷婷| 99色色| 99久久国产宗和精品1上映| yazhou seshipin| 十月丁香婷婷| 色九亚洲| 九九99热精品| 人人操Av| 超碰在线中文字幕| 色色色九九九五月婷婷| 91碰碰| 婷婷激情综合网| 中文av网| 精品人妻午夜一区二区三区四区 | 丰满少妇乱A片无码| 伊人大香蕉爱聚| 色色色天堂网| 色青五月天| 国产亚洲色婷婷久久99精品91| 久99久视频| 国产成人精品一区二三区熟女在线| AV在线免费观看不卡| 久草A片| 五月丁香综合久久| 丁香色五月天| 久久色9| tingtingjiqingwuyue| 天堂草在线观| 五月综合激情网| 丁香婷婷五月人体| 婷婷丁香五月综合激情视频| 日韩成人无码| 日韩狠狠色婷婷| 五月天久久91| 婷婷五月丁香国产| 天插天啪天啪天啪| 五月开心网| 97黑人精品区| 日本熟女二区| 97超碰99热99| 五月天天爱| www.天天干| 日韩在线观看亚洲| 色五月五月天色婷婷色五月| 91丨九色丨国产| 婷婷丁香五月天婷婷| 五月丁香成人视频| 色情五月天导航| 婷婷深爱五月亚洲综合| 年轻的妺妺伦理HD中文| 五月激情婷婷开心五月| 五月天开心网| 激情婷婷综合| 无码AV免费精品一区二区三区| 大香蕉人在线65| 激情小说 五月天| 亚洲婷婷五月天| 99热爱爱干干日| 热99这就是精品视频| 色婷青青| 日本五月天一页| www.97视频| 五月天丁香成人社| 久久婷丁香五月| 五月婷婷,狠狠操| 9久热这里只有精品| 1024日韩| www,欧美干干干干干干| 91黄色五月天视频| 五月婷婷婷| 卡视频1区2区| 香蕉操亚洲| 日本天堂免费99| 激情综合五月开心狠狠| 久久这里有精品| 丁香五月成人网| 中文资源在线a| 99热综合在线| 天天日综合网射| 欧亚成人A片一区二区| 99色综合网| 人妻人人操| 大香蕉婷婷丁香视频在线| 五月婷婷亚洲色视频| 丁香六月av| 五月天狠狠| 麻豆精品| 99热.com| 色青青视频| 这里只有精品96| 国色天香伊人狠狠色| 九月激情婷婷丁香| 久久天天| 九九综合精品| 婷婷五月天毛片| 五月天久久网站| 91狠狠色丁香| 一本色道久久88加勒比| 五月天婷婷无码| 激情爱爱网站超大免费| 婷婷啪啪| 婷婷久久五月天丁香| 久久AV电影| 亚洲精品久久久无码| 丁香五月狠狠综合欧美| 国产综合视频婷婷| 伊人大综合| 亚洲小说欧美激情| 九九色99| 超碰在线网站| 国产成人精品亚洲线观看| 色色婷婷综合网| 六月丁香天堂| 狠狠操综合| 人妻尝试久久久久久久久久久久| 日韩在线99| 激情五月天综合| 婷婷激情啪啪| 日韩免费乱轮网站| 玖玖婷婷五月天| 91久久九久久九久久九久久九久久| 九九色热| 婷婷激情五月天激情| 一起草无码| 风流少妇A片一区二区蜜桃| 99热这里只有在线| 五月天亚洲最大成人| 丁香深五月婷婷| 激情小说视频图片| 日狠狠| 久久永久网址| 色色综合热| 玖玖爱伊人| 性生活久久人妻| 亚洲AV成人在线| 五月天婷婷婷| 香蕉久久国产AV一区二区| 五月天激情四射网站| 伊人天天色| 久久婷婷五月天蜜桃| 婷婷97狠狠成人网站| 五月丁香六月婷婷色日| 狠狠干思思热| 亚洲AAAA网| 日本一级一片免费视频| 九九精品热播| 成人网站高清无码| 日本A片一区| 五月天丁香网| 91精品久久久久久综合五月天| 婷婷综合网| 内射丰满人妻| 综合激情五月丁香9999久久精| 9久久AV| 国产婷伊人| 久久98| 九九99精品视频| 激情六月一二| www.99成人视频| 五月激情丁香五月宗合| 婷婷六月综合在线| 97久久香草精品视频| 婷婷丁香射射| 26uuu视频欧美| 超碰在线精品| 亚洲最大在线| 亚洲操精品| 美女91一起草| 五月天婷婷基地综合网| 日韩综合天堂| 色婷婷亚洲婷婷| 日91高清无玛| 色综合婷婷| 97碰久久| 开心五月天激情网| 久久小说网| 亚洲综合五月天| 久久玖玖综合| 99热这里只有精品8| 综合久| 色婷婷a v| 熟女激情五月天 | 国产精品色色| 日本在线观看99| 成人超碰网| 1024亚洲无码| 久久久国产精品黄毛片| 国内9l视频自拍老熟女九色| 婷婷五月天网址| 婷婷色片| 99er这里只有精品| 五月涩涩网| 狠狠激情五月天| 色欲天天综合| 人人操91| 国产毛片精品一区二区色欲黄A片| 国产又爽又猛又粗的视频A片| A片试看120分钟做受图片| 免看黄大片AA | 9热超碰| 成人 九九九九| 月色色综合婷婷网| 五月丁香六月色婷| 激情六月婷| 五月婷婷中文字幕| 天天干天天干天天干| 亚洲亚洲人成综合网络| 五月精品| 国产这里只有精品| 国产综合A片| 色色色色色色五月婷婷| 丁香五月六月久久综合| 综合久色五月| 99热这里只有精品4| 97干婷婷| 热久久99热欧美国产亚洲| 五月婷视频| 婷婷丁香色女人| 九九99热久久精品66中文字幕| 色狠狠六月| 91色性感五月婷婷丁香| 91成人视频| 九九热免费观看视频| m色激情网| 久久99大全| 五月婷婷综合网| 先锋影音男人的天堂AV| 五月天天天操天天爽夜夜操| 操逼六区| 五月九九综合| 99热无码精品| www.henhenl| 欧美日韩中文国产一区发布| 色色色婷婷五月天| 天天插天天爽| 久久99免费视频网站| 亚洲愉拍99热成人精品| 99热国产这里只有| 五月丁香六月婷婷久久| 日韩无码系列| 巴基斯坦粉嫰无码视频| 婷婷激情图片| 97婷婷五月| www.xtbsty.cn.com蜜乳AV| 激情五月婷婷六月丁香| 久久一级AV| 色哟哟精品| 综合五月天完整| 九九色热| 色综合激情| WWW,婷婷,COM| 亚州男人天堂婷婷五月| 日日干日日s| 91在线日| 五月丁香久人妻中文| 丁香五月狠狠综合欧美| 大学生高潮无套内谢视频| 99re热在线观看| 亚洲成人九九九| 天天舔天天| 六月丁香婷婷尤物| 五月婷婷丁香六月| 91精品综合久久久五月天| jiujiu无码五区| 婷婷综合在线| 婷婷亚洲久久| 婷婷婷久久久| 色婷婷天堂| 激情婷婷啪啪| 婷婷激情啪啪| 亚洲五月花| 五月丁香六月激情综合| 爱草视频在线| 欧美色激情四射| 激情婷婷五月天伊人在线观看| 五月开心激情| 色婷婷丁香五月高清在线| 99热这里有精力| 欧美久久婷婷| 欧美人妻一区二区| 久久黄色网扯| 91人久| 丁香五月最新地址| 婷婷精品在线| 五月丁了香蕉综合| 日本不卡一区二区三区| 婷婷六月伊人| 亚洲AV无码影院| 欧美色性色好| 婷婷久久五月| 国产精产国品一二三在观看| 久99热| 丁香五月玖玖| 婷婷五月天激情五月天深爱五月天| 国产一级黄色影片,| 欧美激情-区二区三区| 久久婷婷六月综合国际| 久久思思热| 五月色婷婷影院| www.五月婷婷| 丁香五月成人论坛| 五月婷久草| 色九九九九| 99久久久久| 色婷五月天| 五月丁香六月婷婷免费| 综合玖玖偷拍| 婷婷亚洲天堂| yazhouzonghesese| 激情五月婷黄版| 337p大胆噜噜噜噜噜91Av| WWW.激情| www.99久久久久99| 天天爱天天操| 狠狠色噜噜狠狠狠狠综合| 九月丁香亭亭| 五月四色激情| 日韩啪啪视频| 五月丁香狠狠| www91久久| 久机视频这只有精品| 精品无码人妻一区| 黄色一级影片| 夜夜嗨一区二区三区直播内容 | 欧在线一区| 99九九玖玖| 91vip在线观看| 天天日天天插| 婷婷五月天网址| 热久久成人| 99热伊人综合| 狠狠干,狠狠操| www久| 桃色激情网| 久久久网站| 色五月丁香91| 五月婷婷中文| 可以免费观看的AV| 襙逼网| 色综合九九色综合88| 国外亚洲成AV人片在线观看| 97操碰视频| 99视频精品全部免费 在线| 日B日潘金莲BB| 久九色| 久久视频这里99| 少妇高潮一区二区三区99欧美| www婷婷色| www.色五月.com| 襙逼网| 亚洲综合在线伊人婷| 欧美婷婷丁香五月| 国产精产国品一二三在观看| 久久9视频欧美| A网在线欧洲| 亚洲精品色色| 97色婷婷在线观看| 五月婷婷激情| 天天摸,天天爽| 婷婷色偷拍| 思思热国产| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 97婷婷狠狠久久综合9色| 99精品国产在热久久| 五月天激情四射网站| 色婷婷亚洲在线| WWW,五月| www.色综合.com| 99热这里只有精品33| AV电影在线播放| 天堂久久大香蕉| 日本eVa一区=区视频| 激情影院丁香五月| www.婷婷.com| 色香欲综合| 国产97色在线| 五月丁香六月香香蕉| 99精品网| 超碰爱爱爱| 六月丁香婷婷综合在线| 激情五月婷婷网| 五月婷婷丁香瑟瑟视频| 99在线精品视频免费观看20| 色婷婷成人五月| 婷婷色情五月| 久久金品黃色| 五月丁香亭亭| 婷婷的99视频网站| 五月婷婷免费看| 五月丁香婷婷爱| 亚洲色图五月丁香| 五月天天视频| www.超碰| 丁香六月视频免费观看| 精品九九视频| 丁香五月激情啪啪| 2020日日干| 五月狠狠| 人妻精品一区二区三区| 国产精品99久久久久久久女警| 能看的AV| 丁香六月婷婷激情| 国产婷婷综合| 婷婷激情小说网| 五月丁香婷婷在线综合蜜桃| 婷婷综合五月色播| 丁香五月天婷婷中文字幕| 激情中文在线| 激情网站五月| 丁香五月天精品| 在线区区区| 男人综合网| 婷婷爱五月天人人爱| 激情小说婷婷五月| 亚洲午夜av| 26uuu欧美| 碰碰人人人| 色青五月天| www超碰| 五月天·www·com| 操笔无码| 高清无码入口| 91精品国产91久久久久青草| 色欲一区二区三区精品A片| 婷婷五月丁香性爱| 91婷婷| 婷婷五月天论坛| 天天插天天射| 精品一二三区久久AAA片| 免费看欧美成人A片无码 | 无码地址| 无码网站视频| 人妻 性久久久久久| 色五月五月天色婷婷色五月| 婷婷六月色| 九九超碰人人| 可以免费看av网站| 婷婷五月天激情在线| 97碰免费视频在线| 东北熟女视频99| 五月婷视频久久| 这里只有精彩亚洲视频推荐| 婷婷午夜天| 久色大香蕉| 亚洲性受XXXX五月丁香| 丁香五月AV在线| 青草五月天| 婷婷久久综合| AV中文在线| 天天天天天天操| 疯狂做受XXXX高潮A片| 色婷亚洲| 毛片毛片毛片毛片| AA片在线观看视频在线播放| 91狠狠色丁香婷婷综合久久| 婷婷深爱五月丁香| 国产精品A成V人在线播放| 婷婷操久久| 丁香五月冃欧美| 久久婷婷亚洲| 亚洲操逼片| 精品9久| 激情深爱综合| 国产67194| 亚洲精品无人区| 激情五月天丁香| 婷婷日欧美在线观看| 综合色图婷婷| 婷婷五月天成人| 操操自拍| 五月天停停日日| 五月丁香婷婷三级| 五月婷视频| 国产六月婷婷| 丝袜大香蕉| www.yw色| www.色综合.com| 乱乱av| 婷婷黄色五月天在线视频| 亚洲色综合| 97视频91| 丁香婷婷久久| 草草视频91| 99自拍视频在线| 五月丁香久久| 成人色情五月天婷婷丁香| 天天操天天插| 人人亚洲| 欧美私人家庭影院| 六月婷婷国产| 特黄三级又爽又粗又大| 欧洲高清免费久久| 久777| 五月天激情开心网| 97成人在线视频| 一个色的综合| 久婷婷视平| 欧美激情-区二区三区| 久久综合26p| 日韩综合大黄| 中文字幕婷婷在线| 久热中文字幕| 天天日天天插天天操| 日韩人妻无码专区| 五月丁香在线婷婷蜜桃| 丁香五月婷婷综合啪啪| www99热| 丁香 亚洲 久久| 99热久草| 九月久久婷婷| 九九Av| 亚洲激情99| 97香蕉碰碰人妻国产欧美| 五月香蕉综合| 色五月婷婷丁香凹凸| 亚洲五月婷婷| WWW.夜夜操.com| 七月婷婷色香综合网| 久久综合激情五月天| 国精产品一区一区三区免费视频| 99爱这里只有精品免费视频| 久久激情综合| AA片在线观看视频在线播放| 免费AV在线| 大香蕉520| 91要啪| 国产精品久久..4399| 狠狠爱综合| 婷婷五月天欧美图片在线播放电驴| 丁香六月色| www.99热这里只有精品| 五月天婷婷青青草| 丁香色色网| 草草夜夜操| 永久免费一区二区三区| 色综合xx| 中文字幕,综合,91| 日本猛少妇色XXXXX猛叫| 天天综合社区| 激情综合五月激情| 91色吧网| 婷婷五月激情欧美大胆视频| 激情伊人| 五月天色婷婷网| 99操碰| 超碰cap| 激情丁香婷婷| 九九视频这里只有精品| 五月丁香五月丁香| 天天色99| 第九色区AV在线| 天天干天天干天天干天天干天天干| 人人人操B超碰| 婷婷操逼| WWW.桔色成人.COM| 天天舔天天摸天天透| 婷婷久久综合| av国产精品偷| 中文字幕av网站| 99色视频| 思思热视频在线观看| 五月婷婷色五月| www.爱操com.| 99re熱| 99超级碰碰| 久久九九热38| 国产日韩欧美| 日本婷久久| 色视五月天婷婷| 十二区无码| 青青草免费公开视频| 久久ab| 大香蕉欧美在线| 99视频一区| 欧美99热| 五月丁香怕啪啪| 九九www| 久久33视频| 精品少妇人妻AV无码专区偷人 | 色色欧美。| 色播五月婷婷| 综合色99| 五月天开心网| 国产成人精品一区二区三区视频| www.狠狠操| 成人做爰A片免费看网站找不到了| 成人在线精品| www.激情| 香蕉久久国产AV一区二区| 久久九色| 丁香五月婷婷啪啪| 狠狠精品干练久久久无码中文字幕| 色五婷婷开心缴| 婷婷免费无视频| 热99久久这里只有精品| 色色亚卅| 激情五月亚洲| 天天干狠狠| 欧美成人性爱网| 天天天天天天操| 永久精品| 丁香五月六月婷婷综合| 日日夜夜狠狠干| 逼里香不卡| 五月综合婷婷五月| 久久hd| 婷婷五月天久久| 色色色欧美| 综合久久久| 久久五月视频| 色欲久久综合| 狠狠爱深色婷婷综合| 丁香五月AV| 国产午夜精品AV一区二区麻豆| 日韩人妻AV在线| 99视频综合网| www.91在线观看| 99热婷婷| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 天天爽人人综合免费7799| 日日爽日日| 人人干av| 久婷婷视平| 九九www| www.婷婷五月天.com| 激情五月天综合网站网站网站| 青青草性爱视频| 丁香五月天婷婷久久| 天天狠狠色| 婷婷娱乐丁香综合网| 亚洲热视频在线| 国产一级片| 97caop| 综合激情专区| 天天 青草 制服丝袜 在线| 丁香五月天视频在线播放| 99热在线观看| 久久伊人五月天| 老师的粉嫩小又紧水又多A片视频| 99操网站| 五月丁香六月综合情在线观看| 色婷婷激情五月天在线观看| 啊v视频在线观看| 啪啪日本欧美| 狠狠色丁香| 熟女激情五月天| 婷婷色五月激情| 青青草青青草五月天| 色九区| 天天干com| 五月天偷拍| 婷婷色偷拍| www.伊人天堂偷偷婷婷| 99热这里| ZpRSw| 婷婷五月天中文字幕.| 五月亚洲| 伊久大香蕉| 五月色综合| 天天舔天天摸| 久久A极片| 免费国产VA国产免费| 久久久精品人妻| 先锋影音av色五月天资源站| 久久婷婷五月综合97色一本| 国产精品色| 婷婷丁香黄色| www,五月天激情| 成人精品视频99在线观看免费 | 狠狠色噜噜狠狠狠狠综合| 99精品小视频| 玖玖爱伊人网| 夜夜爽日日躁| 91精品久久久久久综合五月天| 九色自拍| 天天插天天干| 亚洲婷婷婷| 九九这里都是精品| 丁香五月婷婷av影院| 婷婷六月激情啪啪| 色噜噜婷婷| 2014天天爽| 亚洲成人影视在线观看| 国产操B视频| 激情综合网五月婷婷| 91亚洲视频| 99成人小视频| 狠狠CAO日日穞夜夜穞AV | 天天狠狠夜夜狠狠2023| a色色色色色| 久久99久久99精品免视看婷婷| 91碰碰视频| 超碰猛烈的性猛交| 激情99| 免费视频无码| 天天日夜夜欢| 天天噜日日噜综合无码| 99久久网站| 五月天婷婷色色| 97香蕉碰碰人妻国产欧美| 亚洲中文字幕av| 婷婷五月丁香久久| 久久精彩免费视频| 狠狠色婷婷7| 精品一区二区三区免费毛片爱| 久这里只有精品99| 性一交一乱一交A片久| 色综合天天网| 九色视频九色九色91jiuseshipin| 开心五月色婷| 国产精品成av人在线视午夜片| 婷婷丁香激情综合色情| www,色综合| 五月婷婷啪啪啪| 99热超碰在线| 成人无码髙潮喷水A片| 丁香六月色婷婷欧美| 大香蕉啪啪啪| 中文网av| 97日本在线| 亚洲av网站| 天天摸天天舔在线视频| 成人网在线观看视频| 婷婷激情五月天在线| 伊人9在线| 午夜五月天| 久久人妻情侣| 国产成人亚洲综合亚洲| 大香蕉久操| 五月天免费色| 亚洲网在线观看| 99色性爰网络| 99热18| 久久您您综合网| 色五月中文网| 女人天堂av| 久久婷婷网址| www.婷婷五月| 激情丁香五月天图片| 亚洲综合激情五月久久| 亚洲视频五区| 久草丁香婷婷1024| 色99色| 热久久思思热思思| 五月丁香婷婷色播无码| 天天干狠狠| 丁香婷婷五月综合影院| 久久婷婷内射| 少妇人妻偷人精品无码视频新浪| 婷婷色导航| 26uuu色噜噜精品一区| 狠干综合| 中文字幕按摩做爰| 97碰人人操| 五月天六月天| 99热大香蕉| 五月丁香六月片| 九九综合| 天天插天天操| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 激情久久网| 亚洲熟妇AV乱码在线观看| 久久爱婷婷| 日本在线免费中文com.| 丁香婷婷超碰| 国产精女同一区二区三区久| 欧美成人A片AAA片在线播放| 五月花免费视频| 青青草a在线| 色情久久久| ZpRSw| 国产69久久久欧美黑人A片| 99精品无码| 婷婷五月六月激情| 婷婷色色狠狠| 99久久99九九99九九九| 一区二区三区四区牛| 热久精品| 色色色色色色色色色色色色色97| 中文字幕+乱码+中文字幕在线观看| 五月婷婷综合性爱噜噜| 黄色中文字目| 亚洲V国产V欧美V久久久久久| 婷婷五月天狠狠| 丁香婷婷啪啪啪| 激情图片亚洲| 婷婷放心五日爱| 99爽视频| 91色逼| 五月婷视频| 白人荫道BBWBBB大荫道| 91丨九色丨东北熟女| 天天综合 99久久婷婷| 99re视频精品| 噜噜噜噜噜色| 丁香婷婷五色月| 综合热无码| 丁香五月成人论坛| www.五月激情.com| 玖玖伦理电影| 天天日人人| 五月伊人网| 大香蕉综合在线| 中文字幕婷婷| 五月丁香六月婷婷啪啪| w婷婷五月婷婷w| 丁香六月婷| 色色爽爽天天| 97碰碰人人| 综合激情五月天| 久久99视频| 五月天婷婷综合久久| 99小视频在线| 五月丁香 六月婷婷a| 欧美情月伍月天| 久久丁香五月婷婷激情综合网| 五月婷俺去也| 亚洲成人色五月婷婷综合| 丁香五月天在线观看视频| 天天开心婷婷丁香五月| 综合婷婷六月| 婷婷五月天激情五月天网站| 色婷婷在线视频综合| 五月天婷网| 婷婷六月丁香五月| 久久人人超| 五月天精品视频| 亚洲视频在线观看| 成人草榴视频| 丁香五婷| 婷婷五月a| 91九色熟女| 丁香六月婷婷综合激情欧美| 九九热黄色| 亚洲婷婷丁香五月亚洲| 开心五月丁香婷婷| 激情五月天偷拍综合网| 日本久久高清| 开心激情站| 97成人丁香| 99热久草| 日本www五月婷婷| 婷婷五月天激情五月天深爱五月天| 熟女激情五月天| 狠狠操综合| 天天做天天爽| 免费99色| 色区久久| 久久性爱视频这里只有精品| 亚洲人妻Av| 五月婷婷激情网| 啪啪视频99| 五月丁香激情四射| 婷婷五月激情片| 九九99一区| 人妻久久久久久| 雪千夏麻豆| 亚洲人妻AV| 色五月激情综合| 91操片| 97精品人人A片免费看| 日本视频欧美观看免费| 五月婷婷六月激情在线| 情久久综合五月天| 成人丁香五月| 国产性爱色| 色婷婷在线视频久| 狠狠高潮精品亚洲1| 日日日日日| 99丁香五月婷婷在线| 丁香五月视频在线观看| 色婷婷久久综合久色综| 日韩成人无码| 97人人搞| 五月婷婷在线播放| 色99视频| 无码橾| 日本va视频| 操碰91| 麻豆精品| 丁香五月婷婷亚洲另类| 99热最新网址| 偷偷操九九| 激情www.98com| 成人在线网址| 色 五月 天 婷婷 丁香 九月| 婷婷五月天影视| 五月丁香香蕉| 亚洲操B视频| 婷婷五月天99| 91中文在线| 婷婷久久五月天丁香| 狠狠干综合网| 成人无码髙潮喷水A片| 亚洲无码另类| 婷婷五月丁香超碰| 五月丁香另类网| 先锋男人99资源| 91超级碰| 任你操精品免费| 欧美人人草| 五月伊人91| www久久久久久久97| 第五色色色婷婷| 色色综合网。| 久久午夜理论| 色五月激情五月| 婷婷激情四射| 97人人射| 狠狠99| 婷婷五月天天爽| 婷婷中文字幕网| 亚洲色A| 伊久大香蕉| 艹| 色五月丁香com| 日韩黄黄| 国产真实乱了老女人视频| 蜘蛛女免费观看完整版高清电影| 激情综合久久| 五月丁香啪啪激情| 五月婷婷中文字幕| 婷婷情色五月天| 日日干日日| 五月丁香花视频| 超碰9| 久久久大香蕉| 午夜免费试看| 日韩久久视频| 久久国产色| 欧美99热| 97色碰| 五月欧美色色五月| 99亚洲精品综合在线| 九九色综合视频| 综合久久综合五月天婷婷| 婷婷五月另类网站| Www.狠狠| 免费视频这里只有精品| 色婷婷香蕉在线| 性生活久久朋友人妻| 丁香五月色色婷| 婷婷淫淫狠狠六月| 91要啪| 色五月婷婷色| 5月丁香综合网| ztEJj| 婷婷五月av| 91互操| 99这里有精品| 五月激情开心婷婷| 在线综合亚洲欧美65| 色久天| 久久精品视频99| 91丨九色丨白浆秘| 亚洲一色色色色色色色色| 999热这里只有美国精品| 丁香五月婷婷色偷偷| 在线另类视频| 亚洲va成人va成人va在线观看| 天天日夜夜B久久| 级人人91| 99人妻碰碰碰久久久久视| 九色婷婷| 国产精品久久久久9999小说| 26uuu国产激情视频| 91日韩美女被插视频| 久久五月丁香| anquye五月| 大香蕉久久婷婷精品综合| 九九热这里只有精品6| www.热99热| 久久久久久久久久久44| 91欧美| 这里只有精品9| 色婷久久| 伊人婷婷99热精品| 色噜噜婷婷| 色婷婷影音| 综合狠狠干| 无码se| 色开心五月婷婷丁香HD| 婷婷伊人久久| 亚洲99手机免费看视频| 五月天色综合| 久色精品| 六月丁香综合| 丁香五月五婷| 久久99久久99久久99人受| 麻豆忘忧草午夜| 久久五月视频| 天天干天天干天天| 五月综合亚洲婷婷| 爆乳熟女一区二区三区爆乳| 丁香六月激情综合| 人妻精品一区二区三区| 亚洲精品五十一区| 五月丁香无码| 久久您您综合网| 婷婷综合网| 婷婷开心激情| 99热6这里之有精品| 99久在线观看| 39视频第二区| 国产成人精品一区二三区熟女在线| h亚洲| 激情影院免费视频婷婷五月天| 久久婷婷五月综合成人d啪| 亚洲亚洲人成综合网络| 久久狠狠干| 激情五月少妇| 天天在线久久综合 | www.日韩国产| 操比激情五月| 天天干在线播放| 天天艹夜夜艹| 99精品久久久久久久婷婷| 99热只有精品在线观看| 丁乡久久| 91色色色视频| 国产AV一区二区三区最新精品 | 五月婷婷香| 欧美日本黄色| 成人丁香五月天Av| 9999热在线免费观看| 五月久久丁香| 成人五月天综合网| 99热精品免费| 99激情在线| 激情六月婷婷| 色噜噜狠噜噜视频| 天天综合网亚洲网站| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 啄木鸟丝袜美女福利视频| 五月婷婷精品视频| 五月丁香激情五月天| 亚洲人妻AV| 啪啪91| 美女黄频aⅴ视频| 涩涩婷婷五月| 日韩日比视频| 色色色五月婷| 婷婷丁香九月| 日本久久超碰| 超碰色女| 久久九九中文字幕| 婷婷色在线播放| 97艹| 激情五月综合第一页| 性爱五月婷婷| 婷婷五月精品中文| 91在线日本| 91精产一区三区免费观看| 玖玖婷婷五月| 91精品91久久久中77777久久玖玖九九| 冬月かえでAV无码播放| 五月婷婷七月丁香| www.maotanji.com| 91精品久久久久久久久久久久| 丁香五月另类色婷婷麻豆| 久久99久久99精品免视看婷| 91se在线视频| XXXX岛国| 五月天激情网页| 青青草原福利在线| 婷婷综合五月| 婷婷五月六月| 97影院一级片| 国产激情视频在线观看| 99热啪啪| 性做久久久久久久免费看| 草了bav视频在线观看| 91午夜婷婷狠狠久久综合9色| 久re在线| 日韩成人中文字幕| 六月丁香花婷婷| 麻豆123区| 99综合| 日韩另类| 五月丁香啪啪啪| 日韩aⅴ视频| 色狠狠综合入口| 激情綜合網址| 五月丁香婷婷爱激情综合网| 亚洲婷婷月丁香五月| www激情五月天| 天天综合久久| 亚洲中文乱字字幕在线永久| 夜夜嗨一区二区三区直播内容 | 天天噜| 婷婷综合| 色婷婷伊人激情在线观看| 久久女人九九| 婷婷色影院| 天天干天天射综合网| 伊人狠狠丁香婷婷综合尤物| 亚洲综合激情五月久久| 国产精品成人网址| 91vip在线观看| 热这里只有精| 5月婷婷激情网| 婷婷网五月天| 久草免费福利视频| 丁香五月欧美成人| 深爱激情网婷婷| 五月婷婷色五月| 乱精品一区字幕二区| 狠狠草网| 丁香六月婷婷综合激情欧美| 五月婷婷婷婷网| 丁香激情五月| 久久久九九九 99| 婷婷五月天AV网| www,26uuu,c0m,色情| 99热这里只有精彩| av超碰在线| 操操操操操操婷婷五月天| 5月丁香六月婷婷| 久久九九中文字幕| 婷婷五月天久久久| 午夜伊人大香蕉| 久久永久视频| 狠狠操在线视频| 色情五月丁香| 婷婷精品| 香蕉伊人综合| 激情小说之五月| 色99网| 日韩久久日| 久婷婷五月丁香在线观看| 狠狠色综合久久| 国产成人片| 丁香五月影院| 五月婷在线播放| 五月天激情小说| 婷婷五月色| 9l视频自拍9l视频自拍九色学生| 色九月婷婷| 91大神操美女| 99热这里只有精品55| 久操欧美在线观看97| 婷婷五月蜜桃成人桃色丁香| 开心激情站| 五月婷婷综合网| 五月丁香亚洲校园欧美| 丁香五月婷婷激情网| 亚洲啪啪精品| 久久人妻情侣| 疯狂做受XXXX高潮A片| 亚洲小视频免费播放| 情婷婷五月天| 五月日韩中文字幕| 玖玖色资源站| 开心五月深爱五月| 色婷五月| 综合伊人久久| 亚洲欧洲午夜成人精品av| 色婷婷色婷婷五月| A片天天| 五月婷丁香在线视频在线| 天天做天天爽| 天天操无码| 91九色国产| 五夜丁香| 高清无码网址| 五月丁香激| AV在线免费网站| 狠狠五月激情丁香六月| 五月丁香在线观看| 丁香五月婷婷婷桃花影院| 激情丁香图片| 99热人人操人人操| 丁香五月激情在线| 国产欧美大香蕉一区| 五月天色社区| 99综合成人视频在线观看 | 91婷婷|