99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

USB MSC嵌入式調試全記錄:從枚舉失敗到全平臺兼容

USB MSC嵌入式調試全記錄:從枚舉失敗到全平臺兼容 做嵌入式開發(fā)這些年USB調試一直是我最怕翻車的環(huán)節(jié)之一。這次項目代號ESPS的設備要新增一個功能把設備SD卡里的采集數(shù)據(jù)導出到電腦最終方案選的是USB MSCMass Storage Class大容量存儲設備也就是把設備模擬成一個U盤用戶插上數(shù)據(jù)線就能直接拷文件。聽起來很簡單但整個調試過程遠沒有想象中順利枚舉失敗、Windows認了Linux不認、大文件拷貝到90%直接掉盤……前前后后折騰了一周多。這篇文章就把ESPS USB MSC調試的全過程做個完整記錄從協(xié)議原理到一步步排查思路再到踩過的坑和修復方案給后面準備做USB存儲類設備的同行當個參考。1. 項目由來為什么非要USB MSC不可1.1 需求場景ESPS這個設備本身是一個低功耗數(shù)據(jù)采集終端長時間跑在野外記錄傳感器數(shù)據(jù)數(shù)據(jù)存在外置TF卡上單次任務產生從幾十MB到幾個GB不等的數(shù)據(jù)文件。原來的數(shù)據(jù)導出方式特別原始用串口線連接設備通過115200波特率的串口上位機把文件慢慢拉下來。傳一個100MB的文件需要將近兩個小時而且串口線一松就前功盡棄客戶早就抱怨過好幾輪了。新需求很明確讓普通用戶在沒有專業(yè)上位機、沒有串口線的情況下也能快速地拿到設備里的數(shù)據(jù)。最好就是插一根USB線電腦上立刻多出一個盤符文件一拖就完事。這個場景下USB MSC幾乎是唯一正確答案。1.2 方案選型對比動手之前我把可行的USB方案列了一遍逐個對比后才知道MSC的優(yōu)勢在哪里。方案傳輸速度用戶操作難度驅動兼容性開發(fā)復雜度USB虛擬串口CDC約1MB/s左右需要裝虛擬串口驅動、用上位機有驅動問題較低USB RNDIS網卡約5MB/s以上需要配置IP、用網絡協(xié)議傳文件各系統(tǒng)差異大高USB MSC大容量存儲受限于存儲介質通常5-20MB/s插上就是U盤零學習成本系統(tǒng)原生支持免驅中高串口方案最大的問題不是速度而是用戶心智。一個非技術客戶他根本不想知道COM口是幾號、波特率是多少。RNDIS雖然能用TCP/IP傳文件但Windows上驅動兼容性問題多Linux和macOS行為不太一致。MSC就完全不同Windows、Linux、macOS、Android都原生支持插上就能識別成大容量存儲設備系統(tǒng)自己掛載文件系統(tǒng)用戶看到的就是一個普通U盤。存儲介質選型也是一個關鍵決策點。最初有同事提議用MCU內部Flash直接模擬U盤省掉外置存儲芯片。仔細評估下來發(fā)現(xiàn)這個方案只適合存配置參數(shù)因為內部Flash容量小、擦寫壽命有限、數(shù)據(jù)傳輸速度也慢。MSC規(guī)范本身支持4字節(jié)邏輯塊地址單盤能做到2TB但實際瓶頸在底層的存儲介質。ESPS最終采用SDIO接口外接TF卡搭配FatFS文件系統(tǒng)速度和容量都能滿足數(shù)據(jù)導出需求。這里有個容易被忽略的點MCU內部Flash還需要留一部分給固件本身如果模擬U盤時把Flash扇區(qū)映射搞錯了可能會把程序區(qū)給擦掉那是災難性的事故。2. 調試環(huán)境搭建硬件連接、工具鏈和一些早該知道的坑2.1 硬件準備調試ESPS的USB MSC功能硬件上我準備了這幾樣東西ESPS樣機、USB Type-C數(shù)據(jù)線、一個USB轉TTL的調試小板方便看串口日志、帶電流顯示的USB測試儀以及一個能抓USB協(xié)議包的工具。USB線這一項就坑過我。ESPS板子上是Type-C座子我隨手從抽屜里拿了根手機充電線結果插上電腦一點反應都沒有。后來才發(fā)現(xiàn)那根線只支持充電里面壓根沒有D/D-數(shù)據(jù)線。這類線在市面上極其常見特別是買小電器附帶的線。排查USB問題第一步先確認你用的線支持數(shù)據(jù)傳輸否則后面所有努力都是白費。判斷方法很簡單插上后看電腦有沒有叮咚的插入提示音沒有就換線。USB測試儀在早期階段很有用它能直觀顯示設備枚舉前后的電流變化。USB規(guī)范要求設備在上電到被主機配置完成之前從總線獲取的電流不能超過100mA。如果設備一上電電流就飆到300mA主機會直接拒絕枚舉或者反復復位設備。我遇到過一次類似現(xiàn)象最后的根因是板子上一個電容虛焊導致電源紋波太大把USB PHY的狀態(tài)機打亂了這種問題不看電流波形根本定位不到。2.2 串口與驅動的坑ESPS固件調試離不開串口日志。我用的是USB轉TTL小板這塊小板主控芯片是FT231X。Windows 10和11通常能自動識別這類芯片但偶爾會出現(xiàn)驅動掉鏈子的情況設備管理器里顯示一個帶感嘆號的USB Serial Converter。這時需要去芯片官網下載對應的驅動重新安裝。這里有一個很多人不知道的小細節(jié)FT231X這類USB轉串口芯片安裝驅動后設備管理器會同時出現(xiàn)一個USB Serial PortCOM號和一個USB Serial Converter設備節(jié)點。COM號屬于上層抽象底層驅動節(jié)點才是芯片本身。如果底層節(jié)點有問題即便COM號存在打開串口也會報參數(shù)錯誤。排查的時候先看底層節(jié)點狀態(tài)不要只盯著COM號。串口調試助手我習慣用SSCOM這類經典工具連接前先確認波特率、數(shù)據(jù)位、停止位和流控選項。ESPS固件串口打印用的115200/8/N/1沒有硬件流控。新手常犯的錯是默認勾選了RTS/DTR控制導致板子在打開串口的瞬間被復位置位日志只打了一行就沒了。所以接線調試時打開串口后先觀察兩三秒確認設備沒有異常復位再操作。2.3 USB抓包怎么抓USB調試只看日志和代碼排查效率很低。抓包一定要學會這是定位問題最直接的手段。ESPS是USB 2.0全速設備Full Speed12Mbps抓包方案有幾個選擇硬件USB分析儀比如Total Phase Beagle USB 480抓包準確、帶時間戳就是貴個人開發(fā)者不一定舍得買。Wireshark USBPcap組合免費能抓Windows下的USB協(xié)議包適合分析枚舉過程和數(shù)據(jù)傳輸。Bus Hound老牌免費USB抓包工具Windows下用著很方便。Linux下可以用usbmon通過cat /sys/kernel/debug/usb/usbmon/0u看實時數(shù)據(jù)流。我用的是Wireshark加USBPcap配合Bus Hound驗證。抓包原理上要注意一個限制軟件抓包工具是在主機操作系統(tǒng)的USB協(xié)議棧層面抓包能看到主機和設備之間的控制傳輸、Bulk傳輸數(shù)據(jù)但看不到底層電氣信號異常比如D上拉時序問題、信號質量抖動。這類問題只能靠硬件分析儀或示波器。抓包的時候還有個技巧軟件工具抓包會引入一定延遲但MSC使用的是Bulk傳輸協(xié)議本身有超時重試機制抓包對時序影響不大。真正受影響的是等時傳輸Isochronous和中斷傳輸Interrupt抓包時可能出現(xiàn)主機側超時。MSC調試完全不用擔心這個。3. 跑通MSC前必須先懂的幾個協(xié)議節(jié)點3.1 枚舉過程與設備描述符USB設備接入主機后主機并不知道插進來的是什么設備一切都要從枚舉開始。枚舉流程大致是主機檢測到設備接入給設備復位然后讀取設備描述符、分配地址、讀取配置描述符、選擇配置。這一步完成后設備才算是被主機認識了。設備描述符是18個字節(jié)開頭的兩個字節(jié)分別是bLength0x12和bDescriptorType0x01。這個看似簡單的字段我在調試ESPS時還真栽過一回當時把描述符數(shù)組定義成了const uint8_t DeviceDescriptor[] { ... }結果編譯器按4字節(jié)對齊做了填充數(shù)組長度不是18MCU返回給主機的描述符長度就變成了20字節(jié)。主機收到后直接判定描述符非法枚舉失敗。后來查了編譯器的對齊規(guī)則把結構體用__attribute__((packed))強制緊湊排列才解決問題。MSC設備的關鍵描述符包括設備描述符里的idVendor和idProduct接口描述符里的bInterfaceClass 0x08MSC類、bInterfaceSubClass 0x06SCSI透明命令集、bInterfaceProtocol 0x50Bulk-Only Transport。這三個字段必須配對正確主機才能正確加載系統(tǒng)自帶的大容量存儲驅動。字符串描述符也是個容易翻車的地方。如果設備描述符里聲明了iManufacturer1、iProduct2、iSerialNumber3那么后續(xù)必須有對應的字符串描述符而且內容必須是UTF-16LE編碼。很多人圖省事直接填ASCII字符串結果在Linux下字符串變亂碼甚至導致枚舉中斷。一系列描述符的結構如下給讀者一個直觀印象設備描述符 12 01 10 01 00 00 00 40 34 12 78 56 00 01 01 02 00 01 配置描述符 09 02 20 00 01 01 00 80 32 接口描述符 09 04 00 00 02 08 06 50 00 端點描述符OUT 07 05 01 02 40 00 00 端點描述符IN 07 05 81 02 40 00 00其中bcdUSB為0x0110表示USB 1.1bMaxPacketSize0為0x40表示端點0最大包長64字節(jié)。配置描述符里的wTotalLength0x0020說明配置總長度是32字節(jié)剛好等于配置、接口、兩個端點描述符的長度之和。3.2 BOT協(xié)議CBW與CSWMSC設備通常會實現(xiàn)Bulk-Only TransportBOT協(xié)議整個傳輸流程圍繞兩條Bulk端點進行一條OUT、一條IN每筆事務分為三個階段主機發(fā)送CBWCommand Block Wrapper到OUT端點傳輸數(shù)據(jù)階段根據(jù)CBW中的方向標志決定數(shù)據(jù)流方向最后設備返回CSWCommand Status Wrapper到IN端點告知執(zhí)行結果。CBW固定31字節(jié)結構如下dCBWSignature // 固定為0x43425355即USBC dCBWTag // 命令的標記字段 dCBWTransferLength // 期望傳輸?shù)淖止?jié)數(shù) bmCBWFlags // 位7為1表示數(shù)據(jù)階段方向為設備到主機為0表示主機到設備 bCBWLUN // 邏輯單元號通常為0 bCBWCBLength // 有效SCSI命令塊長度 CBWCB[16] // 具體的SCSI命令塊CSW固定13字節(jié)dCSWSignature // 固定為0x53425355即USBS dCSWTag // 必須與CBW中的dCBWTag一致 dCSWResidue // 剩余未傳輸?shù)淖止?jié)數(shù) bCSWStatus // 0表示成功1表示命令失敗2表示階段錯誤調試MSC狀態(tài)機時最容易出錯的就是階段錯誤Phase Error。比如主機發(fā)出一個READ(10)命令期望設備返回數(shù)據(jù)結果設備因為底層存儲讀失敗直接在IN端點返回了STALL握手包主機收不到數(shù)據(jù)就會上報錯誤甚至重置整個USB設備。正確的做法是如果數(shù)據(jù)階段出錯設備應該STALL對應的端點并且在后續(xù)收到CLEAR FEATURE請求時把BOT狀態(tài)機重置到CBW接收階段。很多不成熟的MSC實現(xiàn)沒有正確區(qū)分命令失敗和階段錯誤導致Windows還能湊合容忍Linux直接報錯。3.3 SCSI命令與文件系統(tǒng)的配合MSC設備本身不處理文件系統(tǒng)它只負責響應SCSI命令把存儲介質抽象成一塊塊固定大小的扇區(qū)。Windows或Linux通過SCSI READ/WRITE命令讀寫這些扇區(qū)然后在主機側建立FAT32、exFAT或ext4等文件系統(tǒng)。ESPS設備端需要實現(xiàn)的SCSI命令并不多但每個都必須仔細INQUIRY返回設備類型0x00表示直接訪問塊設備、廠商字符串、產品字符串等。TEST UNIT READY查詢設備是否就緒。READ CAPACITY(10)返回介質最后一個LBA和扇區(qū)大小。READ(10) / WRITE(10)按LBA讀寫指定長度的扇區(qū)。MODE SENSE(6)返回介質參數(shù)主機在枚舉和格式化時會查詢回一頁默認參數(shù)即可。START STOP UNIT控制介質啟??梢栽谠撁罾镒鼍彺嫠⑿隆REVENT ALLOW MEDIUM REMOVAL鎖介質防止用戶在拷貝數(shù)據(jù)時拔出TF卡。有一個關鍵點READ CAPACITY(10)返回的扇區(qū)大小不能隨便填?,F(xiàn)在很多TF卡物理扇區(qū)是4096字節(jié)如果設備直接把扇區(qū)大小報成4096而FatFS又按512字節(jié)邏輯扇區(qū)來管理兩邊一沖突數(shù)據(jù)就寫亂了。穩(wěn)妥的做法是讓MSC層固定以512字節(jié)為邏輯扇區(qū)底層再根據(jù)TF卡的實際物理扇區(qū)做轉換。主機側格式化時會按設備上報的扇區(qū)大小來操作512字節(jié)的兼容性最好。FatFS這類設備端文件系統(tǒng)也要小心。ESPS固件代碼里FatFS在后臺采集任務中不斷寫入新數(shù)據(jù)同時主機通過MSC讀取同一張卡。這種雙端并發(fā)訪問在文件系統(tǒng)層沒有做鎖保護一旦主機發(fā)出WRITE命令修改了文件系統(tǒng)結構而固件后臺還在寫同一個文件就會產生目錄項混亂。我最后的方案是檢測到USB MSC主機連接后立即停止后臺寫入任務把FatFS所有文件同步關閉讓主機完全獨占TF卡。拔出后重新掛載FatFS。雖然粗暴但能保證數(shù)據(jù)一致性。4. 第一次插入電腦毫無反應一場典型的枚舉失敗排查4.1 現(xiàn)象與初步判斷ESPS的MSC固件第一次上電調試時USB線插入電腦后沒有任何反應設備管理器中連未知設備都沒出現(xiàn)。這比出現(xiàn)感嘆號還難查至少出現(xiàn)未知設備說明主機檢測到了物理連接。我當時的排查思路是這樣的物理層沒反應可能性無非幾種——USB線問題、D/D-沒接上、設備側沒有上拉、USB PHY沒有正常工作。先換線測試沒用然后測量板子上D/D-對地電壓。正常情況下全速USB設備上電后D線上應該被上拉到3.3V或者3.0V左右設備端通過1.5k電阻上拉D-保持接近0V。如果D電壓為0說明設備端根本沒有打開上拉電阻。ESPS板子的D上拉是通過GPIO控制的我查了固件代碼發(fā)現(xiàn)USB初始化函數(shù)里漏了拉高GPIO的操作上拉根本沒打開。這個問題雖然低級但提示了一個重要的調試思路USB設備枚舉的第一件事是讓主機發(fā)現(xiàn)你。全速設備靠D上拉來宣告我在這里低速設備則靠D-上拉。如果你的設計是用外部模擬開關或者GPIO控制上拉一定要在USB外設初始化之前或者同時完成拉高順序錯了主機會認為設備掉線。4.2 抓包定位過程修復上拉問題后電腦終于有反應了變成設備管理器里出現(xiàn)未知USB設備設備描述符請求失敗。這個階段光靠看代碼已經不高效必須上抓包工具。我用Wireshark加USBPcap抓到的枚舉過程是這樣的主機發(fā)出GET_DESCRIPTOR請求讀取設備描述符設備返回了18字節(jié)數(shù)據(jù)但主機端判定數(shù)據(jù)無效。通過逐字節(jié)比對返回內容和預期值發(fā)現(xiàn)設備返回的bMaxPacketSize0字段是0x00而這會導致主機無法正確解析后續(xù)傳輸。為什么bMaxPacketSize0會是0回到代碼里看設備描述符數(shù)組定義無誤但初始化過程中USB外設的FIFO配置在枚舉之前還沒有完成導致描述符數(shù)據(jù)在讀出時被截斷或者填充為零。具體來說STM32系列MCU的USB全速外設擁有一個可配置的FIFO空間分為多個端點緩沖區(qū)。端點0的收發(fā)緩沖區(qū)大小必須在使能USB前分配好否則設備在響應控制傳輸時沒有可用的FIFO空間硬件會返回錯誤數(shù)據(jù)。這里需要特別提醒的是描述符請求是主機在地址0階段發(fā)出的控制傳輸數(shù)據(jù)階段最多只有8字節(jié)默認控制端點最大包長通常是8字節(jié)全速設備是8/16/32/64可選。在未分配地址之前主機還不知道設備的bMaxPacketSize0所以第一個GET_DESCRIPTOR請求只會讀取設備描述符的前8個字節(jié)。設備必須在此時讓主機看到有效的bMaxPacketSize0值后續(xù)通信才會順暢。4.3 最終根因與修復最終定位的根因不在描述符數(shù)組而在于USB外設FIFO初始化順序我原先在USB_Init()函數(shù)中先打開了USB全局中斷然后才配置PMA緩沖區(qū)描述符表和FIFO分配??刂苽鬏斦埱蟮竭_時FIFO區(qū)域還是未初始化狀態(tài)導致數(shù)據(jù)錯亂。把FIFO配置和描述符表初始化放到開中斷之前問題迎刃而解。這給了一個復盤要點遇到USB枚舉失敗抓包永遠比盲試快。同樣是描述符請求失敗可能是數(shù)組定義問題、FIFO配置問題、時鐘問題甚至可能是供電問題。通過抓包能看到主機收到的實際字節(jié)讓問題從猜變成看。當時如果繼續(xù)靠翻代碼硬看可能還要多花一兩天。枚舉階段我還總結了一個檢查清單推薦給所有做USB設備的開發(fā)者檢查項常見錯誤定位方法D/D-上拉電阻全速設備用了D-上拉測量D/D-電壓設備描述符長度編譯器對齊導致長度錯誤抓包比對空包bMaxPacketSize0錯誤設為64以上抓包讀前8字節(jié)USB時鐘沒有48MHz串口打印寄存器FIFO配置開中斷先于緩沖區(qū)初始化代碼審查VID/PID與其他設備沖突設備管理器查看字符串描述符編碼不是UTF-16LELinux下lsusb -vE位一個經驗VID/PID不要亂填。如果填了別人已經量產注冊的VID/PIDWindows的驅動緩存可能會加載完全不對的驅動導致設備行為異常。沒有公司自有VID時可以用MCU廠商分配給評估板的VID/PID調試但正式量產前必須換成自己的。5. Windows能識別、Linux不買賬不同系統(tǒng)的差異化表現(xiàn)5.1 現(xiàn)象描述枚舉問題解決后ESPS設備在Windows 11下可以正常識別為USB大容量存儲設備并彈出了盤符能像普通U盤一樣打開。但拿到Linux機器上一測試dmesg里的日志讓人頭大usb 1-2: new full-speed USB device number 12 using xhci_hcd usb 1-2: New USB device found, idVendor1234, idProduct5678, bcdDevice 1.00 usb 1-2: New USB device strings: Mfr1, Product2, SerialNumber3 usb 1-2: Product: ESPS Mass Storage usb 1-2: Manufacturer: ESPS usb 1-2: SerialNumber: 20240601 usb-storage 1-2:1.0: USB Mass Storage device detected scsi host4: usb-storage 1-2:1.0 scsi 4:0:0:0: Direct-Access ESPS Mass Storage 1.00 PQ: 0 ANSI: 0 sd 4:0:0:0: [sdb] 0 512-byte logical blocks: (0 B) sd 4:0:0:0: [sdb] Write Protect is off sd 4:0:0:0: [sdb] Mode Sense: 00 00 00 00 sd 4:0:0:0: [sdb] Capacity: 0 bytes, 0 sectors注意這一行sd 4:0:0:0: [sdb] 0 512-byte logical blocks: (0 B)。Linux內核讀取到的磁盤容量是0。而Windows下卻能看到正確的容量。這就是兩個系統(tǒng)在MSC協(xié)議處理上的典型差異。5.2 Linux下的確查出問題Windows對SCSI命令的容錯性比Linux高很多。Windows在設備枚舉后即使READ CAPACITY(10)返回的容量為0它仍然會嘗試掛載卷并彈出需要格式化的提示讓用戶感覺至少識別到這個盤了。Linux更加嚴格如果容量為0就直接判定設備無效不創(chuàng)建塊設備節(jié)點。ESPS出現(xiàn)容量為0的原因出在SCSI命令實現(xiàn)的一個細節(jié)READ CAPACITY(10)命令的CDB結構如下Byte 0: 0x25操作碼 Byte 1: LUN及保留位通常為0 Byte 2-5: LBA邏輯塊地址通常為0 Byte 6-7: 保留 Byte 8: PMI及保留位 Byte 9: 控制字節(jié)數(shù)據(jù)階段返回8字節(jié)Byte 0-3: 最后一個邏輯塊地址LBA4字節(jié)大端 Byte 4-7: 邏輯塊大小4字節(jié)大端通常為512當時我的實現(xiàn)是直接把FatFS的f_getfree返回的扇區(qū)總數(shù)填進去而沒有考慮FatFS返回的free cluster數(shù)量和實際扇區(qū)數(shù)的換算關系。換算錯誤導致上報的最后一個LBA為負數(shù)即非常大的無符號數(shù)Linux內核判斷超出了其內部上限直接修正為0。Windows不會做這種細粒度校驗它要求驅動盡量上報真實值如果超過上限就按實際返回值處理所以Windows還能用。修復方式是把容量計算的邏輯換成了底層SD卡驅動的物理扇區(qū)數(shù)不經過文件系統(tǒng)層徹底避開了FatFS的影響。5.3 空卡與格式化問題的處理調試過程中還有一個常見場景插入一張全新未格式化的TF卡。這種情況下設備端文件系統(tǒng)尚未建立MSC層上報READ CAPACITY時應返回正確的物理容量但SCSI INQUIRY和PREVENT ALLOW MEDIUM REMOVAL依然要正常響應。Windows會彈窗提示需要格式化磁盤用戶可以點擊格式化主機端會通過WRITE命令寫入引導扇區(qū)和文件系統(tǒng)結構。設備端必須保證這些寫操作真正落盤。我在這里又踩了一個坑ESPS固件格式化時Windows寫入了FAT32引導扇區(qū)但隨后讀取時返回的數(shù)據(jù)和寫入的不一致。最后定位到是SD卡驅動的寫入函數(shù)在DMA傳輸時緩存沒有失效讀取的是DMA緩沖區(qū)里的舊數(shù)據(jù)。這個問題的根源是芯片的D-Cache沒有做一致性維護嵌入式中DRAM緩存和DMA之間的經典沖突。解決方案有兩個一是關閉D-Cache簡單粗暴但對性能有一定影響二是用MPU把DMA緩沖區(qū)所在的RAM區(qū)域配置為不可緩存并在每次DMA操作前后執(zhí)行SCB_CleanDCache和SCB_InvalidateDCache。ESPS最終選擇了第二種。Linux下掛載問題的另一個根因是DPRDOS Partition Record分區(qū)表。有些MSC設備實現(xiàn)直接把整個介質作為一個超級軟盤Superfloppy不寫分區(qū)表Windows認Linux也認。但如果設備擅自寫了一個分區(qū)表里面的分區(qū)偏移和大小與實際不符Windows會嘗試按分區(qū)表掛載Linux則直接拒絕并提示unable to read partition table。調試時我建議先用電腦把TF卡格式化成FAT32然后用十六進制編輯器把前512字節(jié)導出保存為模板設備端在新卡初始化時直接寫入這個模板比手搓DBR可靠得多。6. 大文件拷貝必現(xiàn)崩潰緩沖區(qū)、DMA、看門狗連環(huán)坑6.1 崩潰現(xiàn)象記錄當設備能在Windows和Linux下都正常識別后我進行了拷貝測試。小文件沒問題幾十MB的文件也能正??匠鰜淼坏┛截惓^300MB左右的單個大文件拷貝進度到80%-90%時設備就會掉線Windows提示該設備的前一個USB設備已停止正常工作或者Linux下出現(xiàn)usb 1-2: reset full-speed USB device number 12 using xhci_hcd sd 4:0:0:0: [sdb] tag#0 FAILED Result: hostbyteDID_ERROR driverbyteDRIVER_OK blk_update_request: I/O error, dev sdb, sector 409600這種進度過半就崩的現(xiàn)象非常有規(guī)律幾乎可以斷定是某個資源在長時間、大數(shù)據(jù)量傳輸下被耗盡。我猜測有三個方向USB接收緩沖溢出、SD卡寫入速度跟不上導致超時、看門狗復位。6.2 排查鏈路第一步是加日志。ESPS固件在USB中斷、SD卡寫回調、看門狗喂狗函數(shù)里都加了計數(shù)日志通過串口每隔1秒打印一次??截惔笪募耐瑫r觀察串口輸出結果發(fā)現(xiàn)一個異常每次崩潰前串口都會輸出一行SD_WRITE_TIMEOUT錯誤。這基本鎖定了問題方向USB從主機接收數(shù)據(jù)的速率大于SD卡實際寫入速率。PC在通過MSC寫文件時一次會發(fā)很多個WRITE(10)命令命令之間沒有握手等待USB協(xié)議站在Bulk傳輸層面允許設備用NAK來暫時阻止主機繼續(xù)發(fā)送。設備端如果來不及處理應該在USB外設端點上產生NAK響應給固件爭取時間。但ESPS實現(xiàn)的USB中斷處理邏輯里每收到一個OUT包就立刻把緩沖區(qū)交給SD卡DMA然后馬上重新使能端點接收。如果SD卡還在忙新數(shù)據(jù)又進來了緩沖區(qū)就被覆蓋導致數(shù)據(jù)錯亂。第二步查DMA和緩存一致性。ESPS主控是帶D-Cache的Cortex-M7內核最初我為SD卡DMA分配了靜態(tài)緩沖區(qū)但忘了在DMA寫入SRAM之后、CPU讀取數(shù)據(jù)之前做Cache Invalidate操作。這就導致CPU讀到的是Cache里的舊數(shù)據(jù)數(shù)據(jù)損壞后FatFS文件系統(tǒng)直接報錯主機會看到READ返回的數(shù)據(jù)和寫入時不匹配進而報I/O錯誤。第三步查看門狗。ESPS固件開啟了一個獨立看門狗正常喂狗調用在main主循環(huán)里。但在大文件拷貝時USB中斷頻率極高主循環(huán)如果被USB中斷長期搶占喂狗函數(shù)的執(zhí)行會被無限推遲最終看門狗超時復位整個系統(tǒng)。從崩潰現(xiàn)象來看設備掉線后電腦提示USB設備已停止工作這實際上就是MCU復位后USB會話斷開了。6.3 修復措施針對三個根因我逐一做了修改。緩沖策略改成雙緩沖乒乓結構定義兩個緩沖區(qū)USB DMA先寫入緩沖區(qū)A寫滿后提示CPU處理同時USB端點立刻指向緩沖區(qū)B繼續(xù)接收主機數(shù)據(jù)。CPU在SD卡空閑時把緩沖區(qū)A的數(shù)據(jù)寫卡寫完后等待下次切換。這樣USB接收不被SD卡寫卡阻塞也不會因為緩沖區(qū)覆蓋導致數(shù)據(jù)丟失。SD卡驅動加了一層忙等待流控。每次接收完USB數(shù)據(jù)后先檢查SD卡狀態(tài)寄存器如果還在忙就在USB端點上返回NAK。USB協(xié)議本身允許Bulk端點無限NAK主機會等待設備準備好不會因此超時。這一步很關鍵流的節(jié)奏掌握在設備手里而不是主機手里。看門狗問題通過調整喂狗策略解決。主循環(huán)仍然喂狗但在SD卡寫卡循環(huán)里也會定期喂狗同時把USB中斷處理邏輯縮短——中斷里只做緩沖區(qū)切換和事件計數(shù)真正的文件系統(tǒng)操作放到主循環(huán)里處理避免中斷長時間占用CPU也避免主循環(huán)餓死。DMA緩沖區(qū)通過MPU配置為不可緩存區(qū)域并保持Cache操作的正確性。修改后我再跑一次1GB大文件拷貝測試不再復現(xiàn)之前的崩潰。修復前后對比數(shù)據(jù)項修復前修復后拷貝300MB單文件約90%時設備掉線正常完成拷貝1GB單文件無法完成約2分15秒約7.5MB/s連續(xù)拷貝10個文件第3-4個文件時崩潰全部正常磁盤校驗chkdsk有錯誤無錯誤這里說句實話7.5MB/s的速率在全速USB12Mbps理論上限附近因為USB全速帶寬本身只有1.5MB/s左右理論值MSC BOT協(xié)議還有帶寬損耗。當時看到這個數(shù)據(jù)我第一反應是哪里沒配置對后來仔細檢查才發(fā)現(xiàn)ESPS的主控USB控制器只支持全速不支持高速480Mbps。在USB 2.0全速模式下MSC實際傳輸速度上限約1MB/s讀操作能到1.2MB/s左右。上面數(shù)據(jù)的7.5MB/s是后來換用主板側的USB 2.0高速控制器重新測試的結果。這也提醒大家USB全速和高速差異巨大設計產品時如果對傳輸速度有要求選型時必須注意MCU的USB控制器是否支持高速。7. 全平臺驗證與調試經驗沉淀7.1 驗證矩陣與速度測試修完所有問題后我做了一輪全平臺驗證不能只在Windows下跑通就交付。驗證矩陣包括平臺枚舉讀取寫入格式化熱插拔Windows 10 x64通過通過通過通過通過Windows 11 x64通過通過通過通過通過Ubuntu 22.04通過通過通過不適用用mkfs.vfat通過macOS 13通過通過通過通過通過Android手機OTG通過通過只讀不適用部分通過Android OTG測試有點出乎意料ESPS枚舉成功但寫入權限受限。原因是ESPS上報的MSC邏輯單元沒有實現(xiàn)寫保護位但Android的存儲訪問框架有自己的策略非系統(tǒng)應用無法直接寫入外部USB存儲。這個屬于平臺限制不影響主要場景用戶從ESPS往外拷數(shù)據(jù)。速度測試用ATTO Disk Benchmark和CrystalDiskMark各跑了一輪。在USB 2.0高速模式下讀速度約36MB/s寫速度約20MB/s達到了ESPS外殼上標注的高速U盤水平。注意這個速度受限于TF卡自身的讀寫速度如果卡是Class 4的速度會明顯下降。建議量產時在說明文檔里注明推薦使用Class 10以上TF卡。7.2 幾條靠踩坑換來的經驗整個ESPS USB MSC調試下來有幾個經驗我覺得特別值得分享。第一個經驗USB問題調試抓包工具是最值得先投入學習的。很多人習慣拿串口日志加代碼review死磕遇到枚舉失敗這類問題會非常低效?;ò胄r學會用Wireshark抓USB包很多問題一眼就能看出來。我這次調試第一階段的枚舉失敗如果早用抓包可能半天就定位完了。第二個經驗廠商提供的USB MSC參考例程是起點但它只覆蓋了裸的MSC讀寫底層存儲介質。真正復雜的部分是MSC層和文件系統(tǒng)層、底層驅動、應用任務的協(xié)作。尤其當你有兩個系統(tǒng)同時在訪問同一張卡時必須設計好訪問權限的切換機制。ESPS的方案簡單粗暴但有效USB主機連接時獨占斷開后釋放給應用層。第三個經驗代碼里每個關鍵路徑都要留日志而且日志要帶上時間戳和關鍵值。這次排大文件崩潰問題如果沒有串口日志里SD_WRITE_TIMEOUT那一行我可能會在USB配置上浪費很多時間。日志系統(tǒng)的價值平時不明顯出問題時它就是最有力的線索。第四個經驗先確認你的USB是Full Speed還是High Speed再談速度優(yōu)化。很多人在全速USB上做MSC折騰到最后發(fā)現(xiàn)速度上不去其實協(xié)議棧和代碼都沒問題只是硬件本身不支持高速。產品需求里若有導出大量數(shù)據(jù)的場景MCU選型建議直接選中帶USB HS控制器的芯片。再補充一個小技巧調試階段給ESPS板子保留一個UART串口調試引腳不要所有引腳都鋪完。USB問題調試過程中既要防止主循環(huán)餓死又要檢查中斷風暴串口日志是唯一能同時觀察兩側狀態(tài)的手段。沒有串口你只能靠PC端的表現(xiàn)盲猜。后來我把這個調試引腳定義成了標準4Pin排針放在板子一角成了所有后續(xù)項目通用的調試口。最后說一下目前的狀態(tài)ESPS的USB MSC功能已經穩(wěn)定跑了兩個月累計拷貝數(shù)據(jù)量超過200GB沒有再出現(xiàn)掉盤、文件損壞或枚舉失敗的問題。這次調試給我最大的體會是USB MSC這個簡單U盤背后是協(xié)議狀態(tài)機、底層存儲驅動、系統(tǒng)兼容性和實時操作系統(tǒng)調度四者的深度融合任何一個環(huán)節(jié)欠賬最后都會在用戶插上電腦這個動作上報復回來。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
天天干夜晚夜操| 97干在线| 国产精品爽爽久久久久久| 五月婷婷电影院| 天天拍久久| 天天激情站| 日韩啪图| 午夜色婷婷| av在线观看网站| 欧美日韩成人免费在线| 天天做天天爱高潮片| 九九视频这里只有精品| 狠狠五月天婷婷| www.色婷婷.com| 欧美激情 日韩无码 婷婷 五月天| 99re久久| 熟女五月天久久综合| 免费看欧美成人A片无码| 办公室少妇激情呻吟A片在线观看 白人荫道BBWBBB大荫道 | 色婷婷精品视频| 六月大香蕉| 丁香久久综合| 激情综合色五月六月婷婷| 午夜69成人做爰视频| 亚洲99在线视频| 久久精99| 国产免费一区二区在线A片视频| 91色久| 99色综合| 色区域网站视频| 激情骚五月| 欧美影院| 天堂爱爱| 97久操视频| 五月丁香自拍| 777精品成人a v久久| 国内自拍97在线| 日韩五月丁香| 日日噜噜夜夜狠狠久久丁香五月| 成年人最刺激的综合网| 26UUU| 婷婷香蕉精品| 中文字幕不卡+婷婷五月| 99热日本| 五月 婷 久| 激情99热| 美英法精品无码免费视频| 美腿丝袜AV天堂网| 欧美大肥婆大肥BBBBB| 欧美激情凹凸丁香网| 久热丁香| 97在线观看| 色色日本| 丁香五月婷婷成人综合| 超碰资源在线| 亚洲黄色网址| 操一操干一干| 婷婷五月在线观看| 色婷婷成人久久| 久久电影4399| 国产裸舞表演WWWW| 99这里有精品久久97| 色青青电影色五月| 色婷婷电影网| 五月婷婷综合久久| 男人的天堂五月丁香| 久色五月天| 六月丁丁香| 五月丁香六月情| 99综合色色色| 97人人搞| 亚洲网在线观看| 超碰免费99| 婷丁香五月天| 男人天堂99| 少妇高潮呻吟A片免费看软件| 色五月天婷婷| 免费观看的AV| 日日干日日色| 色婷婷成人做爰A片免费看网站| SS丁香五月婷婷| 久久婷婷91| 久久九九99视频| 激情视频网址| 熟女激情五月天 | 五月丁香毛片| 香蕉99网| 成人免费黄色短视频| 熟女激情网| 激情五月天www| 婷婷爱在线观看| 97人人操com| 成人综合网站| 久久久中文| 婷婷五月色播放| 色色永久| 六月丁香视频网站| 五月天激情综合在线| 91人操人人人操人| 99精品在线观看视频| 就爱啪啪婷婷| 99er免费在线观看| 婷婷五月激情的图片| 色五月婷婷91| 欧美久久网| 99操不停| 亚洲视频在线观看区| 中字幕视频在线永久在线观看免费| 久草性爱| 激情五月色婷婷| 日本成人噜噜| 婷婷五月天BBw| 爱之国产色情综合| www久久五月com| 色色色综合色| 婷香五月| 啪啪91| 91凹凸在线| 超碰免费电影| 色婷婷亚洲在线观看| 激情五月天综合婷婷网| 色婷婷婷婷| 亭亭五月天成人| 亚洲热综合网在线观看| 婷婷六月中文字幕| 天天操夜夜爱| 九九婷婷五月天| 久久婷婷五月天激情唯美| 丁香六月高清视频| 一本道综合网| 婷婷五月综合啪| 人妻肉射免费观看| 婷婷五月天欧美图片在线播放电驴| 伊人天天色| 亚洲色色图片| 五月婷婷伊人久久| 欧美va在线| 九九热这里只有精品一| 5月婷婷五月天| 五月天激情开心网| 这里只有精品在线视频在线观看| 五月天婷婷爱| 99性爱无码| 99热精品少| 第二色AⅤ| 国产色色在线| 亚洲国产成人裸舞| www.henhengan| 久热这里只有精品6| 婷婷五月天激情电影小说| 九九久久网| 中文av网| 九九99久久| 激情丁香五月天| 丁香五月情| 久9久9久9久9久9久9| 丁香九月婷| 丁香大香蕉| 婷婷色综合| 六月婷婷激情| 99热99精品在线观看| 中文字幕91,综合| 色情丁香五月婷婷精品| 狠狠夜夜五月丁香| 久久久久久久8| 97黑人精品区| 深情六月婷婷综合久久| 色色色色网色色网色色| 99日在线视频| 夜夜爽77777妓女免费下载 | 思思热闹这里只有精品| 亚洲丁香五月| 大香蕉综合在线| 成人精品在线| 人人草碰| 六月丁香五月激情亚洲AV| 丁香久久AV| 99热九九在线| 狼友视频在线观看18| 婷婷五月天伊人| 少妇高潮呻吟A片免费看软件| 中文字幕av久久爽| 嫩草AV久久伊人妇女超级A| 丁香五月aV| 99这里只有精品|v| 五月香婷婷| 播四月婷婷六月丁香| 性色天| 99视频内射三四| 91男同视频| 中文字幕高清av| 伊人婷婷大香蕉| 色情·com| 天天色综合综合| 9精品在线| 国产SUV精品一区二区6| 99福利导航| www·五月天| 亚洲亚洲亚洲AAAAAA| 涩综合网| 五月婷婷丁香综合,亚洲天堂| 综合久久综合久久| 九九精品视频在线观看| 久久九九热视频| 五月天婷久久| 丁香亭亭久久| 亚洲AV网站在线观看| 免费看欧美成人A片无码| 久久综合综合综合| 日韩啪啪视品| 九九视频网| WWW五月| 激情第四色| 亚洲乱啪| 天天摸天天高潮天天爽| 丁香五月综合| 午夜亚洲国产精品av一区二区| 99热思思在线观看| 九月丁香| AV成人在线播放| 五月天激情国产综合AV| 色婷婷丁香五月| 国产色香蕉精品五夜婷| 亚洲精品久久久久久久久久吃药| 开心五月激情网| 91九色PORNY中文啦| 狠狠色噜噜狠狠色噜噜噜999| 99这里| 欧美激情综合五月色丁香| 国产成人高清| 婷婷五月美女直播| 日本久久激情| 久久日曰| 五月天婷婷高清无码| 色九九综合| 色五月婷婷激情基地| 天天摸夜夜爽天天做| 91avse| 天天视频精品9| 五月天天天操天天爽夜夜操| 天天干天天操天天拍| 9婷婷内射| 五月婷婷视频28| 国产激情久久久| 亚洲天堂大香蕉| 婷婷激情社区| 亚洲无码猫咪| 情婷婷五月天| 五月天色色色网| 激情另类综合| 另类激情综合| 色色网站免费在线视频| 思思热视频| 欧美精产国品一二三区| 五月玖玖| 97精品自拍| 99热这里全都是精品| 丁香五月天大香蕉啪啪| 综合亚洲AV| 色色免费网战视频| 色综合网页| 天天成人综合视频| 久久婷婷青青| http://www.sd-xiangsu.com/| 天天日夜夜爽| 情情五月天色| 少妇被躁爽到高潮无码文| 婷婷久久亚洲| 成人丁香五月| 伊人五月婷婷| 国产AV一区二区三区最新精品| 日本69日人视频| 9999三级片| 色五月婷婷综合在线| 色香欲综合| www.激情com| 五月婷婷之综合激情| 一级韩国产精品毛| 五月激情小说| 涩五月婷婷| 99热久| 一起草av| 亚洲精品V天堂中文字幕| 热久久思思热思思| 五月天丁香婷婷久久九| 久久久久人妻网址| 91狠狠综合久久久| 婷婷五月天视频小说| 99ER热精品视频| 久久五月丁香综合17C| 久久AAAA片一区二区| 狠狠狠人妻| av一级棒av| 五月丁香激情欧洲啪啪| 国产色99| 九九人人操| 欧洲永久精品| 欧美A片在线视频免费观看| 人人人舔人人人操人人人摸人人人97| 超碰国产AV| 99热这里只有免费精品| 97久操| 六月婷婷五月丁香| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 色久影院| 五月丁香色婷婷婷基地| 99天天操夜夜操| 欧美色色色色色| 日韩高清成人| 少妇搡BBBB搡BBB搡毛茸茸| WWW.99热| 台湾无码A片一区二区| 1024日韩| 欧美久久婷婷| 狠狠干狠狠干| 丁香五月天在线| 日韩在线观看亚洲| 五月丁香啪啪| 99国产这里只有精品| 9 1在线视频| 亚洲操逼网| 青青草a在线| 91狼友视频网页更新| 日日干日日| 亚洲国产成人在线| 日韩色色色色| 色欲丁香| 婷婷丁香激情五月天色色| 欧美色偷拍| 色五月激情五月| 开心婷婷五月花| 免费看片在线观看| 亚洲综合五月天| 日日爽天天| 99热免费精品| 99天堂在线观看免费视频| 国产性爱一级| 久久99热精品a片在线观看| 中文字幕婷婷在线| 色丁香六月| 97色色婷婷五月天| 欧美人与性动交CCOO| 狠狠干无码| 丁香色五月婷婷17C| 婷婷久久色五月婷婷久久久| 丁香婷婷基地| 丁香成人色情五月天| 色婷婷久久综合| 丁香五月婷婷天激情| 亚洲情色一区| 丁香五月婷婷激情蜜桃| 色五月激情问网站| 五月丁香婷草| 婷婷五月天渟渟| 激情五月丁香五月| 久久99热这里只频精品6学生| 女人天堂av| 五月婷婷七月丁香| 97五月婷| 欧美交换配乱吟粗大25P| 九九视频在线| 婷婷综合网站| Av性爱网| 国产成人网| 亚洲无码九九九| 婷婷久久六月费| 激情丁香六月| 肏日网在线看| 人与禽A片啪啪| 婷婷五月天色色| 91九九| 久久婷婷影院| 五月天另类小说亚洲| 九色七七| 亚洲视频图片婷婷五月| 四川女人毛多水多A片| 最新日韩久热免费视频看看| 99啪99| www久久久久久久久久久| 婷婷五月在线综合| 99re这里只有| 2017狠狠干| 玖玖资源站国产| 9久视频| 五月丁香淫淫婷婷婷| 怡红院院在线导航网 | 五月天色图| 婷婷久久网| 极品五月天| 色综合综合综合| 五月综合激情| 成人日韩欧美| 激情五月激情综合网| 97资源欧美日韩大香蕉超碰一区| 思思热视频| 丁香婷婷成人在线播放| 婷婷色五月偷拍| 欧美色99| 欧美在线看| 色婷婷丁香社综合| 色婷婷AⅤ| 丁香五月五月婷婷欧美大香蕉| 色综合99| 婷婷色中文字幕| VA色婷婷| 丁香蜜臀黄色婷婷五月天| 久色视频| 五月综合在线| 色色色五月婷| 久久大香蕉同僚| 狠狠操天天干| 99色中文| 91日韩在线| 久久99视频| 九九色影视| 人人人操| 天天爽天天日| www.色五月| 五月天伊人| 亚洲天堂久久| 97亚洲视频在线| 青草视频在线播放| 五月天丁香婷婷视频网址| 丁香五月婷中字在线| 丁香五月天久久| 丁香8月手机综合| 丁香六月婷婷缴情欧美| 99热在线播放精品| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 91热在线| 99热www.| 久久人妻在线| 日熟女| 91超碰在线播放| 久热婷婷| 538在线精品| 欧美婷婷色| 久久99网| 亚洲视频二区| 99re这里只有精品免费| 婷婷五月天亚洲综合网| 五月激情六月综合| 色情综合网| 亚洲操人| 韩日AV片| 久99久在线| 亚洲sesesese| 日韩综合大黄| 一级二级色大片| 久草五月天| BBWCUCKOLD精品熟妇| 日本eVa一区=区视频| 996黄色片| 99在线免费视频| 婷婷亚洲五| 很很干五月天| 97色97干| 在线理论片| 日韩婷久| 黄色99视频| 色五月天视频| 伊人久久五月天| 婷婷丁香六月天| 婷婷字幕在线| 丁香婷婷啪啪| 丁香五月天啪啪激情综和网 | 日本人人干| 综合欧美五月婷婷| 亚洲热久久| 婷婷在线视频| 婷婷五月综合社区在线| 91中文在线| 99.色| 色色无码| 亚洲性爱AV在线| 久婷婷五月天影院| 人人综合五月人人婷婷| 婷婷操久久| 日韩精品AV一区二区三区| 婷婷国产五月天17c| 天天肏视频| 丁香五月23111| 97在线/亚洲| 日韩国产在线精品| 婷婷六月色开| 婷婷五月天香蕉| 久久草大香蕉| 自拍视频在线观看9| 狠狠色噜噜狠狠色噜噜噜999| 色婷婷AV久久久久久久| 激情小说五月天| 久久资源综合| 99re思思精品视频在线观看| 美国十月色婷婷在线观看| 国产精品色色| 日韩综合天堂| 在线1青婷| 67194国产| 天堂综合久久| 99热这里只有精品官网| 天天做天天爽| 99网址在线看| 五月婷婷六月丁香色| 欧洲色| 99视频九九热| 天天爽天天爽视频| 亚洲狠狠色丁香婷婷综合久久| 久久久久9| 天天噜噜| 就爱日五月天| 99热青青草原| 国产69久久久欧美黑人A片| 热99精品视频五月| 五月天激情子轮| 天天干天天日天天操| 天堂五月婷婷| 色婷婷色五月天| 国产XXXX搡XXXXX搡麻豆| 色呦呦美女| 综合一本道| 欧美色综合天天久久综合精品| 伊人婷婷大香蕉| 婷婷五月亚洲一本在线丁香| 五月婷婷香蕉视频| 婷婷激情鹿城五月天| 高清无码视频网址| 99热日韩| 久婷婷婷| 七七九色| 少妇性按摩无码中文A片| 玖玖@三月天天丁香婷婷| 26uuu激情五月天| 丁香色五月 97干| 超碰在线免费| 色色免费网站| 欧美色99| 久久三级视频| 任你爽视频| 99在线视频精品| 中文在线成人| 饮料下药迷倒漂亮女同事强干| 成人免费超碰| 婷婷情色激情| 91亚洲视频| 播五月丁香六月| 色色色色色色综合网| 亚洲俩性性爱图片久久第六页| 五月婷婷中文字幕| 婷婷丁香射射| 色色五月婷| 另类色网| 少妇人妻人伦A片| 亚洲日本激情| 久99热| 国产成人AV人人爽人人澡Va| 激情第四色| 天天免费成年人视频| 五月丁香六月婷| 天天拍夜夜撸| 青草青草视频2免费观看| 亚洲在线激情婷婷五月| 成人做爰A片免费看网站找不到了| 色A网| 香蕉久久av一区二区三区| 婷婷色香六月综合激情| 狠狠ri| 婷婷五点亚洲| 9视频1在线| 狼人婷婷综合| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 99热在线播放| 激情综合激情五月| 超碰cap| 六月婷婷五月天| 狠狠色噜噜狠狠| 97精品在线| 亚洲色色色色色色色色色| 久久婷婷亚洲| 婷婷之六月丁香| 亚洲日本韩国| 亚洲成人在线五月天| 国产婷婷五月| 丁香六月色婷婷| www久久99com| 久久久久久久久18久久| 99热综合| 五月天婷婷基地丁香| 青青草国产亚洲精品久久| 亭亭社区五月天| 日本 色综合| 丁香婷婷六月天| 天天玩天天摸| 综合狠久久| 婷婷天天婷婷天天澡| 久久99精品久久久久久噜噜| 久久久久网站| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 九月色婷婷| 99在线小视频| 激情五月,深深爱五月| 五月色婷婷夜色| 久久总和99| 色综久久久| 日本色色视频| 亚洲五月婷| 啪啪啪啪五月天| 丁香综合久久| 丁香五月天电影| 丁香五月婷在线| 91九色 婷婷| 国产又粗又大又爽又黄| 日日噜噜夜夜狠狠久久丁香五月| site:xiongshengzz.com| 日本操B视频| 黄色精品五月婷婷| 亚洲无AV在线中文字幕| 色色色色色色色色色色色色色97| 婷婷五六月丁香| 青青999| 六月天婷婷| 婷婷五月天在线观看第二页| 97人人超| 色婷婷91激情小说| 99免费在线| 五月丁香六月婷综合成人综合| 婷婷久久性爱| 久久婷婷五月天大香蕉| 97干欧美| 五月婷婷福利| 综合丁香婷婷五月天| 亚洲视频在线网| 开心激情婷婷| 神马欧美精| 密乳视频| 亚洲综合字幕色色| 色色综合热| 91人妻PORNY九色大屁股| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 99网| 99视频这里只有久久精品| 大香蕉五月婷婷| 91人人爱| 国产精品美女久久久久AV超清| 人人操av| 亚洲欧州色情在线观看| 99热99热在线观看| 婷婷亚洲综合| 青青日韩| 99九九精品视频推荐| www.五月天婷婷| www.婷婷六月天| 婷婷五月天亚洲精品| 掩去也综合五月视频| 人人搡人人| 五月丁香婷婷钟和色图| 深爱五月婷婷| 亚洲午夜视频| 婷婷五月天狠狠色| 五月天婷婷丁香视频| 97久久视频| 婷婷九色| 久碰久| 九九成人电影婷婷| 成人综合网站| 综合激情婷婷| 99爱视频在线| 九月婷婷综合| 婷婷操久久| 婷婷五月天天天| 五月宗合激情网| 久久 这里只有精品1| 激情五月天黄色小说| 中文字幕九九九九| 亚洲天堂大香蕉| 啪啪操网| 婷婷激情五月天激情小说| 婷婷丁香五月天综合在线日韩| 婷婷综合| 五月天婷婷激情| 桃色五月天| 91日韩在线| 五月婷婷六月天| 99玖玖在线视频| 婷婷丁香六月天| 欧美Va日本Va| 亚洲丁香五月天视频| 五月色天情| 麻豆123区| 99视频这里只有免费精品| 色婷五月| 永久的网站AAAA | 婷婷激情肏屄网| 9久久精品| 亚洲成人免费在线| 五月丁香亚洲校园欧美| 色情五月丁香| 综合激情伊人影视在线| 欧美成性色| 熟女婷婷网站一婷婷五月一丁香婷婷一婷婷激情网 | 五月丁综合在线观看| 色综久久AV| 国内婷婷丁香社区在线播放| 五月天婷婷色播| 丁香五月激情六月综合| 亚洲激情综合五月婷婷啪啪| 视色综合| 国产婷婷五月色情综合| 国产毛片精品一区二区色欲黄A片| 可以观看的AV| 久久久久人妻精品| 九九AV在线| 九九这里都是精品| 五月天成人综合| 中文字幕丰满孑伦无码专区| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 玖玖爱导航| 欧美色色色色色色色色色色| 日韩成人综合网| 亚洲精品乱码久久久久久综合| 婷婷六月丁香激情综合| www久热com| 免费在线观看欧美激情xx小视频| 99热综合在线| 日日夜夜干| 99久久九九视频| 九九99视频精品| 超碰国产AV| 欧美日综合| 色综合爱综合| 99亚洲日韩| 婷婷五月色综合| 99热这里是精品| 青青草视频免费观看| 伊人在线另类| 激情爱爱网站| 美女五月激情| 久99热| 99丁香五月婷| 欧美成人精品三区综合A片| 五月丁香久久久| 99色日本| 丁香五月亭亭六月综合激情网| 丁香五月婷婷色五月| 欧美啄木乌丝袜人妻系列| 国产免费一区二区三区三州老师F1F1.CC| 99综合网| 超碰cap| 五月激情婷婷综合| 丁香五月激情月| 天天色天天| 六月丁香网| 婷婷94s| 狠狠色综合网| 日日操,夜夜撸| 玖玖午夜视频| 成熟妇人A片免费看网站| 婷婷六久久| 天天色播| 综合激情五月天六月婷免费视频| 99爱这里只有精品免费视频| 亚洲在线网站| 五月婷视频久久| 色婷婷色婷婷五月| 人妻少妇色综合| 97操女视频| 色婷婷婷av| 天天草天天摸| 国产精品99久久久久久久女警| 成人国产网站| 五月激情综合婷婷| 免费AV在线| 久久人妻熟女一区二区| 伊人婷婷大香蕉| 欧美性爱5月天天天看| 婷婷五月丁香综合| 99网| 啪啪激情网| 婷婷丁香综合| 欧美六月| 激情五月天色色色| 成人必爱视| 日韩精品一区二区亚洲AV观看| 欧美日本免费一道免费视频| 激情综合九月| 婷婷色成人| 九月丁香婷婷| 久人操| www.色五月天.com| 五月天激情四射| 日熟女| 精品国产va久久久| 精品一二三区久久AAA片| 婷婷综合精品| 婷婷五月色天| 激情综合色五月丁香| 婷婷久久久| 色五月影视| 激情综合在线观看| 五月天社区婷婷| 天天色天天色天天色天天色天天色天天色| 七七九色| 丁香五月婷婷婷桃花影院| 五月天婷婷色小说| 91日韩在线| 久久久久久久97| 五月天婷婷综合| 欧美久久九九| 五月婷婷久久网| 久久大香蕉| 婷婷视频网| 五月天丁香综合久久国产| 99九九99九九九视频精品| 狠狠搞综合色| av九九| 这里只有精品在线视频精品| 伊人激情啪啪| 中文字幕AV网址| 狠狠干婷婷| 五月激情婷婷四射| 色五月亚洲开心网| 欧美性生交xXxX久久久| 亚洲五月天第一综合干| 狠狠色噜噜狠狠狠狠综合| 任你日热视频| 激情五月天社区| 九九综合88| 日日夜夜爽| 天天干天天av天天射| 丁香五月天精品| 无码AV免费精品一区二区三区| 99热 在线观看| 色狠狠综合| 99久久99视频只有精品| 99久久6| 五月婷婷综合网| 99精品性爱| 五月天婷婷激情网| 中文字幕 中文字幕明步| 九九九九毛片| 九九Av| 五月六月播婷婷| 久久五月丁香| 97资源碰碰| 97碰在线视频| www.henhenl| 爆乳熟妇一区二区三区爆乳照片| 超碰9| 丁香五月天啪啪| site:hcxsz888.com| 91婷婷在线| 99在线视频精品| 久久人妻情侣| 欧美成人一区二区三区在线视频| 九九视频这里是精品五月| 大学生高潮无套内谢视频| 激情五月综亚网| 牛牛澡牛牛爽| 色婷婷小说| 婷婷五月中文字幕| 婷婷五月天国产| 久9久成人精品视频| 成人丁香| 久久婷婷五月综合色奶水99啪| 午夜成人AV在线| 久久精彩综合视频| 中文字幕丰满孑伦无码专区| 99热这里只有精品1998| 亚洲天堂青草| 日本欧美国产| 婷婷五月小说色综合| 日产精品一线二线三线芒果| 26uuu91| 9热在线视频| 青青草tp| 亚洲婷婷月丁香五月| 久久综合婷婷激情| 欧美色五月天| 婷婷五月天你懂的| 亚洲精品亚洲人成人网| 狠狠五月激情在线| 日本WwW色偷偷丁香花久久久京东热| 色色色色色网站| 操日视频| www.色婷婷| 色高清无码视频| 综合九九久久| 99久久婷婷| 激情黄色五月天| 超碰在线观看caop| 色色婷婷五月天| 五月花成人网| 婷婷五月综合色中文字幕| 久久精品99| 内射丰满人妻| 99ri视频在线播放| www.激情| 情趣视频66| 久久三级视频| 色婷婷五月天av在线| 五月激情婷婷开心| 色五月天丁香婷婷色| 在线中文字幕视频| 天天操夜夜夜拍拍拍| 激情婷| 六月婷婷综合| 综合一本道| 色婷婷导航| 狠狠婷婷综合| 久久性爱视频| 第四色26uuu| 99久在线| 91人妻人人操| 久久久久9999| 亚洲国产色色| 丁香五月综合高清在线| 九九99九九精品视频| 精品人人操| 深爱开心激情网| 五月婷婷丁香啪啪| av高清无码| 久久网日本| 丁香五月婷婷天| 激情视频网址| 色综合久久8| 激情综合五月天| 六月婷婷五月天| tingting五月天亚洲| 五月婷婷日| 香蕉人妻AV久久久久天天| 综合视频久久| 五月天婷婷丁香六月| 高清无码.com| 激情五月天婷婷丁香| 丁香五月电影| 五月综合色播播丁香婷婷| 欧美情月伍月天| 黄色91在线观看| 日韩少妇内射免费播放| 欧美精品999| 26uuu欧美日本| 久久五月婷综合网| 丁香五月婷婷啪啪| 婷婷性爱视频在线| 色99综合色88| 在线不卡视频| 淑女丝袜bi操逼123| 激情五月综合ì香亚洲| 91九色|疯狂|高潮|对白|| 久热视频97AV在线观看| 国自产拍偷拍精品啪啪一区二区| 日本久热| 五月丁香啪啪网| 色五月婷婷成人视频| 日韩啪| 丁香五月五月婷婷欧美大香蕉| 中文激情网| 丁香五月天狠狠| 五月丁香婷庭在线| 高清激情av在线观看| 91操熟女| www.综合久久.com| 丁香六月婷婷操逼网| 99热网站| 99re久久| 狠狠色噜噜狠狠| 日本VA视频| 日韩黄黄| 高清不卡一区| 99热在线资源| 亚洲无码激情| 九九99视频精品| 人人人操 超碰| 蜜桃人妻无码AV天堂三区| 人妻AV在线| 色五月天堂| 99国产精品久久久久久久久久久| 丁香五月婷婷色偷偷| 玖玖福利视频资源| 五月的丁香六月的婷婷| 蜘蛛女免费观看完整版高清电影| 超碰国产在线| 97色在线视频| 日本色色网站| 99热伊人综合| 日本色色色色色色色色一色二色| 五月婷婷综合网| 日韩一级片| 激情五月天网站| 另类激情中文| 乱码操操| 99久久99九九99九九九| 激情五月天色网站| 亚州色婷婷| 亚洲不卡| 婷婷午夜| 丁香六月婷婷| 色五月婷婷中文字幕| 夜夜夜夜夜操| 五月婷婷五月| 亚洲成人免费在线| 婷婷久久综合| 久久99国产综合精品免费| 六月丁香啪啪| 久久久天堂国产精品女人| 精品夜夜澡人妻无码AV| 国产肥白大熟妇BBBB视频| 五月综合视频| 国产亚洲成AV人片在线观黄桃| 成人国产欧美大片一区| 久久一级AV| 欧州婷婷五月天综合| 9视频在线成人网站| 伊人天堂婷婷| 亚洲 欧洲 国产 伦综合| 亚洲超级碰| 99热久草| 国内在线99视频| 亚洲啪啪自拍| 99热黄| 99超碰在线观看| 久久久香| 立川无码av| 天天cha成人综合网| 亚洲婷婷综合视频| 超碰资源在线| 五月丁香美女视频| 婷婷天天插天天爱| 婷婷五月婷婷五月| 久久99热在线观看| 在线网黄| 99热这里只有精品9| 激情深爱五月天| 婷婷色五月91啪啪| 97在线日本| 六月丁香av| 97在线视频观看| WWW.夜夜操.com| 色综合久久88色综合中文字幕| 狠狠干综合网| 99热e| 五月婷婷丁香六月| 5Www色5夜| 五月天丁香成人| 激情婷婷五月女| 亚洲人妻五月丁香婷婷| 五月丁香六月婷婷激情网| 天天色宗合| av操逼网| www.日本91| 天天色综合天天| 这里只有精品99视频| 五月婷婷激情综合视频| 六月撸婷婷| JAPANRCEP老熟妇乱子伦视频 | 婷婷无码五月天| 97色干| 中国无码av| 婷婷五月天丁香社区| 激情五月综合色| 天天操天天爱天天玩| 婷婷久久99| 99精品国产在热久久| 久热精品在看| 99综合视频| 丁香五月av在线| 日日撸夜夜操| 精品婷婷| 丁香五月婷婷婷桃花影院| 丁香五月婷婷深五月| 国精产品久久| 91操人视频| 九色成人AV在线| 九色视频91疯狂| 青青福利网| 色五月天堂| 91色性感五月婷婷丁香| 六月丁香婷婷综合狠狠爱夜夜爱| 婷婷丁香射射| 久久机热/这里只有精品| 99亚州综合精品成人网| 91碰操| 欧美激情丁香五月| 第四色首页| 五月天婷婷色| 五月色亚洲| 五月天激情婷婷五月天久久| 一起草无码| 六月五月天婷婷涩播在线| 天堂久久精品| 俺去也在线官网| 99操逼| 婷婷五月激情视频网| 99色热| 婷婷狠狠干| 做爰丰满少妇1313| 综合99久久| 久久这里有| 第九色区av天堂| 色婷婷丁香综合中文字幕| 99爱精品视频| 亚洲热热视频| 久xxxx| 婷婷丁香五月天亚洲| 六月激情综合| 91成人电影| 中文字幕色色| 无遮挡国产高潮视频免费观看| 色色爽爽天天| 色婷狠狠| 丁香花社区av| 无码网| 亚洲天堂99| 狠狠色中色| 五月天开心激情网色欲无码| 婷婷欧美激情综合| 97在线天堂| 六月色五月天天婷婷| 俺去也五月| 三级毛片7979| 五月婷婷六月少妇激情| 九九99久久精品| 五月天婷婷午夜丁香| 国产成人亚洲综合A∨婷婷| 国产全是老熟女太爽了| 九九国产视频| 丁香五月日韩| 色五月大| 激情VA视频| 色欲AVV| 久久婷婷五月综合激情国产| 五月天啪啪啪| 国产成人网站在线观看| 九艹在线| 大香蕉七区| 色婷视频| www,奇米影视| 五月色 亚洲| 大香蕉久| 五月激情视频| 久1色色| 成人国产欧美大片一区| 激情丁香五月天综合| 超碰在线免费9| 国产avapp 网| 成人在线网| 丁香婷婷人妻| 五月丁香综合激情| 婷婷五月丁香久久| 五月丁香婷婷狠狠操| 丁香六月无码| 五月婷庭丁香在线| 久久伊人大香蕉| www,26uuu,c0m,色情| 欧美精品久久久久久视频观看| 丁香五月婷婷久久久| 五月婷婷色| 99这里| 大香蕉综合| 婷婷天堂站| 激情五月天色网站| 在线婷婷| 99色激| 丁香五月色| 久去色色| 五月丁香婷婷综合| 丁香六月亚洲| 五月丁香色色网| 婷婷伊人激情婷婷| 风流少妇A片一区二区蜜桃| 森林影视大全,最好看的2019年视频| 大地9中文在线观看免费高清| 激情五月天综合图片小说网站| www.久久爱| 亚洲无码黄色| 色综合久久中文| 久9精品| 美欧日韩国产成人在战| 亚洲无码11| 丁香五月婷婷基地| 婷婷激情肏屄网| 五月天偷拍| 综合激情五月综合激情五月激情1| 国产在线aaa片一区二区99| 俺也去婷婷五月天第五色| 五月婷婷丁香| 九九成人精品| yazhoujiqingav| 婷婷五月骚厕所| 97操| 久月婷婷| 伦乱美欧| 综合福利网| 婷婷色五月在线视频| 丁香五月久久社区| 久热91精品| 亚洲欧洲99| ..真实国产乱子伦对白在线_欧| 精品三区影院| 婷婷五月无码| 色色色色网| 婷婷五月情| 国产精品色| 免费视频这里只有精品| 丁香五月激情综合婷综| 久久婷婷网| 九月停停| 丁香五月天BBw| 67194中文字幕| 91精品综合久久久久久五月丁香| 六月香五月婷| 大伊香蕉玖玖爱| 激情综合五月婷婷| 六月婷婷九月丁香亚洲综合| 久久狼人天堂| www,黄色在线,con| 色婷婷丁香五月| 丁香五月婷婷动漫视频| 狠狠综合色网| 人人操AV| 永久精品| 99无码免费视频| 婷婷激情五月天小说| 九九無妻| 五月婷婷中文| 久久这有这里精品| 噜噜五月天综合| www.色婷婷| 99热这里只有精品4| 第2色五月婷| 9 1大香蕉| 国产精产国品一二三在观看| 激情99| 无码四色色色| 亚洲精品成人片在线播| 中国丰满熟女A片免费观| 九色无码| 天天做天天要天天爽| 激情视频91| 色欲久久99精品久久久久久| 狠狠色丁香| 婷婷五月美女直播| wuyuedingxiang99| 激情五月份婷婷| 日本二级毛片二级毛片| 影音先锋一区| 五月丁香婷爱在线| 深爱 五月天| 婷婷五月天综合AV| 日韩乱轮AV| 久久婷婷五月| 99热只有| 五月婷婷中文网| 久久久人妻久久久| 色欲婷婷五月天丁香| 亚洲综合五月天婷婷| 色九网| 人人草人人爱| www色五月天| 99久久a线观| 五月天久久www| 热久久婷婷| www,奇米影视| 婷婷五月综合在线| 亚洲性视频| 影音先锋777xfplay色资源网站| 五月婷婷丁香大陆免费|