99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

USB MSC嵌入式調試全記錄:從枚舉失敗到全平臺兼容

USB MSC嵌入式調試全記錄:從枚舉失敗到全平臺兼容 做嵌入式開發(fā)這些年USB調試一直是我最怕翻車的環(huán)節(jié)之一。這次項目代號ESPS的設備要新增一個功能把設備SD卡里的采集數(shù)據(jù)導出到電腦最終方案選的是USB MSCMass Storage Class大容量存儲設備也就是把設備模擬成一個U盤用戶插上數(shù)據(jù)線就能直接拷文件。聽起來很簡單但整個調試過程遠沒有想象中順利枚舉失敗、Windows認了Linux不認、大文件拷貝到90%直接掉盤……前前后后折騰了一周多。這篇文章就把ESPS USB MSC調試的全過程做個完整記錄從協(xié)議原理到一步步排查思路再到踩過的坑和修復方案給后面準備做USB存儲類設備的同行當個參考。1. 項目由來為什么非要USB MSC不可1.1 需求場景ESPS這個設備本身是一個低功耗數(shù)據(jù)采集終端長時間跑在野外記錄傳感器數(shù)據(jù)數(shù)據(jù)存在外置TF卡上單次任務產生從幾十MB到幾個GB不等的數(shù)據(jù)文件。原來的數(shù)據(jù)導出方式特別原始用串口線連接設備通過115200波特率的串口上位機把文件慢慢拉下來。傳一個100MB的文件需要將近兩個小時而且串口線一松就前功盡棄客戶早就抱怨過好幾輪了。新需求很明確讓普通用戶在沒有專業(yè)上位機、沒有串口線的情況下也能快速地拿到設備里的數(shù)據(jù)。最好就是插一根USB線電腦上立刻多出一個盤符文件一拖就完事。這個場景下USB MSC幾乎是唯一正確答案。1.2 方案選型對比動手之前我把可行的USB方案列了一遍逐個對比后才知道MSC的優(yōu)勢在哪里。方案傳輸速度用戶操作難度驅動兼容性開發(fā)復雜度USB虛擬串口CDC約1MB/s左右需要裝虛擬串口驅動、用上位機有驅動問題較低USB RNDIS網卡約5MB/s以上需要配置IP、用網絡協(xié)議傳文件各系統(tǒng)差異大高USB MSC大容量存儲受限于存儲介質通常5-20MB/s插上就是U盤零學習成本系統(tǒng)原生支持免驅中高串口方案最大的問題不是速度而是用戶心智。一個非技術客戶他根本不想知道COM口是幾號、波特率是多少。RNDIS雖然能用TCP/IP傳文件但Windows上驅動兼容性問題多Linux和macOS行為不太一致。MSC就完全不同Windows、Linux、macOS、Android都原生支持插上就能識別成大容量存儲設備系統(tǒng)自己掛載文件系統(tǒng)用戶看到的就是一個普通U盤。存儲介質選型也是一個關鍵決策點。最初有同事提議用MCU內部Flash直接模擬U盤省掉外置存儲芯片。仔細評估下來發(fā)現(xiàn)這個方案只適合存配置參數(shù)因為內部Flash容量小、擦寫壽命有限、數(shù)據(jù)傳輸速度也慢。MSC規(guī)范本身支持4字節(jié)邏輯塊地址單盤能做到2TB但實際瓶頸在底層的存儲介質。ESPS最終采用SDIO接口外接TF卡搭配FatFS文件系統(tǒng)速度和容量都能滿足數(shù)據(jù)導出需求。這里有個容易被忽略的點MCU內部Flash還需要留一部分給固件本身如果模擬U盤時把Flash扇區(qū)映射搞錯了可能會把程序區(qū)給擦掉那是災難性的事故。2. 調試環(huán)境搭建硬件連接、工具鏈和一些早該知道的坑2.1 硬件準備調試ESPS的USB MSC功能硬件上我準備了這幾樣東西ESPS樣機、USB Type-C數(shù)據(jù)線、一個USB轉TTL的調試小板方便看串口日志、帶電流顯示的USB測試儀以及一個能抓USB協(xié)議包的工具。USB線這一項就坑過我。ESPS板子上是Type-C座子我隨手從抽屜里拿了根手機充電線結果插上電腦一點反應都沒有。后來才發(fā)現(xiàn)那根線只支持充電里面壓根沒有D/D-數(shù)據(jù)線。這類線在市面上極其常見特別是買小電器附帶的線。排查USB問題第一步先確認你用的線支持數(shù)據(jù)傳輸否則后面所有努力都是白費。判斷方法很簡單插上后看電腦有沒有叮咚的插入提示音沒有就換線。USB測試儀在早期階段很有用它能直觀顯示設備枚舉前后的電流變化。USB規(guī)范要求設備在上電到被主機配置完成之前從總線獲取的電流不能超過100mA。如果設備一上電電流就飆到300mA主機會直接拒絕枚舉或者反復復位設備。我遇到過一次類似現(xiàn)象最后的根因是板子上一個電容虛焊導致電源紋波太大把USB PHY的狀態(tài)機打亂了這種問題不看電流波形根本定位不到。2.2 串口與驅動的坑ESPS固件調試離不開串口日志。我用的是USB轉TTL小板這塊小板主控芯片是FT231X。Windows 10和11通常能自動識別這類芯片但偶爾會出現(xiàn)驅動掉鏈子的情況設備管理器里顯示一個帶感嘆號的USB Serial Converter。這時需要去芯片官網下載對應的驅動重新安裝。這里有一個很多人不知道的小細節(jié)FT231X這類USB轉串口芯片安裝驅動后設備管理器會同時出現(xiàn)一個USB Serial PortCOM號和一個USB Serial Converter設備節(jié)點。COM號屬于上層抽象底層驅動節(jié)點才是芯片本身。如果底層節(jié)點有問題即便COM號存在打開串口也會報參數(shù)錯誤。排查的時候先看底層節(jié)點狀態(tài)不要只盯著COM號。串口調試助手我習慣用SSCOM這類經典工具連接前先確認波特率、數(shù)據(jù)位、停止位和流控選項。ESPS固件串口打印用的115200/8/N/1沒有硬件流控。新手常犯的錯是默認勾選了RTS/DTR控制導致板子在打開串口的瞬間被復位置位日志只打了一行就沒了。所以接線調試時打開串口后先觀察兩三秒確認設備沒有異常復位再操作。2.3 USB抓包怎么抓USB調試只看日志和代碼排查效率很低。抓包一定要學會這是定位問題最直接的手段。ESPS是USB 2.0全速設備Full Speed12Mbps抓包方案有幾個選擇硬件USB分析儀比如Total Phase Beagle USB 480抓包準確、帶時間戳就是貴個人開發(fā)者不一定舍得買。Wireshark USBPcap組合免費能抓Windows下的USB協(xié)議包適合分析枚舉過程和數(shù)據(jù)傳輸。Bus Hound老牌免費USB抓包工具Windows下用著很方便。Linux下可以用usbmon通過cat /sys/kernel/debug/usb/usbmon/0u看實時數(shù)據(jù)流。我用的是Wireshark加USBPcap配合Bus Hound驗證。抓包原理上要注意一個限制軟件抓包工具是在主機操作系統(tǒng)的USB協(xié)議棧層面抓包能看到主機和設備之間的控制傳輸、Bulk傳輸數(shù)據(jù)但看不到底層電氣信號異常比如D上拉時序問題、信號質量抖動。這類問題只能靠硬件分析儀或示波器。抓包的時候還有個技巧軟件工具抓包會引入一定延遲但MSC使用的是Bulk傳輸協(xié)議本身有超時重試機制抓包對時序影響不大。真正受影響的是等時傳輸Isochronous和中斷傳輸Interrupt抓包時可能出現(xiàn)主機側超時。MSC調試完全不用擔心這個。3. 跑通MSC前必須先懂的幾個協(xié)議節(jié)點3.1 枚舉過程與設備描述符USB設備接入主機后主機并不知道插進來的是什么設備一切都要從枚舉開始。枚舉流程大致是主機檢測到設備接入給設備復位然后讀取設備描述符、分配地址、讀取配置描述符、選擇配置。這一步完成后設備才算是被主機認識了。設備描述符是18個字節(jié)開頭的兩個字節(jié)分別是bLength0x12和bDescriptorType0x01。這個看似簡單的字段我在調試ESPS時還真栽過一回當時把描述符數(shù)組定義成了const uint8_t DeviceDescriptor[] { ... }結果編譯器按4字節(jié)對齊做了填充數(shù)組長度不是18MCU返回給主機的描述符長度就變成了20字節(jié)。主機收到后直接判定描述符非法枚舉失敗。后來查了編譯器的對齊規(guī)則把結構體用__attribute__((packed))強制緊湊排列才解決問題。MSC設備的關鍵描述符包括設備描述符里的idVendor和idProduct接口描述符里的bInterfaceClass 0x08MSC類、bInterfaceSubClass 0x06SCSI透明命令集、bInterfaceProtocol 0x50Bulk-Only Transport。這三個字段必須配對正確主機才能正確加載系統(tǒng)自帶的大容量存儲驅動。字符串描述符也是個容易翻車的地方。如果設備描述符里聲明了iManufacturer1、iProduct2、iSerialNumber3那么后續(xù)必須有對應的字符串描述符而且內容必須是UTF-16LE編碼。很多人圖省事直接填ASCII字符串結果在Linux下字符串變亂碼甚至導致枚舉中斷。一系列描述符的結構如下給讀者一個直觀印象設備描述符 12 01 10 01 00 00 00 40 34 12 78 56 00 01 01 02 00 01 配置描述符 09 02 20 00 01 01 00 80 32 接口描述符 09 04 00 00 02 08 06 50 00 端點描述符OUT 07 05 01 02 40 00 00 端點描述符IN 07 05 81 02 40 00 00其中bcdUSB為0x0110表示USB 1.1bMaxPacketSize0為0x40表示端點0最大包長64字節(jié)。配置描述符里的wTotalLength0x0020說明配置總長度是32字節(jié)剛好等于配置、接口、兩個端點描述符的長度之和。3.2 BOT協(xié)議CBW與CSWMSC設備通常會實現(xiàn)Bulk-Only TransportBOT協(xié)議整個傳輸流程圍繞兩條Bulk端點進行一條OUT、一條IN每筆事務分為三個階段主機發(fā)送CBWCommand Block Wrapper到OUT端點傳輸數(shù)據(jù)階段根據(jù)CBW中的方向標志決定數(shù)據(jù)流方向最后設備返回CSWCommand Status Wrapper到IN端點告知執(zhí)行結果。CBW固定31字節(jié)結構如下dCBWSignature // 固定為0x43425355即USBC dCBWTag // 命令的標記字段 dCBWTransferLength // 期望傳輸?shù)淖止?jié)數(shù) bmCBWFlags // 位7為1表示數(shù)據(jù)階段方向為設備到主機為0表示主機到設備 bCBWLUN // 邏輯單元號通常為0 bCBWCBLength // 有效SCSI命令塊長度 CBWCB[16] // 具體的SCSI命令塊CSW固定13字節(jié)dCSWSignature // 固定為0x53425355即USBS dCSWTag // 必須與CBW中的dCBWTag一致 dCSWResidue // 剩余未傳輸?shù)淖止?jié)數(shù) bCSWStatus // 0表示成功1表示命令失敗2表示階段錯誤調試MSC狀態(tài)機時最容易出錯的就是階段錯誤Phase Error。比如主機發(fā)出一個READ(10)命令期望設備返回數(shù)據(jù)結果設備因為底層存儲讀失敗直接在IN端點返回了STALL握手包主機收不到數(shù)據(jù)就會上報錯誤甚至重置整個USB設備。正確的做法是如果數(shù)據(jù)階段出錯設備應該STALL對應的端點并且在后續(xù)收到CLEAR FEATURE請求時把BOT狀態(tài)機重置到CBW接收階段。很多不成熟的MSC實現(xiàn)沒有正確區(qū)分命令失敗和階段錯誤導致Windows還能湊合容忍Linux直接報錯。3.3 SCSI命令與文件系統(tǒng)的配合MSC設備本身不處理文件系統(tǒng)它只負責響應SCSI命令把存儲介質抽象成一塊塊固定大小的扇區(qū)。Windows或Linux通過SCSI READ/WRITE命令讀寫這些扇區(qū)然后在主機側建立FAT32、exFAT或ext4等文件系統(tǒng)。ESPS設備端需要實現(xiàn)的SCSI命令并不多但每個都必須仔細INQUIRY返回設備類型0x00表示直接訪問塊設備、廠商字符串、產品字符串等。TEST UNIT READY查詢設備是否就緒。READ CAPACITY(10)返回介質最后一個LBA和扇區(qū)大小。READ(10) / WRITE(10)按LBA讀寫指定長度的扇區(qū)。MODE SENSE(6)返回介質參數(shù)主機在枚舉和格式化時會查詢回一頁默認參數(shù)即可。START STOP UNIT控制介質啟??梢栽谠撁罾镒鼍彺嫠⑿隆REVENT ALLOW MEDIUM REMOVAL鎖介質防止用戶在拷貝數(shù)據(jù)時拔出TF卡。有一個關鍵點READ CAPACITY(10)返回的扇區(qū)大小不能隨便填?,F(xiàn)在很多TF卡物理扇區(qū)是4096字節(jié)如果設備直接把扇區(qū)大小報成4096而FatFS又按512字節(jié)邏輯扇區(qū)來管理兩邊一沖突數(shù)據(jù)就寫亂了。穩(wěn)妥的做法是讓MSC層固定以512字節(jié)為邏輯扇區(qū)底層再根據(jù)TF卡的實際物理扇區(qū)做轉換。主機側格式化時會按設備上報的扇區(qū)大小來操作512字節(jié)的兼容性最好。FatFS這類設備端文件系統(tǒng)也要小心。ESPS固件代碼里FatFS在后臺采集任務中不斷寫入新數(shù)據(jù)同時主機通過MSC讀取同一張卡。這種雙端并發(fā)訪問在文件系統(tǒng)層沒有做鎖保護一旦主機發(fā)出WRITE命令修改了文件系統(tǒng)結構而固件后臺還在寫同一個文件就會產生目錄項混亂。我最后的方案是檢測到USB MSC主機連接后立即停止后臺寫入任務把FatFS所有文件同步關閉讓主機完全獨占TF卡。拔出后重新掛載FatFS。雖然粗暴但能保證數(shù)據(jù)一致性。4. 第一次插入電腦毫無反應一場典型的枚舉失敗排查4.1 現(xiàn)象與初步判斷ESPS的MSC固件第一次上電調試時USB線插入電腦后沒有任何反應設備管理器中連未知設備都沒出現(xiàn)。這比出現(xiàn)感嘆號還難查至少出現(xiàn)未知設備說明主機檢測到了物理連接。我當時的排查思路是這樣的物理層沒反應可能性無非幾種——USB線問題、D/D-沒接上、設備側沒有上拉、USB PHY沒有正常工作。先換線測試沒用然后測量板子上D/D-對地電壓。正常情況下全速USB設備上電后D線上應該被上拉到3.3V或者3.0V左右設備端通過1.5k電阻上拉D-保持接近0V。如果D電壓為0說明設備端根本沒有打開上拉電阻。ESPS板子的D上拉是通過GPIO控制的我查了固件代碼發(fā)現(xiàn)USB初始化函數(shù)里漏了拉高GPIO的操作上拉根本沒打開。這個問題雖然低級但提示了一個重要的調試思路USB設備枚舉的第一件事是讓主機發(fā)現(xiàn)你。全速設備靠D上拉來宣告我在這里低速設備則靠D-上拉。如果你的設計是用外部模擬開關或者GPIO控制上拉一定要在USB外設初始化之前或者同時完成拉高順序錯了主機會認為設備掉線。4.2 抓包定位過程修復上拉問題后電腦終于有反應了變成設備管理器里出現(xiàn)未知USB設備設備描述符請求失敗。這個階段光靠看代碼已經不高效必須上抓包工具。我用Wireshark加USBPcap抓到的枚舉過程是這樣的主機發(fā)出GET_DESCRIPTOR請求讀取設備描述符設備返回了18字節(jié)數(shù)據(jù)但主機端判定數(shù)據(jù)無效。通過逐字節(jié)比對返回內容和預期值發(fā)現(xiàn)設備返回的bMaxPacketSize0字段是0x00而這會導致主機無法正確解析后續(xù)傳輸。為什么bMaxPacketSize0會是0回到代碼里看設備描述符數(shù)組定義無誤但初始化過程中USB外設的FIFO配置在枚舉之前還沒有完成導致描述符數(shù)據(jù)在讀出時被截斷或者填充為零。具體來說STM32系列MCU的USB全速外設擁有一個可配置的FIFO空間分為多個端點緩沖區(qū)。端點0的收發(fā)緩沖區(qū)大小必須在使能USB前分配好否則設備在響應控制傳輸時沒有可用的FIFO空間硬件會返回錯誤數(shù)據(jù)。這里需要特別提醒的是描述符請求是主機在地址0階段發(fā)出的控制傳輸數(shù)據(jù)階段最多只有8字節(jié)默認控制端點最大包長通常是8字節(jié)全速設備是8/16/32/64可選。在未分配地址之前主機還不知道設備的bMaxPacketSize0所以第一個GET_DESCRIPTOR請求只會讀取設備描述符的前8個字節(jié)。設備必須在此時讓主機看到有效的bMaxPacketSize0值后續(xù)通信才會順暢。4.3 最終根因與修復最終定位的根因不在描述符數(shù)組而在于USB外設FIFO初始化順序我原先在USB_Init()函數(shù)中先打開了USB全局中斷然后才配置PMA緩沖區(qū)描述符表和FIFO分配??刂苽鬏斦埱蟮竭_時FIFO區(qū)域還是未初始化狀態(tài)導致數(shù)據(jù)錯亂。把FIFO配置和描述符表初始化放到開中斷之前問題迎刃而解。這給了一個復盤要點遇到USB枚舉失敗抓包永遠比盲試快。同樣是描述符請求失敗可能是數(shù)組定義問題、FIFO配置問題、時鐘問題甚至可能是供電問題。通過抓包能看到主機收到的實際字節(jié)讓問題從猜變成看。當時如果繼續(xù)靠翻代碼硬看可能還要多花一兩天。枚舉階段我還總結了一個檢查清單推薦給所有做USB設備的開發(fā)者檢查項常見錯誤定位方法D/D-上拉電阻全速設備用了D-上拉測量D/D-電壓設備描述符長度編譯器對齊導致長度錯誤抓包比對空包bMaxPacketSize0錯誤設為64以上抓包讀前8字節(jié)USB時鐘沒有48MHz串口打印寄存器FIFO配置開中斷先于緩沖區(qū)初始化代碼審查VID/PID與其他設備沖突設備管理器查看字符串描述符編碼不是UTF-16LELinux下lsusb -vE位一個經驗VID/PID不要亂填。如果填了別人已經量產注冊的VID/PIDWindows的驅動緩存可能會加載完全不對的驅動導致設備行為異常。沒有公司自有VID時可以用MCU廠商分配給評估板的VID/PID調試但正式量產前必須換成自己的。5. Windows能識別、Linux不買賬不同系統(tǒng)的差異化表現(xiàn)5.1 現(xiàn)象描述枚舉問題解決后ESPS設備在Windows 11下可以正常識別為USB大容量存儲設備并彈出了盤符能像普通U盤一樣打開。但拿到Linux機器上一測試dmesg里的日志讓人頭大usb 1-2: new full-speed USB device number 12 using xhci_hcd usb 1-2: New USB device found, idVendor1234, idProduct5678, bcdDevice 1.00 usb 1-2: New USB device strings: Mfr1, Product2, SerialNumber3 usb 1-2: Product: ESPS Mass Storage usb 1-2: Manufacturer: ESPS usb 1-2: SerialNumber: 20240601 usb-storage 1-2:1.0: USB Mass Storage device detected scsi host4: usb-storage 1-2:1.0 scsi 4:0:0:0: Direct-Access ESPS Mass Storage 1.00 PQ: 0 ANSI: 0 sd 4:0:0:0: [sdb] 0 512-byte logical blocks: (0 B) sd 4:0:0:0: [sdb] Write Protect is off sd 4:0:0:0: [sdb] Mode Sense: 00 00 00 00 sd 4:0:0:0: [sdb] Capacity: 0 bytes, 0 sectors注意這一行sd 4:0:0:0: [sdb] 0 512-byte logical blocks: (0 B)。Linux內核讀取到的磁盤容量是0。而Windows下卻能看到正確的容量。這就是兩個系統(tǒng)在MSC協(xié)議處理上的典型差異。5.2 Linux下的確查出問題Windows對SCSI命令的容錯性比Linux高很多。Windows在設備枚舉后即使READ CAPACITY(10)返回的容量為0它仍然會嘗試掛載卷并彈出需要格式化的提示讓用戶感覺至少識別到這個盤了。Linux更加嚴格如果容量為0就直接判定設備無效不創(chuàng)建塊設備節(jié)點。ESPS出現(xiàn)容量為0的原因出在SCSI命令實現(xiàn)的一個細節(jié)READ CAPACITY(10)命令的CDB結構如下Byte 0: 0x25操作碼 Byte 1: LUN及保留位通常為0 Byte 2-5: LBA邏輯塊地址通常為0 Byte 6-7: 保留 Byte 8: PMI及保留位 Byte 9: 控制字節(jié)數(shù)據(jù)階段返回8字節(jié)Byte 0-3: 最后一個邏輯塊地址LBA4字節(jié)大端 Byte 4-7: 邏輯塊大小4字節(jié)大端通常為512當時我的實現(xiàn)是直接把FatFS的f_getfree返回的扇區(qū)總數(shù)填進去而沒有考慮FatFS返回的free cluster數(shù)量和實際扇區(qū)數(shù)的換算關系。換算錯誤導致上報的最后一個LBA為負數(shù)即非常大的無符號數(shù)Linux內核判斷超出了其內部上限直接修正為0。Windows不會做這種細粒度校驗它要求驅動盡量上報真實值如果超過上限就按實際返回值處理所以Windows還能用。修復方式是把容量計算的邏輯換成了底層SD卡驅動的物理扇區(qū)數(shù)不經過文件系統(tǒng)層徹底避開了FatFS的影響。5.3 空卡與格式化問題的處理調試過程中還有一個常見場景插入一張全新未格式化的TF卡。這種情況下設備端文件系統(tǒng)尚未建立MSC層上報READ CAPACITY時應返回正確的物理容量但SCSI INQUIRY和PREVENT ALLOW MEDIUM REMOVAL依然要正常響應。Windows會彈窗提示需要格式化磁盤用戶可以點擊格式化主機端會通過WRITE命令寫入引導扇區(qū)和文件系統(tǒng)結構。設備端必須保證這些寫操作真正落盤。我在這里又踩了一個坑ESPS固件格式化時Windows寫入了FAT32引導扇區(qū)但隨后讀取時返回的數(shù)據(jù)和寫入的不一致。最后定位到是SD卡驅動的寫入函數(shù)在DMA傳輸時緩存沒有失效讀取的是DMA緩沖區(qū)里的舊數(shù)據(jù)。這個問題的根源是芯片的D-Cache沒有做一致性維護嵌入式中DRAM緩存和DMA之間的經典沖突。解決方案有兩個一是關閉D-Cache簡單粗暴但對性能有一定影響二是用MPU把DMA緩沖區(qū)所在的RAM區(qū)域配置為不可緩存并在每次DMA操作前后執(zhí)行SCB_CleanDCache和SCB_InvalidateDCache。ESPS最終選擇了第二種。Linux下掛載問題的另一個根因是DPRDOS Partition Record分區(qū)表。有些MSC設備實現(xiàn)直接把整個介質作為一個超級軟盤Superfloppy不寫分區(qū)表Windows認Linux也認。但如果設備擅自寫了一個分區(qū)表里面的分區(qū)偏移和大小與實際不符Windows會嘗試按分區(qū)表掛載Linux則直接拒絕并提示unable to read partition table。調試時我建議先用電腦把TF卡格式化成FAT32然后用十六進制編輯器把前512字節(jié)導出保存為模板設備端在新卡初始化時直接寫入這個模板比手搓DBR可靠得多。6. 大文件拷貝必現(xiàn)崩潰緩沖區(qū)、DMA、看門狗連環(huán)坑6.1 崩潰現(xiàn)象記錄當設備能在Windows和Linux下都正常識別后我進行了拷貝測試。小文件沒問題幾十MB的文件也能正??匠鰜淼坏┛截惓^300MB左右的單個大文件拷貝進度到80%-90%時設備就會掉線Windows提示該設備的前一個USB設備已停止正常工作或者Linux下出現(xiàn)usb 1-2: reset full-speed USB device number 12 using xhci_hcd sd 4:0:0:0: [sdb] tag#0 FAILED Result: hostbyteDID_ERROR driverbyteDRIVER_OK blk_update_request: I/O error, dev sdb, sector 409600這種進度過半就崩的現(xiàn)象非常有規(guī)律幾乎可以斷定是某個資源在長時間、大數(shù)據(jù)量傳輸下被耗盡。我猜測有三個方向USB接收緩沖溢出、SD卡寫入速度跟不上導致超時、看門狗復位。6.2 排查鏈路第一步是加日志。ESPS固件在USB中斷、SD卡寫回調、看門狗喂狗函數(shù)里都加了計數(shù)日志通過串口每隔1秒打印一次??截惔笪募耐瑫r觀察串口輸出結果發(fā)現(xiàn)一個異常每次崩潰前串口都會輸出一行SD_WRITE_TIMEOUT錯誤。這基本鎖定了問題方向USB從主機接收數(shù)據(jù)的速率大于SD卡實際寫入速率。PC在通過MSC寫文件時一次會發(fā)很多個WRITE(10)命令命令之間沒有握手等待USB協(xié)議站在Bulk傳輸層面允許設備用NAK來暫時阻止主機繼續(xù)發(fā)送。設備端如果來不及處理應該在USB外設端點上產生NAK響應給固件爭取時間。但ESPS實現(xiàn)的USB中斷處理邏輯里每收到一個OUT包就立刻把緩沖區(qū)交給SD卡DMA然后馬上重新使能端點接收。如果SD卡還在忙新數(shù)據(jù)又進來了緩沖區(qū)就被覆蓋導致數(shù)據(jù)錯亂。第二步查DMA和緩存一致性。ESPS主控是帶D-Cache的Cortex-M7內核最初我為SD卡DMA分配了靜態(tài)緩沖區(qū)但忘了在DMA寫入SRAM之后、CPU讀取數(shù)據(jù)之前做Cache Invalidate操作。這就導致CPU讀到的是Cache里的舊數(shù)據(jù)數(shù)據(jù)損壞后FatFS文件系統(tǒng)直接報錯主機會看到READ返回的數(shù)據(jù)和寫入時不匹配進而報I/O錯誤。第三步查看門狗。ESPS固件開啟了一個獨立看門狗正常喂狗調用在main主循環(huán)里。但在大文件拷貝時USB中斷頻率極高主循環(huán)如果被USB中斷長期搶占喂狗函數(shù)的執(zhí)行會被無限推遲最終看門狗超時復位整個系統(tǒng)。從崩潰現(xiàn)象來看設備掉線后電腦提示USB設備已停止工作這實際上就是MCU復位后USB會話斷開了。6.3 修復措施針對三個根因我逐一做了修改。緩沖策略改成雙緩沖乒乓結構定義兩個緩沖區(qū)USB DMA先寫入緩沖區(qū)A寫滿后提示CPU處理同時USB端點立刻指向緩沖區(qū)B繼續(xù)接收主機數(shù)據(jù)。CPU在SD卡空閑時把緩沖區(qū)A的數(shù)據(jù)寫卡寫完后等待下次切換。這樣USB接收不被SD卡寫卡阻塞也不會因為緩沖區(qū)覆蓋導致數(shù)據(jù)丟失。SD卡驅動加了一層忙等待流控。每次接收完USB數(shù)據(jù)后先檢查SD卡狀態(tài)寄存器如果還在忙就在USB端點上返回NAK。USB協(xié)議本身允許Bulk端點無限NAK主機會等待設備準備好不會因此超時。這一步很關鍵流的節(jié)奏掌握在設備手里而不是主機手里。看門狗問題通過調整喂狗策略解決。主循環(huán)仍然喂狗但在SD卡寫卡循環(huán)里也會定期喂狗同時把USB中斷處理邏輯縮短——中斷里只做緩沖區(qū)切換和事件計數(shù)真正的文件系統(tǒng)操作放到主循環(huán)里處理避免中斷長時間占用CPU也避免主循環(huán)餓死。DMA緩沖區(qū)通過MPU配置為不可緩存區(qū)域并保持Cache操作的正確性。修改后我再跑一次1GB大文件拷貝測試不再復現(xiàn)之前的崩潰。修復前后對比數(shù)據(jù)項修復前修復后拷貝300MB單文件約90%時設備掉線正常完成拷貝1GB單文件無法完成約2分15秒約7.5MB/s連續(xù)拷貝10個文件第3-4個文件時崩潰全部正常磁盤校驗chkdsk有錯誤無錯誤這里說句實話7.5MB/s的速率在全速USB12Mbps理論上限附近因為USB全速帶寬本身只有1.5MB/s左右理論值MSC BOT協(xié)議還有帶寬損耗。當時看到這個數(shù)據(jù)我第一反應是哪里沒配置對后來仔細檢查才發(fā)現(xiàn)ESPS的主控USB控制器只支持全速不支持高速480Mbps。在USB 2.0全速模式下MSC實際傳輸速度上限約1MB/s讀操作能到1.2MB/s左右。上面數(shù)據(jù)的7.5MB/s是后來換用主板側的USB 2.0高速控制器重新測試的結果。這也提醒大家USB全速和高速差異巨大設計產品時如果對傳輸速度有要求選型時必須注意MCU的USB控制器是否支持高速。7. 全平臺驗證與調試經驗沉淀7.1 驗證矩陣與速度測試修完所有問題后我做了一輪全平臺驗證不能只在Windows下跑通就交付。驗證矩陣包括平臺枚舉讀取寫入格式化熱插拔Windows 10 x64通過通過通過通過通過Windows 11 x64通過通過通過通過通過Ubuntu 22.04通過通過通過不適用用mkfs.vfat通過macOS 13通過通過通過通過通過Android手機OTG通過通過只讀不適用部分通過Android OTG測試有點出乎意料ESPS枚舉成功但寫入權限受限。原因是ESPS上報的MSC邏輯單元沒有實現(xiàn)寫保護位但Android的存儲訪問框架有自己的策略非系統(tǒng)應用無法直接寫入外部USB存儲。這個屬于平臺限制不影響主要場景用戶從ESPS往外拷數(shù)據(jù)。速度測試用ATTO Disk Benchmark和CrystalDiskMark各跑了一輪。在USB 2.0高速模式下讀速度約36MB/s寫速度約20MB/s達到了ESPS外殼上標注的高速U盤水平。注意這個速度受限于TF卡自身的讀寫速度如果卡是Class 4的速度會明顯下降。建議量產時在說明文檔里注明推薦使用Class 10以上TF卡。7.2 幾條靠踩坑換來的經驗整個ESPS USB MSC調試下來有幾個經驗我覺得特別值得分享。第一個經驗USB問題調試抓包工具是最值得先投入學習的。很多人習慣拿串口日志加代碼review死磕遇到枚舉失敗這類問題會非常低效?;ò胄r學會用Wireshark抓USB包很多問題一眼就能看出來。我這次調試第一階段的枚舉失敗如果早用抓包可能半天就定位完了。第二個經驗廠商提供的USB MSC參考例程是起點但它只覆蓋了裸的MSC讀寫底層存儲介質。真正復雜的部分是MSC層和文件系統(tǒng)層、底層驅動、應用任務的協(xié)作。尤其當你有兩個系統(tǒng)同時在訪問同一張卡時必須設計好訪問權限的切換機制。ESPS的方案簡單粗暴但有效USB主機連接時獨占斷開后釋放給應用層。第三個經驗代碼里每個關鍵路徑都要留日志而且日志要帶上時間戳和關鍵值。這次排大文件崩潰問題如果沒有串口日志里SD_WRITE_TIMEOUT那一行我可能會在USB配置上浪費很多時間。日志系統(tǒng)的價值平時不明顯出問題時它就是最有力的線索。第四個經驗先確認你的USB是Full Speed還是High Speed再談速度優(yōu)化。很多人在全速USB上做MSC折騰到最后發(fā)現(xiàn)速度上不去其實協(xié)議棧和代碼都沒問題只是硬件本身不支持高速。產品需求里若有導出大量數(shù)據(jù)的場景MCU選型建議直接選中帶USB HS控制器的芯片。再補充一個小技巧調試階段給ESPS板子保留一個UART串口調試引腳不要所有引腳都鋪完。USB問題調試過程中既要防止主循環(huán)餓死又要檢查中斷風暴串口日志是唯一能同時觀察兩側狀態(tài)的手段。沒有串口你只能靠PC端的表現(xiàn)盲猜。后來我把這個調試引腳定義成了標準4Pin排針放在板子一角成了所有后續(xù)項目通用的調試口。最后說一下目前的狀態(tài)ESPS的USB MSC功能已經穩(wěn)定跑了兩個月累計拷貝數(shù)據(jù)量超過200GB沒有再出現(xiàn)掉盤、文件損壞或枚舉失敗的問題。這次調試給我最大的體會是USB MSC這個簡單U盤背后是協(xié)議狀態(tài)機、底層存儲驅動、系統(tǒng)兼容性和實時操作系統(tǒng)調度四者的深度融合任何一個環(huán)節(jié)欠賬最后都會在用戶插上電腦這個動作上報復回來。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www色中色综合| 天天天添天天操| 99色色网| 开心五月婷婷在线| WWW,五月| 亚洲中文字幕AV在线| 五月天婷婷黄色| 大香蕉娱乐| 五月丁香色综合| 欧美情月伍月天| 中文字幕在线免费看线人| 99久久66| 国产熟女一区二区三区五月婷| 激情五月天婷婷丁香| 婷婷五月免费在线| 熟女色专区| 五月天丁香婷婷视频网址| 五月婷婷婷| 99免费| 狠狠久久婷婷| 丁香婷婷狠狠97| 亚洲精品色| 玖玖婷婷五月天| 韩国中文字幕91| 五月亭亭网成人在线视频| www激情| 五月婷婷黄色网址| 国产精品天天狠天天看| 亚洲人妻av| 精品国产va久久久久久久| av一区免费看| 青柠影视免费高清电视剧| 婷婷五月天六月丁香| 只有精品视频在线观看| 久久九区| 九九综合九九| 亚洲成人av在线| 国产午夜精品一区二区三区四区| 99操视频| 天天综合在线网| 九九精品网站| 天天久久狠狠色综合| 国产av天天插天天操天天爽| yazhoujiqingav| 五月天激情啪啪| 久久婷婷五月综合色播| 婷婷五月天视频在线观看| 97久久视频| AV六月丁香| 色五月激情网| 狼人久草| 亚洲色五月| 亚洲婷婷五月天| 人人看人人摸人人| 色色网五月激情| 天天做天天要天天爽| 草草视频91| 欧美亚洲成人在线| 青青草轻轻操| 97色婷婷成人综合在线观看| 久热9| 9久热在线视频精品| 99资源在线| www.婷婷com| 97色干在线观看| 六月丁香婷| 最新久久网址| 91一起操| 99在线精品免费视频| 婷婷激情六月| 天天插天天射| 六六久久黄色| 欧美性爱一区| 轮奸综合网| 99综合视频一体| 99精品视频偷拍| 亚洲AV第二区国产精品| 青青热视频| 色综合色综合婷婷热| 亚洲成人免费在线| 思思99re这里只有| 这里只有精品无码| 色欲色香综合网| 九九热99视频| 五月色情| 任你日视频| 97干在线视频| 五月丁香网av| 激情综合网五月激情| 婷婷色正月| 五月婷婷自拍| 91精品久久久久久77777| 日本一级黄色电影| 五月天婷婷色播综合在线| 欧洲综合一区| 久久女人天堂| 伊人日日干| 99亚洲欧洲| 久久机只有这里精品| 深爱五月天 开心网| 99热在线观看免费| 99这里只有| 91爱操| 天堂AV三级| 丁香五月婷婷乱| 亚洲99热| 三男玩一女三A片| 丁香狠狠色婷婷久久无码视频| 日韩三及成人AV片| 婷婷性爱无码视频| www.99视频| 大香蕉五月天婷婷| 专区无日本视频高清8| 亚洲人妻av| 99在线精品观看99| 麻豆精品| 五月婷婷婷自由综合| 婷婷大乡焦噜噜| 香蕉久久国产AV一区二区| 伊人久久丁香狠狠婷婷综合香蕉 | 久久久久人妻| 熟惀91九色在线| www.色9| 日韩狠狠色婷婷| 九九激情| 波多野结衣不卡AV| 五月天激情网址| 久机视频这只有精品| 玖玖综合色| 五月激情综合婷婷| wwccc久久久| 天天色噜| 丁香操逼| 日日色五月天| 97超碰人人操| 99国产小视频| 五月美女婷婷风骚| a69在线视频| 婷婷五月天开心网| 丁香五月激情五月色综合| 色私五月婷婷| 五月丁香啪| 综合色色五月| 无码婷婷五月天| www.yw尤物| 99视频日韩| 99这里只有精品视频在线| 婷婷成人五月天成人文学| 丁香婷婷五月香蕉91| 久热天堂| 五月开心激情| 午夜福利8055| 久久婷婷视频| 四季AV综合网| 九九干视频| 天天色中文字幕女优AV| 九月色婷婷综合| 婷婷在线播放| 婷婷亚洲激情在线观看视频| 五月婷婷综合在线| 婷婷久久免费看| 99热这里只有精品22| 久久九九囯产| 日本色婷婷| 免费在线观看av网站| 天天日天天插天天操| 超碰免费成人| 六月丁香成人| 美国少妇性做爰| 99久久a线观| 色吧五月婷婷| 热久久66| 国产av网| 五月婷婷成人| 久久精品99久久| 婷婷五月,偷窥偷拍网| 狠狠九九婷婷韩| 色深爱五月| 伊人深爱综合| 奇米色大香蕉| 亚洲精品在线视频| 欧美日本黄色| 婷婷五月av| 五月婷俺去也| 日韩专区五月天婷婷丁香| 热的国产,热的综合,热的有码| 久热免费视频| www.久久av.com| 日本色色影院| 五月婷婷五月| 337午夜福利| 日韩AV在线电影| 五月色天情| 9热久久在线| 亚洲视频色婷婷| 色五月婷婷自拍| 日本一级特黄大片AAAAA级| 亚洲精品国产setv| 国产成人精品亚洲线观看| 99热国产国产| 人人爽欧美婷婷久久久五月丁香| 久久人人妻| 婷婷五月天激情综合| 久草婷婷在线| 欧美性爱五月天| 亚洲激情亚洲激情| 激情久久月| 97在线/亚洲| 丁香五月天啪啪| 天天干天天爽| www.minyis.com【JT】实力收量可预付QQ2101460746 | 在线观看av网站| 色婷五月| 五月亭久久无码视频| 在线观看亚洲视频影院| 嫩草AV久久伊人妇女超级A| 色婷婷狠狠色| 综合色色网| 在线视频另类| 丁香激情综合| 欧洲亚洲免费视频9| 老司机视频lsj爱就色| 国产精品美女| 丁香5月婷婷| 五月综合丁香婷婷| 亚洲乱码日产精品BD| 思思热99热| 午夜丁香婷婷| 国产小网站| 99色热| 五月天激情视频五月天| wuyuedingxiang99| 色婷网| 久久久宗合视频88| www99热| www狠狠| 综合AV在线| 五月丁香综合色婷婷| 黄色片区子| 亚洲色色图片| 久久这里精彩免费在线观看| www.sebowuyue| 性欧美大战久久久久久久83| 9久久精品| 久久九九国产精品怡红院| www.激情五月天.com| 婷婷五月综合色中文字幕| 97在线视频观看| 久久98热re| 夜夜做夜夜愛| 五月婷婷狠狠干| 91精品综合久久久久久五月丁香| 五月婷婷深深爱| 日韩不卡123| 久久婷婷视频| 国产成人+综合亚洲+天堂| 久久九九爽| 青青草轻轻操| 色五月大香蕉| 美女激情综合| 亚洲色情久久| 五月天婷婷六月激情网| 色婷婷精品小视频| 婷婷五月天深爱| 91热er| 婷婷久久五月天| 丁香婷婷五月色成人网站| 日本在线wwww| 国产视频福利| AV电影在线播放| 九九久久五月天| 丁香五月激情五月| 99啪视频在线观看| 日本久久精品18| 激情五月婷黄版| 99热免费18| 日韩三级高清无码| 日韩无码系列| 婷婷六月丁香激情| 7月婷婷六月丁香| 久9热| 色综合色五月| 怡红院院在线导航网| 99热精品在线播放观看| 怕怕av| 思思热99er在线视频| 开心五月天私房婷婷| 去干网av| 99热这里只有国产精品| 99色视频在线| 欧美色图天堂网| 99色网站| 五月综合久久| 桔色成人在线| 碰超99| 欧美色色色色色色色色色色| 婷婷色五月丁香六月欧美啪| 丁香五月激情婷婷激情| 婷婷五月天熟妇| 久99热| 五月婷婷丁香六月| 久久免费精彩视频| 超碰啪啪网| 婷婷激情视频欧美视频自拍视频欧美剧| 丁香五月婷婷在线观看| 狠狠干综合| av首页在线| 91精品婷婷国产综合久久| 婷婷五月天成人动漫 | 亚洲啪啪网| 丁香五月天色综合| 亚洲男女激情| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 久久R激情| 欧美乱码国产一级A片| 久久99热这里只有精品首| 五月四色婷婷| 丁香五月天视频| 色五月丁香91| 2050人人操免费工开爱| 色色色色综合网| 百度一下国产精品A| www.色五月.com| 五月天中文网| 九九热在线视频观看| 1024AV视频| 亚洲精品视频在线播放| 婷婷五月天六月丁香| 91婷婷| 色婷婷文字幕| 色在线免费观看| 久久狠狠高潮亚洲精品 天天摸夜夜摸夜夜狠狠摸| 五月婷婷丁香五月婷婷| 五月天婷婷成人网| 婷婷色女| 五月丁香婷婷综合网| 日韩成人影片在线观看| 久久这里99| 开心婷婷五月| 噜综合| 婷婷激情人妻| 综合99久久天天综合| 亚洲精品国产精品乱码不99| 538在线精品| 婷婷丁香射射| 亚洲天天| 99rewww| 4399成人黄A片| 午夜丁香 婷婷| 国内精品玖玖| 色高清无码视频| 狠狠综合久久| 欧美日综合| 久久狠狠干| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 99爱视频在线观看| 色很很96| 日本99热| 狠狠 婷婷| 激情六月天| www.色五月| Xx色综合| 久久ww| 玖玖资源站国产| 日韩成人电影AV| 99干日本| 色情综合| 操嫩逼电影| 日韩成人不卡| 丁香六月婷婷综合在线| 国产综合久久久777777| 操逼六区| 成久综合视频| 涩丁香| 久久成人人妻| 另类激情五月| 夜精品无码A片一区二区蜜桃| 亚洲激情 久久| 色婷婷狠狠| 婷久看人爽| 日本欧美成人片AAAA| 婷婷瑟五月天久久综合| 99精品久久久久久久久| 天天射影院| 五月丁香六月香香蕉| 99日韩| 色五月丁香五月激情五月激情| 99re6热在线精品视频播放速度| 翔田千里 50岁 无码| 久久久久9| 五月激情在线| 婷婷五月天中文字幕| 久久日韩婷婷五月| 激情五月久久| 欧美激情综合色丁香婷婷五月天| 成人网在线视频| 色五月天电影| 色婷婷五月天天天干天天操天天爽 | 婷婷狠狠18禁久久| 亚洲色五月| 日本在线噜噜| 色综合综合色| 色噜噜狠狠狠狠色综合久欧美| 97色色网| 婷婷丁香五月天欧美| 97啪在线观看视频| 色色性爱视频| 五月丁香六月欧美综合网站| 激情五月图| 97碰 在线视频观看| 91久久九久久九久久九久久九久久| 97 A I色色| 日日爽日日操| 亚洲无码成人| 婷婷五月天丁香综合网| 天天日天天干天天操| 五月婷婷色吧!| 国产avapp 网| 操逼五月天| 99A片| 色五月丁香伊人五月| 成人午夜无码视频| 97精品综合久久内射| www.五月.com| 99综合| 久久在这里有精品| 久久久99婷婷久久久久久| 丁香五月天社区| 婷婷丁香六月| 开心深爱激情网| 五月婷婷色丁香| 五月婷婷熟女| 四月婷婷五月丁香| 色综合色色色色色色综合| 97天堂| 这里只有精品免费视频在线观看| www。88热在线视频免费观看| 冬月かえでAV无码播放| 99欧美精品99日本精品| 少妇熟女视频一区二区三区| www.婷婷五月| www.超碰| www.99在线| 天天爱天天狠天天透| 天天狠狠色| 欧韩性爱| 99热只有精品在线播放| 久久婷综合| 青996青| 91男人资源站| www.丁香黄色五月天人与| 五月综合色| 亚洲另类婷婷综合| 色五月综合在线| 一级无码作爱片| 欧美槡BBBB槡BBB少妇| 丁香五月久久| 久久草大香蕉| 天干夜夜操| 91色逼| 俺去也婷婷| 牛牛碰免费| www.色五月天.com| 日韩在线aaa| 79色色色色| 人妻精品久久久久久久| 婷婷丁香在线播放| 激情綜合W W W,激情五月天| 欧美婷婷五月天| 五月婷婷免费在线视频| 丁香久久五月婷综合| 亚洲成人av在线播放| 久久久性爱视频| 天天影院色| 五月天婷婷AV| 人人操AV| 玖玖婷婷免费| 狠爱婷色| 激情五月婷婷丁香六月| 五月天综合区| 婷婷五月亚洲一本在线丁香| 丁香五月欧美激情| 亚洲人人操| 激情九月婷婷九月| 性爱激情小说AV五月丁香花| 五月丁香| 精品三区影院| 夜色综合网| 亚洲综合99| 性欧美大战久久久久久久83| av无码电影| 国产成人+综合亚洲+天堂| 色综合爽| 色99在线观看| 99在线免费观看| 五月婷婷综合激情小说| 五月丁香六月欧美综合网站| 8区视频在线| 97色色色色色| 超碰色热| 97色在线视频| 婷婷五月天亚洲精品| 色色色色五月| 婷婷综合五月| 在线91日韩| 五月婷婷无码| 在线观看中文字幕| 久99| 激情综合网站| 深爱激情四射| 五月婷婷综合激情网| 婷婷色情 | 天天肏天天肏天天肏| 精品国产人人爱人人| 亚洲色婷婷五月| 超碰av在线| 影音先锋秋秋五月婷婷| 色婷婷手机在线| 婷婷丁香综合成人| 91久久久久久| 色碰碰| 狠狠色激情在线| 九九久热| 欧美搡BBBBB摔BBBBB| www.cao.com久久| 久久久香| 色5月丁香婷婷| 丁香五月av| 亚洲色网址| 爱狠射| 天天色播| 人人看人人草人人摸| 狼友视频在线观看18| 伊人丁香五月天丁香在线婷| 日韩成人无码| 亚洲99在线| av超碰在线| 热久久色| 色久九| 69激情小说| 在线中文字幕视频| 欧美成人AAA片一区国产精品| 激情五月天在线| 98热精品| 9色天堂| 免费看无码视频A级| 五月天婷婷五月| 色婷婷五月天在线| 久久精品99国产精品日本| 中文字幕av久久爽| 六月香五月婷| 欧美色色色色色| a在线免费v| 亚洲日韩26uuu| 丁香六月婷婷综合激情欧美| 97五月久久丁香婷婷| 日韩精品无码99| 99色色网| 超碰在线99| 思思热这里只有精品| 国产真实乱了老女人视频| 亚洲永久免费| 色情五月天丁香社区| 午夜微拍福利| 五月丁香婷婷激激激综合网色播| 亚洲操操| 丁香五月六月久久综合| 99热久| 大香蕉五月丁香| 婷婷日| 婷婷五月丁香五月| 99爱欧美| 五月婷三级片| 久久视频九九视频| 疯狂做受XXXX高潮A片| 五月久久婷婷| 手机在线日韩视频中文字幕| 丁香婷婷噜噜| 9久国产| 五月丁香婷婷深深爱| 99热精品网| 色五月丁香五月婷婷五月成人网| 欧美性猛交99久久久久99按摩| 色五月激情五月丁香五月婷婷啪啪综合 | 思思热精品在线观看| 少妇性按摩无码中文A片| 色婷婷五月天天天天天| 伊人在线视频| 五月天婷婷永久免费视频| av操B网站| 激情综合色婷婷六月天| 日韩美一级毛卡片| 婷婷大乡焦噜噜| 婷婷五月丁香欧洲| 国产激情AV| 五月香婷婷| 人妻久久久| 婷婷五月色| 青青草成人网| 婷婷五月天深爱| 婷婷五月天天| 五月婷婷狠狠干| 91狠狠综合久久久| 欧美成人AAA片一区国产精品| 婷婷综合伊人丁香| 九九人人看| 日本久久精品18| 成人五月天色天堂| 久久婷婷艹| 婷婷五月天黄色| 天天色月| 国产精品久久久爽爽爽麻豆色哟哟| 青青草原精品久久| 久婷婷婷| 综合AV网| 9久视频| 天天日天天摸天天| 五月婷婷婷综合网| 亚洲国产精品VA在线看黑人 | 日韩在线五月天婷婷| 久久免费试看120秒| 大香蕉九操| 久久99久久99精品免视看婷婷| 五月天啪啪网| 婷婷五月婷婷| 操人妻视频91| 国产FREESEXVIDEOS性中国| A A色色| 婷婷五月天中文字幕| 五月婷视频| 丁香美女主播视频在线观看| 996er在线观看| 丁香五月婷婷老师网站| 婷婷中文字幕| 丁香五月另类色婷婷麻豆| 操逼福利视频| 精品久久二6| 五月丁香婷婷激情爱爱| 天天弄天天操| 五月丁香激情婷婷| 亚洲无码九九| 亚洲五月天天| 热99精品视频五月| 九九人人看| 国产毛片欧美毛片久久久| 久久人妻精品| 思思热久热| 色色色色色级无码| 99久久婷婷| 五月丁香日逼| AA片在线观看视频在线播放| 五月婷在线| 五月丁香六月婷婷成人电影| 性生活视频98791| 婷婷五月天激情四射五月天激情| 色色色在线观看| 大香蕉丁香| 岛国在线观看91| 婷婷九月| 久久久久久久久久8888| 丁香五月激情五月| 九九这里有精品| 五月婷婷九月婷婷九月婷婷| 五月婷婷开心色伊人| 婷婷欧美综合| 亚洲色激情| 久久的爱大香蕉| seuuu婷婷| 国产五月视频| 久久久99精品免费观看| a在线观看| 任你艹| 26uuu亚洲| 丁香五月婷婷五月| 深爱综合网| 色啪影院| 五月婷婷性爱| www.夜夜操| 俺去也五月| 色激情综合狠狠婷婷| 另类 在线| 国产综合婷婷| 成人视频在线免费播放| 久久免费9| 1024操逼视频| 亚洲av成人在线| 五月天色色色| 婷婷五月在线综合| 激情都市五月天| 第四色婷婷五月| 成人综合伍月天| 激情小说五月欧美亚洲丁香| 亚洲第79页| 天天干天天拍| 99热最新| 人人插操| 91熟妇大香蕉| www.婷婷五月.com| 久久综合中文字幕| 超碰99在线观看| WWW.桔色成人.COM入口| 日日夜夜噜噜爽爽| 99狠狠操一| 丁香色五月 97干| 香蕉婷婷| 91日综合欧美| 色碰碰| 伊人青草成人| 色五月天在线| 久久久.COM| 五月婷在线观看| 无码AV免费精品一区二区三区| 草久私拍| 五月丁香色色网| 能看的AV网站| 99热这里只有精品8| 99热国产免费| 婷婷99狠| 99ri国产| 色丁香影院| 91精品国产99久久久久久天美| 99精品网| 月丁香久久久| 色婷婷丁香六月| 欧美婷婷五月天综合| 影音先锋四区| 五月天激情美女久久| 黄色激情久久| 激情五月六月丁香| 大香蕉99热| 九九九九热99超碰| 国产激情久久久| 亚洲99精品欧美一区| 五月丁香| 久婷婷五月综合欧美| 色综合五月| se色婷婷视频| 五月丁香久久呀| 日日夜夜干| 天堂久久丁香| 久操b网| 激情婷婷六月天| 亚洲精品成人| AV五月丁香| 涩婷婷五月天| 另类天堂| 超碰人人草| 五月丁香成人视频| 99热这里只有精品9| 波多野结衣AV无码Porn| www,婷婷| 北京熟妇搡BBBB搡BBBB| 久久婷婷色| 深爱激情综合| 色99久草在线| 婷婷免费无视频| 色色操| 国产精品日日躁夜夜躁| 性天天中文网| 久久婷婷五月综合色区| www.狠狠操.co m| 婷婷丁香熟妇综合网| 久久九九99.www| AV电影在线播放| 国产精品色婷婷久久久精品| av人人操| 五月天精品视频| 精品一二三区久久AAA片 | 成年AAAA色情| 99啪啪| 久9视频| 99免费热视频在线| 久久精彩视频99| 欧美性色五月天| 亚洲日韩一页精品发布| 婷婷五月丁香香蕉| 丁香五月婷婷网| 婷婷五月精品| 亚洲a色| 97涩婷婷| 天天天干夜夜夜操| 超碰97色| 人人干99| 91碰碰视频| 五月婷婷啪啪网| Www99热| 久久婷.com| av在线播放网址| 色五月婷婷五月天激情综合| 五月天丁香婷婷视频网址| 丁香婷婷人妻综合网| 搡BBBB搡BBB搡五十| 亚洲视频在线观看99| 亚洲精品一区无码A片| 五月丁香狠狠爱| 五月婷婷激情四季| 六月丁丁香| 天天综合天天玩夜夜玩天天玩夜夜玩| 亚洲V国产V欧美V久久久久久| 无码人妻一区二区三区四区| 91肏肏肏| 夜夜撸天天日| 一区操| 天天插轮理| 99精品久久久久久久久| 婷婷 色 丁香 夜| 色五月琪琪| www.久热| 天天操,夜夜骑| 色婷婷色丁香色欲av| 亚州操操| 天天爽爽日日做做| 激情小说色五月| 夜夜干夜夜操| 激情综合婷婷| 嫩BBB搡BBBB榛BBBB| 亚洲综合热| 久久婷婷五月综合精品蜜芽| 99精彩视频| 婷婷射图五月天| 色天堂A| 婷婷久久网| 亚洲色在线观看| 久综合| AV大片在线播放| 99亚洲精品视频| 热99这里只是精品| 熟女强人妻一区二区三区四区无| 丁香五月婷老师| 人人色婷婷五月天| 五月天大香焦| 99热免| 久久有码| 婷婷99狠狠躁天天| 午夜天堂一区人妻| AV在线免费播放| 情情五月天色| 色播婷婷五月天| 任你躁XXXXX麻豆精品| 久久久久亚洲AV无码网影音先锋| 五月天天丁香婷婷在线中| 婷婷五月色花丁香社区| 欧洲亚洲精品| 五月丁香婷婷视频| 99久久国产宗和精品1上映| 五月婷婷导航| 亚洲精品又粗又大又爽A片 | 亚洲AV综合在线观看| 五月婷婷伊人网| www.色五月.com| 春色激情| 开心五月深爱五月| 九九热精品在线| 婷婷五月天激情综合深爱| 大香蕉久久草| 亚洲色区17| 婷婷色色五月天| 99啪啪网| 天天色官网| 夜夜爽天天爽| 婷婷五月天激情电影小说| 天天噜天天爱| 国产操碰| 97亚洲婷婷| 九九精品9| 亚洲妇女熟BBW| 91se在线视频| 久久综合婷婷五月| 丁香五月激情无码视频| 人色五月天婷婷| www.99婷婷| 99久久视频| 不卡成人免费| 五月天综合在线网| 五月丁香亭亭| 五月丁香偷拍| 另类精品视频在线观看| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 色婷婷第四色| 97色五月丁香婷婷| 中文字幕乱码亚洲精品一区| 五月色综合| 五月婷婷丁香在线| 这里只有精品视频99| 大香蕉久久婷婷精品综合| 色色亚洲视频| 这里只有免费精品| 激情五月www| 天天操天天操天天操| 天天综合天天做天天综合| 丁香五月婷婷激情小说| 久久狠狠欧美| 99久在线精品| 久久丁香五月天| 欧美色99| 九九九这里只有精品| 久久免费精品小视频| 久草a片| 天天综合网91| 9操在线| 色优久久| 丁香五月色| 五月丁香六月婷婷,婷| 九九热精品| 九九爱这里只有精品| 婷婷第六色| 婷婷区日本| 五月天婷婷久色| 欧美噜一噜| 色丁香久久久| 色99在线观看| 婷婷五月激情的图片| 激情六月丁香| 色综合久久久久| 中文字幕成人| 国产精产国品一二三在观看| 97婷婷五月丁香| 亚洲成人在线观看网址| 九九大香蕉黄色影院| 97色综合视频| 久久总和99| 六月婷婷无码| 99亚洲大片精品永久在线观看| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪 | 欧美综合五月丁香五月天| 五月婷婷六月少妇激情| 狠狠穞A片一區二區三區| 人人草碰| 欧美精品999| 另类婷婷丁香| 色五月激情婷婷| 伊人激情啪啪| www.超碰| 97人妻碰碰碰久久久久-最近国语高清| 被强行糟蹋的女人A片| 九热av| 99视频久久| 五月丁香婷色| 开心激情婷婷| 五月激情站| 91av成人| 久操无码| 夜夜夜叫天天天做| 色婷婷丁香五月| 国产成人精品一区二三区熟女在线| 涩丁香| 中文字幕不卡+婷婷五月| 五月婷婷亚洲| 色婷婷五月婷婷五月婷婷五月| 91se在线观看| 狠狠狠狠狠狠| 97电影99热| 日本天天综合| 亚洲视频五区| 91肏肏肏| 激情婷婷五月久久| 亚洲AV成人无码久久精品老人法拉利| 黄色五月婷婷| 国产欧美大香蕉一区| 亚洲第一成人无码A片| www.激情五月天com| 丝袜激情网| 亚洲欧美综合7777色亭亭| 台湾无码A片一区二区| 九色视频这里只有精品| 激情五月婷| 婷婷丁香精品视频在线观看| 色综合激情| 久热这里只有精品6| 日本乱子人伦在线视频| 久久色五月| 深爱激情69热| 色婷婷六月天| 欧美激情中文字幕| 99热在线免费观看精品| 久久色天堂| 丁香婷婷九月在线| 琪琪理论片| 日本色婷婷| 五月婷天堂视频| 久久丁香五月婷婷| 99久久婷婷国产综合| 婷婷五月天Av| 色狠狠色综合| 五月婷婷色欲| 激情播丁香| 久久综合性| 婷婷色操| 国产精品香蕉| 国av网| 亚洲精99| 日本丁香五月| 99久热在线精品99re6热| 丁香五月亚洲综合| 国产精品第一国产精品| 思思热天天看| 亚洲操操| 中文字幕,综合,91| 天天爽天天操| 99久久久精品| 狠狠狠夜夜夜| 99热亚州综合| 丁香丝袜五月| seuuu婷婷| 五月婷婷六月激情在线| 色婷婷电影网| AA丁香综合激情| 色情久久久| 任你日视频| 久久久无码精品成人A片小说| 区啪精品| 丁香六月婷婷一区二区三区| 嘿嘿视频免费看9| 六月丁AV| 啪啪亚洲综合| 中文字幕在线人妻| 婷婷综合网站| 五月天久久小说| 婷婷婷婷色| 七七久久综合| 六月激情久久| 97操碰人人| 色婷婷六月天| 婷婷五月AV| 99热这里只有精品青草| 亚洲精99| 日本乱子人伦在线视频| 色婷婷五月天综合网| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 亚洲第一av| 人人摸人人搞| 色综合久久综合| 色爱综合网| 韩日在线熟女| 国产毛多水多女人A片| WWW.开心五月天.COM| 香蕉婷婷五月| 俺去也综合| 久久新地址| 精品婷婷| 丁香六月天之亚州热女| 中文字幕av久久爽| 日本啪啪网| 少妇日麻屄| 日本WwW色偷偷丁香花久久久京东热| 中国激情网| 亚洲色婷婷五月天| 深爱激情五月网| 五月丁香亚洲综合网| 日本偷拍九九九| 丁香五月影视| 婷婷丁香视频在线观看免费| 男女啪啪做爰高潮无遮挡| 日本五月婷婷| 九九色婷婷| 5月丁香美女影院| AV性爱网| 婷婷基地成人五月天| 男女av免费看| 91日视频| 伊人干练久| 偷偷与邻居做爰完整视频| 丰满熟女人妻一区二区三| 婷婷在线播放av| 在线看九一V图片| 色女人久久| 涩五月婷婷| 人人人操 超碰| 婷婷丁香激情综合色情| 丁香六月 婷婷六月| 成片免费观看大全| 久久久人妻| 99热这里只有精品最新网址| 婷色五月| 丁香五月玖玖| 深爱五月婷婷| 五月色影院| 成人五月天综合网| 久久天堂婷婷五月| 丁香婷婷色色| 国产精品A片| 激情五月天在线观看婷婷| 97碰碰免费.视频| 五月天成人综合| 天天插天天射| 婷婷五月天天| 亚洲九区| 任我肏视频精品| 天天爱天天操| 久久婷.com| 99热精品一| 欧美日韩AAAAA| 91热在线| 香蕉视频性爱BB做爱| 久久小视频| 天天综合精品| 五月婷导航| 五月情综合| 久久久ww| www.99热这里精品 | 五月色综合网欧美网| 婷婷五月色惰| seav天堂| 久久婷五月| 丁香婷婷基地| 九九色色| 六月婷婷最新网址| 国产91资源在线| 五月花免费视频| 五月丁香婷婷综合视频| 影音先锋777xfplay色资源网站| 狠狠操天天操| 综合激情五月四射婷婷| 欧美网站视频4399| 亚洲在线播放| 欧美碰碰碰| 狠狠爱深色婷婷综合| 午夜少妇在线观看视频| 婷婷激情社区| 色婷婷五月色| √天堂资源在线人妻熟女| 色五月婷婷九月| 99热99热不卡| 久久婷婷五月天综合| 五月丁香| 婷婷五月天成人网| 狠狠色婷婷7777久| 中文色婷婷| 婷婷丁香花五月天| 婷婷性爱网| 操逼巨乳91| 久久综合影院| www.henhenl| 狠狠综合色网| 日韩精品超碰在线观看| 色九月欧美| 国产精品色婷婷久久久精品| 综合五月丁香六月婷婷| 六月婷婷香蕉| 99超碰在线观看| www..999热久| av九九| 色热久| 人妻狠狠操| 5五月综合网亚洲| 91在线视频综合| 激情综合五| 婷婷九月激情| 538午夜激情| 加勒比色色| 米奇激情婷婷| 色色色色色网站| 久久久人妻| 操逼巨乳91| 大香网伊人久久综合| 丁香五月电影| 成人精品视频99在线观看免费| 日韩黄色影院| 激情色情五月天| 夜夜AVV| 9久热免费视频99| 五月份婷婷| 激情综合网五月天天| 九九视频在线免费视频| 99热这| 丝袜激情网| 欧洲色色| 超碰免费人人肏| 综合精品啪啪| 婷婷色啪| 日日婷婷不卡| 啄木鸟丝袜美女福利视频| 人人爱人人草| 婷婷色中文字幕| 密着浓厚中出乚交尾GvG935| 欧美人人超级碰| 丁香五月婷婷啪啪| 五月天无码视屏播放| 久久五月天激情| 久99| 五月激情天| 色五月激情问网站| 亚洲色啪| 大陆肏屄视频| 婷婷色五月开心五月| 99在线精品视频| 亚洲另类毛片| 97色婷| 久久少妇视频| 色色色热热热| 久久99人人| 国产67194| 中国激情网| 久99视频在线观看| 日本英国美国欧美亚洲国产精亚洲日韩精品在线观看 | 五月综合激情久久| 久久婷婷五月综合色奶水99啪| 99re思思精品视频在线观看| 丁香五月天啪啪激情综合网| 亚洲综合久| 亚洲中文AV| AV在线中文| 国产婷婷五月天| 五月丁香六月激情| 色综色网| 久久综合爱| 五月天激情电影| 欧美性做爰大片免费看办公室| 五月综合激情图片| 丁香五月天色| 综合色色婷婷| 少妇人妻偷人精品无码视频新浪| 色婷婷成人网| 这里只有精品1| 777精品久无码人妻蜜桃| 久碰婷婷视频| 亚洲成人人人操| 乱精品一区字幕二区| 国产无人区大片| 99日这里只有精品| 亚洲精品久久久久久久久久吃药 | 色婷婷久久天天性爱| 99热中国| 国产一级视频a| 深爱五月激情综合| 97色色视频| 五月J香蕉婷婷| 91视频免费后入强操| 天天干天天干天天干天天干天天| 超碰91在线| 97极品在线| 五月丁香六月色| 99丁香婷婷综合网| 久久久er热| 成人在线视频网| 日本三级日本三级99| 久久久这里有精品| 啪啪视频99| www开心激情网| 五月天精品| 色综合网上班开心婷婷久久| 色色狼人综合| 婷婷丁香成人五月天| 日韩人妻操逼视频| 久cao香蕉影院| 婷婷丁香人妻| 五月天婷婷色| 26uuu偷拍亚洲欧洲综合| www.99成人视频| 猫咪伊人AV| 久久成人综合五月天| 欧美成人AAA片一区国产精品| 久久网站观看免费欧洲国产| 26UUU欧美| 九九九九无码| 夜夜谢天天干| 涩涩婷婷五月| 色五月丁香婷婷| 天堂久久大香蕉| 99色色| 96精品久久久久久久久| 六月丁香五月婷婷| 色情五月天丁香社区| 婷婷中文在线| 网色99| 五月丁香啪|