99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

嵌入式數(shù)據(jù)拷貝選型:DMA、NEON與CPU拷貝性能對比與決策指南

嵌入式數(shù)據(jù)拷貝選型:DMA、NEON與CPU拷貝性能對比與決策指南 1. 抉擇背后的核心問題先說結論沒有最好的拷貝方式只有最適合當前場景的拷貝方式。DMA、NEON、CPU普通拷貝這三條路分別對應的是“解放CPU” “榨干CPU”和“直接用CPU”三種思路選錯了輕則性能白扔重則系統(tǒng)卡頓、數(shù)據(jù)錯亂。我在嵌入式開發(fā)里被這個問題折騰過很多次早期做過一個視頻采集項目Sensor數(shù)據(jù)量大概一幀2MB幀率30fps也就是每秒要搬60MB數(shù)據(jù)。一開始無腦用CPU普通拷貝結果主控芯片的CPU占用率直接被拉到40%以上主線程處理協(xié)議棧的時間被嚴重擠壓丟幀丟到客戶投訴。后來逐個換成NEON優(yōu)化、DMA搬運才把CPU占用率壓到了5%以內(nèi)。所以這個選擇問題的本質其實是四件事的權衡數(shù)據(jù)量大小、拷貝頻率、CPU當前是否緊張、硬件平臺支持情況。這四件事沒有一件是可以拍腦袋決定的。另外一個容易被忽略的關鍵點是很多人以為NEON和DMA是替代關系其實不是。NEON是CPU內(nèi)部的SIMD指令集擴展數(shù)據(jù)搬運路徑依然要經(jīng)過CPU核心DMA是獨立于CPU的數(shù)據(jù)搬運引擎搬數(shù)據(jù)這件事本身不占CPU算力。兩者解決的問題有重疊但定位完全不同。這篇文章會把每個方案的本質、適用邊界、性能天花板和坑都攤開聊一遍最后給你一張可以直接照著選的決策表。2. 三種拷貝方式的本質區(qū)別2.1 DMA把拷貝這件事外包出去DMA全稱Direct Memory Access直接存儲器訪問。它和CPU的關系可以理解成“老板和外包團隊”的關系。老板CPU把活交代下去——比如“把這塊內(nèi)存的數(shù)據(jù)搬到那塊內(nèi)存”——外包團隊DMA控制器自己干完活再回來匯報中間老板該干嘛干嘛不用盯著。從硬件路徑上看DMA控制器是掛在總線上的獨立模塊源地址、目的地址、傳輸長度、傳輸模式這些參數(shù)由CPU配置好之后DMA就自己接管總線進行數(shù)據(jù)傳輸。整個過程CPU不參與數(shù)據(jù)的讀寫只在傳輸完成或出錯時收到中斷信號。DMA的典型使用場景是大塊數(shù)據(jù)的周期性搬運比如ADC采樣數(shù)據(jù)環(huán)形緩沖區(qū)的讀取、串口或SPI接收FIFO的搬移、攝像頭Sensor數(shù)據(jù)到內(nèi)存緩沖區(qū)的傳輸、外部SDRAM和內(nèi)部SRAM之間的數(shù)據(jù)搬移。這些場景共同的特點是數(shù)據(jù)量不小、傳輸行為規(guī)律、頻率固定。用DMA要付出的代價是配置和觸發(fā)開銷也就是所謂的“啟動成本”。完整的DMA傳輸需要經(jīng)歷關中斷、配置源地址、配置目的地址、配置傳輸長度、配置傳輸模式單次/循環(huán)/突發(fā)、使能DMA、等待完成中斷這樣一串流程啟動延遲通常在微妙級別對于幾KB以下的小塊數(shù)據(jù)這個啟動成本可能比CPU直接拷貝還要高。2.2 NEON讓CPU本身變得更快NEON是ARM架構下的SIMD單指令多數(shù)據(jù)擴展技術從ARMv7開始引入到ARMv8AArch64進一步完善。它做的事情用一個生活類比解釋就是普通CPU拷貝像一個人一個人地搬箱子NEON拷貝像給你一個超大的托盤一次可以端八個箱子走。具體到指令層面NEON寄存器寬度是128位AArch64下有32個128位寄存器一條指令可以同時處理4個32位數(shù)據(jù)或者8個16位數(shù)據(jù)。做內(nèi)存拷貝時vld1q_u8一次從內(nèi)存加載16字節(jié)到NEON寄存器vst1q_u8一次把16字節(jié)寫回內(nèi)存。如果配合ldp/stp這樣的64位加載存儲指令做雙路展開再加上循環(huán)展開loop unrolling、預取prefetch和緩存對齊優(yōu)化實際的拷貝帶寬可以逼近CPU內(nèi)存帶寬的理論上限。NEON拷貝和CPU普通拷貝最大的區(qū)別在于它依然消耗CPU核心但單位時間內(nèi)搬運的數(shù)據(jù)量大幅提升。也就是說CPU占用率不會降到零但完成同樣大小數(shù)據(jù)拷貝所需的時間大幅縮短騰出來的“時間片”可以用來做別的任務。NEON特別適合的數(shù)據(jù)特征是數(shù)據(jù)塊較大、內(nèi)存對齊良好、CPU有空閑算力可供調度。比如音視頻幀緩沖處理、圖像預處理、協(xié)議棧數(shù)據(jù)包頭解析重組等。2.3 CPU普通拷貝最樸素但未必最慢CPU普通拷貝就是常見的memcpy實現(xiàn)通過加載/存儲指令逐字節(jié)或逐字搬運數(shù)據(jù)。在C語言層面寫一個循環(huán)for (i 0; i n; i) dst[i] src[i];編譯成匯編后就是ldrb/strb或者ldr/str指令的循環(huán)執(zhí)行。樸素的CPU拷貝有一個常被忽略的優(yōu)勢小數(shù)據(jù)量場景下延遲極低。因為數(shù)據(jù)量小的時候不需要像DMA那樣花時間做配置也不需要像NEON那樣處理向量加載的對齊問題幾條加載存儲指令就直接完事了。如果你的數(shù)據(jù)量只有幾十字節(jié)到幾百字節(jié)CPU普通拷貝往往是最快的方式。但CPU拷貝的性能會隨著數(shù)據(jù)量和拷貝次數(shù)的增加迅速惡化。因為每搬運一個數(shù)據(jù)單元都要執(zhí)行至少兩條指令加載存儲指令開銷直接和數(shù)據(jù)量成正比而且大規(guī)模的搬運會頻繁觸碰Cache Miss和內(nèi)存頁錯誤導致性能斷崖式下降。另外CPU普通拷貝還有一個不為人知的坑如果拷貝操作發(fā)生在中斷上下文耗時過長會直接導致系統(tǒng)抖動特別是在實時性要求高的系統(tǒng)里一個大memcpy會阻塞中斷響應造成微妙到毫秒級的延遲毛刺。2.4 一張圖看懂三者的關鍵差異維度DMANEONCPU普通拷貝CPU參與程度初始化后幾乎不參與全程參與但效率高全程參與數(shù)據(jù)吞吐上限取決于總線帶寬取決于CPU內(nèi)存帶寬取決于指令執(zhí)行速度小數(shù)據(jù)量1KB配置開銷大不劃算有一定開銷中等最快延遲最低大數(shù)據(jù)量100KB最優(yōu)CPU可做其他事很優(yōu)但吃CPU慢且占用CPU實現(xiàn)復雜度中等寄存器配置較多中等需要指令優(yōu)化最低典型場景外設數(shù)據(jù)流、大塊周期性搬運音視頻處理、內(nèi)存密集型運算小塊數(shù)據(jù)、臨時緩沖拷貝3. 選型決策框架四步鎖定正確方案這一節(jié)我把實踐中的判斷流程做成一個四步法照著走大多數(shù)場景都能得出明確結論。3.1 第一步先看數(shù)據(jù)量級數(shù)據(jù)量是最先要判斷的指標因為它直接劃定了方案的大方向。數(shù)據(jù)量小于1KB默認選CPU普通拷貝。這個量級下DMA的配置開銷遠大于節(jié)省下來的搬運時間NEON的好處也體現(xiàn)不出來。比如一個網(wǎng)絡協(xié)議包頭解析、一個結構體備份、一個寄存器配置塊的傳遞直接memcpy就好。數(shù)據(jù)量在1KB到16KB之間需要結合CPU占用情況判斷。如果這段代碼所在的任務對延遲敏感且CPU空閑用NEON如果這段代碼在頻繁調用的路徑里且CPU本身繁忙可以考慮DMA。數(shù)據(jù)量大于16KB優(yōu)先考慮DMA。尤其是周期性出現(xiàn)的搬運任務比如圖像幀、音頻流、大塊日志落盤緩沖。如果不希望引入DMA配置的復雜度NEON是第二選擇但要注意成本是持續(xù)的CPU時間片消耗。我在項目里通常把4KB作為一個參考分割線因為4KB正好是常見內(nèi)存頁大小跨頁拷貝涉及TLB翻譯后備緩沖器重載CPU拷貝性能會有明顯波動。這時候DMA引擎通??梢宰龈玫目偩€調度穩(wěn)定性表現(xiàn)更好。3.2 第二步確認源/目的地址的對齊情況對齊是NEON能否發(fā)揮威力的分水嶺也是DMA能否高效傳輸?shù)那疤釛l件。NEON的vld1q_u8這類指令要求地址按照向量寬度對齊16字節(jié)對齊如果源地址或目的地址沒有對齊要么使用非對齊加載指令性能會打折要么先做對齊預處理增加代碼復雜度。實際工作中我在音頻處理模塊里遇到過源地址是奇數(shù)偏移的情況當時用NEON非對齊加載指令做了處理性能相比對齊場景下降了將近20%但依然比CPU普通拷貝快不少。DMA方面不同硬件平臺的對齊要求差異較大有些控制器要求源和目的地址按照總線寬度對齊有些要求緩沖區(qū)地址4字節(jié)對齊有的還要求傳輸長度是某個值的整數(shù)倍。設計數(shù)據(jù)緩沖結構時在內(nèi)存分配階段就做好對齊預留是避免后續(xù)性能損失最高性價比的做法。C語言里做16字節(jié)對齊分配的方法// 動態(tài)分配16字節(jié)對齊的內(nèi)存 uint8_t *buf NULL; posix_memalign((void **)buf, 16, buffer_size); // 或者在靜態(tài)數(shù)組上做對齊 __attribute__((aligned(16))) uint8_t buf[1024];3.3 第三步評估CPU的繁忙程度和延遲容忍度這一步需要回答兩個問題在這段拷貝發(fā)生的時刻CPU有沒有更重要的任務要做如果拷貝占用了CPU會不會導致其他任務超時答案如果是“有更重要的任務”或者“會導致超時”那就選DMA讓拷貝徹底脫離CPU。典型例子是通信協(xié)議棧的主循環(huán)里做數(shù)據(jù)轉發(fā)CPU的核心任務是解析和封裝協(xié)議如果花大段時間拷貝數(shù)據(jù)網(wǎng)絡響應時間就會飆高觸發(fā)對端超時重傳陷入惡性循環(huán)。答案如果是“CPU有空閑算力”且“拷貝頻率不高”NEON是更好的選擇。因為NEON的實現(xiàn)和調試成本比DMA低沒有中斷處理、沒有DMA控制器資源競爭代碼也更好維護。這里補充一個做實時系統(tǒng)時的經(jīng)驗延遲敏感任務里寧可讓拷貝慢一點也不要讓拷貝阻塞關鍵中斷路徑。我曾經(jīng)把一個批量日志緩沖區(qū)的拷貝放在中斷底半部每次拷貝耗時約700us導致高頻定時器中斷被推遲系統(tǒng)產(chǎn)生了可感知的時序偏移。后來改成DMA異步搬運日志落盤稍慢了幾毫秒但系統(tǒng)時序完全恢復穩(wěn)定。3.4 第四步確認硬件平臺支持情況這一步?jīng)Q定上面三步的結論能不能落地。如果平臺有DMA控制器且驅動完善大多數(shù)主流MCU和SoC都具備DMA方案可行。要注意DMA通道數(shù)量是否夠用多個外設共用DMA通道時的仲裁策略以及DMA描述符是否支持鏈表/環(huán)形緩沖模式。NEON則要確認CPU架構是否支持。Cortex-M系列除部分Cortex-M7/M33/M55/M85等帶DSP/SIMD擴展的型號多數(shù)不支持完整NEONCortex-A系列基本都支持。如果是RISC-V平臺則需要看是否支持V擴展向量指令兼容性需要單獨驗證。4. 實操環(huán)節(jié)三種拷貝方式的典型實現(xiàn)與性能實測4.1 CPU普通拷貝的實現(xiàn)與性能基準作為基準方案直接用標準庫memcpy。注意不同編譯器的memcpy實現(xiàn)優(yōu)化程度差異很大GCC在-O2以上會把memcpy內(nèi)聯(lián)成優(yōu)化的加載存儲序列但有些場景下比如拷貝長度是編譯期未知變量時memcpy會退化為調用庫函數(shù)性能取決于庫的實現(xiàn)質量。測試代碼非常簡單#include stdio.h #include string.h #include time.h #define BUFFER_SIZE (1024 * 1024) // 1MB static uint8_t src[BUFFER_SIZE] __attribute__((aligned(64))); static uint8_t dst[BUFFER_SIZE] __attribute__((aligned(64))); int main(void) { clock_t start, end; double cpu_time_used; int iterations 100; // 先填充源數(shù)據(jù)防止全零頁優(yōu)化 for (int i 0; i BUFFER_SIZE; i) { src[i] (uint8_t)(i 0xFF); } start clock(); for (int i 0; i iterations; i) { memcpy(dst, src, BUFFER_SIZE); } end clock(); cpu_time_used ((double)(end - start)) / CLOCKS_PER_SEC; double bandwidth (double)BUFFER_SIZE * iterations / cpu_time_used / (1024 * 1024); printf(CPU memcpy bandwidth: %.2f MB/s\n, bandwidth); return 0; }在Cortex-A53、主頻1.2GHz的平臺上實測帶Cache的1MB連續(xù)拷貝帶寬約在600~900MB/s之間。如果數(shù)據(jù)量超過Cache容量且源和目的地址都未命中Cache帶寬會掉到200~400MB/s。這個數(shù)字就是后續(xù)對比的基準線。4.2 NEON優(yōu)化的實用寫法NEON優(yōu)化的核心思路就四個字讀寬寫寬。盡量一條指令處理更多字節(jié)減少指令總數(shù)和總線事務數(shù)。下面是一個經(jīng)典的NEON內(nèi)存拷貝實現(xiàn)采用64字節(jié)塊處理配合預取和循環(huán)展開#include arm_neon.h void neon_memcpy_64(uint8_t *dst, const uint8_t *src, size_t size) { // 處理16字節(jié)對齊的主體塊步長64字節(jié) size_t aligned_size size ~(size_t)63; for (size_t i 0; i aligned_size; i 64) { // 預取下一輪數(shù)據(jù)到Cache隱藏內(nèi)存延遲 __builtin_prefetch(src i 256); // 一次加載64字節(jié)4個128位向量 uint8x16_t v0 vld1q_u8(src i); uint8x16_t v1 vld1q_u8(src i 16); uint8x16_t v2 vld1q_u8(src i 32); uint8x16_t v3 vld1q_u8(src i 48); // 一次存儲64字節(jié) vst1q_u8(dst i, v0); vst1q_u8(dst i 16, v1); vst1q_u8(dst i 32, v2); vst1q_u8(dst i 48, v3); } // 處理尾部不足64字節(jié)的數(shù)據(jù) for (size_t i aligned_size; i size; i) { dst[i] src[i]; } }這段代碼有三個關鍵點需要注意第一__builtin_prefetch是GCC的預取內(nèi)建函數(shù)參數(shù)是預取地址和偏移量。預取的距離需要根據(jù)內(nèi)存延遲和Cache命中情況調整太近了沒效果太遠了可能把還沒用到的數(shù)據(jù)擠出去一般取256字節(jié)到1024字節(jié)之間比較安全。第二循環(huán)展開的層數(shù)不是越多越好。展開4路每次處理64字節(jié)通常是比較好的平衡點這個平臺上展開8路每次處理128字節(jié)可能因為寄存器壓力過大導致編譯器Spill寄存器溢出到內(nèi)存反而性能下降。建議實測不同展開層數(shù)選最優(yōu)值。第三NEON版本代碼編譯時需要注意開啟對應架構優(yōu)化選項。GCC需要指定-mfpuneon和適當?shù)?mfloat-abi選項AArch64下一般直接默認啟用arm-linux-gnueabihf-gcc -O2 -mfpuneon -mfloat-abihard -o neon_test neon_test.c在同平臺實測上述64字節(jié)塊NEON拷貝的性能大約是Cache內(nèi)拷貝帶寬可達1.5~2GB/s超過CPU普通拷貝兩倍以上Cache外的內(nèi)存拷貝帶寬約600~900MB/s比CPU普通拷貝也有明顯提升。NEON的核心價值在于把同一條內(nèi)存帶寬曲線上的CPU指令開銷降下來了。4.3 DMA配置的完整流程用STM32系列舉例使用DMA做內(nèi)存到內(nèi)存?zhèn)鬏數(shù)臉藴柿鞒?/ 假設使用DMA1 Channel1做mem-to-mem傳輸 void dma_memcpy_init(void) { RCC_AHBPeriphClockCmd(RCC_AHBPeriph_DMA1, ENABLE); DMA_InitTypeDef DMA_InitStructure; DMA_InitStructure.DMA_PeripheralBaseAddr (uint32_t)src; DMA_InitStructure.DMA_MemoryBaseAddr (uint32_t)dst; DMA_InitStructure.DMA_DIR DMA_DIR_PeripheralSRC; // 外設作為源這里是內(nèi)存 DMA_InitStructure.DMA_BufferSize BUFFER_SIZE; // 傳輸字節(jié)數(shù) DMA_InitStructure.DMA_PeripheralInc DMA_PeripheralInc_Enable; // 源地址遞增 DMA_InitStructure.DMA_MemoryInc DMA_MemoryInc_Enable; // 目的地址遞增 DMA_InitStructure.DMA_PeripheralDataSize DMA_PeripheralDataSize_Word; // 32位 DMA_InitStructure.DMA_MemoryDataSize DMA_MemoryDataSize_Word; DMA_InitStructure.DMA_Mode DMA_Mode_Normal; // 單次傳輸模式 DMA_InitStructure.DMA_Priority DMA_Priority_High; DMA_InitStructure.DMA_M2M DMA_M2M_Enable; // 內(nèi)存到內(nèi)存模式 DMA_Init(DMA1_Channel1, DMA_InitStructure); // 使能傳輸完成中斷 DMA_ITConfig(DMA1_Channel1, DMA_IT_TC, ENABLE); // 注冊中斷服務函數(shù)NVIC配置略 NVIC_InitTypeDef NVIC_InitStructure; NVIC_InitStructure.NVIC_IRQChannel DMA1_Channel1_IRQn; NVIC_InitStructure.NVIC_IRQChannelPreemptionPriority 0; NVIC_InitStructure.NVIC_IRQChannelSubPriority 0; NVIC_InitStructure.NVIC_IRQChannelCmd ENABLE; NVIC_Init(NVIC_InitStructure); } void dma_memcpy_start(uint32_t src_addr, uint32_t dst_addr, uint32_t size) { // 重新配置源/目的地址和長度很多MCU需要先禁用DMA才能改配置 DMA_Cmd(DMA1_Channel1, DISABLE); DMA1_Channel1-CPAR src_addr; DMA1_Channel1-CMAR dst_addr; DMA1_Channel1-CNDTR size; DMA_Cmd(DMA1_Channel1, ENABLE); } // 中斷服務函數(shù) void DMA1_Channel1_IRQHandler(void) { if (DMA_GetITStatus(DMA1_Channel1, DMA_IT_TC)) { DMA_ClearITPendingBit(DMA1_Channel1, DMA_IT_TC); transfer_complete_flag 1; // 通知業(yè)務代碼 } }DMA方案在同等平臺實測1MB數(shù)據(jù)拷貝帶寬可以達到與NEON相近甚至略高的水平。最關鍵的區(qū)別是整個傳輸過程中CPU可以完全退出去做其他事情。我在日志系統(tǒng)里把SPI Flash頁寫入的數(shù)據(jù)緩沖搬運交給DMACPU利用率直接降到了接近0%。4.4 三種方式的實測數(shù)據(jù)對比在同一個Cortex-A53平臺1.2GHz32KB L1 Cache256KB L2 CacheDDR3 800MHz上用100次拷貝取平均值拷貝大小CPU memcpyNEON優(yōu)化DMA64B約25ns約30ns配置開銷約100ns以上不劃算1KB約130ns約95ns配置啟動約2us明顯慢16KB約3us約1.5us約4us含配置開銷不劃算256KB約120us約55us約30us勝出1MB約620us約280us約150us勝出明顯注意以上數(shù)據(jù)只反映該特定平臺的情況具體數(shù)值會因主頻、Cache大小、總線架構和DMA控制器性能不同而變化。但趨勢是一致的——數(shù)據(jù)量越大DMA相對優(yōu)勢越明顯數(shù)據(jù)量越小CPU直接拷貝的延遲優(yōu)勢越強NEON始終卡在中間位置對CPU占用敏感度是它的分水嶺。5. 混合使用與進階優(yōu)化策略5.1 雙緩沖機制讓DMA永遠不空等做周期性數(shù)據(jù)采集時只用一塊緩沖區(qū)DMA搬運期間CPU必須要等搬運完成才能處理數(shù)據(jù)兩個環(huán)節(jié)是串行的白白浪費了DMA解放CPU的優(yōu)勢。雙緩沖的思路是準備兩塊緩沖區(qū)。DMA在往緩沖區(qū)A搬運數(shù)據(jù)的同時CPU在處理緩沖區(qū)B里的上一幀數(shù)據(jù)。DMA搬完A之后自動切換到BCPU處理完B之后等DMA切回A。這樣數(shù)據(jù)采集和處理像流水線一樣并行進行整體吞吐量幾乎可以翻倍。實現(xiàn)上可以借助DMA控制器的雙緩沖特性很多DMA支持自動翻轉兩個緩沖區(qū)的地址或者使用DMA傳輸完成中斷在軟件層面切換緩沖區(qū)指針// 雙緩沖結構 static uint8_t buffer_a[FRAME_SIZE] __attribute__((aligned(16))); static uint8_t buffer_b[FRAME_SIZE] __attribute__((aligned(16))); static uint8_t *current_dma_buffer buffer_a; static uint8_t *current_process_buffer buffer_b; // DMA完成中斷里交換當前緩沖區(qū) void dma_complete_isr(void) { uint8_t *tmp current_dma_buffer; current_dma_buffer current_process_buffer; current_process_buffer tmp; // 重新啟動DMA把下一幀數(shù)據(jù)搬進新緩沖區(qū) dma_memcpy_start(peripheral_addr, (uint32_t)current_dma_buffer, FRAME_SIZE); }這里有一個容易踩的坑CPU正在處理current_process_buffer時千萬不能讓DMA往同一塊地址寫數(shù)據(jù)。否則會出現(xiàn)數(shù)據(jù)競爭輕則數(shù)據(jù)錯亂重則程序崩潰。解決辦法是嚴格執(zhí)行上面代碼里的緩沖區(qū)交換邏輯保證DMA寫入的永遠是CPU當前不在處理的那塊緩沖區(qū)。5.2 按需選擇同一條代碼路徑里做大小分支很多場景下數(shù)據(jù)大小不是固定的比如網(wǎng)絡協(xié)議棧里不同包的大小差別很大。這時候不需要全局只選一種方案可以做一個簡單的大小判定小數(shù)據(jù)走CPU拷貝大數(shù)據(jù)走DMA或NEONvoid smart_copy(uint8_t *dst, const uint8_t *src, size_t size) { if (size 4096) { // 小數(shù)據(jù)直接用CPU memcpy延遲最低 memcpy(dst, src, size); } else if (dma_available cpu_busy) { // 大數(shù)據(jù)且CPU繁忙用DMA異步傳輸 dma_memcpy_start_async((uint32_t)src, (uint32_t)dst, size); } else { // 大數(shù)據(jù)但CPU有空閑用NEON提高效率 neon_memcpy_64(dst, src, size); } }這種混合策略的實際收益非??捎^。我在一個網(wǎng)關項目的轉發(fā)路徑上用了這個方式小包延遲沒有惡化大包吞吐量提升明顯CPU占用率還降了算是“三全其美”的做法。但要注意分支判斷本身也有開銷判定條件要盡量簡化避免引入額外的性能損耗。5.3 Cache一致性DMA方案最容易忽略的深坑DMA搬運數(shù)據(jù)不經(jīng)過CPU所以它更新的內(nèi)存內(nèi)容和CPU Cache里的內(nèi)容可能不一致。如果CPU之前讀過或寫過某塊內(nèi)存Cache里有一份副本DMA把新數(shù)據(jù)寫進了同一塊物理內(nèi)存CPU下次讀的時候可能命中的還是Cache里的舊數(shù)據(jù)。這在高性能平臺上是災難級的Bug。表現(xiàn)為DMA中斷明明觸發(fā)了但CPU讀到的還是舊數(shù)據(jù)或者CPU寫的數(shù)據(jù)丟了一部分。解決思路一般有三個第一在DMA啟動前做Cache Clean操作確保CPU寫入的數(shù)據(jù)全部刷到內(nèi)存在DMA完成后做Cache Invalidate操作讓Cache里的舊數(shù)據(jù)作廢// DMA讀取前清理Cache把CPU寫的數(shù)據(jù)同步到內(nèi)存 clean_dcache_range((uint32_t)src, size); // DMA寫入后作廢Cache確保CPU讀到新數(shù)據(jù) invalidate_dcache_range((uint32_t)dst, size);這兩個函數(shù)的API在不同平臺上名字和參數(shù)格式不同Linux下可以用dma_map_single、dma_unmap_single等標準API裸機環(huán)境下需要查芯片手冊調用對應的Cache維護函數(shù)。第二讓DMA操作的緩沖區(qū)使用不帶Cache的內(nèi)存屬性即在頁表項里把該內(nèi)存區(qū)域標記為“非緩存”或“設備內(nèi)存”。代價是該區(qū)域的讀寫性能會下降因為每次都直接訪問內(nèi)存。第三使用DMA引擎提供的硬件一致性機制如果SoC支持“IO一致”或“硬件一致”特性可以不做Cache維護操作但需要確認平臺手冊并非所有平臺都支持。6. 常見問題與排查技巧實錄6.1 DMA傳輸偶爾丟失數(shù)據(jù)這個問題的典型原因是傳輸長度或地址配置出錯。排查時先確認DMA配置的源地址、目的地址和傳輸長度是否符合硬件要求特別是源和目的地址的遞增設置是否正確。很多時候“丟數(shù)據(jù)”其實是地址配置成了固定模式數(shù)據(jù)互相覆蓋了。還有一種非常隱蔽的原因DMA傳輸完成中斷標志位的清除順序不當。有些MCU要求在讀取狀態(tài)標志后再清除標志如果順序反了中斷標志可能被誤清除導致該次傳輸?shù)耐瓿墒录G失。我在調試串口DMA接收時遇到過類似情況解決方式是確認外設的DMA請求標志在每次傳輸后確實被硬件清除如果使用中斷方式在中斷里先讀狀態(tài)再清標志如果是循環(huán)模式Circular Mode注意設置合適的水位中斷閾值防止數(shù)據(jù)覆蓋。6.2 NEON代碼編譯后反而不如普通拷貝快先檢查內(nèi)存對齊。前面反復提過NEON加載指令在非對齊地址上性能會大幅下降。解決方式有兩個一是用vld1q_u8這類非對齊友好的指令二是確保緩沖區(qū)分配時做16字節(jié)對齊。其次是檢查編譯優(yōu)化選項。如果編譯時沒有開-O2或更高的優(yōu)化級別NEON內(nèi)建函數(shù)可能沒有被有效調度和優(yōu)化生成的低效匯編可能比普通拷貝還慢。我在測試時遇到過GCC開了-O0后NEON比memcpy還慢將近5倍的情況開了-O2之后才反超。另外注意NEON指令在數(shù)據(jù)量小的時候優(yōu)勢不顯著。如果你的數(shù)據(jù)只有幾百字節(jié)NEON的前期準備開銷函數(shù)調用、循環(huán)初始化、尾部處理可能抵消掉指令并行帶來的收益這種情況下直接memcpy反而更簡單高效。6.3 如何判斷“CPU被拷貝拖慢”了最直接的手段是看任務耗時統(tǒng)計。在拷貝函數(shù)前后打時間戳計算每次拷貝的耗時和總CPU時間占比。如果發(fā)現(xiàn)拷貝耗時占比超過20%且數(shù)據(jù)量還在不斷增長就必須考慮用DMA替換了。另一個判斷辦法是觀察系統(tǒng)整體響應性。比如通信系統(tǒng)里如果處理一個數(shù)據(jù)包的延遲明顯波動尤其在數(shù)據(jù)量大的時候抖動更嚴重很可能就是大塊CPU拷貝阻塞了主循環(huán)。這時候用性能分析工具perf、Tracealyzer、SEGGER SystemView等確認熱點函數(shù)看memcpy或copy_from_user等調用占比即可驗證。我自己常用的一個經(jīng)驗是當選型不確定時先用NEON快速頂上因為它不需要改架構只需改一個函數(shù)實現(xiàn)然后再在下一個版本迭代里根據(jù)CPU Profiling數(shù)據(jù)決定要不要引入DMA。這樣風險可控不會一上來就動硬件配置和中斷架構。7. 按需選型的最終決策表判斷條件推薦方案核心原因數(shù)據(jù)量 4KB偶爾拷貝CPU memcpy延遲最低實現(xiàn)最簡單數(shù)據(jù)量 4KB高頻拷貝每秒百次以上NEON壓縮指令開銷降低CPU負載數(shù)據(jù)量 4KB ~ 64KBCPU有余量NEON比DMA配置簡單性能足夠數(shù)據(jù)量 4KB ~ 64KBCPU繁忙DMA釋放CPU時間片數(shù)據(jù)量 64KB周期性拷貝DMA吞吐量高且不占CPU緩存敏感場景實時性要求高DMA 雙緩沖避免大塊拷貝阻塞關鍵路徑從實測數(shù)據(jù)和我這些年的經(jīng)驗來看8成以上的場景其實用NEON就夠用且最優(yōu)DMA的主要價值在于“非阻塞”而不是“最快”。很多項目引入DMA是為了讓CPU在等待數(shù)據(jù)搬移的這段時間里去做協(xié)議處理或響應IO事件這是NEON無法替代的。但如果你的系統(tǒng)CPU資源非常充裕、任務也不多那繼續(xù)用簡單的memcpy也沒有什么問題。性能優(yōu)化的最高原則永遠是不優(yōu)化沒問題的地方。我在實際項目中對三種方式的取舍也經(jīng)歷了幾個階段從一開始只會memcpy到項目緊迫時臨時加NEON加速再到系統(tǒng)復雜到需要DMA才能保證實時性每一步都是被逼出來的但也正好把這三條路的優(yōu)缺點都摸透了。這些經(jīng)驗濃縮成一句話就是先量數(shù)據(jù)再看CPU最后決定要不要動DMA。希望這篇文章能幫你少走一些我曾經(jīng)走過的彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
九九热精品在线| 99热地址| 久久久ww| 欧美顶级少妇做爰HD| 狠狠ri| 久热久re| 色九九九综合| 91丨九色丨大屁股| 色狠久| 婷婷五月天激情电影| 激情五月天婷婷丁香| 精品一二三区久久AAA片| 色色色色色综合| 色婷婷丁香五月| 五月天色婷婷av| 激情VA视频| 婷婷91| 亚洲妇女熟BBW| 亚州综合色| 欧洲99视频在线| 久久这里只| 久9久9热久热| 97偷拍对白视频| 国产成人精品一区二三区熟女在线 | 日本综合色图| 五月婷婷六月丁香在线| 国产亚洲成AV人片在线观黄桃| 日本九九九九九九| 6080av| 少妇人妻人伦A片| 久久久网站| 超碰在线资源| 天天干天天 亚洲| 成人色图情色成人网 www.5b5b5bcom 五月天| 欧洲色色| 欧美久久婷婷| 亚洲熟妇无码乱子AV电影| 久操热| 99在线播放| 成人五月天婷婷| rr天天操| 国内熟女黄色系列| 久久婷婷资源| 丁香五月综合在线播放| 9色在线| 亚洲激情Av| 立川无码av| 可以免费观看的av| 92久久久| 高清无码中文字幕aVDV| 色婷婷视频| 伊人碰碰婷婷| 国产26uuu| 婷婷色色五月| 综合亚洲六月婷婷在线| 五月天丁香综合| 91人人人人人人人| 久久久久久综合五月婷婷| 九热视频| 99久久久久久| 热五月婷婷| 九九精品丁香花| 潘金莲AAAAAAAAAA| 99免费视频精品| 超碰在线看| 亚洲免费av在线| 六月丁香激情婷婷| 成人超碰网| 五月开心婷婷极品激情| 婷婷五月综合在线| 久久99操| 玖玖综合网| 婷婷丁香五月天操逼| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 精品日本视频444| 五月婷婷色综图片| 五月婷婷六月激情| 欧美美女国产日韩一区二区久| 色婷婷AAA| 婷婷久久18| 婷婷六月色开| 99久久99九九九99九他书对| 色五月婷婷操逼| 亚洲国产精品VA在线看黑人| 亚洲视频无| 人人人人人人人草| 香蕉色色网| 狠狠色 综合色区| 五月天激情国产综合婷婷婷| 欧美激情xxxXX| 涩涩涩五月天| ss五月天激情| 国产精品一区在线观看你懂的| 五月丁香美女视频| 热九九精品| 日本精品在线噜噜噜| 久色网址| 99久久99视频只有精品| 五月激情综合网| 丁香六月狠狠| 99色在线观看视频| 日韩 中文 欧美| 伊人婷婷色| 草草影院爱爱| 色墦五月丁香| 99亚洲综合| 色色无码| 五月丁综合在线观看| 成人无码精品1区2区3区免费看| 这里只有精品,日韩视频| 婷婷六月丁| 91精品91久久久中77777| 欧美色五月| 五月婷婷激情综合| 国产日韩精品SUV| 人人人人人人人人人草| 狠狠久久婷五月综合色| 丁香婷婷五月天在线视频| 亚洲无码九九九| 婷婷五月天小说网| 超碰免费99| 成人精品在线| 丁香成人综合| 国产操逼网站| 在线99热| 久久这里只有精品无码| 久久五月天免费网站| 九九热精品在线| 五月丁香六月婷婷久久肏| 棕合影院色色| 色色综合日韩| 热婷婷久| 色五月婷婷影院| 五月亭亭六月色| 国产精品天天狠天天看| 天天爽,夜夜爽| 色噜久| 激情综合网址| 人人天堂操| 久久探花91swag| 五月婷婷丁香俺日污视频| 色婷婷影| 日本片日本片祼观看网站在线看中文版网页在线看 | 丁香六月婷婷高清| 9久久AV| 婷婷五月激情综合| 婷婷五月天论坛| 色婷婷文字幕| 99综合网| www.激情五月| 99 频99热国里只有精品| 又大又粗九一在线| 夜夜大香蕉婷婷丁香| 九九性视频| 国产FREESEXVIDEOS性中国| 日本欧美国产| 99热老网站| 极品少妇XXXX精品少妇偷拍| 嫩草乱码一区三区四区| 99思思在线视频| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 婷婷六久久| 狠狠穞A片一區二區三區| 影音先锋噜一噜| 欧美性猛交99久久久久99按摩| 亚洲色色香蕉| 综合激情网五月激情| 国成人网| 天天干,夜夜爽| 五月天婷婷影院影院| 亚洲综合在线网站| 免费看欧美成人A片无码| 99热这里只有精品86| 热久久91| 亚州第一A片| 五月色婷婷综合| 激情综合另类| 丁香五月精品视频| 啪啪操超碰| 中文字幕网伦射乱中文| 大香蕉久久久| 亚洲色 视频| 9久国产精品| 婷婷色五月91啪啪| 色五月婷婷五月| 丁香五月婷婷激情中文| 久热2025无码| 综合久久综合久久| 伊人成综合五月婷婷| 六月丁香五月天| 亚洲成人噜噜| 五月人妻婷婷| 99亚洲天堂| 久久丁香婷婷色情综合| 最近中文字幕大全免费版在线 | 色婷婷欧美| 五月天婷婷丁香视频| 欧美色色色色色色色色色色| 色九月综合| 天天激情站| 天天色亚洲| 婷婷操逼网| 超碰在线人人| 99热第一页| 色婷婷基地 | 丁香九月婷| 天天干天天射色综合| 欧美噜噜免费观看| 中文字幕在线免费观看视频| 久久免费丁香| 天花AV无码| www.色五月| 色色色五月婷婷| 丁香五月激情啪啪| 99热99热| 开心五月婷婷在线视频免费观看| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 99天堂网| 思思热精品在线| 九九热在线精品| 第四色婷婷五月| 99re6热在线精品视频播放速度| 久久人操-久草婷婷-成人AV| 亚洲成人丁香花| 91碰碰碰| 国产 码在线成人网站| 中文字幕成人影视| 人妻少妇色综合| 性天天中文网| 情婷婷五月天| 五月天成人在线播放丁香| 亚洲AV激情五月综合网| 久久这里面只有精品视频| 日本啪啪网| 六月婷婷最新网址| 99re视频在线| 一本色道久久综合狠狠躁小说| 五月丁香在线婷婷美女| 婷婷五亚洲| 五月色导航| 狠狠色五月激情| 久久九九99| 色婷精品91| 99资源在线视频| 丁香色影院| 日日操夜夜操中国无码| 天天透天天干| 色色婷婷丁香五月天| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 久久最新色| 婷婷丁香97| 五月婷婷日| 99激情视频| 久久六月天| 这里只有久久精99| 丁香五月天狠狠| 婷婷婷婷婷开心无码播放| 99热日韩| 久热这里只有精品6| 久久er视频6| 超碰在线人人| 亚洲无码成人网| 久久亚洲A| 俺来也综合网精品一区| 狠狠人人| 99热在线观看亚洲区| 丁香社区婷婷五月| 亚洲最大激情无码| 午夜天堂啪啪| 91操碰| 午夜婷婷| 大香蕉久久综合网| 欧美久人人| 伊人久久大香天蕉亚洲特级| 99热在线精品播放| 色视频2025| www.五月天婷婷.com| 天天综合激情| 99性感视频| 思思久热6| 色播激情五月天| 九九色色| 五月天婷婷综合| 丁香五月激情综合| 日本三级第一页| 丁香五月婷婷高清| 婷婷爱爱蜜臀天天操| 另类视频一区| 色五月天成人在线| 色噜噜狠狠一区二区三区| 丁香五月综合激情性爱| 五月天婷婷激情| 成人精品视频99在线观看免费| 无码视频国内精品久久久| 免费在线观看av网站| 婷婷色色丁香| 97色婷婷成人综合在线观看| 美女要搞搞天天搞搞搞网站| 97色色综合| 国产激情在线| 色婷婷久久| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 中文字幕视频在线播放| 精品一二三区久久AAA片| 成人αV视频免费观看| Av在线不卡一区| 99狠狠色| 大狠狠在线| 97精品欧美91久久久久久久| 99'无码| 欧美日韩aaaa| 久/久精品99看9| 欧美大肥婆大肥BBBBB| 超极99精品| 先锋资源婷婷| 少妇婷婷五月天| 第四色首页| 五月丁香综合激情网| 亚洲妇女熟BBW| 日本三级日本黄色| 永久无码色| 久99久热只有精品国产99| 激情五月天影院| www.99视频| 九九色情网站| 亚洲在线综合| www狠狠| 色综合久久88色综合天天看| 国产3p露脸普通话对白| 97干视频在线| 五月丁香久久久| 久久丁香五月婷婷激情综合网| 九九机热| 噜噜视频| 超碰伊人碰婷婷五月| 99国产er热视频| 婷婷色正月| 天天爽天天爽| 久久久99日本大片| 色婷婷丁香AV综合| 丁香六月婷婷综合| 久久久五月天婷婷成人网| 91视频一起草| 国产精品久久久爽爽爽麻豆色哟哟| 九久九精品| 影音先锋天天日| 色九月激情综合网| 亚洲色色色色色色色色色| 久久玖玖99| 超碰免费人人| 日本色婷婷| 久久久这里有精品| 婷婷射综合| 天天干天天干天天干天天干天天干天天干天天| 欧美精品在线观看| 久久开心五月婷婷| 996黄色片| 99爱精品视频| 日本一道久久| 99riAV国产精品视频| 北京熟妇搡BBBB搡BBBB | 99色在线| 欧美99热| 97精品自拍视频| 激情久久伊人| 婷婷丁香五月天欧美| 久热69| 五月Huangsewang| 久久久久久久久月丁| 91se在线视频| 超碰资源在线| 亚洲AV另类| www.狠狠干com| 我爱大香蕉| 婷婷丁香色情| WWW.夜夜操.com| 丁香花婷婷五月天| 国产精品岛国片在线观看免费| 9久热精品在线视频| 丁香六月综合激情| 99天堂网| 五月天激情小说| AV九九| 激情综合区| 日韩综合久| 色狠狠婷婷| 五月花激情| 常久最新免费的色吊丝| 色丁香六月| 骚货艹网站视频| 欧美色欲色欲天天天www| 婷婷激情五月综合基地| 九九热99精品在线| 日日操日日爽| 婷婷五月综合激情免费| 激情五月天com| 激情五月天开心网丁香无码| www.cao.com久久| 亚洲无码影音| 七七色综合| 久久久久97| 丁香五月 性爱| 68热超碰在线| 91人人爽人人操| 久久婷婷六月综合综合| 久久久久久久久99精品| 99热欧美| 丁香香五月激情免费视频| 亚洲av另类在线观看| 人妻日日日| 2025超碰| 婷婷五月丁香综合桃花色网| 99人人操人人操人人精| 欧美性爱五月天| 久久五月综合| 亚洲爱爱无码婷婷色五月| 丁香五月天激情综合网| 国产无套精品一区二区| 性视频久久| 99热精品在线播放| 日韩一区二区A片免费观看| 性做爰A片免费视频A片直播| 91色欲综合| 4399在线观看免费毛片| 青草青草久热这里只有精品| 色五月丁香激情视频| 婷婷丁香五月噜噜噜| 开心激情播播五月天| 久久五月天综合| 久久久久婷婷| 性做爰A片免费视频A片直播| 婷婷丁香五月天大香蕉| 色~性~乱~伦~噜| 丁香婷婷五月天色综合| 天天爽夜夜爽天天爽夜夜爽| 丁香五月欧美激情| 大陆极品少妇内射AAAAAA| 亚洲精品**不卡在线播he| 天天透天天干| 色很很96| 噜噜噜久久亚洲精品国产品91| 天天日综合| 99熟女| 国产一区二区三区影院| 狠爱婷色| 开心婷婷五月激情网小说| 五月天激情国产综合AV| 色色五月天婷婷丁香| 五月丁香香蕉| 九97免费视频| 丁香五月精品视频| 婷婷五月天激情文学| 丁香伊人网| 无码少妇高潮喷水A片免费| 综合激情九月婷婷,激情综合婷婷中文字 | 综合在线网| 中文字幕乱轮| 久久人妻精品| 丁香狠狠操| 久久99免费视屏| 久久这里只有国产视频| 色五月网址| 综合久久十三| 婷婷导航| 色噜噜狠狠一区二区三区| 久久人妻久久| 久久久久久久五月| 婷婷丁香一月| 91超碰九色| 久久婷婷五月综合色欧美| 九九干视频| 五月天成人在线精品| 欧美性爱一区| 婷婷五月丁香色色| 国产精品久久在线观看技巧| 天堂中文国产| 九九伦子片| 这里只有精品偷拍| www.日韩国产| www.久久99精品| 五月婷婷天| 综合色影| 97久久综合网| 久久激情五月婷婷| 深爱婷婷丁香五月激情| 亚洲国产精品成人免费一区久久久在线观看AAAA | 五月婷婷欧洲| 《战争与艾拉》完整版| 五月天成人在线视频网站| 久久人妻视步| 极品人妻XXXXOOOO| 六月丁香婷婷视频综合在线观看| 狠狠操狠狠操| 国产一级黄色影片,| 丁香婷婷人妻| 五月婷婷人人人操| 一婬一伦一区二区三区| 丁香五月天综合网| 熟女人妻一区二区三区免费看| www.91九色| 深爱激情六月| 激情98色婷婷五| 五月丁香久人妻中文| 日本天天操| 人人操人人妻| 狠狠干青青草| 欧美性做爰大片免费看办公室| 九九99九九99偷拍视频免费看| 成人丁香婷婷| 婷婷五月综合中文字幕| SS丁香五月婷婷| 极品人妻VIDEOSSS人妻| 天天爽夜夜爽夜夜爽精| 色综合99| 五月婷五月婷伊人伊人五月婷| 97se视频在线| 99九九中文字幕视频| 激情小说 五月天| 日日影院 | 婷婷基地成人五月天| 天天日,天天干,天天操| 综合激情五月天| 国产激情在线| 99精品视频偷拍| 久久久无码精品成人A片小说| 人操91在线| 99热这里只有免费| 九 九九九AV| 欧美综合五月丁香五月天| 99在线精品免费视频| 激情综合五月激情XXXX| 色色色色热| 婷婷五月天丁香| 丁香婷婷色五月| 在线婷婷| 99热激情| 77799热| 国产这里只有精品| 亚洲色小说在线综合| 国产精品18久久久| 思思热再线视频| 波多野结衣不卡AV| 五月天激情无码| 91九色无码内射| 亚洲VA口| 色五月婷婷av| 五月天开心网| 婷婷激情五月综合基地| 亚洲黄色操逼| 99热这里全都是精品| 久久一级片| 五月天激情啪啪| 五月天天堂久久| 九九色热| 激情网 五月天| 国产在线网| 99热99热99热99热| 亚洲超级碰| 99re在线精品视频| 电影爱拉战争免费观看| 五月丁香本色在线观看| 色婷婷成人五月| 超碰国产av| 亚洲操人| 亚洲色小说在线综合| 天天干天天av天天射| 天天婷婷| 另类视频一区| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 色色无码| 五月丁香婷婷福利| 在线五月婷| 五月天淫乱视频| 五月丁香啪啪网| 极品少妇XXXX精品少妇偷拍| 99热这里精品| 99自拍视频| 免费观看全黄做爰的视频 | 国产99久久久国产精品免费看 | 99久久婷婷精品视频| 天天色天天日| 激情深爱婷婷网| 人妻激情久久| 91综合国免费久入| 五月婷婷六月爱| 亚洲成人无码片| 任你爽视频| 五月天激情国产综合AV| 久久精品系列| 99在线精品免费视频| 日韩视频99| 色五月大香蕉| 狠狠色中色| 五月丁香啪啪啪啪| 五月天激情小说婷婷基地| ′久久99一| 久久久天堂国产精品女人| 婷婷基地爱| 99re在线视频精品,这里只有精品18,| 五月婷婷伊| 啊v视频在线观看| 天天狠狠色噜噜| 91九色中文字幕女在线观看| 欧美三级巜人妻互换| 五月激情天| 另类婷婷丁香| 91碰| 伦乱人妻| 亚洲亚洲人成综合网络| 色丁香五月| 99aese| 久久九区| 9 大屁股在线视频精品| 人妻丰满精品一区二区A片| 激情小说五月天| 伊人婷婷激情| 91久久久久久久久久久| 日本人妻久久| 欧美性生交XXXXX无码小说| 五月丁香激情综合啪啪| 99成人免费视频| 噜噜噜噜婷婷五月天| 看逼中文字幕| 色情终和网| 五月婷婷av| 婷婷六月亚洲综合| 激情色情五月天| 五月开心婷婷极品激情| 99狠狠操一| 超碰免费人人肏| 香蕉综合网| 婷婷九月激情| 婷婷五月天电影网| 热成人网| 久久婷婷五月天激情| 激情婷婷| 日韩色久| 久xxxx| 伊人大综合| 丁香五月色| 99亚洲视频| 婷婷草| 五月丁香AV、伊人业余、性色熟妇| 大香蕉精品视频| 人人妻人人澡人人爽| 婷婷五月天99综合网站| 亚洲精品久久久久久久久久吃药| 色九区| 丁香九月综合激情| 五月欧美丁香在线观看| 婷婷色正月| 国色天香伊人狠狠色| 99久久这里只有精品免费官网| 91色色色| 97碰久久| 99免费热视频在线| 五月 激情视频| 婷婷五月天首页激情| 97碰碰免费.视频| 国产黄色在线| 免费观看全黄做爰的视频| 国产毛片精品一区二区色欲黄A片| 国产婷婷五月天| 丁香五月在线观看| 久久久噜噜噜久久人妻| 色情五月婷婷| 丁香五月天在线观看| 亚洲aV写真天天综合网久久| 日韩色情亚洲五月天婷婷| 婷婷丁香六月激情综合| 亚洲开心激情网| 77799热| 五月婷婷 欧美| 密黄站| 五月激情四射婷婷丁香| 综合五月天亚洲婷婷| 色五月婷婷狠狠撸| 99在线观看免费精品视频| 五月天婷婷三级黄| 九九热这里有精品23| 激情五月综合视频| 五月永久激情| 五月丁香六月婷婷在线播放| 五月网网站| 五月天激情av| 涩综合婷婷| 天堂综合久| 久久电影4399| 91操人| 综合久| 国产小精品| 色噜噜丁香| 第四色色六月色综合| 五月天婷婷丁香人人操91| 热九九九九| 丁香五月激情月| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 久久精品一区二区三区四区| 91丨九色丨国产打屁股| 久久久久网站| 九九99在线| 久久婷婷五月综合色天| 任你搞在线观看视频| 色色色区| 玖玖爱伊人网| 人人操人人添人人摸97| 色婷婷A| 女性自慰系列第五页| 五月天激情小说电影| 婷婷六月中文字幕| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 色婷大香蕉| 99九九视频精彩在线| 91九色精品熟女内射| 思思久ren热| 五月综合激情视频| 大香蕉欧美在线| 人人干av| 色九九中文字幕| 在线观看亚洲AV| 99色综合网| 久久人人人人妻| 欧美狠狠色| 开心五月深爱五月| 久久久久9久无码视频| 久久婷婷夜| 久久只有这里精品免费| 五月丁香色婷婷综合| 日韩黄在免| 婷婷五月开心中文字幕在线| 精品爱欲五| 九九久久五月天综合伊人| 欧美性生交XXXXX无码小说| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 亚洲第一色网站| 99热在线这里| 精品人妻久久久久久| 婷婷娌伦网| 五月丁香网站| 99视频在线观看网址| 久久综合激情五月天| 日日夜夜爽| 色色色综合网| 伊人高清无码| 激情五月丁香在线观看直播| 九九婷婷激情综合网| 五月婷婷综合社区| 九九激情网| 开心激情网五月| 久久久久9| 日日噜噜久久婷婷五月天| 久久九九怡红院| 五月综合激情视频在线| 激情综合五月天| 午夜成人综合| 五月丁香婷婷激激激综合网色播| 色综合色综合网| 97人人操人人拍| 婷婷丁香五月av| 人人摸人人| 搡BBBB搡BBB搡18 | 91色婷婷综合久久中文字幕二区| 五月丁香在线综合| 五月天婷婷综合网| 久久久久激情| 天天操屄网| 少妇熟女视频一区二区三区| 综合激情在线视频| 五月婷婷说| 五月婷婷丁香| 五月天婷婷av| 综合网天天| 亚洲成人AV高清字幕| 久久久婷| 操97免费超级视频| 嘿嘿视频免费看9| 婷婷五月俺要去| 大香蕉人妻| 99热 在线播放| 亚洲中文乱字字幕线在永久| 99视频精品| 婷婷色九月| 婷婷免费视频| 潘金莲AAAAAAAAAA| 五月熟妇婷婷久久| 另类激情中文| www色五月| 人妻久久久| 综合另类激情| 天天 青草 丝袜制服 在线| 五月婷婷丁香六月| 亚洲五月婷婷| 伊人www22综合色| 超碰AV成人| 亚洲第一色区| 91色性感五月婷婷丁香| 5月婷婷6月丁香aV| 色婷婷网| 深爱五月月天| 婷婷色色五月| 91精品丝袜久久久久久| 成人综合AV| 任你操精品免费| 五月丁香六月婷婷色日| 涩婷婷视频快播人妻| 亚洲综合在线丁香五月| 91精品久久久久久久久久| 99区视频| 日日日日日| 99 频99热国里只有精品| 激情五月天影院| 九九Av| 亚洲操b| 久久99网站| 久久99久久99久久99人受| 99激情网| 色色五月丁香| 99操逼| 狠狠干在线| 啪啪一区| 日日夜夜狠狠| 九九视频这里是精品五月| 大香蕉五月天| 亚洲精品操一操、噜一噜、摸一摸、爽 | 婷婷五月色综合香五月| 婷婷五月天第四色| 人操综合| 日日夜夜天天综合| 丁香六月青青草| 综合啪啪| 67194成I人在线观看线路1| 色欲婷婷五月天| 丁香五月婷婷超碰在线| 色五月婷婷亚洲| 亚洲精品乱码久久久久久按摩观| 97色色网| 欧美精品久久久久久视频观看| 嫩草AV久久伊人妇女超级A| 五月丁香综合久久| www.金莲av| 五月天婷婷爱| 色五月激情综合| 综合网色| 久久久久久久久久久久久久人妻视频 | 久久机热/这里只有精品| 亚洲AV免费国产电影| 亚洲AV网址| 五月天色色激情综合| wwwss在线观看| 热99只有精品| 国产色香蕉精品五夜婷| 一月婷婷色色| 狠狠色婷婷在线| 操老逼综合网| 天天骑天天操| 综合婷婷久久| 无码少妇高潮喷水A片免费| 九九热视频免费的| 丁香五月婷婷色偷偷| 9 1超碰九色| 天天上天天爽| YW无码| 另类图片激情五月| 五月天婷婷六月激情网| 欧州婷婷五月天综合| 色色色综合色| 成人日韩欧美| 婷婷在线五月综合| 久久亚洲天堂| 久久丁香婷婷五月天| 激情九月丁香婷婷| 波多野结衣AV无码Porn| 九九激情网| 久久探花91swag| 日韩在线9| 国产Va视频| 婷久久综合| 永久精品| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪| 在线观看亚洲AV| 丁香五月影院| 久久只有18视频| 日本一级黄色电影| 超碰色碰碰| 五月婷婷六月丁香综合| 婷婷六月激情啪啪| 欧美啪啪五月天| 超碰91在线| 色婷婷视频在线| 婷婷激情伍月网| 日本道久久91| 激情五月天综合网| 五月丁香五月婷婷在线观看| 婷婷五月色播网| 婷婷性爱五月天丁香网| 丁香五月成人社区| 91人人爽久久涩噜噜噜| 婷激情五月天视频导航| 婷婷五月激情综合啪啪| 91蜜桃婷婷狠狠久久综合9色| 亚州色色色| 久月丁香爱婷婷综合| 久久精品五月| 精品人妻伦九区久久AAA片| 六月丁丁香| 丁香五月综合图片在线观看| 91丨九色丨白浆| 婷婷五月综合国产精品| 久久久婷婷婷| 99无吗| 热这里只有精| 久久综合丁香| 亚洲成人av在线观看| 五月香婷婷| 成人AV中文字幕| 婷婷五月天a| 五月丁香久人妻中文| 婷婷丁香www视频日本韩国| 中国女人做爰A片| 爆乳熟妇一区二区三区爆乳| 性99网站| 日本美女天天日天天爽| 五月天天堂久久| 超碰成人影视| 亚洲V国产V欧美V久久久久久| 婷婷射图| 成人开心五月天| 五月婷婷网久久| 99精品在线观看| 97久久五月丁香婷婷| 色婷婷五月综合激情中文字幕| 能直接看的av网站| 国产三级片91| 嫩草乱码一区三区四区| 婷婷开心综合人妻小说网址| 五月天婷婷六月激情网| 黄色片区子| www.99热这里精品| AV在线免费观看不卡| 无码字幕中文| 丁香五月激情网| 九九热在线观看6| 丁香五月AV综合激情| 色五月丁香伊人五月| 久久丝袜婷婷| 亚洲操操| 综合久久十| 婷婷五月综激情| 五月丁香色色综合| 激情综合五月色丁香婷婷| 五月婷婷视频| 九九热99热| 久久激情五月婷婷| 五月天激情日色在线| 丁香婷婷丁香五月欧美人| 激情AV| 国产AV一区二区三区日韩| 婷婷五月情| 国产精品久久久久久白浆色欲| 亚洲va成人va成人va在线观看| 99国产小视频| 六月五月婷婷| 亚洲色vA| 五月婷婷视频28| 婷婷开心激情综合五月天| 亚洲熟妇AV综合网五月丁香伊人| 噜一噜免费视频| 九九热在线观看6| 91精品91久久久中77777| 日韩成人中文字幕| 欧美97色| 色狠狠综合| 久99| 久久五月天大美女| 色VA| 五月婷婷六月丁香激情综合网| 夜夜骑操AV| 色9色| 熟女五月天久久综合| www.婷婷五月天啪啪| 俺五月| 五月丁香好婷婷A片网| 丁香五月天欧美| 久久99这里只有精品视频| 婷婷丁香激情| 99热日韩| 五月成人网站| 色婷婷超碰| 99日本精品视频热| 婷婷社区五月天| 国产精品18久久久| 日本二级毛片二级毛片| 亚洲人操亚洲人| 人人操人人添人人摸97| 97人操| 99久.| 99re最新地址视频| 久久久久综合激动五月天| 色婷五月天网站| 婷婷色激情五月天| www五月| 丁香婷婷五月天激情四射| AV操操操| 久久久国产精品黄毛片| 亞洲自怕| 在线99精品| 婷婷伊人网| 亚洲视频色色| 99热99热99热99热| 六月婷婷综合| 99欧美| 欧美成人一区二区三区在线视频 | 久婷婷五月激情| 五月天激情小说婷婷基地| 欧美成人性爱网| 日韩AV片| 成人精品视频99在线观看免费| 中国女人做爰A片| 丁香五月天亚洲综合| 久久久久8888| 丁香六月天婷婷在线| 思思热在线视频99| 五月婷婷亚洲色视频| 色婷婷综合网站| A片试看120分钟做受图片| 久久婷婷大香蕉| 67194成I人在线观看线路1| 婷婷五月天影视网址| 另类五月激情| 色婷网| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 五月婷色啪| 久99热在线观看| 五月婷丁香| 91九色无码内射| 九九AV| 婷激情五月| 日本激情91| 国产FREESEXVIDEOS性中国| 激情网色五月| 久久XX| 思思久热6| 亚洲AV成人在线| 婷婷伊人五月天| 久久久久久久久99精品| 米奇激情婷婷| 欧美啪啪9| 欧类av怡春院| 久久总和99| 天天 青草 丝袜制服 在线| 色色激情五月| 熟惀91九色在线| 久久92| 天天综合网亚洲综合网| 色欲丁香| 激情精品久久| 狠狠色婷婷7777久综合| 91日本在线免费| 五月天激情综合网俺也去| www.26uuu.com亚洲电影| 在线观看中文字幕亚洲| 婷婷五月丁香激情| 久热大香蕉| 日韩精品二三区| 婷婷五月在线观看| 99小视频在线观看| 五月天无码视屏播放| 日本久久人| 日本eVa一区=区视频| 色婷婷基地| 99热这里全是精品| 久久五月综合| 综合色网站| 婷婷五月天论坛| www99热| 丁香六月婷婷社区| 26uu| 夜夜爽天天干| 久久久久98| 人妻精品久久久久久久| 思思热在线| 精品女人九九九| 99免费视频网| 国产成人精品一区二三区熟女在线 | 思思热再线视频| 五月激情六月丁香| 色婷久| 97色色色视频| 久久xx| 色综合婷婷| 五月婷婷六月激情| 91九色PORNY大屁股| 99热这只有| 久热九九| 铁牛TV人妻| 狠狠做深爱婷婷久久综合一区| 五月天电影网| 一起草无码视频| 99激情网| 婷婷伊人75| 五月天天天色| 新激情五月天| 五月色 亚洲| 天天做天天爱天天爽| 九色PORNY自拍成人精彩视频| 色婷婷五月在线| 成人五月丁香花| 五月激情婷婷六月丁香| 色五月av| 香蕉综合网| 久久综合激情| 婷婷少妇激情| 99热精品在线| 色99无码| 91成人性爱视频| 色99xx| 极品五月天| AA片在线观看视频在线播放| 久久久久久久综合狠狠综合| 激情四射五月天| 色综合区| 一起草Av| 成年人夜夜喷水| 丁香狠狠色婷婷| 九九热在线99| 超碰国产在线观看| 激情久久 婷婷| 99热激情| 婷婷成人在线| 五月婷婷视频在线观看| 久久五月天免费网站| 桃色激情网| 久久久久久久久久久久63| 九九久热| 大香伊人婷婷影院| 亚洲免费婷婷| 99草视频在线观看| 欧美激情VA永久在线播放| 五月天停婷基地| 色色五月天婷婷丁香| 色婷婷国产精品综合在线观看| 久久久无码精品成人A片小说 | WWW.久久久久久久| 婷婷五月色综合| 婷婷射图| 5月丁香啪啪啪| 五月天激情国产综合婷婷婷就去爱| 思思re99视频在线观看| 天天摸.天天mo| 天天插天天干| 五月丁花色综合网| 日逼影音先锋男人资源站| 99爱在线视频观看| 亚洲热久| 亚洲五月天婷婷| 少妇激情基地| 婷婷丁香五月综合| 日日射天天射| 色五月激情综合网站| 人人草人人看| 色99日韩| 色色婷| 久久99久久99精品免观看软件| jiujiuxiangjiaowang| 日韩三级高清无码| 久久综合丁香| 激情开心五月天| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 国产激情在线| 丁香五月影院| 99精品偷自拍| 色五月丁香伊人五月| 日韩高清久久| 五月丁香啪啪| 色五月婷婷、老熟女| WWW.HENHENL.| 91超级碰在线| 欧美狠狠草| 七月丁香五月婷婷在线| 色婷婷综合视频| 天天色图| 国产肥白大熟妇BBBB视频| www夜夜操comwww| 超碰猛烈的性猛交| 久综合网| 五月开心深深爱激情综合 | 麻豆科斗777| 99久久超级| 性热视频99精品| 日本怕怕视频| 国产99久| 超碰在线视屏| 色五月激情五月丁香五月婷婷啪啪综合| 九月丁香很很色| 成人网在线视频| 婷婷五月天伊人在线| 激情婷婷五月在线合集| 成人欧美日韩| 日日爽日日操| 五月叮香啪| 日日干夜夜干| 另类综合婷婷五月天欧美视频| 久久婷.com| 91色呦哟| 碰碰女| 亚洲 在线 性爱| 综合99视频| 婷婷成人基地| 五月天色五月| 婷婷久久五月天亚洲欧美国产日韩在线观看| 婷婷香蕉香| 色五月婷婷久久| 夜夜撸日日骑| 五月天丁香网| 婷婷丁香五月视频| 97色色色色色| 色色五月天丁香婷婷| 激情丁香淫荡婷婷| 午夜在线成人网站免费观看| 欧洲亚洲免费视频9| 我爱大香蕉| 97久久婷婷色| 激情丁香五月天图片| 无码激情精品色婷婷久久久久| 狠狠爱婷婷丁香| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 狠狠色丁香婷婷久久综合| 五月丁香狠狠爱婷婷综合| 久操干| 亚洲三A| av九九| 99无码黄色视频| 亚洲激情 久久| 99熟女啪啪视频| 九九丁香社区欧美激情| 婷色五月| 五月激情婷婷丁香天堂| 99热99思午夜精品| 天堂资源欧日浪女在线播放| 99视频热99| 激情小说五月天| 婷婷五月天激情电影| 九九精品在线网| 五月天激情综合首页| 婷婷丁香成人五月天| 六月婷综合| 色五月婷婷中文字幕| 97亚洲婷婷| 天天干com| 丁香婷婷偷拍| 日本69日人视频| 大香蕉人人人| 一本婷婷丁香久久| 99热这里有精品| 超碰久热| 97色天堂| 久机视频这只有精品| 五月丁香婷中文字幕| 99re99在线看| 婷婷爱爱蜜臀天天操| 久久人视频| 国产99久| 国产AV一区二区三区最新精品| 思思热在线播放| 人人97碰| 天天爱天天秀天天做|