99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Python+CUDA時域有限差分法:電磁仿真加速實踐與避坑指南

Python+CUDA時域有限差分法:電磁仿真加速實踐與避坑指南 簡介面向電磁場、聲學(xué)與熱傳導(dǎo)等波動問題的 Python 與 CUDA 加速 FDTD時域有限差分學(xué)習(xí)項目適合具備一定 Python 基礎(chǔ)、希望理解數(shù)值求解偏微分方程并借助 GPU 提速的讀者。壓縮包共 35 個文件以 Python 腳本為主20 個 py另有 2 個 CUDA 內(nèi)核文件、9 個 txt 物理量與說明文件以及實現(xiàn)文檔和開發(fā)歷程記錄整體僅 1.19MB結(jié)構(gòu)緊湊已有 183 人學(xué)習(xí)瀏覽。內(nèi)容覆蓋一維到二維的多種仿真示例如波導(dǎo)、分束器、環(huán)形振蕩器、PML 吸收邊界、Ricker 子波源等并包含 dipole 的 CUDA 加速實現(xiàn)按一維變化、二維結(jié)構(gòu)、廣義坐標(biāo)、正交柱坐標(biāo)等主題分類便于按需查閱。配套文本給出 h-mu、h-phi 等物理量與坐標(biāo)定義可對照公式理解 FDTD 的離散化、時間步進、邊界處理以及 GPU 線程分配、內(nèi)存管理、并行效率等優(yōu)化要點。下載后可快速復(fù)現(xiàn)仿真場景也能在此基礎(chǔ)上擴展自己的電磁場或聲學(xué)模擬任務(wù)適合作為學(xué)習(xí) FDTD 與 PyCUDA 的參考素材。1. 一個“下載.zip”背后的完整電磁仿真方案Python CUDA 時域有限差分法拿到帶“Python_Cuda_下載.zip”后綴的項目懂行的人第一反應(yīng)不是急著解壓而是先問這套時域有限差分法FDTD代碼包給到我手里的到底是一個能直接跑的求解器還是一堆需要自己拼裝的零件FDTD 是電磁場數(shù)值模擬里最成熟的時域算法之一它把麥克斯韋方程組在空間和時間上交錯離散直接模擬波的傳播、散射與耦合過程。純 Python 寫一個一維教學(xué)版 FDTD 不難但網(wǎng)格一旦鋪到百萬級解釋器逐層循環(huán)會慢到讓人懷疑人生CUDA 加速正好卡在這個痛點上。這篇筆記面向準(zhǔn)備拿這套代碼做光學(xué)、天線或射頻仿真的工程師和學(xué)生從原理、最小實現(xiàn)到 CUDA 遷移路徑把每一步的選型理由和常見坑位一次講透。2. 時域有限差分法先立住原理Yee 網(wǎng)格、交替更新與 Courant 條件2.1 為什么 FDTD 能在電磁仿真里當(dāng)“萬金油”FDTD 能成為工程界的常青樹靠的不是精度天下第一而是它在時域正面求解的獨特優(yōu)勢。頻域方法通常一次求解只給一個頻率點的響應(yīng)想拿到寬頻結(jié)果就要掃頻計算量線性疊加FDTD 則是對一個寬帶脈沖源做時間步進一次算完就能通過傅里葉變換得到整個頻段的響應(yīng)。做天線、濾波器、超材料這類強色散、強諧振問題這個特性省下的時間不是一倍兩倍。另一個被低估的優(yōu)點是對非線性介質(zhì)和時變材料的天然適配。很多頻域方法的核心假設(shè)是線性時不變遇到光學(xué)非線性效應(yīng)只能繞路FDTD 的迭代結(jié)構(gòu)里每個網(wǎng)格點的介電常數(shù)可以隨局部場強變化當(dāng)場更新非線性效應(yīng)只是多寫一行賦值的事。加上 FDTD 處理復(fù)雜幾何只需要網(wǎng)格填充不需要像有限元那樣生成高質(zhì)量網(wǎng)格程序結(jié)構(gòu)的魯棒性也高出一截。代價同樣明顯網(wǎng)格分辨率直接決定了內(nèi)存和算力。工程經(jīng)驗是每個波長至少鋪 10 到 20 個網(wǎng)格三維場景下網(wǎng)格數(shù)是波長分辨率的立方增長。一個 10 微米見方的近紅外光子器件在 1550 nm 波長下粗略也要鋪 100 乘 100 乘 100 的網(wǎng)格如果時間步再被 Courant 條件卡住步進上萬步是常態(tài)。這就是 CUDA 進來的理由搞不定性能FDTD 只能停留在教學(xué)玩具階段。2.2 Yee 晶格與 E/H 場的交錯離散代碼里那兩行更新公式從哪來FDTD 最核心的設(shè)計出自 Kane Yee 在 1966 年的論文把電場和磁場在空間上錯開半個網(wǎng)格在時間上錯開半個步長。以三維為例每個電場分量周圍環(huán)繞四個磁場分量每個磁場分量周圍同樣環(huán)繞四個電場分量。這個交錯布局讓麥克斯韋旋度方程可以被二階中心差分直接離散不用解任何線性方程組當(dāng)前時刻的場值只由上一時刻的相鄰場值決定。一維情況下假設(shè)波沿 x 方向傳播只保留 Ez 和 Hy 兩個分量離散位置寫成Ez 定義在整數(shù)網(wǎng)格點 i 上Hy 定義在半整數(shù)網(wǎng)格點 i 0.5 上從法拉第定律和安培定律出發(fā)展開旋度方程后得到# 安培定律E 的更新用 H 在相鄰兩個半網(wǎng)格點的差值 ez[i] ez[i] courant * (hy[i] - hy[i-1]) # 法拉第定律H 的更新用 E 在相鄰兩個整數(shù)網(wǎng)格點的差值 hy[i] hy[i] courant * (ez[i1] - ez[i])courant 在這里是庫朗數(shù)真空歸一化單位下等于 c 乘以 dt 除以 dx。這套交錯更新的意義在于E 場的旋度只依賴 H 場的空間差分H 場同理每個網(wǎng)格點上的值獨立更新天然適合并行。三維場景只是重復(fù)六次相同模式的更新分別對應(yīng) Ex、Ey、Ez 和 Hx、Hy、Hz索引錯位的套路完全一致。真正容易寫錯的是索引邊界。Ez 的更新用到了 hy[i] 和 hy[i-1]那么 Ez 最左邊一個格子依賴不存在的 hy[-1]Hy 的更新用到了 ez[i1]最右邊一個格子同樣越界。代碼里必須把兩端單獨處理或者把更新的索引范圍收窄不然數(shù)組越界在 Python 里可能不報錯直接用垃圾值污染所有結(jié)果這也是新手最容易翻車的地方。2.3 Courant 穩(wěn)定性條件與網(wǎng)格分辨率參數(shù)設(shè)錯的典型翻車現(xiàn)場FDTD 是顯式時間步進算法時間步長不能隨便取。穩(wěn)定性條件由庫朗數(shù)約束三維情況下 courant 必須小于等于 1 除以根號 3二維是 1 除以根號 2一維就是小于 1。實際使用時通常取 0.9 倍的安全系數(shù)三維用 0.5 到 0.7 都是常見做法。這個限制來源于差分格式的特征值譜超了之后誤差會隨時間步指數(shù)放大表現(xiàn)出來就是波形跑到幾百步突然變成 NaN。比發(fā)散更隱蔽的是數(shù)值色散。即使?jié)M足穩(wěn)定性條件時間和空間差分近似本身會引入與頻率相關(guān)的相速度誤差。網(wǎng)格分辨率越低誤差越大。對寬頻脈沖而言不同頻率成分的波會以略有差異的速度傳播導(dǎo)致波形在傳播幾個波長后展寬變形。這種數(shù)值色散是個“玄學(xué)”問題不報錯但污染結(jié)果唯一可靠的對策就是把網(wǎng)格取到每波長 20 個網(wǎng)格以上然后在關(guān)鍵算例里做分辨率收斂性驗證。網(wǎng)格分辨率還直接和內(nèi)存掛鉤這里給一個預(yù)估值。一個 256 立方網(wǎng)格的單精度場數(shù)組6 個分量Ex、Ey、Ez、Hx、Hy、Hz大約占用 400 MB雙精度翻倍。如果網(wǎng)格翻到 512 立方單精度也要 3.2 GB。加上 PML 吸收邊界和源區(qū)網(wǎng)格趁早用單精度能省一半顯存這在高分辨率三維模擬里往往是成敗手。3. 用 Python 跑通一維 FDTD最小代碼、參數(shù)含義與結(jié)果自檢3.1 代碼骨架源項注入、場更新、邊界處理三步走一套可復(fù)現(xiàn)的 FDTD 主循環(huán)不管幾維都繞不開四個環(huán)節(jié)更新 E 場、注入源項、更新 H 場、吸收邊界。順序不能亂因為 E 和 H 在時間上差半步先算誰后算誰決定了時間對齊關(guān)系。常規(guī)做法是先更新 E用上一時刻的 H然后注入源再更新 H用剛算好的 E這樣源項對 E 的影響會在下一步傳遞到 H物理上是對的。源項的類型決定了模擬的用途。高斯脈沖是默認選擇因為它的頻譜是平滑的高斯形覆蓋從低頻到高頻的連續(xù)范圍適合寬頻響應(yīng)分析正弦連續(xù)波適合單頻穩(wěn)態(tài)問題比如諧振腔的 Q 值計算調(diào)制高斯脈沖則兼顧兩者適合需要頻帶限制的場景。做散射問題還可以用平面波源加總場散射場分區(qū)不過那屬于進階玩法先把點源跑通再升級。邊界處理是最容易被忽略的一部分初學(xué)者經(jīng)常用零邊界或者硬邊界結(jié)果波一到邊界就彈回來在域內(nèi)來回反射模擬結(jié)果被污染得面目全非。我一般建議從一階 Mur 邊界起步它只需要一個賦值語句把邊界格子的場值設(shè)為相鄰格子場值本質(zhì)上是行波假設(shè)下的簡易無反射截斷對教學(xué)和小規(guī)模驗證足夠。追求低反射率就用 PML這留到最后一章展開。3.2 一維自由空間傳播的完整腳本與逐段說明import numpy as np # 網(wǎng)格與物理參數(shù) nx 800 # 空間網(wǎng)格數(shù) dx 1e-3 # 空間步長單位米 courant 0.8 # 庫朗數(shù)必須小于 1 dt courant * dx / 3e8 # 時間步長單位秒 nt 600 # 總步進數(shù) # 場初始化 ez np.zeros(nx) hy np.zeros(nx) # 高斯脈沖源參數(shù) src_pos nx // 2 # 源放在域中間 t0 80 # 脈沖峰值時刻 spread 20 # 脈沖寬度控制 # 主循環(huán) for n in range(nt): # 第一步安培定律更新 Ez for i in range(1, nx): ez[i] ez[i] courant * (hy[i] - hy[i-1]) # 第二步注入高斯脈沖源 ez[src_pos] np.exp(-((n - t0) / spread) ** 2) # 第三步法拉第定律更新 Hy for i in range(nx - 1): hy[i] hy[i] courant * (ez[i1] - ez[i]) # 第四步一階 Mur 吸收邊界 ez[0] ez[1] ez[-1] ez[-2] # 每 100 步打印一次峰值確認場沒有發(fā)散 if n % 100 0: print(fstep{n}, max|Ez|{np.max(np.abs(ez)):.4f})這段代碼的核心邏輯就是上一章的兩條更新公式套進循環(huán)。courant 取 0.8 是因為一維穩(wěn)定性上限是 1.0留 20% 余量既保證數(shù)值穩(wěn)定又不會因為步長太小拖慢完成時間。dt 由 courant 除以光速換算而來這一步不能省后續(xù)做有耗介質(zhì)或色散介質(zhì)時會遇到物理時間相關(guān)信息提前把這個換算關(guān)系寫清楚省得到時候?qū)χ綌?shù)換算物理時間。源項注入放在 E 更新之后、H 更新之前時間對齊順序前面已經(jīng)說明。高斯源的表達式里 t0 控制峰值出現(xiàn)的步數(shù)spread 控制脈沖時域?qū)挾人麄児餐瑳Q定了激勵信號的頻譜覆蓋范圍。想激勵高頻分量就縮小 spread但網(wǎng)格分辨率跟不上時高頻分量會被數(shù)值色散歪曲這是一個需要協(xié)作調(diào)節(jié)的參數(shù)對。Mur 邊界的實現(xiàn)就是把邊界格子的場值復(fù)制為內(nèi)側(cè)相鄰格子的值。這個操作相當(dāng)于假裝波從邊界“走出去”對垂直入射的波有效斜入射時反射系數(shù)會明顯上升。這也是為什么后面要做 PML 的根本原因一階 Mur 應(yīng)付教學(xué)場景可以做工程算例必須換方案。3.3 怎么確認代碼沒寫錯能量守恒與波形形態(tài)兩個判據(jù)代碼能跑通是一回事跑出的結(jié)果是對的是另一回事。FDTD 代碼寫好后第一步不是上大網(wǎng)格而是先用這個一維腳本做兩件事觀察波形是否按預(yù)期向兩側(cè)傳播以及檢查能量是否守恒。兩個判據(jù)都能在代碼里以很低的成本實現(xiàn)。能量守恒判據(jù)的做法是每步計算電磁場總能量公式是電場能量密度加磁場能量密度的空間積分。在一維自由空間里沒有源和損耗時總能量應(yīng)該基本不變只會在源注入期間上升隨后保持平穩(wěn)。如果能量一直在漲說明 Courant 條件被破壞如果能量突然掉頭檢查邊界和網(wǎng)格是否異常。# 在每個時間步末尾累加可以發(fā)現(xiàn)早期發(fā)散 total_energy 0.5 * np.sum(ez**2) 0.5 * np.sum(hy**2)波形形態(tài)的判據(jù)更好操作運行模擬后取某一時刻的 ez 快照應(yīng)該看到源點兩側(cè)各有一個對稱的脈沖向外傳播。脈沖峰值位置大致等于源位置加減光速乘以物理時間可以用這個位置偏差來驗證 dt 換算對不對。我見過不少 dt 錯算成 1 導(dǎo)致波形直接飛出域外的案例這種一眼就能看穿的低級錯誤跑一次波形快照比查半天代碼快得多。如果這兩項都過關(guān)這個一維骨架就可以放心作為后續(xù)功能開發(fā)的基座。加介質(zhì)層、加 Mur 邊界升級、加金屬板反射都是在這個循環(huán)里插代碼的事。等三維版本跑不動了再進入 CUDA 遷移階段。4. 從 Python 到 CUDA三種加速路徑與一條實踐路線4.1 純 Python 循環(huán)慢在哪三維網(wǎng)格就是顯存和算力的黑洞一維 FDTD 用 Python 雙循環(huán)完全沒問題但三維場景下問題就來了。一個常見測試是 256 立方網(wǎng)格跑 1000 步光場數(shù)組就有 6 個分量約 400 MB純 Python 循環(huán)每步要更新約 1600 萬網(wǎng)格點乘 6 個分量接近一億次賦值操作Python 解釋器逐行執(zhí)行這個量級的循環(huán)一個算例跑到天荒地老。用 NumPy 切片能救一部分把內(nèi)層循環(huán)換成數(shù)組運算后單步耗時能降到毫秒級。但三維數(shù)組切片加廣播引入的臨時數(shù)組和內(nèi)存拷貝在顯存有限的場景里依然是瓶頸。更麻煩的是 FDTD 的時間步進是串行的每步依賴上一步完成沒法把時間循環(huán)也并行掉。所以真正的出路是把空間網(wǎng)格的更新并行化而這正是 CUDA 最擅長的形態(tài)一大塊同構(gòu)數(shù)據(jù)、大量線程、少量邏輯判斷。加速還得先搞清楚天花板在哪。FDTD 每個網(wǎng)格點的運算量很小主要耗時來自從顯存讀入兩個相鄰場值再寫回一次屬于典型的帶寬密集型任務(wù)。實測經(jīng)驗是一個現(xiàn)代 GPU 的顯存帶寬能達到 1 TB/s 級別按每個網(wǎng)格點更新需要讀 16 字節(jié)寫 4 字節(jié)來算理論吞吐量也能到百億級網(wǎng)格更新每秒。相比 CPU 單核的個位數(shù)億次數(shù)量級差在這里。4.2 路徑一Numba 的 cuda 目標(biāo)改動最小、上手最快Numba 是 Python 加速里門檻最低的選項不需要離開 Python 環(huán)境也不需要手寫 C/C。把之前的一維循環(huán)搬進 GPU只需要把更新函數(shù)換成cuda.jit裝飾器再顯式配置線程塊和網(wǎng)格。代價是你必須把數(shù)組顯式傳進 GPU 顯存并且接受 Numba 的 CUDA 支持版本綁定的約束。from numba import cuda import numpy as np nx 800 nt 600 courant 0.8 # 在 GPU 顯存上分配場數(shù)組 ez cuda.to_device(np.zeros(nx, dtypenp.float32)) hy cuda.to_device(np.zeros(nx, dtypenp.float32)) cuda.jit def update_e(ez, hy, courant): i cuda.grid(1) if 0 i ez.shape[0] - 1: ez[i] ez[i] courant * (hy[i] - hy[i-1]) cuda.jit def update_h(ez, hy, courant): i cuda.grid(1) if 0 i hy.shape[0] - 1: hy[i] hy[i] courant * (ez[i1] - ez[i]) threads_per_block 128 blocks_per_grid (nx threads_per_block - 1) // threads_per_block src_pos nx // 2 t0 80 spread 20 for n in range(nt): update_e[blocks_per_grid, threads_per_block](ez, hy, courant) # 源項注入只能從 host 端訪問到設(shè)備數(shù)組先用 copy 回再寫 if n % 50 0: # 示例低頻次注入模擬源 host_ez ez.copy_to_host() host_ez[src_pos] np.exp(-((n - t0) / spread) ** 2) ez cuda.to_device(host_ez) update_h[blocks_per_grid, threads_per_block](ez, hy, courant)Numba 分兩個 kernel 更新 E 和 H而不是在同一個 kernel 內(nèi)做完是為了避開線程間同步問題。FDTD 的 E 更新依賴上一時刻 HH 更新依賴新 E如果放進同一個 kernel必須在中間插入cuda.syncthreads()而 syncthreads 要求所有線程都到達同步點線程塊內(nèi)的邏輯分支不一致時會卡死。拆成兩個 kernel 調(diào)用后kernel 之間天然同步安全省心。一個明顯的坑是源項注入。Numba CUDA kernel 內(nèi)部做ez[src_pos] 這種單點操作效率不高而且需要把數(shù)組拷回 host 再寫再傳回雖然一維場景無所謂但三維里頻繁搬運會成為性能殺手。常見做法是把源項改成點源數(shù)組在 kernel 內(nèi)部按時間步判斷全局線程 ID 是否命中源位置把注入邏輯并進 update_e 一起算。4.3 路徑二PyCUDA 手寫 kernel控制最細、調(diào)試最痛苦PyCUDA 把 CUDA 的 C 風(fēng)格 kernel 直接塞進 Python 源碼里用運行時編譯生成 GPU 機器碼。它能精確控制每個線程做什么、用多少寄存器、怎么對齊顯存訪問是三維大規(guī)模算例里性能最穩(wěn)定的路徑。代價是你要同時維護 Python 側(cè)的數(shù)據(jù)流和 C 側(cè)的 kernel 代碼編譯報錯時還得看 C 的語法。import pycuda.autoinit import pycuda.driver as drv from pycuda.compiler import SourceModule import pycuda.gpuarray as ga import numpy as np mod SourceModule( __global__ void update_e(float *ez, const float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { ez[i] ez[i] courant * (hy[i] - hy[i-1]); } } __global__ void update_h(float *ez, float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { hy[i] hy[i] courant * (ez[i1] - ez[i]); } } ) update_e mod.get_function(update_e) update_h mod.get_function(update_h) nx 800 ez ga.zeros(nx, dtypenp.float32) hy ga.zeros(nx, dtypenp.float32) block (128, 1, 1) grid ((nx 127) // 128, 1) for n in range(nt): update_e(ez, hy, np.float32(courant), np.int32(nx), blockblock, gridgrid) # 源注入直接操作 GPU 數(shù)組 ez[src_pos] ez[src_pos] np.exp(-((n - t0) / spread) ** 2) update_h(ez, hy, np.float32(courant), np.int32(nx), blockblock, gridgrid)PyCUDA 的get_function返回的 kernel 對象支持block和grid配置參數(shù)在調(diào)用時通過 Python 對象直接傳入kernel 內(nèi)部按 C 的指針語義訪問顯存。這里比 Numba 多了一個能力源項注入可以直接在 host 端操作 GPU 數(shù)組的一個元素PyCUDA 會自動處理單元素讀寫省去了 Numba 里的來回拷貝。這是 PyCUDA 在工程效率上的實在優(yōu)勢。索引和步長的匹配是 PyCUDA 新手最常犯的錯。C kernel 里的nx參數(shù)和 Python 側(cè)的數(shù)組長度必須一致block 大小要和網(wǎng)格劃分配合。例子里的grid ((nx 127) // 128, 1)是把總網(wǎng)格數(shù)按每塊 128 線程切分如果 nx 不是 128 的整數(shù)倍最后一個塊會有部分線程不滿足邊界條件退出這是正確的寫法。很多人圖省事直接grid(10,1)導(dǎo)致線程數(shù)超過數(shù)組長度越界訪問是硬隔離的直接崩掉。4.4 路徑三C/CUDA 編譯擴展留給性能強迫癥Numba 和 PyCUDA 的運行時編譯都有小幅啟動開銷kernel 本身也受限于各自代碼生成器的優(yōu)化能力。當(dāng)網(wǎng)格規(guī)模上到千萬級、單次仿真要跑幾萬步時用 C/CUDA 寫 kernel 編譯成 Python 擴展模塊是性能上限最高的路線。BDF 的維護成本高但數(shù)據(jù)結(jié)構(gòu)完全自己掌控還能用 shared memory 做相鄰場值的緩存優(yōu)化。// fdtd_kernel.cu 核心更新一維示例三維同理擴展到三個方向 __global__ void update_e(float *ez, const float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { ez[i] ez[i] courant * (hy[i] - hy[i-1]); } }編譯命令大致長這樣注意-arch參數(shù)要匹配目標(biāo) GPU 的計算能力。以 RTX 4060 Ti 為例它的計算能力是 8.9對應(yīng)sm_89編譯時指定這個參數(shù)讓編譯器生成適配指令集的機器碼。用舊的默認架構(gòu)編譯也能跑但性能可能差 20% 到 30%屬于白扔的算力。nvcc -O3 -archsm_89 -Xcompiler -fPIC -shared fdtd_kernel.cu -o fdtd_kernel.so拿到.so動態(tài)庫后在 Python 里用ctypes或cffi加載調(diào)用。這要求你對 C ABI 和內(nèi)存生命周期有足夠把握因為數(shù)組指針要顯式從 NumPy 轉(zhuǎn)換并保持引用否則 Python 側(cè)可能把底層緩沖釋放kernel 訪問到懸空指針表現(xiàn)為偶發(fā)的 Segmentation Fault這類問題極難排查。所以我的建議是沒有明確的性能瓶頸不要上編譯擴展Numba 和 PyCUDA 對絕大多數(shù)情況已經(jīng)夠用。4.5 加速比不是玄學(xué)顯存帶寬、網(wǎng)格規(guī)模與 kernel 合并訪問很多人拿一維 FDTD 跑完 GPU 版本后抱怨加速比只有幾倍這不是 CUDA 不行而是問題形態(tài)決定了它跑不滿 GPU。一維網(wǎng)格只有 800 個點一個 kernel 只啟動幾個線程塊GPU 的數(shù)千個計算核心大部分在空轉(zhuǎn)。CUDA 的優(yōu)勢在大規(guī)模并行一維場景連顯存帶寬都吃不滿自然拿不到好看的數(shù)字。真正讓 GPU 發(fā)揮實力的是二維和三維。二維 512 乘 512 網(wǎng)格單次更新就是 26 萬線程三維一個面就有百萬線程這時候并行度才夠。實測數(shù)據(jù)可以參考同樣 256 立方網(wǎng)格跑 1000 步純 Python 需要小時級NumPy 向量化大約幾十分鐘PyCUDA 能壓到一兩分鐘數(shù)量級差距通常在 20 到 50 倍具體數(shù)字取決于顯卡型號和參數(shù)設(shè)置。如果加速比達不到預(yù)期優(yōu)先檢查內(nèi)存訪問合并。FDTD 更新時每個線程讀相鄰兩個網(wǎng)格的值如果線程 ID 與網(wǎng)格索引一一對應(yīng)相鄰線程讀的是相鄰內(nèi)存地址這條訪問路徑是合并的帶寬利用率接近理論峰值。如果索引映射走了形比如線程 ID 乘了 2同一個 warp 的線程讀的內(nèi)存跨度翻倍帶寬利用率直接腰斬。另一個常見問題是數(shù)據(jù)類型double 的訪問帶寬只有 float 的一半能上 float 就別用 double除非雙精度需求硬性存在。# 檢查當(dāng)前顯卡計算能力確認 kernel 能覆蓋目標(biāo)架構(gòu) import pycuda.driver as drv dev drv.Device(0) print(fcompute capability: {dev.compute_capability()})5. 實戰(zhàn)避坑CUDA 環(huán)境、顯存邊界與數(shù)值發(fā)散的五個典型現(xiàn)場5.1 現(xiàn)象一CUDA out of memory三維網(wǎng)格把顯存吃光了現(xiàn)象代碼跑得好好的網(wǎng)格規(guī)模一放大啟動 kernel 時直接報CUDA out of memory或者程序在數(shù)組分配階段就掛掉。常見于從二維測試切到三維正式算例的時候。原因三維場數(shù)組的內(nèi)存占用按立方增長。一個 N 立方網(wǎng)格6 個場分量float32 單精度的占用是 N 的立方乘以 24 字節(jié)N256 時約 400 MBN512 時約 3.2 GB加上 PML 區(qū)域和源數(shù)組8 GB 顯存的卡很快就見底。這是硬件邊界的數(shù)學(xué)現(xiàn)實不是代碼 bug。解決先算后跑別開盲盒。把目標(biāo)網(wǎng)格規(guī)模代入/ 1e9算 GB 數(shù)低于顯存一半才開工。然后優(yōu)先把 double 降到 float32很多模擬場景對精度的需求并沒有高到非雙精度不可再用網(wǎng)格漸變或者子區(qū)域拆分把大問題化小。還有一個實用招數(shù)只用一個場數(shù)組做滾動更新不要為了代碼美觀為每個時間步保留歷史快照歷史數(shù)據(jù)用磁盤流式存儲。5.2 現(xiàn)象二驅(qū)動版本與 CUDA Toolkit 對不上設(shè)備初始化直接失敗現(xiàn)象pycuda.driver.Error: CUDA driver version is insufficient for CUDA runtime version或者 Numba 報cuda.cuda_error.CudaSupportError??雌饋硐翊a問題實際是環(huán)境不匹配。原因NVIDIA 驅(qū)動向后兼容新驅(qū)動能跑舊版 CUDA runtime但舊驅(qū)動跑不了新版 runtime。比如驅(qū)動 550.144.03 支持 CUDA 12.x如果你裝了 CUDA 12.6沒問題但環(huán)境里殘存著 CUDA 13 的 runtime 庫就必然報 insufficient。這是加速器生態(tài)環(huán)境里最常見的“裝完就跑不通”場景。解決先看硬件支持的 CUDA 上限再看代碼依賴的上限最后取交集。命令行直接查nvidia-smi # 看右上角 CUDA Version這是驅(qū)動支持的最大 runtime 版本 nvcc --version # 看當(dāng)前激活的 CUDA Toolkit 版本Toolkit 版本必須小于等于驅(qū)動支持版本。如果不得已要多版本共存用conda install cudatoolkit裝指定版本的 CUDA 運行庫和系統(tǒng)的nvcc解耦能解決九成環(huán)境沖突。Numba 用戶還要額外檢查numba.__version__對應(yīng)的 CUDA 綁定Numba 0.58 綁 CUDA 11.8Numba 0.59 綁 CUDA 12.x版本錯位會出現(xiàn)找不到運行時函數(shù)的詭異報錯。5.3 現(xiàn)象三WSL2 里找不到設(shè)備CUDA 在 Linux 子系統(tǒng)里的特殊要求現(xiàn)象在 WSL2 的 Ubuntu 里 import pycuda 或 numba.cuda報錯說找不到 CUDA 設(shè)備nvidia-smi命令也不存在但 Windows 側(cè)驅(qū)動工作正常。原因WSL2 的 CUDA 架構(gòu)和原生 Linux 不一樣。它復(fù)用 Windows 側(cè)安裝的 NVIDIA 驅(qū)動WSL 內(nèi)部不需要也不能直接安裝單獨的驅(qū)動內(nèi)核模塊。很多人按 Linux 教程在 WSL 里裝了一堆驅(qū)動相關(guān)包裝完反而把驅(qū)動版本搞亂設(shè)備還是起不來。解決按 WSL 專用路徑走。第一步在 Windows 側(cè)安裝 NVIDIA WSL 驅(qū)動不是標(biāo)準(zhǔn)桌面版驅(qū)動是帶 WSL 支持的版本第二步在 WSL 內(nèi)部只裝 CUDA Toolkit 用戶態(tài)部分不要碰內(nèi)核驅(qū)動。驗證方式是nvidia-smi # 能看到 GPU 型號和驅(qū)動版本但 CUDA 版本可能顯示 12.x python -c import pycuda.autoinit; print(pycuda.driver.Device(0).name())WSL2 下跑 CUDA 的性能接近原生 Linux但 PCIe 直通和顯存訪問的延遲會比原生高一些對 FDTD 這種帶寬敏感型任務(wù)影響有限。如果跑出來性能明顯不對勁優(yōu)先檢查是不是誤用了 Windows 側(cè)的路徑和庫。5.4 現(xiàn)象四波形發(fā)散成 NaNCourant 條件被破壞現(xiàn)象模擬跑到幾百步后場值逐漸變大然后變成 NaN或者直接一步跳變。打印每個時間步的能量曲線能看到指數(shù)增長。原因最常見的是 courant 大于 1。三維情況下穩(wěn)定性上限是 1 除以根號 3約 0.577很多人直接沿用一維 0.8 的經(jīng)驗值直接爆了。另一個隱蔽原因是網(wǎng)格里包含不同介質(zhì)區(qū)域介質(zhì)的折射率不同導(dǎo)致局部光速不同如果 courant 是在真空參數(shù)下算的在折射率大于 1 的介質(zhì)里 dt 不變但局部 c 變小等效庫朗數(shù)下降這不會導(dǎo)致不穩(wěn)定但會讓誤差變大。反過來在折射率小于 1 的色散介質(zhì)里就可能突破穩(wěn)定上限。解決全局按最壞情況取 courant。三維固定取 0.5二維取 0.7一維取 0.8這是個不容易出錯的規(guī)則。然后每 10 步打印一次np.max(np.abs(ez))和總能量看到數(shù)值開始單調(diào)上漲就立刻停用二分法找臨界步長比一次跑完看結(jié)果再猜高效得多。還有個被人忽視的細節(jié)邊界條件寫成了硬邊界而不是吸收邊界時波會在域內(nèi)來回反射并疊加雖然數(shù)值本身不發(fā)散但峰值會明顯虛高波形永遠平穩(wěn)不下來。這種看起來不像報錯的“隱性翻車”只能靠能量守恒判據(jù)來抓。5.5 現(xiàn)象五邊界反射把結(jié)果污染了缺了吸收邊界現(xiàn)象波形在傳播到模擬區(qū)域邊界后反射回來在域內(nèi)形成駐波狀干涉條紋反射波的峰值甚至能和原始波形疊加出錯誤的共振峰。原因一階 Mur 邊界只對垂直入射波有效斜入射反射系數(shù)隨角度增大三維模擬中波從任意角度打到邊界的情況太普遍Mur 邊界撐不住。更關(guān)鍵的是如果干脆把邊界設(shè)成零值硬邊界PEC 默認行為波會在邊界全反射數(shù)值上有解但物理上完全不是你想模擬的場景。解決上 PML。PML 的思路是在邊界區(qū)域植入一層有損耗介質(zhì)讓進入的波指數(shù)衰減到最外層再反射回來時已經(jīng)衰減到可以忽略的程度。一個設(shè)計良好的 PML理論反射系數(shù)能到 1e-6 以下遠好于 Mur 邊界的百分之一量級。代價是邊界區(qū)域要多算十幾個網(wǎng)格層的更新并引入額外的輔助變量內(nèi)存和算力多消耗約 20% 到 30%。我測試過最直接的反差同樣的 100 乘 100 二維 FDTD用 Mur 邊界跑出來的透射率曲線在高頻段有明顯波紋換成 10 層 PML 后波紋消失曲線干凈得像教科書插圖。這個改善不值得猶豫從工程第一天就應(yīng)該用 PML。6. 把這個代碼包用出價值PML 吸收邊界與近遠場外推的落地技巧PML 是這個代碼包里最值得先吃透的模塊因為幾乎所有真實算例都依賴它。它的數(shù)學(xué)形式看起來復(fù)雜實現(xiàn)上卻有一層窗戶紙。以 x 方向 PML 為例要點是在 PBL 區(qū)域內(nèi)把每個電場分量的更新公式改成帶損耗系數(shù)的形式損耗系數(shù) sigma 從邊界內(nèi)沿向最外層按多項式梯度遞增。常見做法是 10 層厚度、4 次方坡度理論反射率在 1e-5 以下。# 一維 PML 區(qū)域中 Ez 的更新sig 按層數(shù)梯度分布 # ca 和 cb 是最重要的參數(shù)拿回來和總是 1 的自由空間公式對照 sig sigma_max * (x_in_pml / pml_thickness) ** 4 ca (1 - dt * sig / 2) / (1 dt * sig / 2) cb courant / (1 dt * sig / 2) ez[i] ca[i] * ez[i] cb[i] * (hy[i] - hy[i-1])ca 項逐漸把舊場值壓下去cb 項仍然傳遞相鄰網(wǎng)格的耦合兩者配合讓波在層層推進中不斷衰減。調(diào)參的核心是 sigma_max取太小衰減不夠取太大數(shù)值反射反而上升工程上先在自由空間場景里測一遍反射率用峰值反射系數(shù)作為調(diào)參目標(biāo)再投入正式算例。近遠場外推是讓這個代碼包從“能算場分布”升級到“能算遠場方向圖”的關(guān)鍵一步。FDTD 天然算的是近場區(qū)域的場值而天線遠場方向圖、雷達散射截面這些工程指標(biāo)是在遠場定義。常規(guī)做法是在包圍目標(biāo)的閉合曲面上記錄等效電流和等效磁流用等效原理在頻域做積分變換。這個過程不復(fù)雜但要記得在時間步進結(jié)束后把所有記錄場值做一次傅里葉變換再到關(guān)心的頻率點上執(zhí)行外推計算。拿這套代碼做工程項目我最想提醒的是控制預(yù)期。別一上來就鋪三維大網(wǎng)格加 PML 加近遠場外推這套鏈路里每一環(huán)都有一到兩個隱藏參數(shù)任何一個設(shè)錯都讓結(jié)果失真。最好的習(xí)慣是先跑通一維透射驗證再上二維環(huán)形諧振腔最后才碰三維天線模型。給自己寫一個回歸腳本模擬自由空間高斯源傳播斷言波形峰值位置與理論位置偏差不超過一個網(wǎng)格改任何代碼后先跑這個腳本全綠之前不碰新功能。這個習(xí)慣幫我躲過了無數(shù)個從下午修到凌晨的 debug 局。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
另类A片| 婷婷伊人綜合| www久久艹| 爆乳熟妇一区二区三区爆乳照片| 五月亚洲激情| 狠狠高潮精品亚洲1| 99狠狠| 激情久久久| 欧美大片免费播放器| 色色色色色色色色色影院| 99福利视频导航| 婷婷色吧| 丁香六月激情综合网| 99热这里全是精品| 婷婷五月激情中文字幕| 人人操人| 99r这里只有精品哦| 婷婷五月丁香成人| 久久资源网五月婷| 大香蕉视频婷婷| 五月丁香自拍| 深爱激情av| 九九热中文| 色婷婷成人做爰A片免费看网站| 色婷婷激情视频| 丁香色成人| 婷婷 激情 五月| 天天插天天插天天插天天插| 色色亚洲| 99激情在线| 超碰精品手机在线| 日本99视频| 影音先锋91网站在线观看| 大伊香蕉玖玖爱| 99在线er热| 五月婷婷视频28| 9久久久久久久久久久| 婷婷五月天综合网| 99在线视频资源| 夜夜躁狠狠| 亚洲精品大片| 欧美A级成人婬片免费看理论| 色婷婷777狠狠| 高清无码 一区 二区 三区| 另类激情五月在线视频欧美| 教师性爱毛片| 亚洲九九免费| 91碰视频| 日本97久久久精品| 色爱终和网| 日韩在线视频中文字幕| 九九久久腿| 九九热在线观看6| 六月婷婷在线| 天天色中文字幕女优AV| 99热思思在线观看| 99久re热视频精品98| 久久XX日本综合| 99,色| 丁香五月天亚洲视频| 亚洲精品V天堂中文字幕| 大香蕉Av在线| 第四色婷婷丁香五月| 婷婷丁香熟妇综合网| 97碰免费精采视频| 人人草人| 第四色色六月色综合| 九九精品片一| 色综合色色色| 色五月天激情| 淫视馆AV在线| 九色无码| 另类视频五月天| 色99综合色88| 五月开心啪啪| 99久久国产宗和精品1上映| 婷婷久久综合| 99热综合| 五月色综合| 婷婷五月天天爽| 日操熟女| 日本五月视频| 玖玖九九超碰| 五月婷婷开心六月激情小说| www久久久久久久久久久| 五月丁香香蕉| 99精品在线| 91在线看免费 九九九九| 婷婷开心综合人妻小说网址| 亚洲成人影视在线| 99爱精品视频| 国产精品成av人在线视午夜片| hd五月婷婷在线| 婷婷久久色| 九九色影视| 激情 婷婷| 97成人在线视频| 开心五月丁香啪| 国产av天堂| 五月天丁香六月综合| 日韩成人AV在线播放| 欧美亚洲成人在线| 成人在线综合| 狠狠色婷婷7777久| www超碰| 99ri视频| 五月婷视频| 天天色天天搡| 天天日天天舔| 无码人妻一区二区三区免费九色| 色情网综合| 人妻操在线看| 午夜在线成人网站免费观看| 5月丁香婷婷激情网| 中文字幕成人日韩| 五月天色五月| 婷婷五月丁香啪啪| 丁香婷婷激情| 99re26视频| 桃色成人网| 激情丰满熟妇五月| 婷婷97C| 五月丁香龟婷婷| 超碰国产一区| 亚洲欧美婷婷五月色综合| 中文字幕亚洲-区久久99婷婷| 一本久道综合色婷婷五月| 日日爽日日爽| 五月丁香综缴情性爱| 天天综合情| 欧美五月丁香| 五月色婷丁香| 这里只有精品视频99| 婷婷五月天奸女| 天堂美国久久| 内射激情在线| 日产精品一线二线三线芒果| 综合激情五月四射婷婷| 99在线精品视频在线观看| 中文字幕黄色电影网址| 五月天激情综合| 婷婷丁香九色| VfJxEwPH| 91久久国产综合久久| 婷婷狠狠久久| 风流少妇A片一区二区蜜桃 | 欧美在线干| 91在线看免费 九九九九| 日本激情五月天‘| 91啦丨九色丨刺激中文| 亚洲综合色色色| 五月天婷a在线| 丁香婷婷五月天色播| 亚洲超碰在线| 深爱五月激情网| 色墦五月丁香| 日韩人妻无码一区二区| av在线播放网站| 91啪级电影| 丁香五月天社区| 久久中文人妻系列| 五月日韩中文字幕| 人妻VideOssS人妻| 成人人操| 99精品亚洲| 丁香婷婷啪啪| 最近中文字幕2019视频1| 丁香六月婷婷综合麻豆| 婷五月天影院| 欧美婷婷丁香五月社区| 亚洲激情丁香五月基地| 久久99草五月婷婷| 玖玖爱综合网| 天天综合亚洲综合网天天αⅴ| 99热在线观看免费精品| 成年人99热| JlZZJlZZ8JlZZ亚洲熟女| 人妻精品久久久久久久| 色七七九九| 欧美一级色| 五月丁香手机在线| 综合色五月亭亭| 色婷婷激情五月天在线观看| 超碰免费人妻| W色综合| 亚洲精品国产精品乱码视99| 天天日天天添| 激情五月天.色网| 激情婷婷五月| 亚州激情网站无码| 91色碰| 婷婷久久综合久| 99re99热| 久久久精品99| 久热伊人| 久久色五月天| 五月丁香六月花| 六月婷婷视频| 欧美午夜乱妇午夜福利| 99狠狠色| 91wwmm导航| 婷婷五月丁香久久| 婷婷国产五月天17c| 大香蕉五月天婷婷| 日日狠狠久久偷偷四色综合免费 | 91久久婷婷| 黄网在线免费| 色偷偷五月天| 久草狼人| 亚洲色模骚货| 呦呦v线| 九色 在线| 五月丁香在线| 精品久久艹| 五月激情网站| 第四色婷婷色五月| 国产永久一二一起草| 68热超碰在线| 国产午夜精品AV一区二区麻豆| 涩涩涩五月天| 色情五月天婷婷| 中文字幕AV在线播放| 五月婷婷香蕉| 狠狠精品干练久久久无码中文字幕 | 亚洲乱码日产精品BD| 99热激情| 这里只有精品免费视频在线观看| 最新午夜理论片| 婷婷成人在线| 91亚洲视频| 九九亚洲| 丁香六月婷婷| 99视频内射三四| 日韩在线五月天婷婷| 婷婷五月天中文字幕.| 男人的天堂av俄罗斯热| 97操碰人免费| www久久久久久久| 色婷婷亚洲婷婷| 激情爱爱网站| 激情五月天综合网| 色婷婷AV在线| 综合伊人久久| 激情99热| 午夜天堂啪啪| 久久伊人五月天| 麻豆雪千夏| 丁香婷婷视频一区二区| 五月天激情av| 色五月婷婷五月天激情综合| 激情五月综合网最新| 国产五月天激情小说| 99视频色在线观看| 夜夜操夜夜爽| 国产热精品| 色A网| 9er热在线精品视频| 婷婷久久五月天丁香| 天天综合色99| www一起操| 日亚二欧美| 丁香激情五月少妇| 免费啪啪亚州视频| 99色色爰| 99在线看片| 六月婷婷色五月| 激情婷婷内射| 欧美成人五月天| 色婷婷五月天不卡| 噜噜噜久久| 五月婷激情| 可似看的AV| 婷婷六月丁香欧美视频在线| 99riAV国产精品视频| 天天综合精品| 大香蕉婷婷| 超碰91在线| 熟妇内谢69XXXXXA片| 国产欧美精品AAAAAA片| 91窝窝| 婷婷中文字幕网| 久久天堂婷婷五月| 丁香五月激情宗合网| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 亚洲精品无人区| 日韩AV无码影片| 五月婷婷激情啪啪| 嫩草视频在线观看| 国产一区男女| AV在线观看网站| 天天日天天舔| 伊人激情网| 操久久精| 五月丁香六月欧美综合| 色五月丁香六月欧美综合| 激情噜噜噜| 五月丁香影院| 综合久久婷婷99| 日韩国产在线免费观看| 激情婷婷五六月天| 色五月综合| 丁香九月激情| 一起操 91N.com| 在线成人网址| 婷婷六月五月| 婷婷五月花| 婷婷丁香五月综合久久| 国产免费一区二区在线A片视频| 国产Va视频| 亚洲天天综合| 久热伊人| 激情黄色小说色五月| 五月婷免费视频久久久| 一级精品999WWW| 98国产精品综合一区二区三区| 99re免费视频| 五月丁香六月停停| 九九热精品视频| 97碰碰人人视频| 五月天日日操夜夜操 | 婷婷综合六| 成人网址在线观看| 婷婷性爱视频在线| 婷婷丁香五月天狠狠| 欧洲不卡视频| 色婷婷女优有码五月亭| 天天成人丁香美女AV| 久久久激情视频| 五月婷婷av在线| 在线99热| 色婷婷欧美| 99在线看视频| 99精品视频免费观看,| 99九九99九九九视频精彩| 国产真实乱了老女人视频| 人人操人人操919999| 狠狠色噜噜狠狠狠888了| 激情五月天婷婷丁香| 毛v一区二区视频| 中文在线成人| 内射激情在线| 天天做夜夜爽| 9久热在线精品| 99热66| 美国不卡视频| 9热在线| 激情九九九九| 亚洲丁香五月深爱五月| 天天久久狠狠色综合| 婷婷五月天激情在线观看| 在线观看av网站| 久草婷妨| 婷婷五月情天| 婷婷五月乱交换| 最新亚洲色色网| 婷婷婷婷色| 五月婷婷深深爱| 色噜噜狠狠色综合日日| 日本三级网址| 超碰国产AV| 涩五月丝袜婷婷| 精品亚洲VA网站| 影音先锋 萱萱| 2025天天爽天天摸| 久久艹 五月天| 五月激情精品视频| 午夜不卡久久精品无码免费| 日日夜夜天天爽| 中文字幕无码AV| 婷婷色丁香五月| 中文字幕无码人妻少妇免费视频 | 伊人久久丁香婷婷六月五月综合| 中文超碰视在线| 玖操97| 亚洲黄色网址| 亚洲第一精品成人999久久精品| www.金莲av| 啪到高潮激情丁香五月| 第四色大香蕉| 99热在线播放| 色色色色色色综合| 99久操| 成人国产综合| 欧美亚洲999| 国产黄大片在线观看画质优化| 婷婷丁香视频| 操碰久| 亚洲日日操| 五月天激情小说婷婷| 99网| av狠狠操| 丁香五月成人| 婷婷色综合中心站| 超碰在线人人| 精品久久久久久久久久久久人妻| 啪啪六月婷婷| 亚洲蜜桃精久久久久久久久久久久| www.日日夜夜| 丁香婷婷综合激情五月色| 亚洲精品亚洲人成人网| 五月天成人手机在线视频| 五月丁香在线观看国产| 久久色区| 亚洲婷婷成人五月天| 色综合香蕉视频| www.激情| 99热这里只有精品22| 另类激情四射| 丁香综合日产精品久久| 99在线播放视频| 色五月久久成人婷婷| 91人妻人人操| 久久五月天婷婷| 久99久热只有精品国产99| 激情国产综合| 国产成人AV不卡| 五月丁香婷婷免费视频| 色 丁香婷婷| 2020日日干| 日本99视频| 天天操人人干| 99成人无码| 综合99综合久久久久久久| 久久激情五月| 丁香六月啪啪啪| 婷婷综合网伊人| www.综合久久.com| 婷久久久| 无码日本精品XXXXXXXXX| 色情五月综合婷婷| 日日夜夜噜噜爽爽| 成人天天爽| 色婷婷久久视屏| 激情99| 香蕉操亚洲| 99视频一区| 99精品视频免费在线播放| 免费看片在线观看| 99热在线观看成人| 99热在线观看| 大香蕉手机视频| 日本女人久久| 九九热这里只有精品6| 久久久婷丁香五月| 婷婷五月天国产手机在线视频观看| 99久精品视频| 五月丁香婷婷激情影院欧美| 超碰在线94| 成人五月天综合网| 桃色五月婷婷| 丁香五月综合网| 天天爽夜夜操| 激情综合亚洲| 九九热在线视频观看| 99热97| 五月激情婷婷六月| 天天婷婷色六月| 先锋资源 996| 一级A片天天操夜夜操| 99热 在线观看| 九热视频| 九九视频网| 色五月激情网| 六月99天天婷婷激情综合| 色玖玖玖| 91porn一起草| 99在线播放视频| 亚洲色图五月丁香| 婷婷中文在线| 色婷婷内射| 色婷婷av在线观看| 婷婷五月天视| 大狠狠在线| 青青福利网| 日本成人噜噜噜噜噜| 五月婷婷六月丁香激情综合网| 婷婷黄色五月天在线视频| 五月激情日本在线| 插插干干干色| www.成人婷婷综合| 综合色色婷婷| 99久热这里只有精品| 亚洲成人在线播放| 久久性爱视频| 任你干线上免费视频有3吗| 在线看AV| 日韩精品一区二区亚洲AV观看| 婷婷五月丁香花综合| www999日韩精品| 9l视频自拍9l九色成人| 色色色视频免费无码 | 99精品九九| 五月婷视频在线观看| 任你搞在线观看视频| 五月婷婷黄| 五月丁香啪综合| 99综合视频一体| 色五月婷婷成人视频| 五月色丁香激情| 亚洲色视频| www.日本91| 99re这里| 超碰人人在线观看| 丁香九月婷婷综合| 欧美日本一区二区三区| 亚洲天堂大香蕉| 九九视频这里只有精品| 欧美,日韩成人在线| 欧美图片丁香五月天| 99视频精品| 呦呦v线| 日日撸夜夜操| 亚洲经典三级| 色婷成人狠干| 一个色的综合| 91精品综合久久婷婷九色| 色婷婷小说网| 欧美日本99| 免费黄色片子| 深爱激情婷| 五月丁香黄色视频| 绿色小导航AV| 狠狠肏综合网| 久久丁香五月婷婷| 九九美女视频| 丁香五月深爱五月婷婷| 综合色五月| 色五月 婷婷, 大香蕉| 台湾无码A片一区二区| 天天色天天干天天插| 中文av网| 天天综合天综合久久网| 超碰免费在线| 9l视频自拍9l视频自拍九色学生| 久久九九激情五月天 | 日本va视频| 五月天综合网| 久热超碰91| www.色擼擼.com| 久青草影院| 97碰碰在线观看视频| 国产精品色一哟哟| 亚洲另类在线观看| 99久久99九九99九九九| 五月婷婷视频| 五月婷婷亚洲综合在线| 高清无码 一区 二区 三区| 4399在线日本A片| 人人超碰99| 婷婷五月综合激情小说| www.超碰| 激情婷婷五月女| 91丁香五月| 四季日韩AV无码综合| 婷婷天天综合| 久久在线视频免费观看| 天天干夜夜操A片| 天天射综合网站| 婷婷综合偷拍| 天天爽夜夜爽夜夜爽精品视频| 久久久久久久久久久久久9| 欧美丁香婷婷天天操| 99啪99| 99热999| 五月激情五月婷婷五月天在线| 久久99久久99久久99人受| 五月丁香婷婷色色| 色久天| 日本啪啪天堂| 色色色999| 97操碰视频| 丁香婷婷91在线观看视频| 热九九九九| 亚洲第一第二网站| 色婷婷综合影院| 五月婷婷之婷婷| 91九色在线观看免费| 天天爽天天干天天| 丁香六月婷婷久久亚洲天堂| 99热久| 久久久久婷| 99色精品| 色色婷婷五月| 久久er99热精品一区二区| 26uuu淫色| 女人被躁到高潮嗷嗷叫小| 爱草视频在线观看| 精品AV无码超碰| AV五月婷婷露脸| 久久天堂女人| 色老久久| 99热乎| 激情视频网址| 淫荡综合网| 婷婷丁香综合色AV| 综合色影| 4399在线观看免费高清电视剧| av中文在线| 五月婷婷六月奇米网丁香| 丁香花狠狠婷婷亚洲中文字幕| 久久这里只| 五月天停婷基地| 日韩成人综合网| 夜夜骑日日操| 婷婷色综合中心站| 亚洲成人综合在线| 五月丁综合在线观看| 97亚洲精品| 九九热99视频| 影音先锋 91工厂| 中文在线视频久9| 99色色网| 婷婷五月天成人网站| 国产99久9在线| 性爱视频99| 六月丁香五月激情网| 99玖玖人人| 在线播放成人网站| 日日色综合| 99re思思| 狠狠色狠狠爱| 97高清国语自产拍| 色欲午夜无码久久久久久张津瑜 | 九月婷婷久久| 天堂在线婷婷| 99精品久久| 欧美丁香五月夫妻天| 香蕉综合网| 国产在线网址1| 丁香婷婷久久| 五月激情六月综合| 色综合色欲综合天天免费| 五月婷婷激情日本| 色综合综合综合| 中文字幕不卡+婷婷五月| 99久久成人| 亚洲成人综合在线| 久久婷婷草| 欧美三级巜人妻互换| 99久久婷婷五月综合| 日在线V视频在线播放| 香蕉国产2013| 久婷视频| 色婷插| 丁香五月电影| 九九综合九九| 九九婷婷网五月天| 婷婷五月色网| 婷婷亚洲激情在线观看视频| 丁香色色色| 色吊丝中文字幕| 强辱丰满人妻HD中文字幕| 五月婷婷六月天| 丁香六月婷婷色XXXXX| 伊人狠狠狠综合| 天天插天天狠| 丁香五月婷婷色| 久久精品91视频| 丁香深五月婷婷| 亚洲乱码日产精品BD| 婷婷五月综合激情| 91九色熟女| 综合网亚洲| 99热这里只有精品免费观看| 五月婷婷五月天亚洲无码| 欧美日韓成人亚洲精品另类| www.激情.com.| 丁香婷婷五月激情| 欧美丁香五月97色| 五月婷六月| 九九色院| 中文字幕av在线播放| 五月天另类图片区99| av一区免费看| 人人草碰| 黑人无码一区| 亚洲综合视频网| 中文字幕av在线播放| 一起草无码| 91丁香五月| 久热91精品| 99大香蕉| 丁香五月天啪啪| 婷婷月五天在线在线看| 天天激情综合| 夜夜爽日日躁| 丁香六月天婷婷开心综合| 思思热再线视频| 天天综合天综合| 天天婷婷色六月| 婷五月天| 综合AV在线| 色五月综合在线| 涩五月婷婷| 天堂成人A片永久免费网站| 91 欧美| 激情综合丁香| 大香蕉久久婷婷精品综合| 五月色婷婷影院| 伊人网欧美在线男人天堂五月丁香| 99热99ai| 99爱免费在线视频| 噜噜视频| 亚洲成人在线播放| 久久久国产精品黄毛片 | 丁香六月亚洲| AV在线免费播放| 五月丁香爱婷婷深深| 综合狠狠干| 男人的天堂五月丁香| 婷婷五月天激情小说| 久/久精品99看9| 第九色区av天堂| 久久男人网婷婷| 性热视频99精品| 色波激情五月天| 亚州精品久久久久AV无码| 六月婷婷色| 日本色婷婷| 淫视馆av三区| 91久久久久久| 老司机伊人| 精品久久久人妻| www.ywav| 日韩色色色色色| 大陆肏屄视频| 五月丁香黄色视频| a毛片二逼wwwwwwwwww| 91尤物九色在线| 第四色婷婷色五月| 99日本精品视频热| 婷婷五月天丁香综合网| 五月天日日操夜夜操 | 久久这里有精品视频| 久久HD| 婷婷狠狠香蕉综合| 亚洲第一色网站| 婷婷九月在线| 99久99久| 99er免费在线观看| 夜色综合网| 久草婷婷网| 五月丁香久久| 天天爽天天| 丁香五月婷婷欧美性爱| 思思久久99热| 丁香五月婷婷综合精品素人| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 成人做爰高潮A片免费视频| 99碰视频| 性天天中文网| 图片区 小说区 区 亚洲五月| 99男人的天堂| 日日操夜夜骑| 99热传媒| 婷婷五月俺要去| 亚洲操人| 91久久精品无码一区二区三区| 99视频一区| 国产精品久久久久久久久久| 五月丁香啪啪网| 播播网色播播| 热996精品在线观看| 思99热精品久久只有精品| 五月婷婷色| www.五月婷婷| 激情久久久久久久久久| 一起操 91N.com| 天天插天天插天天插| 日本无码专区| 26uuuu精品一区二区| 日本天天操| 欧美丁香婷婷天天操| 欧美精品99久久久| 婷综合| 99日本在线| 手机旧版看人妻1025| 五月丁香六月欧美综合网站| 99re久热| 色色综合网络| www.九九婷婷| 婷婷五月激情小说| 综合激情专区| 五月婷婷草| 3p久久| 久久99激情| 激情综合色图| 久久五月激情| 五月天激情小说| 婷婷五月色播放| 婷婷爱在线观看| 能看的av网站| 色A网| 婷婷五月花| 日本激情五月| 色停停影院五月天| 综合色色色| 1024婷婷综合久久五月天| AV操逼网| 这里只有精品在线视频精品| www超碰| 亚洲综合色丁香五月天| 色色色九九九五月婷婷| 99热精品中文字幕| 9久热在线视频精品| 婷婷性爱影院| 激情丁香久久| 五月婷A V在线| 五月色影院| 丁香六月婷婷综合欧美| 六月丁香激情网| 99热在这里只有免费精品| 任你躁XXXXX麻豆精品| 九九精品在线观看视频6| 第五婷婷伊人丁香| 婷婷久久久| 亚洲丁香五月天在线视频| 激情久久伊人| 天天干,夜夜爽| 六月丁香深深爱综合网| 风流少妇A片一区二区蜜桃| 香蕉AV777XXX色综合一区| 久热99热| 国产69久久久欧美黑人A片| 婷婷五月天成人网站| 六月婷久久| 97精品人人A片免费看| 中文乱子伦视频| 天堂A∨在线| 国产XXXX搡XXXXX搡麻豆| 中文字幕丰满乱孑伦无码专区 | 五月婷婷av| 婷婷色五月亚洲| 人人97操| 五月婷婷色| 激情五月天电影| 成人五月天婷婷| 色综合99色| 婷婷综合激情| av操一操| 人人爽在线视频综合网| 丁香五月婷婷少妇| 亚洲五月婷| 欧美丁香婷婷五月| 蜜臀av无码久久久久久久久| av免费在线网站| 中文字幕欧美日韩VA免费视频| 5月丁香婷婷激情网| 丁香六月AV| 99碰在线视频| 人妻丰满精品一区二区A片| 99热国产免费| 精品五月丁香| 神马欧美精| 五月婷婷黄色网址| 六月丁香五月天| 天天狠天天叉| 六月色色婷婷| 综合激情啪啪| 91凹凸在线| 五月婷婷伊| 国产成人网| www.maotanji.com| 性天天中文网| 日本成人噜噜噜噜噜| 99碰碰| 亚洲一区二区无遮挡A片| 丁香六月成人| 青青草国产亚洲精品久久| 欧美婷婷日本| 夜色综合网| 天天天久久人人人合| 中文字幕日韩无码制服诱或| 婷婷中文字幕| 丁香婷婷六月天| www,超碰| 久热AⅤ| 激情五月最新网址| 亚洲色图欧美色图日本视频| 亚洲激情在线| 欧美日韩99| 97干在线| 色婷婷丁香| 日本久热| 九月激情综合| 97碰人人操| 日本色婷婷| 色欲一区二区三区精品A片| 激情综合色| 色丁香久综合在线久综合在线观看| bbwcuckold精品熟妇| 无码se| 久久婷婷五月天| 伊人久久五月天| 99热这里只有精品1025| 99在线视频播放| 伦乱天堂| 成人丁香五月| 色噜噜狠狠色综无码久久合欧美| 婷婷中文字幕| 天天干,天天日| 人人草人人舔| 91狠狠综合久久久久久| 精品一二三区久久AAA片| 婷色五月天| 国精产品一区一区三区免费视频 | 丁香久久综合| 久久六月天| 色婷婷狠狠| 天天插天天射| 久久人妻超碰一区| 97色碰碰公开视频| 一本九九色| 97超碰在线免费观看| 噜噜干日本| 国产片天天爽夜夜爽| 狠狠夜夜五月丁香| 婷婷五月天色网久| 91色情播放| 女人天堂AV| 色五月丁香网| 国产欧美精品AAAAAA片| 婷婷五月天A V| 99色免费在线观看| www.五月婷婷| 激情综合五月.....| 婷婷色成人| 九热免费视频| 狠狠干综合| 操精品9| 91色在线| 久久亚洲网| 十月丁香九月婷婷综合| 99狠狠| 久久大香蕉| 在线一起草av| 91九色视频| 激情丁香淫荡婷婷| 五月色色激情网| 一起草Av| 亚洲偷| 色婷久九| 99色播| 99久在线精品99re5热视频| 人人爽天天爽| 蜜臀av 粉嫩av 懂色av| 久久丁香五月| 丁香五月婷婷六月婷| 久久a热| 久久久激情| 人妻中文字幕精品| 亚洲国产色婷婷| 五月婷在线视频免费看| 久久久久9999| 色五月天 丁香| 色噜噜狠狠色综合日日| 一区二区三区四区无码| 色欲天天综合| 亚洲AV成人无码精品| 4399在线日本A片| 丁香五月婷婷在线视频| 在线播放成人网站| 在线不卡的视频| 国产噜一噜天天噜| 五月综合在线| 精品久久久久成人码免费动漫| 色香久久| 五月天激情网页| 深爱婷婷网| 五月丁香久久丝袜啪啪| 日韩欧美四五区| 色狠狠综合| 国产44页| 互月天综合| www婷婷| 九九热婷婷| 免费播放99性爱视频| 久久九九色| 久人操| 久久亚洲婷婷| 色婷婷丁香五月| 久久人人九九| 色色色色色网| 大香蕉福利导航| 日本色婷婷五月天成人电影| AV在线观看网站| 婷婷丁香五月天大香蕉| Jh7Uf088VHafNm| 九九Av| 婷婷久久综合| 亚洲第一成人无码A片| 亚洲另类毛片| 欧美日韩aaaa| 婷婷香草网| 九九热在视频| 久久久噜噜噜久久人妻| 丁香五月色五月| 中文字幕 中文字幕明步| 99丁香五月| 伊人天天色| 亚洲精品又粗又大又爽A片 | 思思热再线视频| 双性美人被调教到喷水A片| 婷婷久久综合久| 我爱大香蕉| 成人Av在线大片| 丁香美女五月天婷婷| 97超级碰碰碰久久久| www.色五月天.com| 精品久久久91久久影视网| 亚洲成色综合网站免费观看| 桃色五月天| 九九色综合| 丁香六月婷婷色XXXXX| 另类A片| 中文字幕永久免费| 一区二区三区视频| 大香蕉AV在线| 婷婷五月天成人在线视频| 日本久久网| 在线99热| 久久久97| 99re思思在线视频| 国产成人一区二区三区在线观看| 婷婷丁香五月视频| 无码少妇高潮喷水A片免费| 天天日夜夜夜操操操操| 久cao香蕉影院| 国语精品探花| 亚洲免费电影2| 天天综合网站| 亚洲成人无码网站| 97操在线视频| 亚洲色9| 极品人妻VIDEOSSS人妻| 99er在线观看| 1024AV视频| 国产亚洲色婷婷久久99精品91| 日韩精品一区二区亚洲AV观看| 影音先锋噜一噜| 激情婷婷五月女| 色欧美色色色| 无人精品在线视频| 天天久综合网永久入口17v| 五月丁香| 丁香婷婷六月天| 第四色色六月色综合| 欧美成人va| 99久久久国产大片区| 三人荫蒂添的好舒服A片| 深爱五月日韩| 97婷婷丁香| 99激情视频| 深爱激情网五月天| 五月丁香六月婷婷啪啪| 九九无码| 欧美国产一区二区三区| 91丨九色丨熟女|新版| 双性美人被调教到喷水A片| 五月婷婷丁香狠狠撸久久| 婷婷综合色网| www.夜夜操| 九九99久久| 五月激情五月丁香| 91n啪啪| 激情九月婷婷| 欧美va| 九九色欲网| 亚洲精品白浆高清久久久久久| 91婷婷五月天嫩女| 久久只有精| 99在线看视频| 日本三级大片| 天天爽免费视频| 婷婷五月天AV| 欧美精品狠狠色丁香婷婷| 99久在线观看| 亭亭社区五月天| 九色PORNY自拍成人精彩视频| 图片区 小说区 区 亚洲五月| av在线免费网站| 久色中文| www超碰| 日韩成人电泉AV| 天天操夜夜操| 97精品自拍视频| www·五月天| 婷婷五月情| 色九月丁香婷婷蜜桃在线观看| 噜噜视频| 99爱爱网| 丁香五月激情无码视频| 久久婷婷青草五月天| 国产婷婷久久| 日本三级成人秘书精品片| 国产在线中文字幕| 激情深爱五月| 婷婷色5月天在线。| 成人中文字幕在线| 亚洲AV成人在线观看| 丁香六月婷婷久久综合| www.99日本| 色欲天天综合| 亚洲欧洲自拍图片专区五月天| 色噜噜综合网| 人人叉久| 以及AA大片看看| 精品亚洲国产成AV人片传媒| 精品婷婷| 激情五月天视频| 天天日天天做天天操| 五月人人丁香婷婷五月人人丁香| 丁香五月色五月| 激情综合婷婷久久| 2050人人操免费工开爱| 国产99久久久国产精品免费看| av九九| 九九九热精品| 六月份天丁香婷婷| 久久少妇视频| 天天综合网亚洲网站| 天天干天天干天天干天天干天天干天天| 久久之人妻| 婷婷色网站| 91婷婷色五月| 婷婷午夜精品久久久| 91激情五月开心| 激情五月丁香色色去久久| www.久操| 五月天大香蕉视频| www.久久久久久久久久.com| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 婷婷99丁香| WWW.久久久久久久久久久久久| 婷婷五月丁香人妻无码高清| 亚洲区1| 久久99免费视屏| 综合久久综合五月天婷婷| 亚洲mm免费| 99精品综合在线| www.99色在线| 天天日P天天射P| 99亚洲精品视频| 九九在线精品| 久久激情综合| 中文字幕人妻熟女在线| 国产肥白大熟妇BBBB视频| 欧美电影在线播放| 亚洲亚洲人成综合网络| 婷婷丁香综合网| 就爱日五月天| 欧美 日韩 成人| www.久久爱.com| 综合色色网| 五月婷婷六月丁香激情深爱| WWW色五月天| 婷婷在线午夜| 五月婷天天搞视频| 丁香六月综合| 玖玖婷婷五月天| 色激情五月天| 伊人爱爱日本| 热996精品在线观看| 九九热99免费视频| 日本高清久久| 亚洲第一色色色色| 色欲五月婷婷| 狠狠搞狠狠操| 99欧美| A片试看50分钟做受视频| 色色色com| 99综合熟女| 99re熱| 人人草人人爱手机视频看看| 激情六月色| wwwss在线观看| 97在线观视频免费观看| 狠狠干狠狠操狠狠爱| 婷婷五月天激情综合| sS丁香五月婷婷| 五月天基地| 五月天丁香网站| 色激情五月天| 丁香六月成人网| av大香蕉| 久久九九大香蕉电院| 色播五月综合网| 97人人干| 日本三级片片| 丁香五月网站| 婷婷六月情| 91五月天| 99久久综合狠狠综合久久| 超碰在线超碰| 深爱激情小说五月婷婷| 五月天成人综合| 色五月成人| 综合久久综合综合| 好吊操这里只有精品| 天堂草在线看www| 中文av网| 碰碰碰碰碰99| 99色综合| 五月婷婷av| 欧美槡BBBB槡BBB少妇| 六月丁香狠狠爱| 久久性爱网站| 在线色色| 亚洲国产成人AV在线| 开心久久xxx色| 国产精品爽爽久久久久久| 国产乱人偷精品人妻A片| 久久久性爱网| 热热久久99| 99热色精品| 色婷婷丁香九月| 天天色综合综合| 色一情一乱一乱一区91Av| 98色丁香五月婷婷综合网| 色小说婷婷五月天天天| 色久女| 色婷婷无吗| www.思思99热| 色情婷婷五月天| 丁香婷婷性久久| 五月天激情婷婷小说| 色五月婷婷基地| 久久五月婷婷丁香| 五月丁香在线婷婷美女| 欧美性做爰大片免费看办公室| 久久人人九| 激情五月丁香五月| 色爆五月| 九九热再线九九视频免费在线观看 | 五月丁香六月激情综合| 激情五月天无人视频在线| 国产又爽又猛又粗的视频A片| 色色五月婷婷| A在线观看| 色五月婷婷影视| 四月婷婷丁香| 深夜婷婷 丁香| 欧美日韓成人亚洲精品另类| 日韩AV大全| 91干在线| 五月婷婷日| 性色综合网| 丁香五月色欲| 激情6月| 天天干夜夜欢| 丰满少妇猛烈A片免费看观看| aaaaa不卡| 亚洲无码色色| 9久视频| 狼人久草| 丁香五月中文字幕| 激情99| 婷婷久久99| 九九精品综合| 影音先锋毛片网站| 五月激情网站| 国产成人高清| 五月天停婷基地| xx久久| 欧美在线干| 五月天激情黄色小说在线观看 |