99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

C++靜態(tài)成員變量線程安全:從數(shù)據(jù)競(jìng)爭(zhēng)到鎖、原子變量與安全單例實(shí)戰(zhàn)解析

C++靜態(tài)成員變量線程安全:從數(shù)據(jù)競(jìng)爭(zhēng)到鎖、原子變量與安全單例實(shí)戰(zhàn)解析 我先說一個(gè)前提如果你寫過多線程 C你遲早會(huì)遇到這么一種崩潰——日志上沒有任何明顯異常報(bào)錯(cuò)位置每次都不一樣甚至同一個(gè)版本跑了幾天才出現(xiàn)一次。某個(gè)項(xiàng)目組曾經(jīng)有個(gè)采集模塊十幾個(gè)工作線程會(huì)同時(shí)更新一個(gè)保存統(tǒng)計(jì)結(jié)果的靜態(tài)成員變量代碼量不大邏輯也不復(fù)雜但壓測(cè)跑到兩千萬(wàn)請(qǐng)求量的時(shí)候進(jìn)程開始偶發(fā)異常退出。查了幾天最后定位到根因我才真正意識(shí)到一個(gè)很多人沒當(dāng)回事的事實(shí)靜態(tài)成員變量的線程安全問題從來(lái)不只是“結(jié)果不對(duì)”那么簡(jiǎn)單。從一個(gè)普通類成員開始靜態(tài)成員變量和普通成員變量在內(nèi)存與生命周期上的差異決定了它天然就是多線程程序的雷區(qū)。這篇內(nèi)容適合正在寫或維護(hù)多線程 C 服務(wù)的開發(fā)者也適合把 C11 之后新特性當(dāng)黑盒在用的朋友。我會(huì)先講清楚為什么靜態(tài)成員變量容易出問題再給出鎖、原子變量、線程局部存儲(chǔ)和單例場(chǎng)景的正確做法最后用 ThreadSanitizer 演示一次真實(shí)的競(jìng)態(tài)定位過程。整個(gè)過程盡量少堆標(biāo)準(zhǔn)條文多給能直接落地的結(jié)論。1. 靜態(tài)成員變量與普通成員變量的本質(zhì)區(qū)別——線程不安全的根源1.1 它根本不在對(duì)象里內(nèi)存與生命周期先講一個(gè)經(jīng)常被忽視的事實(shí)靜態(tài)成員變量并不存在任何對(duì)象實(shí)例里。類里面的非靜態(tài)數(shù)據(jù)成員每個(gè)對(duì)象都有一份整體存放在對(duì)象的內(nèi)存布局中靜態(tài)成員變量則完全不同它在程序的數(shù)據(jù)段或 BSS 段分配空間生命周期從程序加載開始一直持續(xù)到進(jìn)程退出。用一個(gè)不嚴(yán)謹(jǐn)?shù)芎糜浀念惐绕胀ǔ蓡T變量是每個(gè)對(duì)象自己的私人物品靜態(tài)成員變量是類名下的公共倉(cāng)庫(kù)所有對(duì)象共用同一扇門、同一份庫(kù)存。這個(gè)差異直接帶來(lái)兩個(gè)結(jié)果。第一sizeof(對(duì)象)完全不包含靜態(tài)成員你把實(shí)例創(chuàng)建、銷毀多少次它都紋絲不動(dòng)進(jìn)程不結(jié)束它就不釋放。第二任何線程都能通過類名訪問這同一個(gè)實(shí)體不需要先拿到對(duì)象指針也不需要經(jīng)過實(shí)例方法。從多線程的角度看它和一個(gè)用 extern 聲明的全局變量沒有任何區(qū)別區(qū)別只在于名字前面多了一個(gè)類的作用域前綴。所以當(dāng)你想“把它當(dāng)作類的一部分因此天然受到類設(shè)計(jì)的保護(hù)”時(shí)這種保護(hù)并不存在。它不是對(duì)象成員它是全局狀態(tài)。全局狀態(tài)一旦允許寫就必須在所有寫者和讀者之間建立同步否則就是在走鋼絲。1.2 共享帶來(lái)的一觸即發(fā)一個(gè)副本和 N 個(gè)線程共享帶來(lái)的問題用一個(gè)最樸素的場(chǎng)景就能說明。假設(shè)你寫了這樣一個(gè)類class Metrics { public: static long total; }; long Metrics::total 0;然后八個(gè)線程各自執(zhí)行Metrics::total;跑十萬(wàn)次按直覺總該是八十萬(wàn)了吧實(shí)測(cè)大概率不是數(shù)值可能小于八十萬(wàn)而且每次都不一樣。之所以這樣是因?yàn)閠otal在底層并不是一步操作。它要先從內(nèi)存把total讀到寄存器加一再寫回內(nèi)存。兩個(gè)線程可能同時(shí)讀到同一個(gè)舊值然后各自加一寫回兩次加一只有一次生效。這就是數(shù)據(jù)競(jìng)爭(zhēng)的最小雛形。如果你覺得這只是數(shù)值誤差那還不夠嚴(yán)重。C 標(biāo)準(zhǔn)把這種并發(fā)訪問定義為未定義行為意味著編譯器可以做任何它認(rèn)為合理的優(yōu)化結(jié)果甚至不一定是“數(shù)值偏小”。這一點(diǎn)放到第二章細(xì)講。1.3 早就該破除的誤區(qū)volatile 不解決線程安全這里必須先破除一個(gè)流傳很久的誤解加個(gè) volatile 就能解決。volatile 告訴編譯器“這個(gè)變量可能在別處被修改不要把它優(yōu)化到寄存器里”它確實(shí)能讓一些極端場(chǎng)景下更容易觀察到正確值但它既不能保證操作的原子性也不能提供多線程之間的順序約束。在 C 的內(nèi)存模型里volatile 和線程同步機(jī)制是兩個(gè)維度。想達(dá)到線程安全要么用原子操作要么用互斥量要么在線程內(nèi)部私有一份數(shù)據(jù)。volatile 幫不上忙反而可能給你一種“我已經(jīng)處理過了”的錯(cuò)覺讓隱患繼續(xù)潛伏。2. 數(shù)據(jù)競(jìng)爭(zhēng)是未定義行為不是“結(jié)果不對(duì)”2.1count在匯編層面到底做了什么我們前面看到了total不是一步這里把它看成三條指令會(huì)更清楚讀、改、寫。CPU 執(zhí)行時(shí)會(huì)加載load修改modify存儲(chǔ)store。無(wú)論是編譯器還是 CPU都不會(huì)因?yàn)槟銓懥恕耙痪浯a”就保證三者之間沒有別人插進(jìn)來(lái)。更麻煩的是編譯器在優(yōu)化時(shí)可以把不相關(guān)的代碼重排可以在滿足“單線程可觀察語(yǔ)義”的前提下自由安排讀寫順序多線程環(huán)境下的觀察結(jié)果就和源代碼順序沒什么必然關(guān)系了。所以兩個(gè)線程分別執(zhí)行total可能出現(xiàn)兩個(gè)線程都讀到 0、都寫回 1最終total是 1 而不是 2。這個(gè)結(jié)果在單線程世界里不可能出現(xiàn)但在并發(fā)世界里是完全合法的未定義行為。不要把這種錯(cuò)誤歸類為“精度損失”它不屬于任何數(shù)值誤差范疇。2.2 CPU 緩存、指令重排與 happened-before即使沒有編譯器重排CPU 這一層也有自己的脾氣?,F(xiàn)代多核處理器每個(gè)核都有獨(dú)立的 L1/L2 緩存一個(gè)核寫入total后新的值可能還在自己的緩存行里還沒有同步到共享內(nèi)存另一個(gè)核在另一個(gè)時(shí)刻讀到的仍舊是舊值。硬件會(huì)通過緩存一致性協(xié)議最終保持一致但“最終”是多長(zhǎng)時(shí)間、什么順序程序如果不使用同步原語(yǔ)觀察不到確定的邊界。C 內(nèi)存模型引入了一個(gè)核心概念happens-before。你只有在兩個(gè)線程之間建立某種同步關(guān)系讓一個(gè)線程的寫操作在另一個(gè)線程的讀操作之前發(fā)生數(shù)據(jù)競(jìng)爭(zhēng)才被排除。能夠建立這種關(guān)系的機(jī)制只有少數(shù)幾種互斥鎖的加鎖與解鎖、std::atomic 的讀寫以及相應(yīng)的內(nèi)存序、線程的 join 等。普通的賦值和讀取無(wú)法建立這種關(guān)系。這也就是說判斷一段代碼是否線程安全不能靠“我運(yùn)行了好幾次都沒出事”。你只是沒有撞上那個(gè)時(shí)機(jī)并不代表它沒有發(fā)生數(shù)據(jù)競(jìng)爭(zhēng)。2.3 “崩潰在很遠(yuǎn)的地方”是怎么發(fā)生的數(shù)據(jù)競(jìng)爭(zhēng)最坑的地方在于問題不一定出現(xiàn)在肇事代碼附近。線程 A 先寫了共享靜態(tài)對(duì)象線程 B 在另一個(gè)函數(shù)里讀它中間隔著大量調(diào)用。編譯器發(fā)現(xiàn)某個(gè)字段只在個(gè)別路徑被寫而其他路徑讀出來(lái)可能是個(gè)未初始化或部分更新的值于是大膽把看起來(lái)很冗余的代碼刪掉或者把分支重排。最終表現(xiàn)是某個(gè)不相關(guān)的邏輯點(diǎn)開始出錯(cuò)離源頭十萬(wàn)八千里。我開頭說的那個(gè)服務(wù)崩潰堆棧在日志模塊和對(duì)象析構(gòu)里真正原因卻是另一個(gè)線程在改緩存。這就是為什么這類問題特別難查。你盯著崩潰堆棧找原因找三天也可能找不到因?yàn)橐蚬湕l已經(jīng)被編譯器和緩存切碎了。3. 靜態(tài)成員初始化階段的線程安全魔法靜態(tài)與隱藏的坑3.1 C11 之后的局部靜態(tài)變量魔法靜態(tài)先說一個(gè)好消息C11 之后的函數(shù)局部靜態(tài)變量其初始化是線程安全的。標(biāo)準(zhǔn)要求當(dāng)控制流并發(fā)進(jìn)入某個(gè)局部靜態(tài)變量的聲明時(shí)初始化必須只發(fā)生一次其他線程要等待這次初始化完成。編譯器通常會(huì)在變量旁邊生成一個(gè) guard 標(biāo)志第一次進(jìn)入時(shí)加鎖并判斷狀態(tài)后續(xù)進(jìn)入直接跳過初始化。你對(duì)這個(gè)機(jī)制最常見的感知就是所謂“魔法靜態(tài)”。來(lái)看最典型的寫法class Logger { public: static Logger get() { static Logger instance; return instance; } private: Logger() { /* ... */ } };多個(gè)線程第一次同時(shí)調(diào)用get()會(huì)有一個(gè)線程真正構(gòu)造instance其余線程阻塞等待。構(gòu)造完成之后后續(xù)調(diào)用不再有任何加鎖開銷。這個(gè)特性后來(lái)成為安全單例的基石第五章會(huì)再提到。這里值得注意的是線程安全保障僅限于“初始化那一次”。如果你之后還在多線程里修改instance的內(nèi)部狀態(tài)那依然是數(shù)據(jù)競(jìng)爭(zhēng)。魔法靜態(tài)只負(fù)責(zé)把對(duì)象造出來(lái)不負(fù)責(zé)你后續(xù)怎么用。3.2 類靜態(tài)數(shù)據(jù)成員初始化時(shí)機(jī)與靜態(tài)初始化順序問題那類里直接定義的靜態(tài)成員變量呢比如static Metrics metrics;這種非常量表達(dá)式初始化通常發(fā)生在程序啟動(dòng)的動(dòng)態(tài)初始化階段。絕大多數(shù)程序在這個(gè)階段還沒有創(chuàng)建業(yè)務(wù)線程所以并發(fā)初始化的問題不突出但另一個(gè)問題隨之而來(lái)不同編譯單元的靜態(tài)對(duì)象初始化順序在 C 標(biāo)準(zhǔn)里是不確定的。假如Metrics的構(gòu)造函數(shù)依賴另一個(gè)全局配置對(duì)象的初始化結(jié)果而那個(gè)對(duì)象恰好在你這個(gè)編譯單元之后才初始化就會(huì)出現(xiàn)“構(gòu)造時(shí)訪問未初始化對(duì)象”的經(jīng)典故障通常叫靜態(tài)初始化順序問題。解決思路有兩個(gè)方向。一是把非平凡的初始化延遲到第一次使用時(shí)函數(shù)局部靜態(tài)是現(xiàn)成的工具二是消除依賴構(gòu)造時(shí)不依賴其他全局狀態(tài)。如果項(xiàng)目里有多個(gè) .cpp 都定義了帶有動(dòng)態(tài)初始化的靜態(tài)成員并且它們之間存在依賴不要指望鏈接順序救你標(biāo)準(zhǔn)層面就不可靠。3.3 類模板里的靜態(tài)成員延遲實(shí)例化的特殊場(chǎng)景類模板的靜態(tài)成員還有一處容易被忽略多數(shù)情況下模板靜態(tài)成員的定義是在頭文件里實(shí)例化發(fā)生在第一次使用某個(gè)具體模板參數(shù)時(shí)。也就是說它可能不是在程序啟動(dòng)階段初始化的而是在運(yùn)行中某個(gè)線程第一次觸發(fā)實(shí)例化時(shí)才進(jìn)行動(dòng)態(tài)初始化。如果你在頭文件里寫了這樣的東西template typename T struct Registry { static std::mapT, int table; }; template typename T std::mapT, int RegistryT::table;那么Registryint::table這個(gè)對(duì)象到底在哪個(gè)線程第一次被實(shí)例化取決于哪段代碼先被調(diào)用。多個(gè)線程同時(shí)首次觸碰不同實(shí)例時(shí)編譯器需要保證靜態(tài)成員初始化線程安全但實(shí)現(xiàn)細(xì)節(jié)可能比局部靜態(tài)更微妙。我的建議是別讓模板靜態(tài)成員承載非平凡的動(dòng)態(tài)初始化需要時(shí)就放在一個(gè)函數(shù)局部靜態(tài)對(duì)象后面讓那個(gè)標(biāo)準(zhǔn)保證的守衛(wèi)機(jī)制來(lái)兜底template typename T struct Registry { static std::mapT, int table() { static std::mapT, int table; return table; } };這樣得到的仍然是你想要的進(jìn)程級(jí)唯一實(shí)例但初始化時(shí)機(jī)由函數(shù)局部靜態(tài)統(tǒng)一接管行為更可控。4. 鎖、原子變量、線程局部存儲(chǔ)——三類做法怎么選4.1 互斥鎖最簡(jiǎn)單也最容易被用錯(cuò)的方案如果共享靜態(tài)成員是一段需要保持多個(gè)字段一致的復(fù)雜數(shù)據(jù)直接用互斥鎖是最穩(wěn)的方案。原則很樸素凡是可能發(fā)生讀寫的入口全部經(jīng)過同一個(gè)鎖。寫要鎖讀也要鎖。很多人只給寫加鎖讀不加鎖認(rèn)為“讀一下問題不大”實(shí)際上讀線程和寫線程之間沒有任何同步關(guān)系讀線程完全可能讀到寫了一半的數(shù)據(jù)這依然是數(shù)據(jù)競(jìng)爭(zhēng)。一個(gè)常見的類是這樣class Metrics { public: static void Add(long v) { std::lock_guardstd::mutex lock(mu_); total_ v; count_ 1; } static long Snapshot() { std::lock_guardstd::mutex lock(mu_); return total_ / count_; } private: static std::mutex mu_; static long total_; static int count_; }; std::mutex Metrics::mu_; long Metrics::total_ 0; int Metrics::count_ 0;這里Add和Snapshot都走mu_保證讀的時(shí)候看到的是完整快照。優(yōu)點(diǎn)是簡(jiǎn)單正確容易給不熟悉內(nèi)存模型的同事看懂缺點(diǎn)是每次調(diào)用都要經(jīng)過鎖如果這是熱點(diǎn)路徑可能成為性能瓶頸。補(bǔ)充一個(gè)工程經(jīng)驗(yàn)鎖的粒度要盡量小。把鎖放在單個(gè)函數(shù)內(nèi)部只保護(hù)真正共享的字段操作不要在外部“幫別人加鎖”。例如有些人喜歡讓調(diào)用方自己 lock這個(gè)約定很容易被后來(lái)的人漏掉代碼腐化速度極快。不如把共享字段設(shè)為私有只暴露已經(jīng)加好鎖的靜態(tài)方法。4.2 原子變量讓簡(jiǎn)單的計(jì)數(shù)和標(biāo)志位不再需要鎖如果共享靜態(tài)成員只是一個(gè)計(jì)數(shù)器、一個(gè)標(biāo)志位或一個(gè)可以單獨(dú)讀寫的數(shù)值優(yōu)先用std::atomic。它用底層的原子指令把讀改寫打包成一個(gè)不可分割的操作從語(yǔ)言層面規(guī)定了對(duì)該變量的并發(fā)訪問是良定義的不需要再額外加鎖。例如剛才的累計(jì)計(jì)數(shù)可以寫成這樣class Metrics { public: static void Add(long v) { total_.fetch_add(v, std::memory_order_relaxed); } static long Get() { return total_.load(std::memory_order_relaxed); } private: static std::atomiclong total_; }; std::atomiclong Metrics::total_{0};fetch_add是原子操作不會(huì)出現(xiàn)兩個(gè)線程同時(shí)讀到舊值的情況最終結(jié)果必然等于所有線程成功執(zhí)行的累加之合。代碼里用了 relaxed 內(nèi)存序很多教材會(huì)告訴你這是性能最高的寫法但請(qǐng)一定確認(rèn)你真的不需要跨線程順序約束。如果你只關(guān)心“總數(shù)是多少”不在乎它和其他事件的先后關(guān)系relaxed 沒問題如果某個(gè)線程要先更新完一批數(shù)據(jù)再讓另一個(gè)線程通過這個(gè)原子變量看到“數(shù)據(jù)已經(jīng)準(zhǔn)備好了”那么需要 release/acquire 或更強(qiáng)的 seq_cst。新手階段統(tǒng)一用默認(rèn)的 seq_cst正確性優(yōu)先性能瓶頸出現(xiàn)后再回頭摳這些細(xì)節(jié)。還有一個(gè)坑std::atomic并不等于“把一個(gè)結(jié)構(gòu)體塞進(jìn)去就完事”。只有那些在目標(biāo)平臺(tái)上有原子指令支持的寬度才免鎖超過機(jī)器字長(zhǎng)的結(jié)構(gòu)體std::atomic內(nèi)部會(huì)退化到鎖而且不同平臺(tái)的鎖實(shí)現(xiàn)不可見。這種場(chǎng)景直接用專門的互斥鎖反而更清楚。4.3 線程局部存儲(chǔ)能不分就不分并不是所有共享數(shù)據(jù)都必須被所有線程共享。如果每個(gè)線程都只需要自己的那份副本事后各自統(tǒng)計(jì)或合并那最干凈的做法是用thread_local靜態(tài)成員。語(yǔ)法上就是static thread_local或者類外定義class Worker { public: static void AppendLog(const std::string s) { log_buffer_ s; } private: static thread_local std::string log_buffer_; }; thread_local std::string Worker::log_buffer_;初看可能覺得奇怪它和static不矛盾嗎一點(diǎn)都不矛盾。thread_local決定的是線程維度每個(gè)線程都有一份獨(dú)立拷貝static決定的是生命周期這份拷貝不對(duì)應(yīng)任何對(duì)象實(shí)例只對(duì)應(yīng)線程和類名。也就是說不同線程修改的都是自己的log_buffer_彼此天然隔離不需要鎖?,F(xiàn)實(shí)項(xiàng)目里線程局部存儲(chǔ)非常適合日志緩沖、臨時(shí)緩存、線程池上的會(huì)話數(shù)據(jù)處理這類場(chǎng)景。不過有兩個(gè)注意點(diǎn)。第一線程退出時(shí)thread_local 對(duì)象會(huì)析構(gòu)不要在析構(gòu)函數(shù)里依賴另一個(gè)線程的 thread_local 數(shù)據(jù)。第二線程池中的線程任務(wù)邊界不明顯線程局部緩存在任務(wù)結(jié)束后如果不清理容易把上一個(gè)任務(wù)的數(shù)據(jù)帶到下一個(gè)任務(wù)里必須在任務(wù)入口或出口顯式重置。4.4 選型的底層原則總結(jié)一下常見場(chǎng)景下我一般按這個(gè)表選型場(chǎng)景推薦方案原因復(fù)雜對(duì)象多個(gè)字段需要保持一致mutex / scoped_lock鎖定一段邏輯操作整體狀態(tài)計(jì)數(shù)器、標(biāo)志、單一數(shù)值std::atomic免鎖吞吐高語(yǔ)義清晰讀多寫少的高頻查詢std::shared_mutex多讀者并發(fā)寫者互斥每個(gè)線程獨(dú)立處理數(shù)據(jù)static thread_local物理上不再共享免同步初始化后不再修改constexpr / 只讀不可變靜態(tài)成員沒有寫操作天然安全選型之外還有一條更底層的心法能減少共享就不要增加鎖。鎖不是免費(fèi)的就算無(wú)鎖的原子變量也會(huì)增加指令數(shù)和緩存一致性壓力。如果一段數(shù)據(jù)其實(shí)沒必要被所有線程共享優(yōu)先通過任務(wù)拆分、線程私有副本或不可變數(shù)據(jù)把它變成“不需要同步”的結(jié)構(gòu)這比任何同步原語(yǔ)都高效。我自己在評(píng)審代碼時(shí)看到有人往共享靜態(tài)成員上加鎖第一反應(yīng)不是夸他會(huì)加鎖而是先問這一步真的需要共享嗎5. 單例模式的經(jīng)典重災(zāi)區(qū)雙重檢查鎖與安全的單例實(shí)現(xiàn)5.1 為什么靜態(tài)成員變量是單例的最常見載體靜態(tài)成員變量最常見的用途之一就是單例。單例的本質(zhì)是進(jìn)程內(nèi)只有一個(gè)實(shí)例這個(gè)事實(shí)和靜態(tài)存儲(chǔ)區(qū)天然契合用靜態(tài)成員指針或引用持有那個(gè)唯一的對(duì)象是幾乎所有實(shí)現(xiàn)的第一步。也正因?yàn)槿绱藛卫龑?shí)現(xiàn)里線程安全的坑特別密集。尤其是“雙重檢查鎖”它幾乎是 C 社區(qū)反復(fù)踩了十幾年的經(jīng)典雷區(qū)。我先解釋它為什么吸引人再解釋它為什么沒那么好用。5.2 看看這段“老江湖”代碼為什么錯(cuò)雙重檢查鎖的出發(fā)點(diǎn)是單例創(chuàng)建一次之后每次讀取都是熱點(diǎn)路徑如果每次都加鎖開銷太大能不能先無(wú)鎖判斷指針是否為空為空才加鎖創(chuàng)建于是出現(xiàn)類似下面的代碼static Singleton* inst nullptr; static std::mutex mu; Singleton* GetInstance() { if (inst nullptr) { // 第一次無(wú)鎖讀 std::lock_guardstd::mutex lock(mu); if (inst nullptr) { // 第二次判斷 inst new Singleton(); // 創(chuàng)建 } } return inst; }問題在于inst的第一次無(wú)鎖讀和另一個(gè)線程里的new Singleton()之間沒有任何同步關(guān)系。new 表達(dá)式本來(lái)就是三步分配內(nèi)存、在內(nèi)存上構(gòu)造對(duì)象、把地址寫入inst。編譯器或 CPU 可能把“寫入 inst”提前到構(gòu)造完成之前也可能把它推遲線程 B 在第 1 行看到inst不為空時(shí)線程 A 可能還沒完成構(gòu)造。于是 B 返回了一個(gè)半成品指針調(diào)用成員函數(shù)時(shí)讀取的是未初始化的字段。在某些編譯器上它可能“看起來(lái)能用”但跨平臺(tái)、跨優(yōu)化等級(jí)之后就會(huì)在運(yùn)行期炸掉。而如果第 1 行看到的inst仍為空多個(gè)線程會(huì)依次進(jìn)入并重復(fù)創(chuàng)建對(duì)象單例退化成多例內(nèi)存泄漏都算輕的。很多人覺得加 volatile 就能解決。volatile 不能提供原子性和內(nèi)存順序前面說過這里同樣不成立。甚至static volatile Singleton* inst;也不能保證構(gòu)造完成的 happens-before它只是讓編譯器不緩存這個(gè)指針變量而已。真正的解法要么讓標(biāo)準(zhǔn)機(jī)制直接保證初始化要么使用原子量配合 memory_order。5.3 三套可靠實(shí)現(xiàn)函數(shù)局部靜態(tài)、call_once、只讀單例最省事的寫法C11 以后的函數(shù)局部靜態(tài)變量已經(jīng)幫你把初始化競(jìng)態(tài)解決了class Singleton { public: static Singleton Get() { static Singleton instance; return instance; } private: Singleton() default; Singleton(const Singleton) delete; Singleton operator(const Singleton) delete; };多線程第一次調(diào)用Get()時(shí)初始化由編譯器生成的 guard 保證只執(zhí)行一次后續(xù)訪問無(wú)鎖。這個(gè)模式因?yàn)楹?jiǎn)潔到幾乎不可能寫錯(cuò)強(qiáng)烈優(yōu)先推薦。唯一限制單例對(duì)象的構(gòu)造函數(shù)不能依賴另一處同樣需要復(fù)雜初始化的全局狀態(tài)否則你不過是從線程安全問題換到了初始化順序問題。如果需要給單例傳參數(shù)或者初始化邏輯比較復(fù)雜可以用std::call_onceclass Singleton { public: static Singleton Get(int input 0) { std::call_once(once_, [] { inst_ new Singleton(input); }); return *inst_; } private: explicit Singleton(int v) { /* ... */ } static std::once_flag once_; static Singleton* inst_; }; std::once_flag Singleton::once_; Singleton* Singleton::inst_ nullptr;call_once的承諾是即使多個(gè)線程同時(shí)調(diào)用初始化回調(diào)也只會(huì)執(zhí)行一次其他線程會(huì)阻塞等待這次回調(diào)完成。注意回調(diào)里不能提前返回once_flag 一旦執(zhí)行成功后續(xù)所有線程看到的都是已初始化的狀態(tài)。如果你非要在回調(diào)里拋異常異常會(huì)傳播給當(dāng)前線程once_flag 會(huì)重置下一次調(diào)用會(huì)重試這是標(biāo)準(zhǔn)行為寫代碼時(shí)要考慮清楚。還有一類更極端的場(chǎng)景單例對(duì)象沒有任何可變狀態(tài)或者所有字段都是編譯期常量。這種時(shí)候直接用constexpr靜態(tài)成員或函數(shù)內(nèi)static constexpr對(duì)象就行沒有運(yùn)行時(shí)初始化也就不存在初始化競(jìng)態(tài)。很多人一聽到單例就條件反射寫鎖實(shí)際上一個(gè)全 constexpr 的消息格式描述符完全不需要任何同步設(shè)施。5.4 關(guān)于析構(gòu)順序的提醒函數(shù)局部靜態(tài)對(duì)象在程序退出時(shí)會(huì)自動(dòng)析構(gòu)析構(gòu)順序與構(gòu)造順序相反。如果單例在析構(gòu)時(shí)還依賴另一個(gè)局部靜態(tài)對(duì)象而對(duì)方已經(jīng)析構(gòu)就可能踩到空指針或未初始化數(shù)據(jù)。我的建議是單例析構(gòu)函數(shù)保持簡(jiǎn)單不要訪問其他可能先析構(gòu)的全局狀態(tài)如果主線程之外還有工作線程在運(yùn)行必須在 main 里先 join 所有線程再退出而不是讓進(jìn)程在還有線程運(yùn)行時(shí)走到靜態(tài)析構(gòu)階段。還有一類懲罰是我見過不少團(tuán)隊(duì)踩過的為了嚴(yán)格“禁止拷貝”把單例基類寫成宏或者一大堆代碼反倒是構(gòu)造函數(shù)忘記私有化了。其實(shí) C11 之后delete 拷貝構(gòu)造和賦值就夠了Singleton(const Singleton) delete; Singleton operator(const Singleton) delete;別為這種小事發(fā)明新框架。6. 跑一遍才踏實(shí)ThreadSanitizer 實(shí)測(cè)與排查心得6.1 一個(gè)能穩(wěn)定暴露競(jìng)態(tài)的測(cè)試用例理論講再多不如讓工具在眼前把競(jìng)態(tài)抓出來(lái)。我常用的做法是先寫一個(gè)很小的復(fù)現(xiàn)程序規(guī)模不大但循環(huán)次數(shù)足夠多保證競(jìng)爭(zhēng)窗口能被撞上。比如前面那個(gè)計(jì)數(shù)器例子的完整版#include thread #include iostream struct Stats { static long counter; }; long Stats::counter 0; int main() { std::thread threads[8]; for (int i 0; i 8; i) { threads[i] std::thread([] { for (int j 0; j 1000000; j) { Stats::counter; } }); } for (auto t : threads) t.join(); std::cout Stats::counter \n; return 0; }按正常邏輯輸出應(yīng)該是 8000000直接編譯運(yùn)行你大概率會(huì)得到一個(gè)更小的數(shù)甚至偶爾看起來(lái)像 8000000因?yàn)楦?jìng)爭(zhēng)窗口不是每次循環(huán)都能命中。所以靠數(shù)值猜“是不是競(jìng)態(tài)”很不靠譜數(shù)值對(duì)也不能證明線程安全。想要穩(wěn)定暴露問題得用專門工具。6.2 編譯并運(yùn)行 TSan看它怎樣報(bào)告ThreadSanitizer簡(jiǎn)稱 TSan是 GCC 和 Clang 都內(nèi)置的競(jìng)態(tài)檢測(cè)工具思路是在編譯時(shí)做插樁運(yùn)行時(shí)記錄每次內(nèi)存訪問再判斷是否存在兩個(gè)線程對(duì)同一地址的無(wú)同步訪問。編譯命令很簡(jiǎn)單g -stdc17 -fsanitizethread -g -O1 -pthread race.cpp -o race_tsan注意這里務(wù)必加上-g否則報(bào)告里的棧信息沒有行號(hào)-O1是 TSan 官方推薦的優(yōu)化等級(jí)既能暴露多數(shù)問題又不會(huì)像-O0那樣把代碼拍得太平。跑起來(lái)之后如果存在數(shù)據(jù)競(jìng)爭(zhēng)程序會(huì)在控制臺(tái)打出類似這樣的信息WARNING: ThreadSanitizer: data race Read of size 8 at 0x... by thread T2 #0 main::$_0::operator() ... Previous write of size 8 at 0x... by thread T1 #1 main::$_0::operator() ... Location is global Stats::counter它會(huì)準(zhǔn)確標(biāo)出參與競(jìng)態(tài)的兩個(gè)訪問、各自的線程棧以及出問題的變量名Stats::counter??吹竭@份報(bào)告已經(jīng)不需要我們?cè)偃シ瓍R編猜“會(huì)不會(huì)真是這里”。修復(fù)之后再編譯運(yùn)行直到 TSan 零告警我才敢說這個(gè)復(fù)現(xiàn)用例的事情結(jié)束了。TSan 在使用上有兩個(gè)小坑值得提前說。一是它和 ASanAddressSanitizer不能混用加了-fsanitizeaddress再同時(shí)開sanitizethread行為不可預(yù)期可能直接鏈接失敗。二是 TSan 對(duì)運(yùn)行時(shí)環(huán)境有額外要求在部分老內(nèi)核或容器里需要額外配置如果直接跑報(bào)“FATAL: ThreadSanitizer: unexpected memory mapping”通常和環(huán)境不支持有關(guān)換個(gè)常規(guī)環(huán)境或者更新工具鏈一般就能解決。這屬于檢測(cè)工具本身的環(huán)境問題不要因?yàn)樗鼒?bào)錯(cuò)就懷疑自己的代碼。6.3 真實(shí)項(xiàng)目里的排查思路和預(yù)防措施真實(shí)項(xiàng)目里的靜態(tài)成員變量不會(huì)像復(fù)現(xiàn)程序這么干凈。我的排查習(xí)慣是先把所有帶 static 且可寫的成員列出來(lái)按“是否在多于一個(gè)線程里出現(xiàn)”分類只讀的定義為安全寫者只有啟動(dòng)階段的可以重點(diǎn)檢查初始化順序運(yùn)行期有多個(gè)寫者的直接進(jìn)觀察名單。第二步找出所有訪問入口看看讀和寫是否有共同的同步對(duì)象。讀加鎖、寫加鎖但用的是兩把不同的鎖等于沒鎖。第三步上 TSan 跑一輪覆蓋主要業(yè)務(wù)路徑的壓測(cè)通常十分鐘就能抓到第一塊視野盲區(qū)。修復(fù)時(shí)也要小心修復(fù)動(dòng)作本身引入新問題。很多人第一反應(yīng)是在每個(gè)方法入口加鎖但忘了靜態(tài)成員變量可能被外部通過返回值獲得引用然后繞過方法直接改。正確做法是讓靜態(tài)成員盡可能私有對(duì)外只暴露加好鎖的靜態(tài)方法如果實(shí)在需要返回引用必須返回一個(gè)同樣受鎖保護(hù)的代理或者直接返回副本。我現(xiàn)在設(shè)計(jì)任何類時(shí)遇到靜態(tài)成員變量的第一個(gè)問題都是這個(gè)變量是只讀的嗎如果不是只讀下一個(gè)問題就是什么時(shí)候?qū)懩男┚€程讀用什么同步如果回答不上來(lái)我就不讓它作為裸的靜態(tài)成員存在。寧可多寫一層函數(shù)局部靜態(tài)的間接層把初始化和訪問都收口到一個(gè)地方。見過太多因?yàn)殪o態(tài)成員線程安全翻車的案例之后我的體會(huì)是數(shù)據(jù)競(jìng)爭(zhēng)很少是“運(yùn)氣不好”它是共享、可變、缺少同步三個(gè)條件同時(shí)成立的必然結(jié)果。把這三者拆掉任何一個(gè)問題就能從根上消失。診斷時(shí)可以靠工具防御時(shí)還是得靠設(shè)計(jì)習(xí)慣。希望你下次看到static關(guān)鍵字時(shí)能多停留兩秒。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色综合婷婷| www.夜夜操.com| 亚洲一二三网| 噜噜噜久久| 久久综合香蕉国产国产蜜臀AV| 伊人狠狠狠综合| 99久久国产宗和精品1上映| 五月婷婷色播视频| 久久婷婷五月丁香蜜桃网| 丁香5月啪啪| 强辱丰满人妻HD中文字幕| 色情五月天se| 精品九九婷婷| 开心激情网在线| 黄色精品五月婷婷| 97色婷婷| 熟女激情五月天 | 99精品久久久久久久婷婷| 色天堂A| 人妻激情在线| 久久综合五月天| 99色性爰网络| 天天天天天久久久久久| 久久亭亭电影| 日日夜夜天天综合| 丁香五月六月欧美| 亚洲成人av在线| 色欲一区二区三区精品A片| 99er这里只有精品视频| 91/九色黑人| 色综合色色| 激情99| 天天操婷婷| 日韩狠狠色婷婷| 国产午夜精品AV一区二区麻豆| WWW.99热| 天天激情5月天亚洲| 熟妇人妻中文字幕无码老熟妇| 台湾综合丁香五月蜜桃| 久久久婷婷色五月资源网| 色婷婷伊人| 久久色五月| 五月丁香六月情| 婷婷五月天伦理| 亚洲人成播放网站| 天天综合精品| 成人免费高清在线播放| 人人干Av| 激情九月天天天天婷婷| 日本欧美成人片AAAA| 人人草成人视频| 影音先锋日本三级资源| 夜夜撸日日操| 色婷婷小说网| 26UUU精品一区二区c〇m| 我爱大香蕉| 国色天香伊人狠狠色| 五月天狠狠色| 婷婷五月在线视频| 五月丁香成人版| 十二区无码| 九色自拍| 婷婷狠狠干| site:pzdcoin.com| 五月丁香色婷婷色| 天天婬色综合| 91九九九九| 色久影院| 99色亚洲| 丁香婷婷色五月天| 天天爽天天爽天天爽天天爽天天爽| 婷婷六久久| 婷婷色中文字幕| 欧美婷婷五月天综合| 日本三级中国三级99| 亚洲中文字幕在线观看| 激情另类综合| 五月丁香花伦理电影| www.久久综合| 无码九九九九| 无码橾| 五月丁香六月婷婷中合网| 超碰无码318604| 亚洲欧洲另类| 色色色五月婷| 国产黄色av| 色色操| 开心激情站| 丁香欧美| 五月丁香六月婷婷免费| 天堂爱爱| 99热国内| 色综合久| 九九热av| 日本三级中国三级99人妇网站| 在线日韩av| 色5月婷婷| 色99在线观看| 色久五月天| 操笔无码| 婷婷五月欧美综合| 亚洲激情五月婷婷日日| 丁香婷婷激情五月| 女人天堂av| 99热在线精品播放| 久天综合| 丁香五月自拍| 人人操99| 婷婷综合久久| 嫩草AV久久伊人妇女超级A| 久久影视婷婷五月| 国产精品视频免费看| 99综合五月免费视频色婷婷| 射满了还射免费在线观看 -午夜版全集-新视觉影院| 91日日日| 五月婷婷激情网| 色色色色色网站| 婷婷基地五月色| 99re这里只有精品国产99| 九月激情网| 免费亚洲成人电影AV| 久久艹网| 91碰碰视频| 婷婷色六月| 日本97在线观看| www久久久久久久久久久久久久久久久| 国外亚洲成AV人片在线观看| 成人亚洲精品久久久久 | 久久99热这里只有| 激情精品久久| 婷婷无码视频| 欧美日本va| 九九精品9| 天天干,夜夜爽| 激情六月婷婷| 日本99久久| 色婷婷中文在线| 五月精品| 九九热精品视频| 激情五月综合网| 九九色色| 人与禽A片啪啪| 亚洲无AV在线中文字幕| 97五月婷| 五月丁香婷婷钟和色图| 99丝袜精品视频网站| 五月婷婷9| 欧美日韩日韩成人| 超碰成人电影| 99精品视频在线| 狠狠干激情五月| 亚洲十月婷婷综合| 狠狠色成人影片| 天天狠狠干| 欧美人妻一区二区| www.激情| 久久人妻少妇嫩草AV| 高清资源站日A美A欧亚…| 黄网在线免费观| 伊人激情综合| 大香蕉99| 五月天婷婷影院影院| 天天橾夜夜爽| 五月丁香色色| 屁股翘好撅高迎合跪趴| 免费看片操逼| 激情五月综合网| 99热思思在线观看| 五月天 无码| 99色热视频| 色色色99| 人操人| 99在线视频精品| 国产亚洲色婷婷99精品| 色狠久| 色欧美影院| 饮料下药迷倒漂亮女同事强干| 99热久| 99天天操夜夜操| 涩涩激情五月婷婷| 婷婷丁香六月五月天| 四色女婷婷| 99热在线观看| www.色五月| 超碰99热在线观看| 深爱五月综合网| 国产精品香蕉| 五月香婷婷| 9色小视频在线观看| 草草操操| 色五月婷婷五月天激情综合| 婷婷五月av| 国产小精品| 91肏肏肏| 97av在线视频| 色色色无码| 思思热在线播放| 丁香五月婷婷色综合| 五月丁香六月婷婷久久肏| 国产成人AV人人爽人人澡Va| 激情五月天综合网| 伊人久久丁香五月91| 五月天激情啪啪| 丁香婷婷五月天校园春色| 色综合天天天天做夜夜| 疯狂做受XXXX高潮A片| 五月五月婷婷| 五月天婷婷色播| 丁香五月婷婷乱| 丁香五月天婷婷91| 亚洲综合色丁香五月天| WWW,五月| 99日精品视频| 婷婷.com| 欧美性生交XXXXX无码小说| 丁香 久久| 操日本人妻视频| 五月激情啪啪啪| 五月婷婷婷婷婷婷艺术| 五月婷婷激情网| 亚洲AV成人无码电影| 琪琪理论片| 亚洲激情网| 成人午夜天| 色狠狠综合| 直接看的AV| 丰满少妇乱A片无码| 婷婷色九月| 99久久性爱| 六月激情婷婷| 黄网在线免费观看| 91啪啪视频| 五月香婷婷| 伊人网碰碰| 色五月天本日| 国产精品天天狠天天看| 丁香午月AV中文字幕| 99色综合| 亚洲操B视频| 五月丁香无码| 久久A极片| 综合欧美五月婷婷| 九九在线精点品| 99资源在线视频| 五月丁香六月综合激情无码软件亮点| 色色色九九九五月婷婷| 极品 少妇 内射| 97色在线视频| 欧美色色色色色| 五月婷婷丁香五月天| 九色亚洲| 天天插天天插天天插| 亚洲成人网站在线观看| 婷婷色在线视频| 六月五月久久丁香| 91操碰| 五月丁香综合啪啪| 婷婷五月亚洲综合| 激情综合色图| 91精品综合久久久久久五月丁香| 成人精品视频99在线观看免费| 99人人干| 婷婷色中文字幕| 中文字幕在线资源| 中文字幕在线日亚州9| 大香蕉久操| 亚洲成人一区| 亚洲视99| 怡红院AV亚洲一区二区三区H| 97色色色视屏| 亚洲成人AV电影在线| 六月婷伊人| \\五月天婷婷激情| 久热精品免费视频4| 日韩按摩二区| 婷婷五月色花丁香社区| 欧美性色视频| 天天久综合网永久入口17v| www久久艹| 91成人电影| 97视频久久| 99ri久久| 天堂成人A片永久免费网站 | 亚洲无码黄色| 丁香五月婷婷AV| 久xxxx| 五月婷婷婷婷| 我爱大香蕉| 激情综合网五月婷婷| 婷婷六月丁香在线| 婷婷六月天国产综合| 国语精品探花| 丁香五月综合激情性爱| 丁香五月成人网| 九九碰九九爱97| 九九热精品| 激情六月五月婷婷综合网| 色婷婷丁香五月| 婷婷六月激情啪啪| 99热很操老逼| 婷婷色五月天在线| 天天舔天天摸天天透| 啪啪视频99| 激情综合五月天| 深夜男女福利刺激影院一区完整| 大陆极品少妇内射AAAAAA| 五月婷婷在线观看| 天堂资源欧日浪女在线播放| 婷婷五月天影院| 激情综合亚洲色婷婷五月| 碰碰碰碰碰99| 99re在线观看| 日日夜夜小色哥| 五月丁香啪。| 亚洲色五月| 天堂AV在线看| 久久色婷婷| 婷婷99狠狠躁天天久久久九九九| 婷婷五月综合啪| 99er精品| 免费超碰在线| 久久免费精彩视频| 亚洲色婷婷五月天| 色五月在线| 91热在线观看视频| 天天日天天干天天操| 五月丁香激情在线| 激情五月天婷婷直播| 伊人久久丁香狠狠婷婷综合香蕉| 五月丁香成人| 婷婷色网站| 91丨九色丨丰满人妖| 久久99网站| 国产午夜一区二区三区| 思思视频这里是精品| 蒲京久久无码视频| 久热大香蕉| 成 久久| 久久色五月| 亚洲视频综合网| 丁香五月网址| 另类综合婷婷五月天欧美视频| 在线中文字幕av| 又大又粗九一在线| 99热这里只有精品3| 欧美色色色色色色色| 色五月首页| 亭亭丁香97| 激情综合婷婷| 91色五月| 激情五月天影院| 欧美色骚婷婷五月天| www.com色播五月天| 少妇高潮呻吟A片免费看软件| 色碰碰| 99热传媒| 国产成人精品一区二三区熟女在线| 婷婷亚洲综合| 五月天在线视频尤物视频在线看| 九九色综合| 97在线日本| 97在线观视频免费观看| 五月天偷拍| 思思99热| 26uuu精品一区二区| 超碰AAAAAAV| www.91九色| 久久久免费图片视频| 玖玖在线视频| 综合激情站| 婷婷婷婷婷婷婷婷| 丁香婷婷成人网| 婷婷色系婷色| 日本女天天爽| 婷婷在线播放av| 草榴视频网| 91在线资源| 北京熟妇搡BBBB搡BBBB| 九九AV| 人妻久久久久久久 | 九九激情| 婷婷九月丁香| 欧美日韩一区二区三区四区| 色五月丁香伊人| 亚洲看av的网站| 五月婷婷开心深| 92久久| 超碰成人av| 五月婷婷www| 日操夜操天天操不卡| 国产美女无遮挡裸体毛片A片| 色婷婷五月影视| 1024婷婷综合久久五月天| 1024你懂的欧美曰韩| 伊人网色婷婷五月天| 双性美人被调教到喷水A片| 丁香六月啪啪| 99无码黄色视频| 五月丁香激情四射| 天天色播| 91操操操| www.色99| 亚洲午夜av| 九九大香蕉黄色影院| 另类激情五月在线视频欧美| 一级二级色大片| 播五月丁香三月婷婷| 天天操天天操天天操天天操天天操 | 国产高潮白浆一区二区| 久久久人人操A V| 东京热人妻一区二区三区在线| 久久婷婷网址| 激情熟女网| 欧美、日韩、中文、制服、人妻| 六月婷婷色色色| 综合伊人久久| 亚洲成人综合在线| 激情五月图| 第二色AⅤ| 久色姿源| 99综合免费视频| 久久久久久人妻久久久久久久久久人妻久久久| 五月婷婷69| 欧美va在线观看| 九九青草热| 久久婷婷网站| 色婷婷综合久久久久| 成人在线网址| 欧美精品久久久久久视频观看| 婷婷五月俺要去| 五月丁六月婷| 高清无码入口| 99热这里是精品| 久热9| 亚洲乱码日产精品BD| 久久久亚洲成人无码A片| 九热视频免费观看| 我爱大香蕉| 色色色色色色色综合| 26UUU精品一区二区Com| 第五色婷婷| 99久在线精品| 51精品国自产在线| 五月天婷婷亚洲| 97色婷婷成人综合在线观看| 337p午夜影院| 欧美色性色好| 拍真实国产伦偷精品| 丁香六月成人| 中文精品在| 激情文学天天| 日本色狠狠| 五月天堂色| 日日操天天操| 91精品丝袜久久久久久久久粉嫩| 丁香无月在线观看| 色人妻五月| 婷婷激情综合| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 《久久综合九色综合97婷婷| 人人爽人人射-美女久久久久久久久久-成人AV| 婷婷伊人五月| 色婷婷香蕉| 91人人人人人| 色五月亚洲| 123日本不卡在线| www.色综合.com| 亚洲色婷婷99一9|| 国产无人区大片| 婷婷六月色| 丁香五月久久社区| 久久这里在精品视频| 天天日夜夜帕| 99精品网| 亚洲乱码w在线观看| 99啪啪| 亭亭色天香| 久久五月婷婷丁香| 七月丁香婷婷 色色| 色色综合无码| 天天肏天天肏天天肏| 99精品综合| 色九九九综合| 国产五月丁香在线| 99干视频| www.9色色色| 天天骑日日爽| 五月婷婷六月丁香五月| 婷婷中合| 五月天婷亚洲天综合网综合| 欧美天堂久久| 色吊丝av中文字幕| 亚洲射激情| 999婷婷综合| 91精品刘玥| 九九AV| 人人摸人人搞| av中文网| 精品婷婷五月天| 久久久大香蕉| 中文字幕天天干| 婷婷五月免费观看| 丁香丁婷五月激情| 日本一级一片免费视频| 99视频日韩| 狠狠va| 久久丁香五月婷婷| 婷婷色在线播放| 国产精品蜜臀99| 日日夜夜狠狠| 97操在线视频| 玖玖综合色| 91seAV| 天天干-天天日| 99热最新| 欧美三级欧美一级| 婷婷五月天网址| 高清免费在线视频| 婷婷开心激情综合五月天| 亚洲色五月| 九色91国产| www.久热| 久久全色| 婷婷五月六月丁香| 婷婷六月久久| 激情五月婷婷老师| 狠狠干五月| 五月天开心成人网| 狠狠操天天干| 碰碰91| 91操片| 草榴视频网| 色色色图| 欧美啪啪网| 婷婷五月激情在线视频| a免费在线| 色婷婷丁香五月天激情综合网| 精品无码久久久久久久久| 久热久色| 久操热| 婷香五月网在线| 九九無妻| 97丁香花五月天激情小说| 26uuu精品一区二区| 97精品综合久久| 99这里是99在线视频| 婷婷伊人网| 五月停亭六月,六月停亭的英语| 激情5月婷婷| 99久久終合| 国产日韩欧美| 9 99免费视频| 久九色| 超碰九色| 日韩无码成人电影| 婷婷在线五月天观看| 欧美搡BBBBB摔BBBBB| 99re在线观看视频| 无码成人播放器| 俺去也在线视频| 丁香五月伊人| 丁香五月成人婷婷| 色色爽爽天天| 日本三级大片| 手机AVAV天堂看网| 色情婷婷久久五月天| 五月激情婷婷丁香天堂| 欧美99视频| 九九精品热| 久久在线视频只有这里有精品| 国产暴力强伦轩1区二区小说| 天天操天天谢| 97超级操操| 久久在这里99| 99在线观看免费精品视频| 玩熟女五十AV一二三区| 色婷婷色五月天| a在线免费v| 五月婷婷六月丁香综合在线| 久久婷婷五月草视频在线播放| 色色色色色色综合网| 丁香六月天之亚州热女| 67194中文字幕| 五月婷婷六月丁香| 五月婷婷免费在线观看| 久久99精品久久久| 日本高清久久| 激情综合另类| 六月丁香色色色| 91丨九色丨国产打屁股| 男人天堂AV在线一区二区| 九九亚洲综合| www.久久五月天.com| 婷婷综合天堂| 婷婷五月天 丁香五月天 裸体| 91 九色 熟女| 综合久久人妻| 九月婷婷综合网| 九九99在线| 香蕉狠狠爱视频| 六月丁香五月婷婷| 色中色综合| 五月色情婷婷| 婷婷六月偷拍| 激情五月天网站| 99热日韩| 亚洲操逼网| 久久婷婷五月丁香蜜桃网| 婷婷激情综合| 五月丁香激情综合欧美| 色婷婷六月天| 影音先锋男人av资源站| 婷婷五月综激情| 五月丁香婷中文字幕| 97热九九| 亚州在线中文字幕| 九九热精品| 五月开行婷婷色五月| 狠狠丁香| se婷97| 丁香色婷婷| 色婷婷五月天视频在线| 激情五月图| 97婷婷狠狠久久综合9色| 色久综合| 中文成人在线| 欧美日本一区二区三区| 色狠狠五月天| 久热伊人9| 丰满少妇猛烈A片免费看观看| 99国产精品久久久久久久久久久 | 色婷婷人人| 色情五月婷婷| 日日噜噜夜夜狠狠久久丁香六月| 婷婷五月天色网久| 色色丁香| 五月天综合久久丁香91| 操日本99| 99热这里是精品| 色婷婷888| 婷婷五月18永久免费视频| 99免费热在线精品| 操日视频| 99丝袜精品视频网站| 福利视频在线播放| 99啪啪| 色色日本欧美| 自拍盗摄 另类| 婷婷五月开心中文字幕色| 色色五月婷| www久久艹| 99精品大片| 中文字幕簧片| www.99热最新视频8| 国产成人av在线播放| 1024在线视频| 男女啪啪视频久 9| 不卡的AV网站| 欧美成人猛片AAAAAAA| 久久五月天婷婷| 91操片| 婷婷色综合| 婷婷激情社区| 四色AVwww| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | 97精品人人A片免费看| 天天日天天爽| 精品久久人妻| 99免费| 婷婷色综合| 婷婷久久亚洲| 丁香九月婷婷综合| 色综合综合色| 婷婷99狠狠躁天天| 婷婷六月啪啪| 日本久久天堂| 婷婷精品| 操91| 欧美私人家庭影院| 少妇人妻丰满做爰XXX| 色婷婷丁香五月| 五月丁香| 激情内射人妻1区2区3区| 丁香激情五月天| 欧洲色色| 精品欧美一区二区三区久久久| h在线看免费版在线看| 超碰99在线| 人人妻人人澡| 久草热在线视频| 欧美性爱五月天| 91精品久久久久久77777| 婷婷色操| 精品成人久久久久久久_一二三四视| 久热黄色| 欧美婷婷五月丁香| 日本三级大片| 日韩在线看AV| 黄色短视频在线观看| 九九热婷婷| 一区二区乱码视频| 色五月激情综合网| 97丁香花五月天激情小说| oumeisesewang| 色婷婷色五月色丁香| 九九热这里只有精品9| 97五月天婷婷| 婷婷爱五月天| av在线资源| 大香蕉婷婷色| 色优久久| av网站免费在线| 伊人玖玖综合| 九九五月天| 妻久久久久| 亚州性爱99| 色婷婷五月天久久| 丁香五月久久| 一本道在线电影| 精品亚洲国产成AV人片传媒| 婷婷激情97| 一级七香蕉| 任你日视频| 26uuu.| 色婷婷色人人射| 五月天精品| 天天狠狠夜夜狠狠2023| 尤物一区二区| 99热色婷婷| 91九色中文| 激情文学天天| 激情VA视频| 五月停亭六月,六月停亭的英语| 久久98| 婷婷天堂综合网| 激情综合九月| 日本噜噜色网| 任你搞网站| 99噜噜噜在线播放| 99这里有精品视频| 97精品综合久久内射| 99久久久| 日本社区五月天激情| 超碰人人操人人干| WWW色五月| 99热在线精品播放| 偷拍视频五月天| 日本久久精品18| 亚洲亚洲人成综合网络| 综合九色| 无码一区二区日韩| 久久精品性爱| 亚洲精品久久久久AV无码| 日本欧美999久久久三级片| 久久免费精品小视频| 丁香五月天激情网| 五月丁香婷草| 婷婷五月五月丁香| 色五月综合97| 清色五月天| 色婷婷狠| 亚州成人综合在线| 九九热色视频| 久久久天天啊| 伊人久久大香线蕉精品| 99色天堂| 色色cOm| 午夜色婷婷| 欧美午夜乱妇午夜福利| 大香蕉婷婷五月天| 六月五月久久丁香| 狠狠色丁香| 97碰碰九九视频| 五月天激情综合在线| 婷婷网五月| 婷婷狠狠操| 97人妻碰碰碰久久久久-最近国语高清| 日韩抽插操逼| 五月丁香六月| 综合激情九月婷婷,激情综合婷婷中文字 | 超碰狠狠操| 中文字幕久久一区二区三区| 婷婷五月影院| 色五月色五天色情网| 九九免费视频| 丁香狠狠干| 激情综合青草| 色婷婷AAA| 色色五月丁香婷婷综合| 思思热再线视频| 亚洲九区| 五夜丁香| 六月丁香激情综合| 婷婷深爱五月| 五月丁香啪综合| 亚洲色五月婷婷| 五月天婷婷狂暴白浆| tingtingjiqingwuyue| 九九精品综合| 色欲久久久久久综合网综合网| 五月婷婷色丁香| 97干在线视频| 国产激情综合| 91九色丨国产丨爆乳| 日韩无码人妻一区二区| 这里只有精彩视| 99国产精品久久久久久久久久久 | 色婷婷久久综合| 99综合熟女| 久8色色| 国产一二区爆乳_1国产日韩一区二区三-成人AV| 亚洲五月婷婷| 婷婷伊人久久| 五月丁香久久久久| 婷婷五月天综合久久| 久久3级片| 五月婷婷欲色| 五月婷婷 婷婷五月 一区二区 久久久| 97操视频| 人人操AV| 婷香五月| 99热在线观看精品| 久久98| www.日本91| 日韩欧美老妇性视频91久久久| 国产无套精品一区二区| 久热精品9999| 深情五月天| 婷婷五月色花丁香社区| 色XX综合网| 五月丁香趴趴| 色色热| 婷婷五月天网址| 亚洲色图五月丁香| 91主播在线| 激情婷婷丁香| 玖玖在线| www.minyis.com【JT】实力收量可预付QQ2101460746 | 综合五月激情网| 九色成人AV在线| www.久久66| 色吧网91| 色五月激情| 日本丁香久在线| 色热久| 久久婷婷五月综合| 大香蕉九九| 五月天自拍网| 欧美黄色一级录像| 深爱五月天 开心网| 五月久久综合| 五月综合无码| 99 re视频一区| 深爱激情综合网| 人妻系列久久久久久久久久久| 男女啪啪做爰高潮无遮挡| 深爱开心激情网| 天天操天天插天天射| 五月婷婷天天| 综合网啪啪| 9久久精品| 99热777| 九草性爱| 婷婷五月天亚洲| 天天天天天天天干| 婷婷在线日韩综合| 可以免费观看的av| 婷婷综合五月| 五月丁香影视| 五月激情黄色小说| 丁香五月大香蕉AV| 99视频内射三四| 九九九午夜影院成人| 久色大香蕉| 丁香五月欧美激情| 五月综合婷婷开心网| 婷婷色色色| 色色五月天网站| 热这里只有精| 亚洲av成人一区二区电影在线| 丁香婷婷影院| 五月婷婷六月丁香激情深爱| 七月丁香婷婷 色色| 天天爽天天| 伍月婷婷免费视频| 丁香五月婷婷香| 亚洲最大在线| 九九热在线视频,| 91日本在线免费| 亚洲中文字幕网| 99热这里只有精品1998| 狠狠干综合网| 国产肥白大熟妇BBBB视频| 思思re99视频在线观看| 久久久人妻人伦| 五月丁香影院| 中文在线成人| 天天日夜夜草进麻麻的子宫| 天天操五月天| 亚洲乱码日产精品BD| 亚洲激情网| 99爱免费在线观看| 色色六月| 99综合网| 欧美日韩成人在线网站| 婷婷五月AA五月在线| 午夜婷婷久久| 超碰97在线操| 五月天啪啪视频| 丁香五月第九色| 99操无码视频观看| 激情AV综合| 色五月婷婷综合| 丁香久久| 开心五月丁香综合久久| 丝袜激情网| 婷婷综合网| 亚洲色优| 夜夜操夜夜姧| 粉嫩av懂色av蜜臀av熟妇| 欧美A片在线视频免费观看| 99综合免费视频| 婷婷六月丁| 天天在线天天综合网色| 桃色激情五月天| 天天色2017| 成功精品影院| 九色七七| 五月丁查人人| 天天日夜夜草进麻麻的子宫| 五月丁香婷婷综合视频| aaa久久久| 久热婷婷| 97久久人人操| 欧美综合激情丁香五月六月婷| 婷婷五月免费观看| av在线资源| Y11111111111少妇电影院| 九九热超碰| 成人网站在线观看视频| 俺去也五月| 色五月成人网| 五月亚洲激情| 婷婷色导航| 99视频在线精品| 五月婷婷婷婷网| 天天拍久久| 丁香五月AV在线| 99热偷拍| 国内一级精品| 色九九中文字幕| 性生生活大片又黄又| 九九色热| 91热99| 国产婷婷综合| 天天爱天天吃狠天天透| www.五月天社区| 五月婷六月丁香| 五月激情丁香五月宗合| 丁香婷婷人妻| 91热99| 一区视频网站| 免费人人操| 综合色、色综合| 国自产拍偷拍精品啪啪一区二区| 天天操天天操天天操天天操天天操 | 免费观看欧美成人AA片爱我多深| 五月丁综合在线观看| site:wpjngj.com| 激情图片亚洲| 狠狠色丁香五月婷巨| www.99日本| 日本97久久久精品| 性爱五月婷婷| 人妻操日日| 婷婷五月丁香综合桃花色网| 久草视频大香蕉99| 琪琪狠狠干| 大香蕉久久综合网| 色五月综合激情网| 97一区二区| 欧美天堂婷婷日韩| 久久精彩视频18| 影音先锋男人AV资源站| 97超碰99热99| 超碰京东热av男人的天堂| 9在线9在线婷婷在线国产| 激情婷婷五月综合| 五月天丁香花婷婷| 美国不卡视频| 99久久精品国产色欲| 激情久久久久久久久久| 人妻久久婷婷| 级情九色| 最新日本A片| 亚洲综合激| 一区二区三区四区五区| WWW,五月天| 99色啊| 26uuu另类| 婷婷日日夜夜| 99热只有| 久婷| 99色综合| 欧美私人家庭影院| 万月丁香狠狠爱| 亚洲av另类在线观看| 996热re视频在线观看视频| 第四色网婷婷| 超碰人人干| 99久.| 啪啪色激情五月天| 国产成人VA| 亚洲精品性色| 五月天婷婷无码| 亚洲成人av在线| 深爱激情综合| 91精品激情9| 久热9热| 色综合中文| 性爱先锋AV| 色色色.com| 亚洲色vA| 99视频只有精品| 99热9| 性av| 综合精品99| 伊九九三级区| 婷婷六月激情啪啪| 婷婷涩涩五月天| 色婷婷97| 嫩草AV久久伊人妇女超级A| 99久久人人| 五月丁香六月激情综合| 婷婷五月黄色激情在线| 99性感视频| 天天色99| 99在线观看| 丁香婷婷五月份| 超碰人人99| 无码一区二区日韩| 欧美色色色色色色色| 五月色婷婷影院| 99久久人妻精品无码二区| 激情婷婷综合网| 六月婷婷天天操夜夜爽视频| 婷婷色Av| 日韩久久视频| 91九色网| 无码一级片| 色欲人妻综合aaaaaaaa网| 色人妻五月| 久久9久| 五月天天丁香婷婷| 五月婷婷影院| 丁香六月激情蜜桃| 婷婷五月大香蕉| 国产精品色情AAAAA片软件| 9伊人网| 丁香五月98| 久久99大全| 无码少妇高潮喷水A片免费| 五月婷婷色白丝| 六月婷婷五月丁香首页| 色偷偷综合| 色婷婷成人做爰A片免费看网站| 99少妇精品| 亚洲激情 久久| 五月天婷婷乱论小说| 久久99久久99精品免视看婷婷| yjzz亚洲国产| 一本久道综合色婷婷五月| 激情婷婷综合五月少妇| 午夜一区| 天天做天天爱| 91综合在线视频| 丁香五月激情六月综合| 五月天开心色情网| a级毛片一区二区免费视频| 色综合99| 91午夜激情| 中文成人在线| AV在线观看网站| 亚洲色婷婷五月| 国产成人网| 国产9色在线/日韩| 丁香六月婷婷综合在线| 国产精品色| 3p久久| 五月丁香婷婷六月天| 91久久久久久久| 888久久久| 六月丁香五月激情网| 婷婷六月丁| 开心五月天激情网| 久天综合| www.99情趣网| 丁香网五月天| 丁香五月天在线视频| 九九re精品视频在线观看 | 狠狠干天天日| 超碰只有精品在线| 五月天婷婷丁香人人操91| 色婷婷五月天成人网| 色婷婷综合网| 国产精品成人在线| 39视频第二区| 丁香亭亭久久| 91狠狠色| 亚洲综合一区二区| 99热在线这里| WwW色婷婷| 久久奄也去色色网站| 夜夜躁爽日日| 久久永久视频| 日韩在线一级| 欧洲区自拍| 色视五月天婷婷| 人妻人人操| 欧美日韩999| 天天爽综合网| 中文字幕成人版| 亚洲性爱99在线| 在线观看国产高清视频免费网站 | 另类天堂| 日韩AV片| 香蕉婷婷色五月| 婷婷字幕在线| 色久免费| 欧美日韩成卜| 奸逼视频| 国产看真人毛片爱做A片| 婷婷五月天亚洲色| 少妇性按摩无码中文A片| 五月色婷婷在线观看| 天天天天天日| 99在线资源| 日本爆乳片手机在线播放| 五月天久久激情| 亚洲五月花| 在线播放人妻| 激情五月综合六月丁香婷婷狠狠干| 婷婷综合五月| 欧美狠狠草| 久久激情视频| 久久东京热婷婷五月| 色综合com| 大香蕉综合| 久久免片| 91se在线视频| 99热日本| 婷婷月五天在线在线看| 精品人妻久久久久久| 色九月婷婷综合| 五月天婷婷激情小说电影| 九九热这里只有精品556| 五月丁香久久综合| 欧美日本日韩| 亚洲综合在线丁香五月| 99九九精品视频推荐| 丁香美女主播视频在线观看| 久久久9久| 九九在线视频| 91干视频| 狠狠操狠狠插| 五月婷婷丁香五月亚洲色| 野战J办公桌椅H| 婷婷五月色亚洲| www.99热精品99.com| 开心五月天激情网| 婷婷五月色综合| 超碰碰碰碰| 婷婷五月天激情文学小说| 这里有精品| 五月天自拍网| 激情精品久久| 日本成人小说婷婷六月| 婷婷五月欧美| 丁香五月天AV| 丁香五月网址| 91超级碰碰| 天天综合亚洲综合| 日韩淑女人妻luan伦激情精品一区二 | 婷婷激情网五月天| 中文成人在线| 热久久91| 五月丁香婷婷激情在线视频| 色吧婷婷五月亚洲| 色色亚洲五月天| 日韩久热| 五月婷婷六月丁香| 婷婷五月六月激情| 1区2区视频| 婷婷丁香18| 色婷婷五月天亚洲| 婷婷五月精品| 99欧州偷拍视频| ss五月天激情| 97亚洲视频在线| 丁香五月天堂| 亚洲天堂久久| 高清资源站日A美A欧亚…| 这里只有精品视频在线| 五月天激情小说| 久爱综合| 91精品综合久久久久久五月丁香 | 人妻久久久久久久久久| 中文av在线观看| 亚洲色热| 亚洲第一精品成人999久久精品| 五月综合丁香婷婷| 亚洲色婷婷五月天| 日日夜夜久| 九九热a| 99热最新国内| 色色色9| 婷婷六月伊人| 人人爽欧美婷婷久久久五月丁香| 色情婷婷五月天| 999影院成人在线影院| 丁香五月婷婷超碰在线| Blackedraw视频一区二区| 99激情视频| 综合99在线| av第一二区| 成人免费120分钟啪啪| 久久久无码精品成人A片小说 | 亚洲五月花| 国产99久9在线+|+传媒| 第四色五月天| 天天爽天天爽天天爽天天爽天天爽| 久777| 99热精品在线| 五月婷色激情五月| 97干在线| 丁香久久激情俄| 天天干,夜夜爽| 天天碰夜夜爽| WWW五月婷婷| 五月婷婷丁香六月| 四川女人毛多水多A片| 色五月婷婷综合| 这里只有精品9| 国产亚洲99| 婷婷热色| 日本人妻伦在线中文字幕| 激情四射网| 婷婷五月18永久免费视频| 婷婷五月丁香影院| 久久9久久| 久久免费高| 久久色天堂| 亚洲免费婷婷| 久久久妻人人人| 久久九精品| 五月丁香另类网| 开心激情站| 97碰| 青青草护士中出内射-欧美电影在线天堂新版 | 干一干xxxx| 亚洲AV无码电影| 激情六月天| 超碰免费人人| 六月丁香激情综合| 99在线爽| 91日韩在线|