99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

C++靜態(tài)成員變量線程安全:從數(shù)據(jù)競(jìng)爭(zhēng)到鎖、原子變量與安全單例實(shí)戰(zhàn)解析

C++靜態(tài)成員變量線程安全:從數(shù)據(jù)競(jìng)爭(zhēng)到鎖、原子變量與安全單例實(shí)戰(zhàn)解析 我先說一個(gè)前提如果你寫過多線程 C你遲早會(huì)遇到這么一種崩潰——日志上沒有任何明顯異常報(bào)錯(cuò)位置每次都不一樣甚至同一個(gè)版本跑了幾天才出現(xiàn)一次。某個(gè)項(xiàng)目組曾經(jīng)有個(gè)采集模塊十幾個(gè)工作線程會(huì)同時(shí)更新一個(gè)保存統(tǒng)計(jì)結(jié)果的靜態(tài)成員變量代碼量不大邏輯也不復(fù)雜但壓測(cè)跑到兩千萬(wàn)請(qǐng)求量的時(shí)候進(jìn)程開始偶發(fā)異常退出。查了幾天最后定位到根因我才真正意識(shí)到一個(gè)很多人沒當(dāng)回事的事實(shí)靜態(tài)成員變量的線程安全問題從來(lái)不只是“結(jié)果不對(duì)”那么簡(jiǎn)單。從一個(gè)普通類成員開始靜態(tài)成員變量和普通成員變量在內(nèi)存與生命周期上的差異決定了它天然就是多線程程序的雷區(qū)。這篇內(nèi)容適合正在寫或維護(hù)多線程 C 服務(wù)的開發(fā)者也適合把 C11 之后新特性當(dāng)黑盒在用的朋友。我會(huì)先講清楚為什么靜態(tài)成員變量容易出問題再給出鎖、原子變量、線程局部存儲(chǔ)和單例場(chǎng)景的正確做法最后用 ThreadSanitizer 演示一次真實(shí)的競(jìng)態(tài)定位過程。整個(gè)過程盡量少堆標(biāo)準(zhǔn)條文多給能直接落地的結(jié)論。1. 靜態(tài)成員變量與普通成員變量的本質(zhì)區(qū)別——線程不安全的根源1.1 它根本不在對(duì)象里內(nèi)存與生命周期先講一個(gè)經(jīng)常被忽視的事實(shí)靜態(tài)成員變量并不存在任何對(duì)象實(shí)例里。類里面的非靜態(tài)數(shù)據(jù)成員每個(gè)對(duì)象都有一份整體存放在對(duì)象的內(nèi)存布局中靜態(tài)成員變量則完全不同它在程序的數(shù)據(jù)段或 BSS 段分配空間生命周期從程序加載開始一直持續(xù)到進(jìn)程退出。用一個(gè)不嚴(yán)謹(jǐn)?shù)芎糜浀念惐绕胀ǔ蓡T變量是每個(gè)對(duì)象自己的私人物品靜態(tài)成員變量是類名下的公共倉(cāng)庫(kù)所有對(duì)象共用同一扇門、同一份庫(kù)存。這個(gè)差異直接帶來(lái)兩個(gè)結(jié)果。第一sizeof(對(duì)象)完全不包含靜態(tài)成員你把實(shí)例創(chuàng)建、銷毀多少次它都紋絲不動(dòng)進(jìn)程不結(jié)束它就不釋放。第二任何線程都能通過類名訪問這同一個(gè)實(shí)體不需要先拿到對(duì)象指針也不需要經(jīng)過實(shí)例方法。從多線程的角度看它和一個(gè)用 extern 聲明的全局變量沒有任何區(qū)別區(qū)別只在于名字前面多了一個(gè)類的作用域前綴。所以當(dāng)你想“把它當(dāng)作類的一部分因此天然受到類設(shè)計(jì)的保護(hù)”時(shí)這種保護(hù)并不存在。它不是對(duì)象成員它是全局狀態(tài)。全局狀態(tài)一旦允許寫就必須在所有寫者和讀者之間建立同步否則就是在走鋼絲。1.2 共享帶來(lái)的一觸即發(fā)一個(gè)副本和 N 個(gè)線程共享帶來(lái)的問題用一個(gè)最樸素的場(chǎng)景就能說明。假設(shè)你寫了這樣一個(gè)類class Metrics { public: static long total; }; long Metrics::total 0;然后八個(gè)線程各自執(zhí)行Metrics::total;跑十萬(wàn)次按直覺總該是八十萬(wàn)了吧實(shí)測(cè)大概率不是數(shù)值可能小于八十萬(wàn)而且每次都不一樣。之所以這樣是因?yàn)閠otal在底層并不是一步操作。它要先從內(nèi)存把total讀到寄存器加一再寫回內(nèi)存。兩個(gè)線程可能同時(shí)讀到同一個(gè)舊值然后各自加一寫回兩次加一只有一次生效。這就是數(shù)據(jù)競(jìng)爭(zhēng)的最小雛形。如果你覺得這只是數(shù)值誤差那還不夠嚴(yán)重。C 標(biāo)準(zhǔn)把這種并發(fā)訪問定義為未定義行為意味著編譯器可以做任何它認(rèn)為合理的優(yōu)化結(jié)果甚至不一定是“數(shù)值偏小”。這一點(diǎn)放到第二章細(xì)講。1.3 早就該破除的誤區(qū)volatile 不解決線程安全這里必須先破除一個(gè)流傳很久的誤解加個(gè) volatile 就能解決。volatile 告訴編譯器“這個(gè)變量可能在別處被修改不要把它優(yōu)化到寄存器里”它確實(shí)能讓一些極端場(chǎng)景下更容易觀察到正確值但它既不能保證操作的原子性也不能提供多線程之間的順序約束。在 C 的內(nèi)存模型里volatile 和線程同步機(jī)制是兩個(gè)維度。想達(dá)到線程安全要么用原子操作要么用互斥量要么在線程內(nèi)部私有一份數(shù)據(jù)。volatile 幫不上忙反而可能給你一種“我已經(jīng)處理過了”的錯(cuò)覺讓隱患繼續(xù)潛伏。2. 數(shù)據(jù)競(jìng)爭(zhēng)是未定義行為不是“結(jié)果不對(duì)”2.1count在匯編層面到底做了什么我們前面看到了total不是一步這里把它看成三條指令會(huì)更清楚讀、改、寫。CPU 執(zhí)行時(shí)會(huì)加載load修改modify存儲(chǔ)store。無(wú)論是編譯器還是 CPU都不會(huì)因?yàn)槟銓懥恕耙痪浯a”就保證三者之間沒有別人插進(jìn)來(lái)。更麻煩的是編譯器在優(yōu)化時(shí)可以把不相關(guān)的代碼重排可以在滿足“單線程可觀察語(yǔ)義”的前提下自由安排讀寫順序多線程環(huán)境下的觀察結(jié)果就和源代碼順序沒什么必然關(guān)系了。所以兩個(gè)線程分別執(zhí)行total可能出現(xiàn)兩個(gè)線程都讀到 0、都寫回 1最終total是 1 而不是 2。這個(gè)結(jié)果在單線程世界里不可能出現(xiàn)但在并發(fā)世界里是完全合法的未定義行為。不要把這種錯(cuò)誤歸類為“精度損失”它不屬于任何數(shù)值誤差范疇。2.2 CPU 緩存、指令重排與 happened-before即使沒有編譯器重排CPU 這一層也有自己的脾氣?,F(xiàn)代多核處理器每個(gè)核都有獨(dú)立的 L1/L2 緩存一個(gè)核寫入total后新的值可能還在自己的緩存行里還沒有同步到共享內(nèi)存另一個(gè)核在另一個(gè)時(shí)刻讀到的仍舊是舊值。硬件會(huì)通過緩存一致性協(xié)議最終保持一致但“最終”是多長(zhǎng)時(shí)間、什么順序程序如果不使用同步原語(yǔ)觀察不到確定的邊界。C 內(nèi)存模型引入了一個(gè)核心概念happens-before。你只有在兩個(gè)線程之間建立某種同步關(guān)系讓一個(gè)線程的寫操作在另一個(gè)線程的讀操作之前發(fā)生數(shù)據(jù)競(jìng)爭(zhēng)才被排除。能夠建立這種關(guān)系的機(jī)制只有少數(shù)幾種互斥鎖的加鎖與解鎖、std::atomic 的讀寫以及相應(yīng)的內(nèi)存序、線程的 join 等。普通的賦值和讀取無(wú)法建立這種關(guān)系。這也就是說判斷一段代碼是否線程安全不能靠“我運(yùn)行了好幾次都沒出事”。你只是沒有撞上那個(gè)時(shí)機(jī)并不代表它沒有發(fā)生數(shù)據(jù)競(jìng)爭(zhēng)。2.3 “崩潰在很遠(yuǎn)的地方”是怎么發(fā)生的數(shù)據(jù)競(jìng)爭(zhēng)最坑的地方在于問題不一定出現(xiàn)在肇事代碼附近。線程 A 先寫了共享靜態(tài)對(duì)象線程 B 在另一個(gè)函數(shù)里讀它中間隔著大量調(diào)用。編譯器發(fā)現(xiàn)某個(gè)字段只在個(gè)別路徑被寫而其他路徑讀出來(lái)可能是個(gè)未初始化或部分更新的值于是大膽把看起來(lái)很冗余的代碼刪掉或者把分支重排。最終表現(xiàn)是某個(gè)不相關(guān)的邏輯點(diǎn)開始出錯(cuò)離源頭十萬(wàn)八千里。我開頭說的那個(gè)服務(wù)崩潰堆棧在日志模塊和對(duì)象析構(gòu)里真正原因卻是另一個(gè)線程在改緩存。這就是為什么這類問題特別難查。你盯著崩潰堆棧找原因找三天也可能找不到因?yàn)橐蚬湕l已經(jīng)被編譯器和緩存切碎了。3. 靜態(tài)成員初始化階段的線程安全魔法靜態(tài)與隱藏的坑3.1 C11 之后的局部靜態(tài)變量魔法靜態(tài)先說一個(gè)好消息C11 之后的函數(shù)局部靜態(tài)變量其初始化是線程安全的。標(biāo)準(zhǔn)要求當(dāng)控制流并發(fā)進(jìn)入某個(gè)局部靜態(tài)變量的聲明時(shí)初始化必須只發(fā)生一次其他線程要等待這次初始化完成。編譯器通常會(huì)在變量旁邊生成一個(gè) guard 標(biāo)志第一次進(jìn)入時(shí)加鎖并判斷狀態(tài)后續(xù)進(jìn)入直接跳過初始化。你對(duì)這個(gè)機(jī)制最常見的感知就是所謂“魔法靜態(tài)”。來(lái)看最典型的寫法class Logger { public: static Logger get() { static Logger instance; return instance; } private: Logger() { /* ... */ } };多個(gè)線程第一次同時(shí)調(diào)用get()會(huì)有一個(gè)線程真正構(gòu)造instance其余線程阻塞等待。構(gòu)造完成之后后續(xù)調(diào)用不再有任何加鎖開銷。這個(gè)特性后來(lái)成為安全單例的基石第五章會(huì)再提到。這里值得注意的是線程安全保障僅限于“初始化那一次”。如果你之后還在多線程里修改instance的內(nèi)部狀態(tài)那依然是數(shù)據(jù)競(jìng)爭(zhēng)。魔法靜態(tài)只負(fù)責(zé)把對(duì)象造出來(lái)不負(fù)責(zé)你后續(xù)怎么用。3.2 類靜態(tài)數(shù)據(jù)成員初始化時(shí)機(jī)與靜態(tài)初始化順序問題那類里直接定義的靜態(tài)成員變量呢比如static Metrics metrics;這種非常量表達(dá)式初始化通常發(fā)生在程序啟動(dòng)的動(dòng)態(tài)初始化階段。絕大多數(shù)程序在這個(gè)階段還沒有創(chuàng)建業(yè)務(wù)線程所以并發(fā)初始化的問題不突出但另一個(gè)問題隨之而來(lái)不同編譯單元的靜態(tài)對(duì)象初始化順序在 C 標(biāo)準(zhǔn)里是不確定的。假如Metrics的構(gòu)造函數(shù)依賴另一個(gè)全局配置對(duì)象的初始化結(jié)果而那個(gè)對(duì)象恰好在你這個(gè)編譯單元之后才初始化就會(huì)出現(xiàn)“構(gòu)造時(shí)訪問未初始化對(duì)象”的經(jīng)典故障通常叫靜態(tài)初始化順序問題。解決思路有兩個(gè)方向。一是把非平凡的初始化延遲到第一次使用時(shí)函數(shù)局部靜態(tài)是現(xiàn)成的工具二是消除依賴構(gòu)造時(shí)不依賴其他全局狀態(tài)。如果項(xiàng)目里有多個(gè) .cpp 都定義了帶有動(dòng)態(tài)初始化的靜態(tài)成員并且它們之間存在依賴不要指望鏈接順序救你標(biāo)準(zhǔn)層面就不可靠。3.3 類模板里的靜態(tài)成員延遲實(shí)例化的特殊場(chǎng)景類模板的靜態(tài)成員還有一處容易被忽略多數(shù)情況下模板靜態(tài)成員的定義是在頭文件里實(shí)例化發(fā)生在第一次使用某個(gè)具體模板參數(shù)時(shí)。也就是說它可能不是在程序啟動(dòng)階段初始化的而是在運(yùn)行中某個(gè)線程第一次觸發(fā)實(shí)例化時(shí)才進(jìn)行動(dòng)態(tài)初始化。如果你在頭文件里寫了這樣的東西template typename T struct Registry { static std::mapT, int table; }; template typename T std::mapT, int RegistryT::table;那么Registryint::table這個(gè)對(duì)象到底在哪個(gè)線程第一次被實(shí)例化取決于哪段代碼先被調(diào)用。多個(gè)線程同時(shí)首次觸碰不同實(shí)例時(shí)編譯器需要保證靜態(tài)成員初始化線程安全但實(shí)現(xiàn)細(xì)節(jié)可能比局部靜態(tài)更微妙。我的建議是別讓模板靜態(tài)成員承載非平凡的動(dòng)態(tài)初始化需要時(shí)就放在一個(gè)函數(shù)局部靜態(tài)對(duì)象后面讓那個(gè)標(biāo)準(zhǔn)保證的守衛(wèi)機(jī)制來(lái)兜底template typename T struct Registry { static std::mapT, int table() { static std::mapT, int table; return table; } };這樣得到的仍然是你想要的進(jìn)程級(jí)唯一實(shí)例但初始化時(shí)機(jī)由函數(shù)局部靜態(tài)統(tǒng)一接管行為更可控。4. 鎖、原子變量、線程局部存儲(chǔ)——三類做法怎么選4.1 互斥鎖最簡(jiǎn)單也最容易被用錯(cuò)的方案如果共享靜態(tài)成員是一段需要保持多個(gè)字段一致的復(fù)雜數(shù)據(jù)直接用互斥鎖是最穩(wěn)的方案。原則很樸素凡是可能發(fā)生讀寫的入口全部經(jīng)過同一個(gè)鎖。寫要鎖讀也要鎖。很多人只給寫加鎖讀不加鎖認(rèn)為“讀一下問題不大”實(shí)際上讀線程和寫線程之間沒有任何同步關(guān)系讀線程完全可能讀到寫了一半的數(shù)據(jù)這依然是數(shù)據(jù)競(jìng)爭(zhēng)。一個(gè)常見的類是這樣class Metrics { public: static void Add(long v) { std::lock_guardstd::mutex lock(mu_); total_ v; count_ 1; } static long Snapshot() { std::lock_guardstd::mutex lock(mu_); return total_ / count_; } private: static std::mutex mu_; static long total_; static int count_; }; std::mutex Metrics::mu_; long Metrics::total_ 0; int Metrics::count_ 0;這里Add和Snapshot都走mu_保證讀的時(shí)候看到的是完整快照。優(yōu)點(diǎn)是簡(jiǎn)單正確容易給不熟悉內(nèi)存模型的同事看懂缺點(diǎn)是每次調(diào)用都要經(jīng)過鎖如果這是熱點(diǎn)路徑可能成為性能瓶頸。補(bǔ)充一個(gè)工程經(jīng)驗(yàn)鎖的粒度要盡量小。把鎖放在單個(gè)函數(shù)內(nèi)部只保護(hù)真正共享的字段操作不要在外部“幫別人加鎖”。例如有些人喜歡讓調(diào)用方自己 lock這個(gè)約定很容易被后來(lái)的人漏掉代碼腐化速度極快。不如把共享字段設(shè)為私有只暴露已經(jīng)加好鎖的靜態(tài)方法。4.2 原子變量讓簡(jiǎn)單的計(jì)數(shù)和標(biāo)志位不再需要鎖如果共享靜態(tài)成員只是一個(gè)計(jì)數(shù)器、一個(gè)標(biāo)志位或一個(gè)可以單獨(dú)讀寫的數(shù)值優(yōu)先用std::atomic。它用底層的原子指令把讀改寫打包成一個(gè)不可分割的操作從語(yǔ)言層面規(guī)定了對(duì)該變量的并發(fā)訪問是良定義的不需要再額外加鎖。例如剛才的累計(jì)計(jì)數(shù)可以寫成這樣class Metrics { public: static void Add(long v) { total_.fetch_add(v, std::memory_order_relaxed); } static long Get() { return total_.load(std::memory_order_relaxed); } private: static std::atomiclong total_; }; std::atomiclong Metrics::total_{0};fetch_add是原子操作不會(huì)出現(xiàn)兩個(gè)線程同時(shí)讀到舊值的情況最終結(jié)果必然等于所有線程成功執(zhí)行的累加之合。代碼里用了 relaxed 內(nèi)存序很多教材會(huì)告訴你這是性能最高的寫法但請(qǐng)一定確認(rèn)你真的不需要跨線程順序約束。如果你只關(guān)心“總數(shù)是多少”不在乎它和其他事件的先后關(guān)系relaxed 沒問題如果某個(gè)線程要先更新完一批數(shù)據(jù)再讓另一個(gè)線程通過這個(gè)原子變量看到“數(shù)據(jù)已經(jīng)準(zhǔn)備好了”那么需要 release/acquire 或更強(qiáng)的 seq_cst。新手階段統(tǒng)一用默認(rèn)的 seq_cst正確性優(yōu)先性能瓶頸出現(xiàn)后再回頭摳這些細(xì)節(jié)。還有一個(gè)坑std::atomic并不等于“把一個(gè)結(jié)構(gòu)體塞進(jìn)去就完事”。只有那些在目標(biāo)平臺(tái)上有原子指令支持的寬度才免鎖超過機(jī)器字長(zhǎng)的結(jié)構(gòu)體std::atomic內(nèi)部會(huì)退化到鎖而且不同平臺(tái)的鎖實(shí)現(xiàn)不可見。這種場(chǎng)景直接用專門的互斥鎖反而更清楚。4.3 線程局部存儲(chǔ)能不分就不分并不是所有共享數(shù)據(jù)都必須被所有線程共享。如果每個(gè)線程都只需要自己的那份副本事后各自統(tǒng)計(jì)或合并那最干凈的做法是用thread_local靜態(tài)成員。語(yǔ)法上就是static thread_local或者類外定義class Worker { public: static void AppendLog(const std::string s) { log_buffer_ s; } private: static thread_local std::string log_buffer_; }; thread_local std::string Worker::log_buffer_;初看可能覺得奇怪它和static不矛盾嗎一點(diǎn)都不矛盾。thread_local決定的是線程維度每個(gè)線程都有一份獨(dú)立拷貝static決定的是生命周期這份拷貝不對(duì)應(yīng)任何對(duì)象實(shí)例只對(duì)應(yīng)線程和類名。也就是說不同線程修改的都是自己的log_buffer_彼此天然隔離不需要鎖?,F(xiàn)實(shí)項(xiàng)目里線程局部存儲(chǔ)非常適合日志緩沖、臨時(shí)緩存、線程池上的會(huì)話數(shù)據(jù)處理這類場(chǎng)景。不過有兩個(gè)注意點(diǎn)。第一線程退出時(shí)thread_local 對(duì)象會(huì)析構(gòu)不要在析構(gòu)函數(shù)里依賴另一個(gè)線程的 thread_local 數(shù)據(jù)。第二線程池中的線程任務(wù)邊界不明顯線程局部緩存在任務(wù)結(jié)束后如果不清理容易把上一個(gè)任務(wù)的數(shù)據(jù)帶到下一個(gè)任務(wù)里必須在任務(wù)入口或出口顯式重置。4.4 選型的底層原則總結(jié)一下常見場(chǎng)景下我一般按這個(gè)表選型場(chǎng)景推薦方案原因復(fù)雜對(duì)象多個(gè)字段需要保持一致mutex / scoped_lock鎖定一段邏輯操作整體狀態(tài)計(jì)數(shù)器、標(biāo)志、單一數(shù)值std::atomic免鎖吞吐高語(yǔ)義清晰讀多寫少的高頻查詢std::shared_mutex多讀者并發(fā)寫者互斥每個(gè)線程獨(dú)立處理數(shù)據(jù)static thread_local物理上不再共享免同步初始化后不再修改constexpr / 只讀不可變靜態(tài)成員沒有寫操作天然安全選型之外還有一條更底層的心法能減少共享就不要增加鎖。鎖不是免費(fèi)的就算無(wú)鎖的原子變量也會(huì)增加指令數(shù)和緩存一致性壓力。如果一段數(shù)據(jù)其實(shí)沒必要被所有線程共享優(yōu)先通過任務(wù)拆分、線程私有副本或不可變數(shù)據(jù)把它變成“不需要同步”的結(jié)構(gòu)這比任何同步原語(yǔ)都高效。我自己在評(píng)審代碼時(shí)看到有人往共享靜態(tài)成員上加鎖第一反應(yīng)不是夸他會(huì)加鎖而是先問這一步真的需要共享嗎5. 單例模式的經(jīng)典重災(zāi)區(qū)雙重檢查鎖與安全的單例實(shí)現(xiàn)5.1 為什么靜態(tài)成員變量是單例的最常見載體靜態(tài)成員變量最常見的用途之一就是單例。單例的本質(zhì)是進(jìn)程內(nèi)只有一個(gè)實(shí)例這個(gè)事實(shí)和靜態(tài)存儲(chǔ)區(qū)天然契合用靜態(tài)成員指針或引用持有那個(gè)唯一的對(duì)象是幾乎所有實(shí)現(xiàn)的第一步。也正因?yàn)槿绱藛卫龑?shí)現(xiàn)里線程安全的坑特別密集。尤其是“雙重檢查鎖”它幾乎是 C 社區(qū)反復(fù)踩了十幾年的經(jīng)典雷區(qū)。我先解釋它為什么吸引人再解釋它為什么沒那么好用。5.2 看看這段“老江湖”代碼為什么錯(cuò)雙重檢查鎖的出發(fā)點(diǎn)是單例創(chuàng)建一次之后每次讀取都是熱點(diǎn)路徑如果每次都加鎖開銷太大能不能先無(wú)鎖判斷指針是否為空為空才加鎖創(chuàng)建于是出現(xiàn)類似下面的代碼static Singleton* inst nullptr; static std::mutex mu; Singleton* GetInstance() { if (inst nullptr) { // 第一次無(wú)鎖讀 std::lock_guardstd::mutex lock(mu); if (inst nullptr) { // 第二次判斷 inst new Singleton(); // 創(chuàng)建 } } return inst; }問題在于inst的第一次無(wú)鎖讀和另一個(gè)線程里的new Singleton()之間沒有任何同步關(guān)系。new 表達(dá)式本來(lái)就是三步分配內(nèi)存、在內(nèi)存上構(gòu)造對(duì)象、把地址寫入inst。編譯器或 CPU 可能把“寫入 inst”提前到構(gòu)造完成之前也可能把它推遲線程 B 在第 1 行看到inst不為空時(shí)線程 A 可能還沒完成構(gòu)造。于是 B 返回了一個(gè)半成品指針調(diào)用成員函數(shù)時(shí)讀取的是未初始化的字段。在某些編譯器上它可能“看起來(lái)能用”但跨平臺(tái)、跨優(yōu)化等級(jí)之后就會(huì)在運(yùn)行期炸掉。而如果第 1 行看到的inst仍為空多個(gè)線程會(huì)依次進(jìn)入并重復(fù)創(chuàng)建對(duì)象單例退化成多例內(nèi)存泄漏都算輕的。很多人覺得加 volatile 就能解決。volatile 不能提供原子性和內(nèi)存順序前面說過這里同樣不成立。甚至static volatile Singleton* inst;也不能保證構(gòu)造完成的 happens-before它只是讓編譯器不緩存這個(gè)指針變量而已。真正的解法要么讓標(biāo)準(zhǔn)機(jī)制直接保證初始化要么使用原子量配合 memory_order。5.3 三套可靠實(shí)現(xiàn)函數(shù)局部靜態(tài)、call_once、只讀單例最省事的寫法C11 以后的函數(shù)局部靜態(tài)變量已經(jīng)幫你把初始化競(jìng)態(tài)解決了class Singleton { public: static Singleton Get() { static Singleton instance; return instance; } private: Singleton() default; Singleton(const Singleton) delete; Singleton operator(const Singleton) delete; };多線程第一次調(diào)用Get()時(shí)初始化由編譯器生成的 guard 保證只執(zhí)行一次后續(xù)訪問無(wú)鎖。這個(gè)模式因?yàn)楹?jiǎn)潔到幾乎不可能寫錯(cuò)強(qiáng)烈優(yōu)先推薦。唯一限制單例對(duì)象的構(gòu)造函數(shù)不能依賴另一處同樣需要復(fù)雜初始化的全局狀態(tài)否則你不過是從線程安全問題換到了初始化順序問題。如果需要給單例傳參數(shù)或者初始化邏輯比較復(fù)雜可以用std::call_onceclass Singleton { public: static Singleton Get(int input 0) { std::call_once(once_, [] { inst_ new Singleton(input); }); return *inst_; } private: explicit Singleton(int v) { /* ... */ } static std::once_flag once_; static Singleton* inst_; }; std::once_flag Singleton::once_; Singleton* Singleton::inst_ nullptr;call_once的承諾是即使多個(gè)線程同時(shí)調(diào)用初始化回調(diào)也只會(huì)執(zhí)行一次其他線程會(huì)阻塞等待這次回調(diào)完成。注意回調(diào)里不能提前返回once_flag 一旦執(zhí)行成功后續(xù)所有線程看到的都是已初始化的狀態(tài)。如果你非要在回調(diào)里拋異常異常會(huì)傳播給當(dāng)前線程once_flag 會(huì)重置下一次調(diào)用會(huì)重試這是標(biāo)準(zhǔn)行為寫代碼時(shí)要考慮清楚。還有一類更極端的場(chǎng)景單例對(duì)象沒有任何可變狀態(tài)或者所有字段都是編譯期常量。這種時(shí)候直接用constexpr靜態(tài)成員或函數(shù)內(nèi)static constexpr對(duì)象就行沒有運(yùn)行時(shí)初始化也就不存在初始化競(jìng)態(tài)。很多人一聽到單例就條件反射寫鎖實(shí)際上一個(gè)全 constexpr 的消息格式描述符完全不需要任何同步設(shè)施。5.4 關(guān)于析構(gòu)順序的提醒函數(shù)局部靜態(tài)對(duì)象在程序退出時(shí)會(huì)自動(dòng)析構(gòu)析構(gòu)順序與構(gòu)造順序相反。如果單例在析構(gòu)時(shí)還依賴另一個(gè)局部靜態(tài)對(duì)象而對(duì)方已經(jīng)析構(gòu)就可能踩到空指針或未初始化數(shù)據(jù)。我的建議是單例析構(gòu)函數(shù)保持簡(jiǎn)單不要訪問其他可能先析構(gòu)的全局狀態(tài)如果主線程之外還有工作線程在運(yùn)行必須在 main 里先 join 所有線程再退出而不是讓進(jìn)程在還有線程運(yùn)行時(shí)走到靜態(tài)析構(gòu)階段。還有一類懲罰是我見過不少團(tuán)隊(duì)踩過的為了嚴(yán)格“禁止拷貝”把單例基類寫成宏或者一大堆代碼反倒是構(gòu)造函數(shù)忘記私有化了。其實(shí) C11 之后delete 拷貝構(gòu)造和賦值就夠了Singleton(const Singleton) delete; Singleton operator(const Singleton) delete;別為這種小事發(fā)明新框架。6. 跑一遍才踏實(shí)ThreadSanitizer 實(shí)測(cè)與排查心得6.1 一個(gè)能穩(wěn)定暴露競(jìng)態(tài)的測(cè)試用例理論講再多不如讓工具在眼前把競(jìng)態(tài)抓出來(lái)。我常用的做法是先寫一個(gè)很小的復(fù)現(xiàn)程序規(guī)模不大但循環(huán)次數(shù)足夠多保證競(jìng)爭(zhēng)窗口能被撞上。比如前面那個(gè)計(jì)數(shù)器例子的完整版#include thread #include iostream struct Stats { static long counter; }; long Stats::counter 0; int main() { std::thread threads[8]; for (int i 0; i 8; i) { threads[i] std::thread([] { for (int j 0; j 1000000; j) { Stats::counter; } }); } for (auto t : threads) t.join(); std::cout Stats::counter \n; return 0; }按正常邏輯輸出應(yīng)該是 8000000直接編譯運(yùn)行你大概率會(huì)得到一個(gè)更小的數(shù)甚至偶爾看起來(lái)像 8000000因?yàn)楦?jìng)爭(zhēng)窗口不是每次循環(huán)都能命中。所以靠數(shù)值猜“是不是競(jìng)態(tài)”很不靠譜數(shù)值對(duì)也不能證明線程安全。想要穩(wěn)定暴露問題得用專門工具。6.2 編譯并運(yùn)行 TSan看它怎樣報(bào)告ThreadSanitizer簡(jiǎn)稱 TSan是 GCC 和 Clang 都內(nèi)置的競(jìng)態(tài)檢測(cè)工具思路是在編譯時(shí)做插樁運(yùn)行時(shí)記錄每次內(nèi)存訪問再判斷是否存在兩個(gè)線程對(duì)同一地址的無(wú)同步訪問。編譯命令很簡(jiǎn)單g -stdc17 -fsanitizethread -g -O1 -pthread race.cpp -o race_tsan注意這里務(wù)必加上-g否則報(bào)告里的棧信息沒有行號(hào)-O1是 TSan 官方推薦的優(yōu)化等級(jí)既能暴露多數(shù)問題又不會(huì)像-O0那樣把代碼拍得太平。跑起來(lái)之后如果存在數(shù)據(jù)競(jìng)爭(zhēng)程序會(huì)在控制臺(tái)打出類似這樣的信息WARNING: ThreadSanitizer: data race Read of size 8 at 0x... by thread T2 #0 main::$_0::operator() ... Previous write of size 8 at 0x... by thread T1 #1 main::$_0::operator() ... Location is global Stats::counter它會(huì)準(zhǔn)確標(biāo)出參與競(jìng)態(tài)的兩個(gè)訪問、各自的線程棧以及出問題的變量名Stats::counter??吹竭@份報(bào)告已經(jīng)不需要我們?cè)偃シ瓍R編猜“會(huì)不會(huì)真是這里”。修復(fù)之后再編譯運(yùn)行直到 TSan 零告警我才敢說這個(gè)復(fù)現(xiàn)用例的事情結(jié)束了。TSan 在使用上有兩個(gè)小坑值得提前說。一是它和 ASanAddressSanitizer不能混用加了-fsanitizeaddress再同時(shí)開sanitizethread行為不可預(yù)期可能直接鏈接失敗。二是 TSan 對(duì)運(yùn)行時(shí)環(huán)境有額外要求在部分老內(nèi)核或容器里需要額外配置如果直接跑報(bào)“FATAL: ThreadSanitizer: unexpected memory mapping”通常和環(huán)境不支持有關(guān)換個(gè)常規(guī)環(huán)境或者更新工具鏈一般就能解決。這屬于檢測(cè)工具本身的環(huán)境問題不要因?yàn)樗鼒?bào)錯(cuò)就懷疑自己的代碼。6.3 真實(shí)項(xiàng)目里的排查思路和預(yù)防措施真實(shí)項(xiàng)目里的靜態(tài)成員變量不會(huì)像復(fù)現(xiàn)程序這么干凈。我的排查習(xí)慣是先把所有帶 static 且可寫的成員列出來(lái)按“是否在多于一個(gè)線程里出現(xiàn)”分類只讀的定義為安全寫者只有啟動(dòng)階段的可以重點(diǎn)檢查初始化順序運(yùn)行期有多個(gè)寫者的直接進(jìn)觀察名單。第二步找出所有訪問入口看看讀和寫是否有共同的同步對(duì)象。讀加鎖、寫加鎖但用的是兩把不同的鎖等于沒鎖。第三步上 TSan 跑一輪覆蓋主要業(yè)務(wù)路徑的壓測(cè)通常十分鐘就能抓到第一塊視野盲區(qū)。修復(fù)時(shí)也要小心修復(fù)動(dòng)作本身引入新問題。很多人第一反應(yīng)是在每個(gè)方法入口加鎖但忘了靜態(tài)成員變量可能被外部通過返回值獲得引用然后繞過方法直接改。正確做法是讓靜態(tài)成員盡可能私有對(duì)外只暴露加好鎖的靜態(tài)方法如果實(shí)在需要返回引用必須返回一個(gè)同樣受鎖保護(hù)的代理或者直接返回副本。我現(xiàn)在設(shè)計(jì)任何類時(shí)遇到靜態(tài)成員變量的第一個(gè)問題都是這個(gè)變量是只讀的嗎如果不是只讀下一個(gè)問題就是什么時(shí)候?qū)懩男┚€程讀用什么同步如果回答不上來(lái)我就不讓它作為裸的靜態(tài)成員存在。寧可多寫一層函數(shù)局部靜態(tài)的間接層把初始化和訪問都收口到一個(gè)地方。見過太多因?yàn)殪o態(tài)成員線程安全翻車的案例之后我的體會(huì)是數(shù)據(jù)競(jìng)爭(zhēng)很少是“運(yùn)氣不好”它是共享、可變、缺少同步三個(gè)條件同時(shí)成立的必然結(jié)果。把這三者拆掉任何一個(gè)問題就能從根上消失。診斷時(shí)可以靠工具防御時(shí)還是得靠設(shè)計(jì)習(xí)慣。希望你下次看到static關(guān)鍵字時(shí)能多停留兩秒。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日韩另类在线观看| 第四色五月婷婷| 开心激情网五月| 操日视频| www狠狠com| 色婷婷视频| 开心婷婷五月| 午夜丁香五月天综合| 中文字幕视频在线播放| 黄色aa观看aaguochan| 六月婷久久| 亚洲精品字幕在线观看 | 五月综合视频| 性一交一乱一交A片久久四色| 国语精品探花| 色久五月| 婷婷六月爽| 欧美色图天堂网色| www.com.色色| 冬月かえでAV无码播放| 七七色综合| 日本丁香五月| 超碰人人超碰| www五月| 久婷婷五月丁香在线观看| 67194中文在线| 99久久6| 国产五月天欧美色| 婷婷免费无视频| 久久xxxx| 五月丁香婷婷久久| 久久久ww| 91婷婷色| 超碰97干| 久久免费丁香| 光棍影院日韩精品| 九月大香蕉| 内射爽无广熟女亚洲| 久9视频免费播放| 色 五月婷婷基地| 91狠狠综合久久久久久| 久热欧美| 在线看片av| 啪啪啪丁香五月| 色五月激情五月丁香五月婷婷啪啪综合| 日韩精品无码AV| 色情综合网| 婷婷丁香五月综合| 亚洲天天操| 色色国产| 久久99精品九九久久久婷婷| 欧美性爱五月天| 欧美α√| 色五月AV| 色色五月婷婷久久| 五月丁香久久网| 久久性爱视频网站| 九月综合| 久久97| 9l视频自拍9l视频自拍九色学生| 91操在线视频| 99在线观看精品视频| www九九| www.久热| 亚洲永久四色| 五月天丁香| 五月婷婷婷婷| 最近中文字幕2019视频1| 99久久极情精品一区| 91偷拍视频| 99无码精品| 99热在线观看精品| 97人人操人人爽| 婷婷九九| 大香蕉啪啪啪| 韩国不卡AC视频| 超碰在线50| 天插天啪天啪天啪| 婷婷六月情| 色色色成人网| 五月久久婷婷| 欧美 日韩 人妻 高清 中文| 99五丁香月| 毛片九九九九九九九九18| 大香蕉久久视频久久视频| 丁香五月激情图片婷婷| 538任你爽视频不一样的| 99久热精品在线| 亚洲在线成人| 欧美色狠婷久| 亚洲欧美999| 天天噜噜| 亚洲激情另类| 久久综合55| 五月丁香综合影院| 99色最新在线视频| 九九99精品视频在线观看| www.国产色| 五月天丁香综合| 五月丁香综合| 欧美久人人| 色吊丝永久访问网址| 亚洲精品网址| 欧美日韩中国| 热热久久精品视频| 99热这里只有精品首页| 色色99| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 九月婷婷激情| 国产亚洲精品久久久久久郑州| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 丁香六月婷| 99热在线观看免费中文| 四色AVwww| 91人操| 97干在线| 久久精品99久久| 久久九九视频网站| 操操自拍| 五月丁香色色色| 9l视频自拍9l九色9l成人| 婷婷伊人| 色综合久久88色综合天天99| 久久色情| www.91婷婷| 综合五月丁香久久| 超碰色综合| 九九热99免费视频| 五月停停直播| 欧美精品999| 丁香婷婷五月激情四射网| 99成人网一区| 亚洲视频五区| 五月天婷婷丁香花| 婷婷成人五月天成人文学| 91久久久久久| 99在线精品视频观看免费下载| 高清无码网址| 婷婷中文字幕网| 婷婷五月婷婷五月| 成人无码髙潮喷水A片| 婷婷亚洲影院| 五月花激情| 中文字幕在线aⅴ免费观看| 成人五月天丁香| 激情小说视频图片网| 99在线精品观看99| 五月香蕉综合| www九九热| 婷婷射综合| 人人爽欧美婷婷久久久五月丁香| 日本色色色色色色色色一色二色| 五月丁香激情综合网官网| 91avse| 成人资源在线| 丁香五月情| 国产免费一区二区三州老师F1……| 99热综合在线| 丁香五月av| 91精品无码| 婷婷 色 丁香 夜| 香蕉影院色| 九九热再线九九视频免费在线观看 | 色丁香五月婷婷| 99这里有精品视频| 丁香五月婷婷Av| 五月婷婷综合久久| 亚洲婷婷五月| 老司机伊人| 国产免费一区二区三区三州老师F1F1.CC | 婷婷5月久久综合网站| 色婷婷狠狠干| 激情五月天婷婷播播久久综合91| 99热亚洲精品66| 大香蕉久久综合网| 中文AV网站| www.一起草av| 九九色婷婷| 丁香激情网| 99久久99九九九99九他书对| 九九色色| AV在线不卡播放| 人人色AV| 色蜜婷婷| 色丁香五月婷婷| 狠色狠色狠狠色综合网| 色五月丁香91| 中文字幕激情综合| 99久久a线观| 九九亚洲| 六月丁香VA| 人妻在线网站| 激情六月天| 欧美成人无码一区二区三区| 九月婷婷综合色干| 婷婷丁香花五月天| 天天摸夜夜爽天天做| 九色在线五月婷婷网址| 亚洲网站999| 看婷婷五月天网| 婷婷色网| 天天做天天爱天天爽综合网| 2015好吊操| 国产小精品| 丁香五月婷婷色播艳门照| 久久五月天免费网站| w婷婷五月婷婷w| 色墦五月丁香| 39视频第二区| 狠狠狠狠狠| 日日夜夜爽爽| 大香蕉AV在线| 伊人热婷婷| 六月丁香五月天| 丁香六月天色婷婷| 99热青青草| 精品婷婷| 激情综合另类| 五月激情综合网| 欧美日韩AAA| 九九这里是免费的视频5| 99热免费| AV成人在线播放| 99在线观看视频精品| 婷婷五月丁香亚洲| 丁香六月综合| 婷婷综合激情| 亚洲综合干| 久久丁香九| www夜夜| 色婷婷综合网站| 色婷婷亚洲| 丰满人妻妇伦又伦精品国产 | 色情综合网| 狠狠爱成人综合网| 五月丁香六月婷| 五月天婷综合| 丁香五月六月婷婷殴美综合| 五月丁香六月婷婷不卡免费无码| 色9999日韩国产| 五月丁香婷婷欧美色图视频五月丁香777电影 | 婷婷色五月天综合网| 91pornav在线| 就爱日五月天| 国产99久久久国产精品免费看| 亚洲综合另类| 久久激情网| 人人草成人视频| 精品自拍99| 五月天婷婷AV| 五月天 另类图片| 99视频久久| 大香蕉220| 999婷婷综合| 9国产在线视频| 夜夜躁婷婷AV| 久草热视频在线观看| 入口五月婷婷六月香| 丁香婷婷婷婷十二月在线观看视频| 国产成人99久久亚洲综合精品| 草做免费在线观看| 激情亚洲五月| 五月丁香激情综合啪| 日本 色综合| 天天操夜夜操| 天天综合在线网| www五月天激情com| 激情五月亚洲综合网| 9福利性视频欧美| 五月J香蕉婷婷| 丁香六月综合激情| 色婷婷中文在线| 日日操,夜夜爽| 激情欧美婷婷| 久九色| 亚洲成片在线观看| 亚洲欧美国产A片免费观看| 99热综合| 色婷婷久久| 丁香五月中文字幕| 美女激情综合| 色综合久久44| 五月香婷婷| 天天爽夜夜爽天天爽夜夜爽| 五月丁香色狠狠干大屄| 99只有这里是精品| 99综合99| 亚洲小说欧美激情| 噜噜噜精品欧美成人在线观看| 色五月婷色彩免播放器| 男人的天堂999| 激情综合色图| 91人操| 五月色亚洲| txt五月激情四射网综合俺也来了| 日韩免费视频| A片试看50分钟做受视频| 99久久综合网| 中国女人做爰A片| 丁香六月婷婷综合| 大学生高潮无套内谢视频| 99热手机在线精品| 五月天久久久| 国产毛片精品一区二区色欲黄A片| 337p大胆噜噜噜噜噜91Av| 久久久久久久久99精品| 亚洲综合在线视频| 人妻22p| 成人丁香| 69精品人人人人| 99色综合| 亚洲亚洲人成综合网络| 欧美久久久中文字幕| 怎么样可以看免费的一级av| 久久综合站| 性色九九| 久久hd| 91干在线| ss五月天激情| 婷婷六月伊人| 99久超碰| 丁香六月婷婷综合| 丁香五月天AV在线| 婷婷五月六月| 第四色激情网| 婷婷五月天亚洲激情戏精品| 日本色狠狠| 亚洲色夜| 婷婷五月天色色| 在线观看免费视频| www,99色| 一区二区三区视频| 日日操,夜夜爽| 直接看的av| 99九九视频| AV电影在线播放| 欧美大肥婆大肥BBBBB| 久久婷婷综合五月| www.色9| 丁香色五月婷婷17C| 五月天另类综合网| 日日夜夜狠狠| 欧美美女视频| 欧美性交一区二区三区| 六月99天天婷婷激情综合| hd五月婷婷在线| 日日.c| 久久9久| 激情五月综合网| 99久99久| 伊人影音无码一区二区三区| 久久色这里只有精品| 99色在线观看视频| 免费观看全黄做爰的视频| 99啪在线视频| 蜜臀A∨在线水帘洞| 五月丁香欧美| 五月天激情图片| 欧美色片中文字幕久久久久| 99九九综合久久九九| 免费AV黄在线播放| 丁香六月婷婷| 国外亚洲成AV人片在线观看| 射琪琪| A√天堂网在线| 综合五月网| 九热视频| 五月丁香婷婷啪啪网| 深爱丁香网| 婷婷五月丁香在线视频| 性无码专区无码| 99热在线观看99| 99开心五月五月丁香激情| 五月综合婷婷五月| 91蝌蚪窝视频在线| 天堂婷婷丁香六月网| 五月天婷婷色小说| 久久激情视频| 婷婷在线视频| 97人人干| 久久久91| 操操人人| AV色婷婷| 操九色| 五月丁香狠狠爱婷婷综合| 日韩黄黄| 国产精品美女久久久久AV超清| 大香蕉中文| 开心色播色五月婷婷| 丁香婷婷基地| 五月丁欧美| 五月天丁香成人| 色婷婷播放| 婷婷五月免费在线| 中文字幕有多少字| 五月色婷婷在线观看| av在线观看网站| 9 9 9色色| 欧美成人网99网| www.99.色| 欧美亚洲999| 久久丁香五月天| 色五月色图| 精品99在线观看| 97人人操人人操人人操人人| 激情五月天激情五月天| 97干在线观看| 婷婷伊人久久| 69精品人人人人| 超碰九九热| 大胆伊人久久| 久操综合| 丁香九月综合| 精国产品一区二区三区A片| 天天AV导航网| 操逼五月婷婷| 婷婷婷婷色| 美女91一起草| 亚洲av免费在线| 99在线观看精品| 思思99久久| 精品成人在线观看| 97精品综合久久| 超黄亚洲瑟瑟网站| 久久99人人| 99精品22| 人人操人人爽成人AV| 丁香五月综合激情性爱| 人妻中文在线| 夜夜操狠狠操| 激情五月丁香综合网站| 超碰97免费在线| 六月婷婷av| 丁香五月网站| 91久女| 色在线视频网2025| 色五月综合激情| 婷婷五月天成人网| 五月天婷婷影院影院观看| 激情伊人网| 美日韩成人| site:picc-up.com| 极品五月天| 久久激情五月天| 激情五月伊人婷婷| 色婷婷另类| 五月天婷婷网站888| 第四色婷婷日本| 另类在线| 亚洲色五月天| 99极品视频| 超碰激情五月| 久久这里都是精品| 色婷婷综合网站| 国产熟女大叫受不了| 人人草人人爱| 久久开心五月天激情| 久久久ww| 日本美女97在线视频| 人人摸人人澡人人| 天干干夜夜操| 日本一毛片| 五月天激情婷婷| 综合色色色色色色| 久热这里只有精品3| 91干婷婷| 久久一热| 亚洲天天综合| 这里只精品| 婷婷五月丁香激情图片| 99久久婷婷| 丁香激情综合| 99久久a线观| www.com任你艹| 99热这里是精品| se影音资源在线观看| 99 热| 九九久久精品國產| 白人荫道BBWBBB大荫道| 欧洲毛片基地c区| 婷婷五月天在婷| 色吧五月| 丁香五月婷婷偷拍| 5Www色5夜| 久久九九热视频| 丁香六月激情国产| 色情一区二区播放| 婷婷综合另类小说| 久久婷婷91| 婷婷五月五月丁香| 国产FREESEXVIDEOS性中国| 人人操人人干AV| 插插五月天| 色很很96| 三级三久久线久久99久目本WW| 日韩AV在线电影| 激情六月天| 亚洲无码另类| 久草a片| 久久人妻视步| 午夜电影网VA内射| 婷婷激情五月天在线视频| 丁香婷婷色| 性色综合网| 激情五月婷婷视频| 国产69久久久欧美黑人A片| 婷婷五月激情网| 99精品无码| 99成人小视频| 影音先锋人妻出差| 丁香久久五月天视频在线观看| 99色视频| 婷婷综合欧美| 色婷婷丁香网| 五月天国产成人| 亚洲综合视频在线| 日韩狠狠色| 先锋资源婷婷| 日韩黄色网络| 国产97色在线| 婷婷的99视频网站| 六月婷婷激情图片| 五月丁香色色| 成人在线精品| 色婷婷www| 俺去也综合| 丁香五月天网友自拍啪啪啪视频| 久99久热只有精品国产99| 精品无码色| 激情小说婷婷小说| 亚洲精品乱码久久久久久按摩观| 无码一级片| 色综合综合综合| 九九成人| 夜精品无码A片一区二区蜜桃 | 五月天丁香成人社| 老妇操B| 大香伊人婷婷影院| 激情骚五月| 婷婷色综合网日韩国产| 中文字幕91,综合| 麻豆忘忧草午夜| seuuu婷婷| 五月婷婷啪啪啪啪| 久久99草五月婷婷| 五月久久| 丁香五月婷婷99| 国产亚洲成人综合| 中文在线成人| 九九热啪啪| 超碰色女| 五月天综合久久丁香91| 九九热视频99| 五月总合激情网| 五月婷六月综合在线观看| 狠狠干综合| 91操操| 精品夜夜澡人妻无码AV| 久久99热免费最新版| 色色色9| 996日日爱| www激情婷婷com| 亚洲精品永久久久久久| 久综合色| 日日夜夜干| 欧亚成人A片一区二区| 国外亚洲成AV人片在线观看| 91久女| 青青草原99热| 另类小说色婷婷| 91无码视频| 五月天另类小说| 99热超碰在线| 国模九区| 操逼视频一区| xx色综合| 五月天婷婷在线观看| 99色在线视频| 直接看的AV| 国产毛片欧美毛片久久久| AV中文网| 久久一伦| 丁香五月激情啪啪| 色噜噜在线| 国产激情婷婷| 爱射综合| 国产亚洲99久久精品熟女| 九热免费视频| 激情网第四色| www.9797国产| 疯狂做受XXXX高潮A片| 狠狠色噜噜狠狠狠777奇米| 婷婷五月中文字幕| 99成人网站| 人人爱人人摸人人澡| 亚韩在线视频| 五月天社区婷婷| 色九月欧美| 2020久久婷婷五月| 丁香五月婷婷亚洲色图| 超碰免费在线| 五月天丁香婷婷社区| 激情综合5| 99热在线观看免费| 色婷婷亚洲精品天天综| 曰本aaaaaa丈片| 五月婷婷六月丁香免费| 婷婷五月色播放| 五月激情天| 激情五月天第四色| 九月婷婷综合八月丁香在线观看| 五月丁香啪| 国产乱子轮XXX农村| 久久精品综合色| 五月 丁香 欧美| 五月婷婷丁香| 成人综合视频网址| 大香蕉婷婷| 色色色色网| 九九热精品视频在线观看| 人人干人人操外国| 亚洲A片成人无码久久精品青桔| 任你日热视频| 思思久久青草热| 婷香五月激情视频| 国产精品国产| 婷婷 月 丁香| 日韩成人无码| 玖热精品综合视频| 玖玖婷婷综合| 97碰碰人人视频| 激情婷婷丁香色情五月天| 人妻综合网| 国产性爱色| 狠狠干青青草| 五月丁香六月婷综合成人综合| 日本九九网| 婷婷五月精品中文字幕| 疯狂做受XXXX高潮A片动画| 女操碰| 亚洲成人人人操| 嫩草AV久久伊人妇女超级A| 黄网网站在线播放| 婷婷少妇激情| 99免费在线视频| 青草热视频这里只有精品| 99热这里只有精品在线观看| 9色在线视频| 荷兰av一级| WWW、日本色丁香、co m| 夜夜夜夜做天天天做无码视频| 久热这里只有精品6| 久99久精品| 五月天婷婷综合免费| 综合五月激情| 99热这里只有精品官网| 综合色图婷婷| 五月天成人手机在线视频| 99这里都是精品| 五月亭亭六月色| 久久久五月天| 91精品久久久久久| 一起草AV| 五月天激情播播网| 婷婷五月天av| 五月综合婷婷网| 免费看欧美成人A片无码| 只有精品在线观看| 99无码视频| 79亚洲精品少妇| 久久精品99| 91精品电影18T| 五月天激情小说网| 人人爱天天摸摸天天爱| 99久久国产宗和精品1上映| 密臀久久| 精品国产乱码久久久久久免费 | 久久久精品色| 色婷婷文字幕| 99色干| 日韩另类| 99自拍视频在线| 五月婷婷色男女| 婷婷色影音天| 美国色五月天婷婷资源站| 91九色在线观看免费| 日本va欧美va国产激情| 99九九在线精品热动漫| 丁香五月播播| 久久黄色免费视频| www五月婷婷| 99热6精品| 99riAv1国产在线观看| 色五月婷婷久久| 五月婷婷偷| 91性交在线播放| 六月合五月婷| 91成人视频| 噜噜在线| 天堂AV在线看| 日韩精品超碰在线观看| 99精品视频网| 婷婷伊人五月| 激情99| 超碰99在线| 噜噜色com| 成片免费播放| 亚洲成人av在线观看| 99热.com| 久久色五月天激情小说| 美日韩成人| 有码一区二区三区| 婷色五月| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 激情综合婷婷| 精品99只有。| 九九热黄色| 大香蕉久久伊人网| 激情网五月天| 五月丁香啪啪啪| 99精品视频在线| 91人妻人人操人人爽| 日曰躁夜夜躁2026| 激情五月六月婷婷| 天天干夜夜想| 5月婷婷性视频| 成人在线网| 欧美日韩精品一区二区三区钱| 丁香婷婷六月| 操九色| 丁香五月开心婷婷| 狠狠 婷婷| 六月丁香大香蕉| 特黄三级又爽又粗又大| 国产精品久久久久久久久久| 久久久com| www激情| 思思99热这里只有精品6| 婷婷91| 七七色色综合| 大香蕉婷婷婷| 极品人妻VIDEOSSS人妻| 婷婷午夜天| 另类视在线| 啪啪亚洲综合| 99久久成人| 激情综合5月| 97精品欧美91久久久久久久| 99久久亚洲国产| 九九九九九九热| 国产欧美日韩综合精品一区二区| 婷婷六月色| 亚洲综合另类| 欧美成人色婷婷| 五月婷婷激情69| VA国产在线综合网站| 五月丁香啪啪啪| 超碰93在线观看| 九月丁香欧美综合| 五月婷中文娱乐综合| 色欲色欲久久宗合网| 天天色粽合合合合合合合| 久久五月综合| 色天使色婷婷| 久久精品女人天堂AAA| 永久天堂日本| 人妻在线观看视频| 黄色av网站在线免费播放| 日韩无码AV电影网站| 午夜天堂一区人妻| 无码人妻丰满熟妇奶水区码| 天天爽夜夜操| 强壮的公次次弄得我高潮A片日本 | 五月天成人综合| 狠狠色噜噜狠狠狠狠综合| 久久香蕉网| 婷婷伊人网| 五月激情小说| 日本猛少妇色XXXXX猛叫| 五月丁香久久| 99色在线| 亚洲中文字幕AV在线| 超碰婷婷色| 精品九九九久| 99久久高清视频| 一区三区视频有限公司| 色噜噜五月天| 色婷视频| 天天日天天插天天操| 日本本土色网第一区| 婷婷5月色| 五月综亚洲| 天天操夜夜爽| 色五月播五月| 97操在线视频| 久久久久久人妻| 国产精品久久久久久久久久久久| www.97视频| www.婷婷激情网.com| 91亚洲免费片| 婷婷99中文字幕| 嫩草AV久久伊人妇女超级A| 国产色丁香| 99热这里有精品24| 激情五月婷婷丁香综合网| 这里只有精品视频免费在线观看| 婷婷激情六月综合| 99精品在线| 久久一级AV| 五月婷久草| 九九亚洲综合| 亚洲激情淫网| 99视频只有这里精品| 99狠狠| 久久婷婷亚洲| 人碰人人人玩91| 九草性爱| 五月天激情播播网| 思思热国产| 丁香六月激情| 八戒青柠影视剧在线观看| 91熟妇大香蕉| 丁香啪啪| 思思久热6| 99噜噜| 国产精产国品一二三在观看| 日韩成人影片在线观看| 久久综合中文| 五月丁香婷中文字幕| www.99热这里精品| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 2020久久婷婷五月| 一级黄色尤物综合视频手机在线观看| 久久精典| 婷婷情色开心五月天99| 丁香激情五月| 蜜乳A√| 性生活视频98791| 亚洲国产精品VA在线看黑人| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 天天插天天爽| 五月黄色婷婷| 日日夜夜狠狠婷婷色| 久久久久丁香婷婷五月天| 久久综合人妻| 色综啪啪啪啪啪啪| 国产99美少妇| 涩涩涩五月天| 色狠狠色噜噜AV天堂五区| 91互操| 五月婷婷久久网| 久婷五月| 97在线日本| 日本五月丁香| 91一起操| 色原狠狠综合| 欧美噜一噜| 思思精品视频| 五月天婷婷社区久久综合| 色婷婷五月天堂资源| 99综合视频| 色99无码| 99热99这里免费的精品| 亚洲久久激情| 日本黄色在线观看| 色婷婷丁香五月综合| 99综合视频一体| 五月婷婷色播| 婷婷五月天狠狠| 99视频| 淫荡家庭AV| www.99热在线观看| 丁香熟女乱| 伊人婷婷五月天av| 欧亚成人A片一区二区| 色六月婷婷| 九九婷婷网五月天| 激情综合网激情五月俺也去| 五月丁香六月婷婷精品| 99A级片| 天堂久久大香蕉| 色五狠狠| 九久久婷婷| 2020久久婷婷五月| 九久9精品| 无码激情| 97色热| 玖玖五月丁香| jiZZdr| 久久婷婷五月综合色和| 免费观看的AV| 国产精品美女久久久久AV超清| 99色精品视频| 五月婷婷,六月丁香| 99九九精品视频| 国产激情在线| 人人干女人| 五月天婷婷社区| 九月大香蕉| 99这里都是精品6| av婷婷丁香| 婷婷五月天另类网站| 中国女人做爰A片| 色狠狠六月| 中文字幕网伦射乱中文| 五月激情综合五月| 国产午夜成人免费看片无遮挡| 亚洲色情免费网| 五月综合激情| 亚洲天堂AAA| 色色欧美色色色| 婷婷丁香基地在线| 欧美日韩成人综合9| 思思热久久爱| 热久91| 青草五月天| 超碰在线超碰| 激情五月天视频| 538午夜激情| 99热网站| 丁香涩涩五月天| 九日日夜夜69| 丁香六月五月天| 99玖玖人人| 中文字幕综合| 天天爽在线视频| 五月激情在线| 婷婷五月天激情影片| 色婷婷av综合网| 日本五月天激情| 国产精典视频在线观看| 五月丁香黄色视频| 久久与婷婷| 7777国产盗摄农村女人| 丁香五月婷久久| 影视av久久久噜噜噜噜噜三级| 超碰99在线观看| 综合久色五月| 97婷婷五月丁香| www.婷婷| 狠狠色婷婷在线| 夜夜嗨一区二区三区直播内容 | 久久全色| 97碰碰视频在线观看| VA日本视频| 日韩一本操| 夜夜干夜夜操| 国产成人+综合亚洲+天堂| 国产人妻777人伦精品HD| 色色丁香激情五月| 久青操| 亚洲无码色| 亚洲99精品欧美一区| 久久色天堂| 亚洲精品久久久久久久久久吃药| 性天天中文网| 99激情在线| 国产真人做爰视频免费| 五月天婷婷在线观看| 嫩草视频在线观看| 电影91久久久| 久久玖玖综合| 日韩狠狠色婷婷| 丁香五月天社区婷婷| 99熟女| 丁香五月欧美色综合| 欧美天堂久久| 俺去也五月| 婷婷激情六月视频| 久久视频婷婷视频| 高清成人综合| 亚洲精品V天堂中文字幕| 丁香五月在线| 久久国产性爱A V| 在线91日韩| 婷婷大香蕉| 婷婷五月天国产| 成人五月天在线视频在线观看| 人人干人人操外国| av大香蕉| 五月婷婷深深爱| 五月丁香久久综合精品| www.97碰碰com| 婷婷丁香91综合| 九九AV| 九九精品网| 一区二区中文字幕| 九九偷拍网| 欧美性生交XXXXX无码小说| 任你爽精品免费视频6| 99人人操人人摸| 色就是色婷婷五月亚洲激情| 亚洲成人无码免费| 亚洲亚洲人成综合网络| 日本综合色色| 玖玖热视频| 日韩婷婷五月天| 中文字幕AV在线| 夫妻超碰在线| 色婷婷性爱网| 99热这里都是精品| 九月激情综合| 亚洲色情网站| 五月丁香色五月| 国产日产成人亚洲欧美国产VA| 98色丁香五月婷婷综合网| 激情玖玖sh| 99热精品免费| 99久超碰| www.五月.com| 婷婷五月天亚洲综合网| 天天舔夜夜操www com| 婷婷午夜丁香| 综合九九久久| 久婷婷久草| 午夜精品久久久久久久爽| 精品久久久人妻| 射区导航| www婷婷| 开心婷婷五月中文字幕组| 就爱啪啪婷婷| 蜜臀av无码久久久久久久久| 天天色天天射天天日| 六月大香蕉| 狠狠色婷婷丁香五月| 成人AV在线中文版| 亚洲国产精品VA在线看黑人| 99免费在线| VA色婷婷| 亚洲五月天婷婷| 播五月,色五月,开心五月播放器| 婷婷五月天在线综合| 26UUU精品一区二区Com| 狠狠另类视频| 久久久er热| 激情五月图| 色天天综合天天综合频道。 | 激情国产五月| 亚洲激情视频网| 热99精品视频在线观看| 超碰在线91| 99精品热| 狠狠色丁香五月婷巨| www99热| 日本三级大片| 婷婷丁香色五月亚洲| 色播丁香| 久久99这里只有精品| 99re最新地址视频| 久久久思思热| 色色影院aaaav| 99色看这里只有精品| 欧美日韩大黄| 天天天天天操| 五月丁香六月婷婷a v| er99免费视频在线| 午夜激情五月| 99热费观看| 看片视频在线免费日产在线看| 天天骑天天操| 大香蕉五月婷婷| 六月丁香久久| 激情婷婷五月亚洲| 天天肏天天插| 天天操天天日天天爽| 开心五月综合| 99爱视频在线观看这里只有精品| 亚洲操操操| 97色在线视频| 99精品在线| 伊人综合网站| av网站免费在线| 色综合av超碰| 色色五月天丁香| 亚洲网站在线鸭子av| 夜夜夜夜做天天天做无码视频| 国产精品色一哟哟| 五月天天爽| 影视av久久久噜噜噜噜噜三级| 色色色色五月天| 五月丁香影视| 人碰人人人玩91| 九月久久婷婷| 亚洲中文字幕av| 狠狠狠狠免费| 久久成人人妻| 久久92| 狠狠狠狠狠干| 91色性感五月婷婷丁香| 99热久97| 天天日天天舔天天摸| 婷婷五月天视频在线观看| 亚洲av骚货| 五月激情小说网| 黄色中文字目| 五月叮香啪| 色婷婷丁香网| 天天夜夜操| 黄色片区子| 中字幕视频在线永久在线观看免费| 久草婷妨| 色情五月丁香| 五月婷在线色视频| 狠狠色大香蕉| 亚洲成av人影院| 九九综合图片网| site:pzdcoin.com| 天天高潮夜夜爽| 五月色婷婷综合| 丁香五月瑟瑟| 欧美99热| ss视频xx91| 欧美日朝成人| 久久44| 色婷婷亚洲婷婷| 操一操插一插| 丁香五月性爱| 婷婷五月丁香色色| 九九av| 色五月婷婷在线观看| 丁香桃色网| av五月丁香| 天天看片日日夜夜| 丁香五月激情五月| 国产欧美性成人精品午夜| 日本WWW九九九| 五月婷婷插一插| 婷婷亚洲综合| 97在线天堂| 思思久ren热| 99热天堂| 黄色av网站在线免费播放| 九九精品视频免费在线| 丁香婷婷色情社区成人小说| 天天色粽合合合合合合合| 日韩xx在线| 26UUU亚洲欧美| 99ri精品| 九月av在线| 婷婷激情区| 五月天伊人网| 久久人五月| 婷婷五月天性| 人妻久久久久久| 日本3级片一区2区| 这里只有精品视频在线看| 日韩无码专区| 五月色婷婷影院| 久久婷婷五月天蜜桃| 610018岁成人视频| 九九蜜臀精品| AV在线观看网站| 人人看人人97| 五月天激情子轮| 免费视频WWW在线观看网站| 婷婷六月激情| 婷婷色综合| 久久婷五月影院| 五月激情久久综合| 精品久久99码| 精品成人在线观看| 五月天婷婷乱论小说| 婷婷五月天桃花网| 激情网 五月天| 丁香六月综合激情| 香蕉综合在线| 天天操中文字幕| 五月狠狠| 色五月婷婷五月| 伊人大香久久| 色婷婷丁香五月综合| 欧美日韩成卜| 激情综合网激情五月网| 狠狠综合网| sesesesezonghe| 亚洲色在线观看| 久9精品视频| 激情啪啪五月| 九九综舍久久| 91精品久久久久、久五月天| 大香蕉久久久久久久久| 成人丁香婷婷五月天| 激情五月黄色| 91dy.av| 色香蕉精品五夜婷| 成人五月天在线视频在线观看| 色啪网| 久久五月人人摸| 任你草| 五月激情开心婷婷| ..真实国产乱子伦对白在线_欧| 五月婷婷天天色| 中文毛片无遮挡高潮免费| 激情欧美婷五月| 麻豆AV一区二区三区| 国产精品视频免费看| 91色五月在线观看| 99er在线观看| 久久婷婷五月综合色欧美| 2w在线视频| 亚洲日比视频| 激情五月丁香六月综合AVXXXX| 超碰在线个人观看| 五月天婷婷影院影院观看| 丁香五月www| 九九性爱网| www.久久久久久久| 九九av| 亚洲五月丁香综合网| 精品夜夜澡人妻无码AV| 五月婷色丁香| 欧美日韩一区二区三区四区| 色欲色香综合网| 99WWW免费视频| 人人操AV| 日本的α片xxxwww| 中国女人做爰A片| 夜夜爽天操| 大香蕉Av在线| 色五月大香蕉| wWw色五月| 激情五月四色| 五月婷在线观看| 久热欧美| 国产精品99久久久久久久女警| 五月开心激情网| 欧美熟妇一区二区三区| 婷婷丁香花五月天| 丁香五月激情六月欧亚激情综合导航| 天天色粽合合合合合合合| 婷婷六月天亚州| 91丨九色丨老农村| 99精品在线| 天天综合天天玩夜夜玩天天玩夜夜玩 | 亚洲视频在线网站| 几激情五月婷婷色五月色天堂| 婷婷情色五月天| www久久久| 五月婷婷丁香狠狠撸久久| 开心五月婷婷婷美女| 夜夜谢天天干| 狠婷婷五月| 婷婷免费无马| 96精品成人无码A片观看金桔| 婷婷五月视屏| 久久9视频| 激情五月婷婷综合网| 五月婷婷中文字幕AV| 亚洲婷婷五月天在线激情综合网| 欧美A级成人婬片免费看理论| 五月精品| 夜夜骑操AV| 99热www| 噜噜在线| 五月天网站亭亭| 久热精品视频在线观| ZpRSw| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 色色热99| 久久婷婷五月综合色丁香花| 色婷婷丁香五月| 激情婷婷五六月天| 伊人狠狠色婷婷综合丁香一区| 激情久久久| 天天综合五月天| 丁香五月综合福利视频导航|