99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù)

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù) 1. 事務(wù)失效的七宗罪我踩過的坑你大概率也會踩先講個真實事故。幾年前我維護過一個電商訂單系統(tǒng)線上出了一個詭異的bug用戶支付成功后訂單狀態(tài)正常更新但庫存卻莫名其妙多扣了一次。代碼看起來完全沒問題——service方法上明明白白標著Transactional數(shù)據(jù)庫也確認是InnoDB。查了兩天才定位到根因同一個類里方法A調(diào)用方法BB的事務(wù)注解根本沒生效。這就是Spring事務(wù)最經(jīng)典的坑之一自調(diào)用繞過代理。Transactional依賴AOP代理生效而Spring的代理機制決定了一個類內(nèi)部的方法調(diào)用是不會經(jīng)過代理對象的。this.orderService.update()拿到的這個this根本不是Spring容器里那個被代理過的bean而是原始對象。原始對象上的注解Spring根本看不見。結(jié)果就是你以為開啟了事務(wù)實際上沒有。庫存扣減在無事務(wù)狀態(tài)下執(zhí)行訂單那邊一旦報錯回滾庫存早就提交了。1.1 自調(diào)用問題最隱蔽的事務(wù)殺手自調(diào)用這個坑的隱蔽之處在于它不會報錯不會警告日志里什么都看不出來只有數(shù)據(jù)對不上賬的時候才會暴露。Service public class OrderService { Transactional public void createOrder(OrderDTO dto) { // 扣庫存 stockService.deduct(dto.getSkuId(), dto.getQuantity()); // 插入訂單 orderMapper.insert(buildOrder(dto)); // 這里調(diào)用了自身方法事務(wù)注解失效 this.sendNotification(dto); } Transactional(propagation Propagation.REQUIRES_NEW) public void sendNotification(OrderDTO dto) { // 通知邏輯 } }上面這段代碼里sendNotification的REQUIRES_NEW完全無效。因為this.sendNotification()走的是原始對象不是代理。解決辦法有三個把需要事務(wù)的方法挪到另一個Service類——最推薦職責也最清晰。注入自身代理Autowired private OrderService self;然后調(diào)用self.sendNotification()。使用AopContext.currentProxy()需要開啟EnableAspectJAutoProxy(exposeProxy true)然后((OrderService) AopContext.currentProxy()).sendNotification()。方案2最實用但要注意循環(huán)依賴問題——Spring 4.3之后字段注入的循環(huán)依賴是允許的但構(gòu)造器注入就不行。方案3代碼看著別扭但確實有效。1.2 非public方法注解白寫了Transactional用在private或者protected方法上Spring容器啟動時根本不報錯但方法執(zhí)行時事務(wù)就是沒開。原理不復(fù)雜Spring AOP生成代理的時候JDK動態(tài)代理基于接口只代理public方法CGLIB雖然能代理非public方法但Spring官方明確說了Transactional只支持public方法。最騷的是如果你把Transactional放在public方法上、但里面調(diào)用了private方法private方法里的事務(wù)注解同樣無效——因為事務(wù)邊界已經(jīng)在public方法的代理上確定了內(nèi)層調(diào)用不會再開啟新事務(wù)除非傳播行為是REQUIRES_NEW。我見過不少項目把Transactional加到private方法上然后一臉疑惑地說為什么回滾了沒生效。排查方法很簡單看日志里有沒有TransactionInterceptor的getTransaction記錄沒有就是代理沒走。1.3 異常被吞回滾了個寂寞這是最常見也最無語的一種。Java的檢查型異常checked exception默認不會觸發(fā)Spring事務(wù)回滾但很多人不知道這一點隨手寫了個throws Exception然后事務(wù)就失效了。Transactional public void transfer(Account from, Account to, BigDecimal amount) throws Exception { accountMapper.decrease(from.getId(), amount); accountMapper.increase(to.getId(), amount); // 業(yè)務(wù)校驗不通過拋了個業(yè)務(wù)異常 throw new BizException(余額不足); }BizException如果是繼承Exception而不是RuntimeException上面這個事務(wù)不會回滾錢就憑空消失了。Spring的默認回滾策略是只回滾RuntimeException和Error。檢查型異常如IOException不會觸發(fā)回滾因為Spring認為你既然顯式聲明了這個異常說明你可以處理它事務(wù)繼續(xù)提交是合理的。解決方案兩個方向業(yè)務(wù)異常統(tǒng)一繼承RuntimeException——大多數(shù)項目的做法最簡單。在Transactional上顯式指定Transactional(rollbackFor Exception.class)——最穩(wěn)一勞永逸。我個人的習(xí)慣是兩者都做自定義業(yè)務(wù)異常繼承RuntimeException同時在Transactional上寫rollbackFor Exception.class。雖然看起來冗余但團隊里總有人會寫檢查型異常。1.4 多線程子線程異常主線程事務(wù)照樣提交Transactional的事務(wù)上下文存在ThreadLocal里子線程拿不到父線程的事務(wù)上下文。Transactional public void batchProcess(ListOrder orders) { orders.parallelStream().forEach(order - { // 這里拋異常父線程事務(wù)不會感知 processOne(order); }); }如果一定要在多線程里用事務(wù)只能每個線程自己開事務(wù)用TransactionTemplate包住子線程的任務(wù)代碼然后在線程池層面做異常聚合——子線程里有任何失敗主線程如何決定是否整體回滾需要自己實現(xiàn)協(xié)調(diào)邏輯。這個問題在批量導(dǎo)入、報表生成、定時任務(wù)場景里非常常見。我的建議是批量任務(wù)盡量不用Transactional包整段而是每條或每批用TransactionTemplate單獨開事務(wù)配合失敗記錄表做補償。這樣既能保證數(shù)據(jù)一致又不會因為一個線程失敗導(dǎo)致大批量回滾。1.5 數(shù)據(jù)庫引擎不支持事務(wù)這個坑現(xiàn)在少了但老項目中還能見到。MySQL的MyISAM引擎根本不支持事務(wù)你注解標得再多也沒用。確認方法很簡單SHOW TABLE STATUS WHERE Name your_table;看Engine字段InnoDB支持事務(wù)MyISAM不支持。另外如果表是MyISAMSpring事務(wù)管理器初始化時也不報錯執(zhí)行時DataSourceTransactionManager還是會調(diào)setAutoCommit(false)但引擎層面不認等于白忙。1.6 final類或final方法CGLIB也救不了Spring事務(wù)默認用AOP代理。如果目標類配置了JDK動態(tài)代理基于接口那沒問題如果走CGLIB基于類繼承生成子類那么final類無法被繼承final方法無法被重寫代理自然失效。Spring Boot 2.x之后默認proxyTargetClasstrue走CGLIBfinal問題就浮出水面了。很多人把service類寫成final為了防繼承結(jié)果事務(wù)全失效。排查方法啟動時看日志里是JdkDynamicAopProxy還是CglibAopProxy再看你的類和方法有沒有final修飾符。1.7 事務(wù)管理器沒配置或配置錯了Spring Boot的DataSourceAutoConfiguration會自動配置DataSourceTransactionManager但你如果引入了多數(shù)據(jù)源或者自定義了DataSource而沒有配套注冊PlatformTransactionManager那Transactional就會失效。另外EnableTransactionManagement注解在Spring Boot里默認開啟不需要你重復(fù)添加。但如果你用了Spring MVC非Boot項目忘了加EnableTransactionManagement事務(wù)也會靜默失效。排查清單很簡單Transactional方法執(zhí)行的線程棧里有沒有TransactionInterceptor有就是代理生效了沒有就是代理沒生效。2. Spring事務(wù)的底層運作機制從JDBC到動態(tài)代理很多人用Transactional用了好幾年但完全不知道它背后發(fā)生了什么。面試被問Spring事務(wù)是怎么實現(xiàn)的只會答AOP兩個字就再也說不出更多了。其實底層鏈路沒那么玄拆開看就三層JDBC的事務(wù)能力、Spring的事務(wù)抽象、AOP的代理包裝。2.1 第一層JDBC的事務(wù)基石萬事萬物都離不開JDBC。Spring事務(wù)再花哨落到底層就是這三行代碼Connection conn dataSource.getConnection(); conn.setAutoCommit(false); // 關(guān)閉自動提交 conn.commit(); // 提交 conn.rollback(); // 回滾setAutoCommit(false)的意思是之后的SQL不會立即生效必須等commit()才真正寫入數(shù)據(jù)庫MySQL的binlog和redolog層面是另一套機制。如果中途異常調(diào)用rollback()之前的所有操作全部撤銷。所以Spring事務(wù)的本質(zhì)就是幫你管理Connection在合適的時機調(diào)用commit或rollback。就這么簡單。2.2 第二層PlatformTransactionManager抽象Spring抽象了一個接口——PlatformTransactionManager核心方法就三個public interface PlatformTransactionManager { TransactionStatus getTransaction(TransactionDefinition definition); void commit(TransactionStatus status); void rollback(TransactionStatus status); }getTransaction獲取或創(chuàng)建事務(wù)。注意這里的措辭——如果你已經(jīng)在事務(wù)里根據(jù)傳播行為決定是復(fù)用當前事務(wù)還是掛起后新建。commit提交事務(wù)。但提交前會檢查TransactionStatus里的rollbackOnly標記如果之前有人標記了只回滾這里會拋UnexpectedRollbackException。rollback回滾事務(wù)。常用的實現(xiàn)是DataSourceTransactionManager針對Hibernate有HibernateTransactionManager針對JPA有JpaTransactionManager。DataSourceTransactionManager的doBegin方法做了幾件事從DataSource拿一個Connection。如果當前Connection是自動提交模式關(guān)閉它并記下來方便事務(wù)結(jié)束恢復(fù)。設(shè)置隔離級別如果TransactionDefinition指定了。設(shè)置只讀標志readOnlytrue會走Connection.setReadOnly對MySQL的InnoDB來說這能優(yōu)化一些查詢路徑。把這個Connection綁定到TransactionSynchronizationManager的ThreadLocal里。后面的DAO操作拿到的Connection就是從TransactionSynchronizationManager里取的。這就是同一個事務(wù)里所有SQL共用同一個數(shù)據(jù)庫連接的原理——ThreadLocal綁定。2.3 第三層AOP代理的切入點Spring事務(wù)的AOP基于TransactionInterceptor它實現(xiàn)了MethodInterceptor攔截所有被Transactional標記的方法。調(diào)用鏈是這樣的外部調(diào)用orderService.createOrder()實際調(diào)用的是代理對象的方法。TransactionInterceptor.invoke()被觸發(fā)先調(diào)用TransactionAspectSupport的createTransactionIfNecessary。根據(jù)Transactional上的配置傳播行為、隔離級別、超時等調(diào)用PlatformTransactionManager.getTransaction()。執(zhí)行業(yè)務(wù)方法。方法正常返回提交事務(wù)方法拋異常根據(jù)rollbackFor配置決定是否回滾。清理ThreadLocal中的連接恢復(fù)自動提交狀態(tài)。所以Transactional加在哪個方法上代理就攔哪個方法——事務(wù)邊界就是方法邊界。方法跑多久事務(wù)就開多久。2.4 只讀事務(wù)與UnexpectedRollbackException的真相熱詞里有一條UnexpectedRollbackException: transaction rolled back because it has been marked as rollback-only這是個非常經(jīng)典的問題。場景是這樣的方法A開啟事務(wù)調(diào)用方法BB標記了rollback-onlytrue比如B捕獲了異常但內(nèi)部回滾邏輯已運行。然后A繼續(xù)執(zhí)行正常返回時調(diào)用commit()此時Spring發(fā)現(xiàn)事務(wù)被標記為rollback-only直接拋UnexpectedRollbackException事務(wù)回滾。換句話說你代碼里沒拋異常但事務(wù)已經(jīng)注定要回滾了。這經(jīng)常出現(xiàn)在try-catch吃了異常但沒重新拋出的情況下。排查時看日志里有沒有Transaction rolled back because it has been marked as rollback-only的WARN告警跟著調(diào)用棧就能找到是哪個方法把事務(wù)標記了。3. 事務(wù)傳播行為與隔離級別什么時候用哪個別背口訣網(wǎng)上關(guān)于傳播行為的口訣一大堆什么REQUIRED默認用REQUIRES_NEW記日志NESTED做嵌套背下來容易用對難。我把這幾個傳播行為逐個講透配上真實場景你就能理解了。3.1 傳播行為詳解Spring定義了7種傳播行為大部分項目用到的不超過4種但理解每一種的原理仍然重要。傳播行為含義典型場景REQUIRED有事務(wù)就復(fù)用沒有就新建默認值99%的場景用它SUPPORTS有事務(wù)就加入沒有就無事務(wù)執(zhí)行查詢方法可選MANDATORY必須在事務(wù)中執(zhí)行否則拋異常強制事務(wù)的方法REQUIRES_NEW掛起當前事務(wù)永遠新建一個寫日志、異步通知NOT_SUPPORTED掛起當前事務(wù)以無事務(wù)方式執(zhí)行導(dǎo)出大數(shù)據(jù)量文件NEVER如果有事務(wù)就拋異常強制無事務(wù)的執(zhí)行NESTED嵌套事務(wù)基于保存點Savepoint大批量循環(huán)處理單條失敗不影響整體REQUIRED是默認值理解起來很簡單Spring檢查當前ThreadLocal里有沒有綁定事務(wù)有就加入沒有就新建一個。注意加入意味著共用一個事務(wù)、一個Connection、一套commit/rollback。內(nèi)層方法拋異?;貪L外層也一起回滾。REQUIRES_NEW的核心是掛起。邏輯是從TransactionSynchronizationManager里把當前事務(wù)的Connection解綁、掛起然后新建一個完全獨立的事務(wù)持有獨立的Connection。內(nèi)層事務(wù)提交/回滾不影響外層事務(wù)。外層事務(wù)回滾內(nèi)層已經(jīng)提交的數(shù)據(jù)不會跟著回滾。典型場景就是操作日志業(yè)務(wù)方法開啟事務(wù)日志記錄要獨立提交——不管業(yè)務(wù)成功還是失敗日志都要寫進去。如果你用REQUIRED業(yè)務(wù)回滾時日志也跟著回滾那排查問題的時候就看不到錯誤日志了。NESTED跟REQUIRES_NEW的區(qū)別要講清楚。REQUIRES_NEW是物理事務(wù)獨立的Connection、獨立的commit/rollbackNESTED是邏輯事務(wù)基于Savepoint保存點。內(nèi)層方法失敗回滾到保存點外層可以繼續(xù)執(zhí)行外層最終提交時一起提交所有保存點之前的操作。但注意NESTED需要底層數(shù)據(jù)庫支持保存點。MySQL的InnoDB支持但有些數(shù)據(jù)庫不支持且JpaTransactionManager對NESTED的支持有限。實際項目中能用REQUIRES_NEW解決的就別用NESTED少踩坑。3.2 隔離級別臟讀、不可重復(fù)讀、幻讀Spring事務(wù)隔離級別有五種對應(yīng)JDBC的隔離級別隔離級別臟讀不可重復(fù)讀幻讀說明DEFAULT---使用數(shù)據(jù)庫默認MySQL默認REPEATABLE_READREAD_UNCOMMITTED會會會讀未提交不推薦READ_COMMITTED不會會會Oracle默認REPEATABLE_READ不會不會會MySQL InnoDB下不會MySQL默認SERIALIZABLE不會不會不會串行化性能最差臟讀讀到別的事務(wù)未提交的數(shù)據(jù)。不可重復(fù)讀同一事務(wù)內(nèi)兩次讀取同一數(shù)據(jù)結(jié)果不一樣因為別的事務(wù)提交了更新。幻讀同一事務(wù)內(nèi)兩次查詢返回的記錄數(shù)不一樣因為別的事務(wù)插入了新記錄。MySQL的InnoDB在REPEATABLE_READ級別下通過MVCC多版本并發(fā)控制 Gap Lock間隙鎖實際上消除了幻讀問題。所以MySQL默認的REPEATABLE_READ比Oracle的READ_COMMITTED在某些場景下更嚴格。實際項目中我見過很多團隊把隔離級別統(tǒng)一設(shè)成READ_COMMITTED理由是MySQL的RR有間隙鎖并發(fā)插入容易死鎖。這個說法有一定道理但不是絕對的。如果你的系統(tǒng)沒有復(fù)雜的范圍查詢并發(fā)插入場景RR不會成為瓶頸如果你確實遇到死鎖頻繁再降級也不遲。3.3 事務(wù)超時與回滾策略Transactional(timeout 5)表示事務(wù)最多執(zhí)行5秒超時則強制回滾。底層實現(xiàn)是JDBC的Connection.setNetworkTimeout或者由Spring在每次SQL執(zhí)行前檢查時間不同實現(xiàn)有差異。但要注意timeout是從事務(wù)開始到最后一次SQL執(zhí)行的時間不是方法總耗時。如果你的方法在事務(wù)前做了一堆耗時操作比如遠程調(diào)用這部分不計入事務(wù)超時。所以不要指望timeout能保護整體方法執(zhí)行時間。關(guān)于回滾策略我再強調(diào)一次// 推薦寫法 Transactional(rollbackFor Exception.class) // 或者只回滾特定異常 Transactional(rollbackFor BizException.class, noRollbackFor IllegalStateException.class)noRollbackFor用的場景不多但有一種情況很實用某些非關(guān)鍵數(shù)據(jù)比如統(tǒng)計緩存的更新失敗不應(yīng)該讓主事務(wù)回滾可以列在noRollbackFor里。4. 編程式事務(wù)當Transactional真的不合適時Transactional是聲明式事務(wù)用起來方便但有三個致命弱點事務(wù)粒度太大整個方法一個事務(wù)如果方法里有網(wǎng)絡(luò)調(diào)用或批量循環(huán)事務(wù)會長時間占用數(shù)據(jù)庫連接。自調(diào)用失效前面已經(jīng)講過了。無法精確控制提交時機想先做幾步提交再繼續(xù)做Transactional實現(xiàn)不了。這時候就該上手編程式事務(wù)了。Spring提供了TransactionTemplate。4.1 TransactionTemplate的用法Service public class OrderService { private final TransactionTemplate transactionTemplate; public OrderService(PlatformTransactionManager transactionManager) { this.transactionTemplate new TransactionTemplate(transactionManager); // 可以設(shè)置默認配置 this.transactionTemplate.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); this.transactionTemplate.setIsolationLevel(TransactionDefinition.ISOLATION_READ_COMMITTED); } public void createOrder(OrderDTO dto) { transactionTemplate.executeWithoutResult(status - { stockMapper.deduct(dto.getSkuId(), dto.getQuantity()); orderMapper.insert(buildOrder(dto)); }); } }TransactionTemplate.execute回調(diào)里你可以在任何地方開啟事務(wù)塊粒度完全由自己控制。更重要的是它徹底繞開了自調(diào)用問題——因為你是直接調(diào)用事務(wù)管理器不走代理。還有一個場景強烈推薦用TransactionTemplate大批量循環(huán)插入。如果用Transactional包住整個for循環(huán)幾萬條數(shù)據(jù)一個事務(wù)提交時數(shù)據(jù)庫壓力巨大一旦失敗全部回滾代價太高。改成循環(huán)內(nèi)用TransactionTemplate每100條一個事務(wù)失敗了只回滾這一批配合日志記錄失敗批次整體效率和可靠性都高很多。4.2 手動控制TransactionStatus如果execute回調(diào)不適合你比如需要事務(wù)中間做分支判斷、需要中途提交可以用更底層的PlatformTransactionManagerAutowired private PlatformTransactionManager transactionManager; public void complexBiz() { DefaultTransactionDefinition def new DefaultTransactionDefinition(); def.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); TransactionStatus status transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯1 dao.update(...); // 到這里先提交一次 transactionManager.commit(status); // 開啟新事務(wù) TransactionStatus status2 transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯2 dao.insert(...); transactionManager.commit(status2); } catch (Exception e) { transactionManager.rollback(status2); throw e; } } catch (Exception e) { transactionManager.rollback(status); throw e; } }這段代碼展示了如何手動控制多段事務(wù)但我強烈不建議在業(yè)務(wù)代碼里寫這種底層代碼——容易出錯而且代碼很難讀。99%的場景TransactionTemplate夠用了。4.3 編程式事務(wù)的注意點TransactionTemplate是線程安全的可以做成Bean注入不要每次new一個。executeWithoutResult和execute的區(qū)別后者可以返回業(yè)務(wù)結(jié)果前者只能執(zhí)行不能返回。需要返回值就用execute。事務(wù)回調(diào)里拋出的異常RuntimeException會觸發(fā)回滾檢查型異常默認不會。要回滾檢查型異常需要手動status.setRollbackOnly()或者包裝成RuntimeException。5. 多數(shù)據(jù)源與分布式事務(wù)跳出單庫思維的邊界單庫單事務(wù)的好日子總有到頭的時候。微服務(wù)一拆、分庫一搞Transactional就管不住跨庫的數(shù)據(jù)一致性了。我先講清楚Spring事務(wù)在多數(shù)據(jù)源下的表現(xiàn)再展開分布式事務(wù)。5.1 多數(shù)據(jù)源下的事務(wù)各管各的如果你配置了兩個DataSource比如一個主庫一個從庫Spring里注冊了對應(yīng)的兩個PlatformTransactionManager同一個Transactional方法里操作了兩個庫——那這兩個庫的事務(wù)是互相獨立的。主庫提交成功、從庫提交失敗你沒有任何辦法通過單機事務(wù)解決。Spring Boot里處理多數(shù)據(jù)源的常規(guī)姿勢是Transactional(transactionManager xxxTransactionManager)指定用哪個事務(wù)管理器。方法里操作另一個庫那份數(shù)據(jù)不在事務(wù)保護范圍內(nèi)。所以多數(shù)據(jù)源場景下的策略是一個事務(wù)只操作一種數(shù)據(jù)源。跨數(shù)據(jù)源的業(yè)務(wù)要么拆分方法要么引入分布式事務(wù)方案不要指望Transactional救你。5.2 分布式事務(wù)的主流方案對比分布式事務(wù)是個大話題我只挑主流方案講給個選型思路。XA協(xié)議兩階段提交2PCXA是最正統(tǒng)的分布式事務(wù)協(xié)議分兩步準備階段所有參與者執(zhí)行SQL但不提交各自保留Undo/Redo log和提交階段協(xié)調(diào)者發(fā)提交指令各參與者提交。問題在于準備階段會一直持有數(shù)據(jù)庫鎖高并發(fā)場景下鎖沖突嚴重性能非常差。Java里典型的實現(xiàn)是Atomikos、Bitronix。說實話互聯(lián)網(wǎng)高并發(fā)場景用XA的很少了更多出現(xiàn)在金融等強一致性要求的內(nèi)部系統(tǒng)。TCCTry-Confirm-CancelTCC把每個操作拆成三個階段Try預(yù)留資源、Confirm確認執(zhí)行、Cancel取消釋放。優(yōu)點是業(yè)務(wù)層面控制粒度性能比XA好很多缺點是侵入性極強每個業(yè)務(wù)都要寫三套邏輯。典型場景賬戶轉(zhuǎn)賬。Try階段凍結(jié)轉(zhuǎn)出金額Confirm階段扣款Cancel階段解凍。這個方案需要深入理解業(yè)務(wù)才能寫得對如果你只是想快速實現(xiàn)一個分布式事務(wù)TCC的學(xué)習(xí)成本挺高的。消息事務(wù) 最終一致性這是目前最常用、成本最低的方案。思路很簡單利用本地事務(wù)把業(yè)務(wù)操作和發(fā)消息綁定在同一次數(shù)據(jù)庫事務(wù)里通過消息中間件RocketMQ/RabbitMQ最終把數(shù)據(jù)變更同步給其他服務(wù)。舉個訂單和積分的例子開啟本地事務(wù)插入訂單表同時插入積分消息表。本地事務(wù)提交后后臺任務(wù)或MQ的事務(wù)消息機制把積分消息表里未發(fā)送的記錄發(fā)到MQ。積分服務(wù)從MQ消費消息給用戶加積分。如果積分服務(wù)失敗消息進入重試隊列直到成功。這種方案做不到強一致中間會有一段數(shù)據(jù)不一致的時間窗口但絕大多數(shù)業(yè)務(wù)都能接受。核心機制是本地消息表實現(xiàn)成本低、不用引入重量級中間件是目前國內(nèi)互聯(lián)網(wǎng)公司的首選方案。Seata的AT模式Seata是阿里開源的分布式事務(wù)框架AT模式的思路是代理你的SQL記錄Before Image和After Image數(shù)據(jù)快照在全局提交時自動執(zhí)行補償SQL。對業(yè)務(wù)代碼侵入性很小但性能有一定損耗每行數(shù)據(jù)要記錄前后快照。如果你的系統(tǒng)需要跨服務(wù)事務(wù)、又不想太動代碼Seata AT是可以考慮的。5.3 選擇建議場景推薦方案單體應(yīng)用單數(shù)據(jù)庫什么都不用本地事務(wù)夠用微服務(wù)對一致性要求不高本地消息表 MQ最終一致微服務(wù)強一致要求高Seata AT 或 TCC金融級強一致低并發(fā)XA/2PC非核心數(shù)據(jù)可以容忍短暫不一致MQ異步 對賬補償分布式事務(wù)沒有銀彈。選型的核心不是哪個方案高級而是你的業(yè)務(wù)能容忍多大程度的不一致。6. 事務(wù)排查工具箱從日志到監(jiān)控的一整套姿勢事務(wù)的問題一旦出現(xiàn)往往都是線上的、隱性的、難復(fù)現(xiàn)的。所以一定要有一套預(yù)防和排查的手段而不是等出了問題再手忙腳亂。6.1 日志配置把事務(wù)邊界打印出來Spring的事務(wù)日志默認是DEBUG級別不打開根本看不到。在application.yml里配置logging: level: org.springframework.transaction: DEBUG org.springframework.jdbc.datasource.DataSourceTransactionManager: DEBUG org.springframework.jdbc.datasource.JdbcTransactionManager: DEBUG打開后你會看到類似這樣的日志Obtained JDBC transaction from DataSource [HikariDataSource (HikariPool-1)] Participating in existing transaction Initiating transaction commit Initiating transaction rollback這些日志的排列能幫你快速判斷事務(wù)有沒有開啟、是新建還是復(fù)用、提交還是回滾、有沒有因為rollback-only被強制回滾。6.2 ThreadLocal狀態(tài)的運行時監(jiān)控如果你懷疑某個方法執(zhí)行時事務(wù)狀態(tài)不對可以在代碼里手動檢測import org.springframework.transaction.support.TransactionSynchronizationManager; boolean isInTransaction TransactionSynchronizationManager.isActualTransactionActive(); System.out.println(當前是否在事務(wù)中: isInTransaction);isActualTransactionActive()返回true說明當前線程確實有數(shù)據(jù)庫事務(wù)處于活動狀態(tài)。如果外面標了Transactional但這里返回false說明代理沒生效——自調(diào)用、final方法、私有方法逐個排查。還可以查看當前事務(wù)名Object name TransactionSynchronizationManager.getCurrentTransactionName();這能幫你快速定位當前事務(wù)是哪個方法開啟的。6.3 監(jiān)控事務(wù)耗時與連接占用事務(wù)另一個容易忽略的問題是連接泄漏和長事務(wù)。一個事務(wù)如果執(zhí)行了幾十秒連接就占用了幾十秒連接池很快被打滿。建議做法在DataSource層加慢SQL日志HikariCP有connectionTimeout、validationTimeout配置同時開啟leakDetectionThreshold檢測連接泄漏。用TransactionSynchronizationManager.registerSynchronization注冊事務(wù)同步回調(diào)統(tǒng)計每個事務(wù)的耗時。Transactional public void bizMethod() { long start System.currentTimeMillis(); TransactionSynchronizationManager.registerSynchronization(new TransactionSynchronization() { Override public void afterCompletion(int status) { long cost System.currentTimeMillis() - start; if (cost 1000) { log.warn(事務(wù)耗時過長: {}ms, status{}, cost, status); } } }); }這個方法能精確定位哪個事務(wù)方法最耗時但它需要每一個業(yè)務(wù)方法都加一遍侵入性強。更好的方案是寫一個AOP切面統(tǒng)一攔截Transactional方法做耗時統(tǒng)計。6.4 事務(wù)失效排查的標準操作流程如果線上出現(xiàn)了疑似事務(wù)失效的問題我的排查順序是這樣的看日志打開事務(wù)DEBUG日志確認方法執(zhí)行時有沒有Obtained JDBC Transaction記錄。沒有就是代理沒生效走第2步有就繼續(xù)看提交/回滾記錄走第5步??捶椒ê灻遣皇莗ublic類或方法有沒有final看調(diào)用方是不是同一個類內(nèi)部調(diào)用是不是沒有被Spring管理的對象比如new出來的看注解Transactional有沒有寫對rollbackFor有沒有配多數(shù)據(jù)源下transactionManager指對了沒有看異常異常有沒有被try-catch吞掉異常類型是不是RuntimeException看數(shù)據(jù)庫表引擎支不支持事務(wù)連接是不是走到了正確的DataSource這套流程走一遍90%的事務(wù)問題都能定位。7. 最后的實戰(zhàn)建議事務(wù)規(guī)范從我做起寫到這里我把這些年跟事務(wù)打交道沉淀下來的幾條規(guī)矩放在最后算是個人的實戰(zhàn)總結(jié)也是新項目啟動時的檢查清單。事務(wù)方法要短小精悍。事務(wù)范圍之內(nèi)不要做遠程調(diào)用、不要做復(fù)雜的文件IO、不要進行大批量循環(huán)。否則連接池遲早被打死。把非數(shù)據(jù)庫操作移到事務(wù)外或者拆成多個事務(wù)塊。事務(wù)邊界要盡可能晚開啟盡可能早提交。前置校驗、參數(shù)組裝這些放事務(wù)外真正需要數(shù)據(jù)庫原子性的操作才放進事務(wù)塊。很多人習(xí)慣方法一進來就開事務(wù)其實很多操作根本不需要事務(wù)保護?;貪L配置要顯式寫。Transactional(rollbackFor Exception.class)這行字雖然啰嗦但它能擋住95%的回滾失效問題。自定義的業(yè)務(wù)異常統(tǒng)一繼承RuntimeException省得每個方法都要考慮這個異常會不會回滾。批量處理用TransactionTemplate而不是Transactional。循環(huán)里的事務(wù)一定要用編程式事務(wù)精確控制粒度Transactional包整個循環(huán)就是把數(shù)據(jù)庫往死里逼。分布式事務(wù)不要貪多求全。能靠業(yè)務(wù)流程設(shè)計規(guī)避的就盡量規(guī)避比如通過本地消息表做最終一致性比引入一套重量級分布式事務(wù)框架劃算得多。選型之前先想清楚你的數(shù)據(jù)不一致容忍度。事務(wù)這個東西說到底是數(shù)據(jù)庫連接和錯誤處理時機的管理藝術(shù)。理解底層機制比背多少面試題都管用。希望這篇文章里踩過的坑、總結(jié)的思路能讓你少走幾條彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲无码影音| 色婷婷偷拍| 亚洲色综合性| 久热这里这里有精品| 操97在线观看| 五月丁香啪啪| 婷婷性爱| 黄网免费看| 五月开心深深爱激情综合| 亚洲AV中文在线| 亚洲国产精品二二三三区| 五月丁香婷婷深深爱| 欧美天天爽| 色欲婷婷五月天丁香| 丰满少妇猛烈A片免费看观看| 九九热精品视频| 97干婷婷五月天| 狠狠爱婷婷丁香| 五月J香蕉婷婷| 色婷婷久久综合| 五月天激情国产综合AV| 开心四月婷婷在线色播播| 888久久久| 俺去也五月| 日韩啪啪网| WWW五月| 亚洲天堂亚洲色色色| 久婷婷五月天影院| 激情av在线| 91午夜婷婷狠狠久久综合9色| 婷婷五月色| 婷婷五月丁香六月综合网| www.狠狠操.con| 99日本在线| 碰人人97| 东北黄色一级| 伊人婷婷色| 婷婷不卡基地| 狠狠久综合| 色级停停| 哇嘎成人久久| 综合激情在线| 激情99。| 综合激情深爱| 五月丁香啪啪啪| 99热这里只有精品2| 无码G高清天| 色噜噜伊人| 狠狠综合| 色婷婷丁香AV综合| 日本五月天婷婷丁香| 色五月婷婷亚洲| 久久婷婷五月天激情唯美| 久久成人天| 丁香五月亚洲婷婷| 玖玖婷婷综合| 99热这里| 综合99在线| 99爱在线| 色婷婷色情| 99热99久久| 久久久99久久| 五月天婷婷伊人| 五月花成人网| 婷婷五月天基地| 色婷婷久久| 五月丁香六月婷婷成人电影| 一本色道久久综合狠狠躁小说| 五月婷婷激情综合| 久草视频大香蕉99| 色五月婷婷av| 天天色色婷婷| 五月色婷婷中文字幕| 国产成人av在线播放| 亚洲激情五月天| 无码99| 美女婷婷激情亚洲| 丁香花五月天激情| 99热九九在线| www.国产色| 五月天婷婷影院| 成人国产欧美大片一区| 99婷婷国产最新视频| 婷婷午夜| 人妻啪啪啪| 丁香六月色婷婷| 大香蕉婷婷| 天天色情站| 色情五月| 五月天五月婷五月激情网| 色婷婷五月天在线观看| 婷婷无五月无码视频| 干一干xxxx| 都市激情久久| 五月丁香花视频| 免费观看18视频网站| 五月天综合在线网| 综合激情开心五月| 婷婷色影院| 久久精品国产精品| 欧美狠狠草| 性天天中文网| 成人国产欧美大片一区| 99久视频| 色婷婷亚洲| 热91久| 久久久99婷婷久久久久久| 婷婷五月激情欧美大胆视频| 亚洲黄色影视| 丁香综合婷婷开心激情网| 婷婷五月视屏| 91九色 熟| 六月五月丁香五月欧美| 超碰免费人人| 久久伊人五月天| 激情九九六月激情免费视频| 日本三久久| 天天射影| 99精品热| 成片免费播放| 超碰人人在线| 色五月天丁香| 9l视频自拍九色9l视频自拍九色9l社区 | 亚洲成人在线观看av| 久大香蕉| 99欧州偷拍视频| 操97在线观看| 色婷婷九月综合| 亚洲无码99| 亚洲精品无码久久| 婷婷五月色| 欧美一线视频| 超碰网站在线观看| 婷婷丁香花五月天| 大香蕉五月天婷婷| 热的国产99热| 国产精产国品一二三在观看| 亚洲丁香五月美女| 91嫩草国产线观看亚洲一区二区| 五月丁香婷婷开心| 成年视频免费观看| 综合性爱网| 欧美色碰| 五月婷婷影院| 狠狠做五月| 99精品视频网站| 欧美日韩成人在线观看| 99色在线| 久久6这里只有精品| 播播网色播播| www.五月天婷婷姐姐| A片试看50分钟做受视频| 国产日韩欧美性生活| 亚洲情欲| 九九久久99| 久久se 综合网 | 七七九色| 久久色五月天| www.99.色| 天天干天天爽天天爽| www.玖玖九| 这里只精品热在线18| 丁香五月婷婷老师网站| 人妻aV在线| 九九色影院| 色色综合网站| 蜜臀九九九九| 婷婷五月中文字幕| 高清无码入口| 九九精品视频在线观看| 亚洲色图五月丁香| 99国产精品久久久久久久久久久| 久久久五月四色| 五月丁香婷婷啪啪网| 超碰99热精品| 色五月丁香一区在线| 欧美性生交xXxX久久久| 亚洲五月天另类小说图片| 久久狠婷婷| 人人综合久| eeuus五月婷| 粉嫩AV久久一区二区三区| 9999色色色色| 丁香婷婷久久 | 一区操| 亚洲五月婷婷| 激情五月综合ì香亚洲| 欧美图片丁香五月天| 激情五月天在线视频| 五月婷婷久久爱| 激情电影五月婷婷| 久久人人妻| 伊人深爱综合| 丁香五月综合色婷婷| 日本视频不卡123区| 天干夜夜操| 九九色婷婷| 任你躁XXXXX麻豆精品| 婷婷日日夜夜| 69午夜成人影片| 午夜日日| 婷婷五月天桃花网| 99综合视频| 丁香色情五月综合网站| 婷婷丁香在线| 五月丁香六月婷婷久久| 丁香,开心成人,久久| 色五月涩涩婷婷| 色婷丁香五月| 91婷婷色五月| 丁香五月天激情四射网| WwW色婷婷| 99热播放| 免费看欧美成人A片无码| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 六月婷婷六月天天在线免费| 久热 91| 激情五月婷婷综合秋霞| 精品人妻伦一二三区久久| 五月天五月天成人网亭亭成人色网站| 色综合爱综合| 五月天开心激情网色欲无码| 伦乱天堂| 九九成人精品免费视频| 亚洲综合婷婷五月| 97色色婷婷五月天| 中文久久婷婷| 99人人操| www.久9| 色色五月婷婷狠狠| 黄网在线免费观| 开心五月深爱五月| 日本狠狠干| 日本高清久| 日韩av网址大全| 色婷婷五月天激情久久| 久热这里只有精品在线观看| 久久久久久xxxxx| 天天干,天天操,天天射| 色婷婷啪啪啪啪啪啪| 激情五月婷婷色综合| 99re在线播放| 欧美色男人网站| 天天肏夜夜肏| 九九这里只有精品| 国产美女无遮挡裸体毛片A片| 99热免费精品| 国产亚洲精品AAAAAAA片| www,天天干| 玖玖婷婷色五月| 日本婷色| 婷婷五月丁香综合| 日日夜夜婷婷| 日韩成人中文| 欧美123区免| 99精品久久久久久久久| 97热久久五月婷婷| 五月婷色| 色婷婷色五月丁香| 国产亚洲精久久久久| 久久这里只有国产视频| 婷婷六月天| 日韩淑女人妻luan伦激情精品一区二| 中文字幕不卡+婷婷五月| 91丁香五月| 碰超99| 亚洲婷婷激情综合激情999精品| 五月婷婷在线免费| 99热综合| 国产内射婷婷| 成人综合视频在线| www久久五月com| 狠色狠色狠色狠色狠色网| 色婷婷丁香五月丁香| 啪啪激情网站| 五月婷啪啪| 日日操日日撸| 1024欧美看片| 国产成人网| wwccc久久久| 色婷婷香蕉丁丁网| 婷婷99狠狠躁天天| 天天日中文| 丁香五月天影院| 色婷婷无吗| 伊人网啪啪| 色色综合网站| 九九精品网| 99久久久久久www| 天天日,天天插| 亚洲日韩一页精品发布| www久久艹| 人妻久久久久| 可以直接看的av| 丁香五月婷婷啪| 9+1视频网址| 无码AV大香线蕉伊人| 97碰成超视频免费视频| 无码激情精品色婷婷久久久久| 99热在线只有精品| 成人免费120分钟啪啪| 久久青草国| 99视频内射三四| 色婷婷影音| 超碰91人人操| 亚洲视频码| 大香蕉综合网| 99热这里| 97人人干视频| 九九99视频精品| 开心五月网 | 桃色五月天| 久久久com| 久久久精品99| 久久丁香五月婷婷| 五月天社区| 国产亚洲色婷婷久久99精品9j| 天天干,天天舔| 五月婷婷在线视频| 97成人丁香| se99高清无码| 操久久网| 玖玖色综合网| 天天干天天干天天干| 香蕉久久av一区二区三区 | 99综合| 久久码久久无清| 五月丁香婷婷激情久久| 天天综合网在线| www.com色播五月天| 亚洲 无码 中文字幕 中出| 五月丁香啪啪啪综合网| 日本97在线| 色婷婷五月天小说| 97日本在线播放| aaaaa不卡| 久久精品五月天| 色色综合五月| 激情综合色播| 人人摸人人澡人人| 蜜臀av粉嫩av懂色av| 五月婷婷婷婷婷| 91丨九色丨43老版熟女| 国产色色网址网站| 青草视频在线观看视频| 99精品这里只有免费视频| 亚洲啪视频| 另类视屏| 色色五月天丁香| 久久在线大香蕉| 五月丁香六月情| 精品国产a| 狠狠搞亚洲| 97日韩无套内| 99久久免费精品| 丁香五月天AV在线| 婷婷婷婷色| 91啦丨九色丨刺激中文| 五月婷婷丁香五月| 欧洲亚洲免费视频9| 中文资源在线a | 色五月婷婷久久爱| 亚洲国产精品VA在线看黑人| 久色中文| 亚洲成Av人片乱码色第1集| 婷婷丁香五月高清| 久操97| 五月天丁香婷婷社区| 亚洲av午夜精品一区二区| 狠狠五月综合在线| 偷拍91九色| 亚洲天堂爱爱| 噜噜噜噜噜日本视频| 亚洲精品V天堂中文字幕| 免費亭亭成人| 成人片在线免费看| 97操在线视频| 狠狠操天天操天天操| 日本欧美成人片AAAA| 这里只有精品99www| 韩日另类| 亚洲婷婷久久综合| 久久国产性爱A V| 曰韩少妇内射免费播放| 激情五月天小说| 五月久久婷婷天堂视频| 婷婷在线视频| 天天综合在线网| 丁香五月91| a网站免费观看| 五月天激情婷婷丁香| 亚洲天堂制| 色久影院| 久久A热| 97人妻碰碰碰久久久久-最近国语高清| 久久久婷婷五月亚洲97号色| 天天草天天舔| 五月婷久久久| 9精品久久999| 久9视频| 色五月丁香婷婷综合| 五月天另类小说久久小说网| 日韩人妻无码专区| 久久机热这里只有精品| 99re66热这里只有精品| 卡视频1区2区| 日韩精品AV一区二区三区| 丁香五月另类小说| 五月激情婷婷开心五月| 碰碰人人漕| 六月丁香啪啪| 色综合久久99色| 性爱电影科技贸易有限公司| www99精品| 五月婷婷久久大片| 六月色婷婷| 99精品大片| 天天色情站| 婷婷丁香先锋资源网站| 97精品人人A片免费看| 七七色色综合| 日日日天天干| 日日射天天射| 国语对白性爱视频播放| av久热| 67194中文在线| 激情五月综合| 五月婷婷偷拍| 激情五月影院| 99这里有精品视频视频| 六月婷婷色宗合| 五月香婷婷| 午夜成人在线免费视频| 碰碰碰97国产| 青青久在线视频免费观看| 五月天堂婷婷| 99久在线视频| 黄色成人网站在线播放| 婷婷五月天色播| 九九视频精品在线免费| 五月婷婷色男女| 六月婷婷色综合| 五月婷婷丁香啪啪| 九九色区| 91chinese 在线| 婷婷五月天丁香综合网| 97碰碰叉| www.91AV.com| 99九九免费精品| 日日噜噜夜夜狠狠久久丁香五月| 中文字幕免费高清电视剧| 婷婷伊人网| 99自拍视频在线| 亚洲AV网站在线观看| 婷婷五月激情六月| 99色在线视频| 丁香五月天.com| 九九热这里只有精品6| 99热只有精| 五月天欧美激情| 婷婷五月天亚洲色| 久久精品66| 日日做天天操夜夜爽| 丁香5月综合啪啪| 婷婷色播色五月五色五月天色妇| 五月深爱婷婷| 丁香六月天婷婷开心综合| 能看的AV网站| 色五月婷婷色五月| 婷婷天天婷婷天天澡| 超碰1999| 丁香五月婷婷啪| 久久综合爱| 99性色| 国产亚洲99久久精品| 色人久久| 99re欧美精品| 九色在线观看91av| 一区二区三区视频| 五月丁香六月婷婷不卡免费无码 | 草做免费在线观看| 五月激情在线| 99热这里只有精品5| 色玖玖| 色婷婷伊人激情在线观看| 婷婷五月天VI| 玖玖精品婷婷| se色99| 久久婷婷五月天激情唯美| 久久免费婷婷视频| 激情亚洲网| 国产成人精品123区免费视频| 超碰在线50| 婷婷激情四射五月天| 操人久久| 五月丁香天天| 九月av| 久久五月天婷婷| 色婷婷狠狠禁18久久| 婷婷丁香www视频日本韩国| 91操片| 美妞av| 婷婷十月丁香| 99久久婷婷国产综合| 中文字幕在线免费观看视频| 五月丁香综合久久夜夜| 六月婷婷天天操夜夜爽视频| 丁香五月中文字幕久色| 大香蕉婷婷色| 婷婷情色五月| 天天综合网、天天综合色| 另类激情五月| 五月天婷婷色| 一级七香蕉| 激情com| 日本婷婷色日| 亚洲中文字幕在线观看| 久久九九玖玖| 五月激情久久| 欧美叉叉叉BBB网站| 996精品热视频| 人妻久久久久久久久| 91热视频色网站| 夜夜操加勒比| 99热精品在线播放| 丰满人妻一区二区三区| 亚洲偷| 国产激情久久久| 99视频网| 日韩av手机在线观看| 亚洲AV人人操| 九九99久久| 国产精产国品一二三在观看| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 丁香婷婷六月激情文学 | 五月婷婷六月天| 精品久久久久成人码免费动漫| 久久婷婷久久| 五月婷婷丁香五月| 久久ri精品视频| 国产在线6| 黄色五月婷婷| 激情五月天的婷婷| 婷婷 色 丁香 夜| 7EzOBIhNq85TO| 综合亚洲五月天| 五月丁香婷婷基地| 伊人www22综合色| 第五色婷婷| 国产精品成人网址| wwwC0maV五月花| 亚洲婷婷五月天| 99热乎| 色九区| 婷婷人人操| 九九热精品视频在线观看| 五月丁香久久激情综合| 五月天激情婷婷小说| 色五月激情五月| 激情丁香五月婷| 一起草性爱不卡视频| 九热视频在线精品15| 色爱亚洲| 十区AV| 欧美影院| 婷婷综合五月天| 日韩操逼大片| 色婷婷在线播放| 香蕉久久国产AV一区二区| 99啪啪网| 婷婷五月丁香六月| 美女婷婷六月色| WWW.桔色成人.COM| 开心五月婷婷在线| 色亭亭九月| 天天综合网亚洲网站| 色婷婷播放| 99乱视频| 日韩欧美成人片| 亚洲天堂爱爱| 成年AAAA色情| 在线不卡AC| 久久色情综合免费网站| 六月丁香婷婷综合狠狠爱夜夜爱| 九九色综合| 99在线观看亚洲| 精品国产乱码久久久久夜深人妻 | 五月天激情小说| 精品成人在线观看| 精品久久99| 婷婷深爱色五月| 日韩一级淫乱片一区二区三区| 99九九精品| 色五月婷婷91| 亚洲国产精品SUV| 五月丁香AV在线| 五月天婷婷色色网| 久操大香蕉| 色六月天| 人妻综合网| 国产真实乱了老女人视频| 五月丁香六月婷婷婷婷| 色人久夂| 婷婷五月天99综合网站| 日韩色五月| 精品一区二区三区四区五区六区介绍 | 99热这里有精品| 激情丁香婷婷| 91碰免费视频| 五月开心激情| 99九九精品| 丁香五月影院| 亚洲国产成人AV在线| 久久婷婷啪啪视频| WWW.夜夜| 婷婷月五天在线在线看| 亚洲免费电影2| 婷婷五月天激情小说| 人妻久久久久久久久久| 色情五月天视频网| 久久精品99久久久久久久久| 99热精品在线| 五月天丁香综合久久国产| 五月婷婷和六月| 亚洲一区二区无遮挡A片| 成人精品视频99在线观看免费| 亚洲天堂aaaa| 日韩av大全| 激情AV在线| 色九九综合色| 五月丁香六月婷| 五月丁香激情综合| 99爱视频免费看| 五月丁香A片| 影音先锋 一区| 日逼AV影音先锋男人资源站| 丁香六月在线| 久久艹99| 色丁香五月| 日日干干天天干| 天天日天天做天天舔| 婷婷丁香综合| 五月丁香婷久久| 成人午夜无码视频| 涩涩涩五月天| 九九性爱网| 丁香五月综合在线观看| 玖玖福利视频资源| 五月亚洲激情| 伍月婷丁香婷| 丁香五月天AV在线| 伊人激情啪啪| 日韩av在线免费观看| 另类国产欧美视频| 五月婷婷碰碰| 五月天综合在线网| 9色91视频| 在线观看国产高清视频免费网站| 91精品综合久久久久久五月丁香| 丁香五月影视| 91日视频| 超碰色综合| 色激情五月| 天天爽天天| 激情五月婷婷五月| 婷婷色综合av| 99九九99九九九视频精彩| 色五月五月天色婷婷色五月| 五月丁香婷婷免费视频| 激情99| 午夜九九九九九九九九九九九九九| 情久久综合五月天| 久久这里只精品| 99视频在线观看网址| 国产在这里只有精品| 性色五月天| 五月婷婷色五月| 日韩aaa| 五月天综合网| 色婷久久| 99热66| 亚洲色图欧美色图日本视频| 丁香性爱在线视频| 91在线看片| se色综合网| 婷婷五月综合久久中文字幕| 超碰免费人人| 色五月激情五月丁香五月婷婷啪啪综合| 夜夜爽天天| 丁香婷五月天| 激情婷婷五月社区| www.五月天色色.com| 久久草大香蕉| 国精产品一区一区三区免费视频| 婷婷五月天成人视频| 色五月,婷婷大香蕉| 操日视频| 亚洲色色图片| 天天爽天天做| 婷婷五月天堂| 人妻丰满精品一区二区A片| 超碰在线观看三级片| 五月深情久久| 激情色播| 久久免费视频62| 9月色婷婷| 五月婷婷影院| 激情综合网站| 激情五月天啪啪视频| 五月婷婷深爱六月| 九月婷婷激情| 黑人巨粗进入警花疼哭A片| 五月激情婷婷四射| 婷婷月五天在线在线看| www久热com| 91se在线视频| 久久您您综合网| 伊人激情综合网| 五月丁香婷婷人体| 欧美日本黄色| 欧美熟女视频 色婷婷| 97在线/亚洲| 79成人网| 国产亚洲99久久精品| 国产性av| 色播五月丁香| 99视频精品在线| 五月天激情网站| 综合九九日本| 免费AV黄在线播放| 婷婷五月综合色拍| AV亚洲在线| 九九伊人网| 俺去也五月| 久久精品国产AV一区二区三区 | 久久亚洲无码| 婷婷五月激情在线| 在线99热| AV在线大香蕉| 美女五月狠狠| 性色九九| 77799热| 激情伊人| 97在线日本| 这里只有免费的精品| 久久99综合| 亚洲成片在线观看| 极品五月天| 五月天偷拍| 色婷婷免费视频| 久久怕怕视频| 在线播放 精品| 久久狠色噜噜狠狠狠狠97| 超碰在线国产| a九九热www| 婷婷丁香五月网| 色五月噜噜| 97色五月天| 久久五月天婷婷| 成人一级片| 夜色综合网| 日韩无码系列| 激情综合网五月| 色婷综合| 六月婷婷久久大全| 久久久久九九九九视屏小说88| 色综合久久伊伊婷婷五月| 九色婷婷| 亚洲天堂亚洲色色色| 狠狠干五月天| 丁香六月婷婷久久综合八月| 思思热这里只有精品| 人伦30P| 国产成人在线精品| 天天久综合网永久入口17v| 五月丁香婷婷婷激情爱爱| 九九九九九九综合| www.婷婷.com| 四虎成人精品永久免费AV九九| 五月婷婷深深爱| 日韩啪| 色五月综合在线| 欧美在线视频99| 免费视频99| peg 2区三区四区的| 日日操天天操| 99综合99| 九九久久腿| 欧美成人色婷婷| 99碰视频| 五月丁香啪啪综合| 一夜福利不卡| 七月婷婷色香综合网| 99热12| 亚洲婷婷五月| 色色色热热热| 99热99精品在线观看| 91色综合久久| 国产97色在线 | 日韩| 久久综合综合久久| 大香蕉手机视频| 另类图片 五月激情| 九月停停| 国产在线黄色| 大波美女VA网站| 婷婷五月丁香99| 欧美在线视频免费播放| 丁香5月激情网| 国产毛片欧美毛片久久久| 亚洲bt丁香五月天婷婷激情小说| 碰碰操91| 99热国产| 久久久久久人妻久久久久久久久久人妻久久久 | 182TV亚洲| 一起草av| 久久精热| 五月网激情| 91av无码| www婷婷| 丁香婷婷十月| 成人电影一区| 五月婷护士| 色五月综合激情| 欧美综合在线五月天色婷婷| 色五月欧美| 国产成人精品一区二三区熟女在线| 天天爽天天做| 五月丁香六月在线欧美| 亚洲综合色激情色五月| 中文激情网| 日逼免费视频| 色碰碰| 狠狠干五月| 夜夜资源站| 亚洲婷婷成人五月天| 玖玖爱综合网| 热99玖玖99玖玖99九九| 婷婷激情四射| 五月成人天| 91艹人| 亚洲熟女色| 91在线精品一区二区| 操一区| 亚洲色99| 开心五月婷婷激情网| 激情床戏| 97色碰碰公开视频| 国产精品18久久久| 天天久久狠狠色综合| 99视频热| 五月综合激情图片 | 国产又黄又爽又色的免费| 91ncm视频| 五月丁香激情婷婷| 天天做天天爱天天爽在| 成人短视频在线| 激情五月婷婷啪啪| 成人AV在线中文版| 开心激情婷婷| 伊人婷婷综合| 日本狠狠网| 夜夜撸天天日| 五月天婷婷六月| 五月婷婷性爱| WWW99热| 探花搜索结果 - 黄上黄| 99在线精品免费视频| 天天日夜夜拍| 五月激情啪啪啪| 五月婷婷五月色| 激情五月天www| 五月丁香六月婷婷中合网| 91丨九色丨国产打屁股| 天天操中文字幕| 91人碰| 99啪在线| 91色碰| 五月婷婷黄色毛片| 婷婷国产五月天17c| 97人碰人操| 欧美日本韩国亚洲| 香蕉久久av一区二区三区| 五月天久久久| 婷婷成人五月天| 婷婷综合| 年轻的妺妺伦理HD中文| 欧美日韩中文国产一区发布| 色色国产| 丁香五月婷婷基地| 国产精产国品一二三在观看| 91五月天| 少妇真实被内射视频三四区| 国产真人做爰视频免费| 色欧美一级| 色欲AVV| 青青草99re| 丁香花操逼| 久久精品系列| 六月婷婷激情| 国产裸舞福利资源在线视频| 日本色婷婷五月天成人电影| 五月天激情Av| 激情五月www| 无码人妻一区| 久久综合影院| 国产一级片| 色综合色色| 日本视频不卡123区| www.com久久久久久久久久久久久久久久久| 国产内射婷婷| 99热精品网| 99热青青草| 激情六月下句是什么| 欧美色六月婷婷| 人妻精品久久久久久久| 久热这里只有精品6| 婷婷五月天丁香社区| 五月婷在线| 午夜天堂一区人妻| 欧美偷偷操| 久久色天堂| 好吊操这里只有精品| xfplayav在线| 欧美 日韩 成人| 激情五月色婷婷| 久久九九激情五月天 | 人人摸人人摸| 久草热8精品视频在线观看| 99热97美女| 大香蕉99热| 天天综合干| 久久人人妻| 色婷婷五月天偷拍| 琪琪色五月婷婷老师| 成人毛片在线免费观看| 五月激情婷婷图片基地| 国产乱妇乱子伦| 国产在线黄色| 99热国品| 亚洲无码11| 久久五月网| 丁香婷婷色情| 中文字幕免费高清电视剧| 婷婷五月天丁香成人社区| 人妻爽爽爽久久久久久久久| 99久久大片| 久久99热这里只频精品6学生| 婷婷丁香五月社区亚洲| 欧美日韩91| 99九九精品| 99无码视频| 国产资源在线视频| 一区二区三区四区五区| 丁香婷婷性久久| 国产精品久久久久久久久久| 99热日| 狠狠干五码| 开心激情五月天网| 永久热91| 欧美综合激情五月| 天天色宗合| 激情五月婷婷啪啪| 天天综合图片| 超碰91在线| 人操91在线| 激情5月婷婷狠狠干| 第四色五月婷婷| 一本久久婷婷| 99 频99热国里只有精品| 五月婷婷影| 九九伦子片| 伊人六月丁香婷婷| 婷婷综合网| 中文字幕激情综合| 狠狠操性爱av| 亚洲精品白浆高清久久久久久| www.99热在线观看| 欧美黄色AA片哗啦啦啦| 人妻第九页| 久久久久久草黄色片AV在线观看| 女人天堂久久| 91综合色噜噜| 亚洲人人操BD| 国产精品激情AV久久久青桔| 欧美A级网站| 成人av播放| 啪啪色区| 狠狠摸狠狠摸| 五月激情婷婷四射| 色色 9| 色99综合色88| www.五月天婷婷姐姐| 五月丁香久久| 五月婷婷丁香深深爱| 久久免片| 九九综合精品| www.激情| 久操婷婷| 综合网激情| 九九综合精品| 婷婷久久久| 操人91| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | www色婷婷久久综合久色| 五月天婷婷基地| 97在线碰| 五月丁香激情综合网| 色色色婷婷五月天| 第四色激情网| 婷婷五月天丁香| 人人播| 99热这是里只有精品| 五月丁香综合激情| 婷婷久久免费看| 99精品国产乱码久久久人妻| 五月婷婷开心激情六月蜜桃| 少妇被下春药玩弄A片| 啪啪啪五月天| 婷婷五月丁香四射| 久久五月天激情| 婷婷自拍| 婷婷五月电影院| 日韩九九视频| 日韩成人综合网| 久久五月婷综合网| 五月综合人妻| 青青草成人网| 久久久久久激情| 丁香五月综合| 婷婷狠狠五月综合| 五他月天啪啪啪| 五月天停婷基地| 97综合在线| 午夜性做爰电影| 五月婷婷婷自由综合| 九月婷婷激情久久| 久久激情五月婷婷| www,8050,午夜三级| 99在线精品免费视频| 日撸夜撸日操| 久久99激情| 久久伊人大香蕉| 天天爽夜夜爽天天爽夜夜爽| 91xxxx九色| 九九色综合| 欧美亚洲婷婷五月| 人人干女人| www色婷婷| 五月好婷婷| 色噜噜狠狠色综合网| 天天做天天爱| 久久少妇视频| 99久久久99久久91熟女| 艳妇野外情欲放荡HD| 狠狠狠色激情综合适合| 一起草无码视频| 色五月色开心开心五月| 欧美日朝成人| 久久96热| 99热这里都是精品| 无码成人播放器| 99操免费视频| 99在线爽| 婷婷丁香视频| 国产国产乱老熟女视频网站97| 五月天天天色| 婷婷激情五月吧| 亚洲视频码| 五月婷婷六月天| 婷婷五月天激情诱惑| 丁香五月1页| 国产第99页| 久久99网| 日本成人噜噜噜| 深爱激情四射| 九热精品| 亚洲美女裸体被操在线观看| 色色五月丁香| 亚洲色在线观看| 婷婷五月天直播| 97久人人| 久草婷妨| 99性爱| 丁香五月在线自慰| 色五月婷激情| 久久婷婷五月国产激情综合片| 色天堂操| 九九婷婷热| www.婷婷| 日本超碰在线| 无码色色色| 综合深爱五月| 丁香六月 婷婷六月| 国产.亚洲.欧洲视频在线| 教师性爱毛片| CHINESE熟女老女人HD视频| 爽极品色| AV性爱网| 久久免费视频62| 狠狠色性| 99热免费精品热久久66| 九九色色色| 久久久五月天婷婷成人网| 国产欧美性成人精品午夜| 久热伊人| 五月天丁香综合| 色婷婷亚洲婷婷| 天天爽天天爽视频| 日日狠夜夜狠| AV 3P| 精品国产va久久久久久久| 亚州精品色情无码A片| 久久婷婷内射| 狠狠爱婷婷丁香| 操逼五月天| 影音先锋一区二区资源站| 97操操网| 99噜噜噜在线播放| 色情婷婷| 久久人人妻| 99热在线观看精品| 综合婷婷| 五月婷婷天| 99亚州综合精品成人网| 婷婷五月丁香久久| 91丨九色丨熟女|新版| 9久热在线视频精品| 久草大| 天天色噜| 97五月天| 久久看婷婷| 91视频精品99| www.henhenl| 日韩色五月| 婷婷五月情| 91久久久久久久久久久| 激情五月天色网站| 色综合婷婷| 丁香五月天色婷婷| 狠狠色综合网| 免费看欧美成人A片无码| 无码成人AAAAA毛片AI换脸| 久久AV无码精品人妻系列试探| 亚洲精品字幕| 日韩99无码| 国产伊人大香蕉| 天天操五月天| 99九九在线观看免费| 日本99久久| 五月香蕉综合| 丁香五月丁香伊人| 99色色色色| 99热在线看片| 色色99| 无码AV免费精品一区二区三区 | 超级碰碰91| 欧美日韩成人在线| 丁香五月视频在线观看| 婷婷五月色亚洲| 五月婷在线| 五月天另类视频| 三人荫蒂添的好舒服A片| 亚洲成AV人片在线观看| 性爱激情小说AV五月丁香花| 激情久久久久久久久久久| 久久中文人妻系列| 亚洲、热| 五月丁香婷婷基地| 五月天激情网图片 - 百度| 国产性av| 成人婷99最新| 一区二区无码视频| 色婷婷丁香五月高清在线| 色五月六月| 中文字幕综合网| 成人免费在线电影| 啪啪东京热| 六月丁香五月天| 91av无码| 亚洲第79页| 日本三级日本黄色| 五月天在线视频尤物视频在线看| 亚洲中文字幕在线观看| 亚洲 25P| 91chinese在线| 婷婷五月69| 看片视频在线免费日产在线看| 婷婷五月丁香久久| 99热碰碰热| 亚洲无码播放| 超碰免费在线| 久久久婷| 丁香五月天激情综合| 六月丁香深深爱综合网| 久久丁香五月天| 伊人婷婷青青cao| www.色99| 五月天亚洲最大成人| 婷婷丁香社区| 全国最新疫情| 丁香五月婷婷激情四射深爱激情| 色香五月天| 99丁香五月| 色综合色综合色综合| 蜜桃婷婷狠狠久久综合| 五月婷中文娱乐综合| 九九久热| 五月天丁香啪啪啪啪| 天天爽天天爽视频| 99热国产婷婷| 天天操婷婷| 超碰人人艹| 五月花免费视频| 欧美婷婷六月丁香综合色连续高潮抽搐| 激情五月婷婷| 色综合五月在线| 五月四色激情| 六月丁香影院| 1234操逼网| 九九热自拍| 国产精品久久久99视频| 五月丁香六月激情综合| 色 五月俺去也| 97成人在线视频| 色色亚洲| 热99国产精品| 国产精品人成A片一区二区| 色婷婷五月亚洲| 丁香六月激情毛片| 五月天激情图片| 亚洲第一色网站| 久久婷婷午夜| 伊人在线视频| 丁香五月婷婷啪啪| 天天干天天爽| 色播五月丁香| 99在线精品视频| 免费看欧美成人A片无码| 99热的无码| 丁香五月婷婷Av| 五月婷婷激情| 婷婷伊人久久综合| 九热久| 色欲天天综合网| 五月婷婷五月天亚洲无码| 成人中文字幕在线| 啪啪啪大香蕉| 五月天综合在线观看| 五月婷婷啪啪网| 午夜成人片400| 天天骑天天操| 99久久九九| 六六久久黄色| 99激情在线| 婷婷免费无视频| 2017人人操| 熟女人妻一区二区三区免费看| 五月天开心激情综合网| 91ncom.色| 秋霞少妇AV网站| 伊人久久大香线蕉av一区| 开心婷婷五月天电影院| 亚洲免费在线观看岛国| 超碰国产在线| 色五月综合资源推荐| 色婷婷视频|