99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Spring Boot AOP異步執(zhí)行:徹底告別日志切面拖慢接口

Spring Boot AOP異步執(zhí)行:徹底告別日志切面拖慢接口 做后端開發(fā)這幾年我在日志記錄和操作審計(jì)這類需求上栽過不少跟頭。最早是直接在業(yè)務(wù)代碼里一行行手寫日志后來(lái)改用AOP切面統(tǒng)一處理切面是清爽了可新的問題又來(lái)了——日志接口慢、消息隊(duì)列抖動(dòng)、第三方通知超時(shí)不管哪個(gè)環(huán)節(jié)出幺蛾子業(yè)務(wù)接口就跟著遭殃。這時(shí)候我才意識(shí)到切面里的這些非核心動(dòng)作壓根就不該跟主流程綁在同一個(gè)線程里同步執(zhí)行。于是就有了這套“Spring Boot AOP 異步執(zhí)行方案”。說白了就是在AOP切面里把耗時(shí)的橫切邏輯日志落庫(kù)、操作審計(jì)、埋點(diǎn)上報(bào)、消息通知交給獨(dú)立的線程池異步執(zhí)行讓主業(yè)務(wù)線程只干自己的正事。這篇文章會(huì)從方案選型、原理剖析、完整代碼、實(shí)測(cè)踩坑四個(gè)層面展開適合剛接觸Spring Boot的初級(jí)開發(fā)者也適合已經(jīng)在用AOP但發(fā)現(xiàn)切面拖慢接口性能、想優(yōu)化的人。讀完你不僅能照抄一套能跑的代碼還能搞清楚里面每個(gè)配置背后的為什么。1. 為什么必須用AOP異步一個(gè)日志切面拖慢接口的教訓(xùn)1.1 從同步切面到異步切面的真實(shí)背景先講一個(gè)我實(shí)際遇到的場(chǎng)景。某個(gè)項(xiàng)目里給所有Controller層接口加了一個(gè)操作日志切面需求是記錄每個(gè)請(qǐng)求的用戶、路徑、參數(shù)、響應(yīng)時(shí)間和狀態(tài)碼。一開始邏輯很簡(jiǎn)單業(yè)務(wù)方法跑完切面里拼一條日志然后同步寫入數(shù)據(jù)庫(kù)日志表。單機(jī)低并發(fā)的時(shí)候一切正常接口響應(yīng)時(shí)間差不多在30到50毫秒左右。后來(lái)數(shù)據(jù)量上來(lái)日志表膨脹插入語(yǔ)句從兩毫秒慢慢漲到了十幾毫秒碰上數(shù)據(jù)庫(kù)鎖競(jìng)爭(zhēng)、連接池不夠用的時(shí)候切面里的日志插入甚至要等上百毫秒。最要命的是日志寫入失敗還會(huì)直接拋出異常把原本正常的業(yè)務(wù)請(qǐng)求也給打掛了。這就是典型的橫切邏輯對(duì)主流程的“反向污染”——你只是想記個(gè)日志結(jié)果它把接口搞超時(shí)了。為了解耦和提速我當(dāng)時(shí)先想到的是把日志寫入改成異步但最開始的實(shí)現(xiàn)很粗糙就是在切面方法里手動(dòng) new 一個(gè)線程去寫日志。這樣做的后果是每次請(qǐng)求都要?jiǎng)?chuàng)建新線程頻繁的線程上下文切換開銷反而更大而且線程不受Spring容器管理連接池、事務(wù)、異常處理全都跟不上。后來(lái)才老老實(shí)實(shí)回到Spring的 Async 體系用線程池統(tǒng)一管理異步任務(wù)。1.2 三個(gè)候選方案的取舍對(duì)比在確定用Spring自帶異步之前我對(duì)比過三種常見的異步切面實(shí)現(xiàn)方式方案實(shí)現(xiàn)方式優(yōu)點(diǎn)缺點(diǎn)手動(dòng)創(chuàng)建線程切面里直接 new Thread簡(jiǎn)單粗暴代碼量最少線程不受管控頻繁創(chuàng)建銷毀開銷大無(wú)法復(fù)用無(wú)法監(jiān)控消息隊(duì)列通知切面里投遞MQ消息下游消費(fèi)解耦徹底削峰能力強(qiáng)適合重任務(wù)引入額外中間件排查問題鏈路變長(zhǎng)小項(xiàng)目運(yùn)維成本高Spring Async異步執(zhí)行切面委托線程池執(zhí)行任務(wù)原生支持線程可復(fù)用可用線程池監(jiān)控和Spring事務(wù)/異常體系兼容需要正確配置線程池異步方法內(nèi)部的事務(wù)和主事務(wù)是隔離的最終我選擇了 Spring Async 方案。理由是這套方案對(duì)現(xiàn)有代碼侵入最小、不需要額外部署中間件而且線程池可以精細(xì)控制核心線程數(shù)、隊(duì)列容量、拒絕策略都能自己定制。對(duì)于日志記錄、統(tǒng)計(jì)埋點(diǎn)這類輕量異步任務(wù)來(lái)說完全夠用。1.3 先搞清楚AOP在Spring里的執(zhí)行機(jī)制聊異步之前得先把AOP的底子捋一遍。Spring AOP的核心是動(dòng)態(tài)代理它不像AspectJ那樣去修改字節(jié)碼而是利用JDK動(dòng)態(tài)代理或CGLIB給目標(biāo)Bean生成一個(gè)代理對(duì)象外部調(diào)用的時(shí)候?qū)嶋H調(diào)用的就是代理對(duì)象增強(qiáng)后的方法。JDK代理要求目標(biāo)類實(shí)現(xiàn)接口生成的代理類只對(duì)接口方法生效CGLIB則是通過生成目標(biāo)類的子類來(lái)實(shí)現(xiàn)代理不要求接口。Spring Boot 2.x之后默認(rèn)優(yōu)先用CGLIB除非手動(dòng)設(shè)置 proxyTargetClassfalse。理解這個(gè)機(jī)制的意義在于后面排查“AOP沒生效”時(shí)十有八九都和代理有關(guān)。AOP的通知類型里有五種Before前置、After后置、AfterReturning返回后、AfterThrowing異常后、Around環(huán)繞。在異步切面場(chǎng)景里位置不同語(yǔ)義完全不同。比如記錄用戶操作日志通常用Around比較合適因?yàn)樗芡瑫r(shí)拿到方法執(zhí)行前參數(shù)、執(zhí)行后的結(jié)果和執(zhí)行耗時(shí)而單純的接口訪問統(tǒng)計(jì)Before加AfterReturning就夠了。2. 核心原理剖析AOP切面里的異步到底發(fā)生了什么2.1 代理對(duì)象、切面Bean和異步執(zhí)行的協(xié)作關(guān)系可能有人會(huì)問AOP和異步這兩個(gè)機(jī)制是怎么串在一起的說出來(lái)其實(shí)很簡(jiǎn)單Spring的 Async 底層用的也是代理機(jī)制。當(dāng)你在某個(gè)方法上標(biāo)注 AsyncSpring會(huì)為主Bean再次生成一層異步代理。也就是說如果你的業(yè)務(wù)Bean先被AOP增強(qiáng)再被異步代理包裹那調(diào)用鏈路就是外部調(diào)用 - 異步代理 - AOP代理 - 目標(biāo)方法。這也是為什么異步切面方案里切面類本身既是一個(gè)Spring Bean被AOP機(jī)制掃描切面方法內(nèi)部又要調(diào)用異步Bean的方法去執(zhí)行耗時(shí)任務(wù)。兩者各司其職AOP負(fù)責(zé)攔截主流程的調(diào)用點(diǎn)異步代理負(fù)責(zé)把任務(wù)從當(dāng)前線程中“丟”到線程池。有個(gè)關(guān)鍵細(xì)節(jié)必須強(qiáng)調(diào)切面切片只對(duì)Spring容器管理的Bean生效。如果你的目標(biāo)類是被 new 出來(lái)的或者Bean的創(chuàng)建過程繞過了Spring IoC容器那么任何AOP都不會(huì)生效。很多新手把Controller、Service的實(shí)例手動(dòng)new出來(lái)用結(jié)果切面一點(diǎn)反應(yīng)都沒有就是栽在這里。2.2 異步方法的事務(wù)問題跨線程就是跨事務(wù)這是整套方案里最容易翻車的知識(shí)點(diǎn)。Spring事務(wù)的底層實(shí)現(xiàn)是基于ThreadLocal把數(shù)據(jù)庫(kù)連接綁定到當(dāng)前線程上的DataSourceTransactionManager持有的連接本質(zhì)上屬于發(fā)起事務(wù)的那個(gè)線程。這意味著你在主線程里開啟了事務(wù)A然后調(diào)用了一個(gè)異步方法去更新數(shù)據(jù)那個(gè)異步方法執(zhí)行時(shí)用的是線程池里的另一個(gè)線程它不在事務(wù)A的上下文中只能自己開一個(gè)獨(dú)立的事務(wù)。畫個(gè)生活化類比事務(wù)就像一個(gè)只能在固定區(qū)間內(nèi)行駛的工作證主線程辦了證但異步線程是另一個(gè)區(qū)的員工沒有這個(gè)證進(jìn)去就得重新辦一張臨時(shí)證。所以異步方法里提交的數(shù)據(jù)要么用自己的新事務(wù)要么完全不參與事務(wù)絕不會(huì)被主線程的事務(wù)統(tǒng)一回滾。這就帶來(lái)一個(gè)鮮明的實(shí)戰(zhàn)后果如果你在切面里異步寫日志主業(yè)務(wù)流程成功異步日志寫入?yún)s在最后一步失敗主流程不會(huì)感知日志也不會(huì)跟著回滾。對(duì)“日志能不能丟”這個(gè)問題業(yè)務(wù)上要有明確預(yù)期。我在做操作審計(jì)時(shí)這個(gè)特性其實(shí)是好事——審計(jì)和業(yè)務(wù)解耦業(yè)務(wù)失敗也照樣得記錄失敗日志。2.3 異步切面里的異常處理邊界異步方法拋出的異常默認(rèn)不向上傳遞。主線程調(diào)異步方法的那一刻如果任務(wù)丟進(jìn)線程池就返回了異常發(fā)生在其他線程主線程根本接不到。如果不處理線程池任務(wù)異常會(huì)被Executor吞掉連個(gè)日志都不留排查問題的時(shí)候特別憋屈。所以異步方法內(nèi)部的try-catch是必備操作尤其是做日志記錄這種不能因?yàn)樽泳€程失敗影響主流程的場(chǎng)景。對(duì)需要感知結(jié)果的異步任務(wù)還可以用 Future 或 CompletableFuture 返回值主線程通過 get() 拿結(jié)果但要注意那樣又會(huì)引入阻塞等待和異步的初衷相矛盾。實(shí)操經(jīng)驗(yàn)是日志、埋點(diǎn)、通知類任務(wù)徹底不關(guān)心結(jié)果用完即走狀態(tài)同步類任務(wù)最多用 CompletableFuture 在回調(diào)里處理后續(xù)邏輯而不是同步等待。3. 從零搭建一個(gè)完整的AOP異步執(zhí)行示例3.1 環(huán)境準(zhǔn)備與依賴引入這部分的示例基于 Spring Boot 2.7.xJDK 8及以上都行。核心依賴只有一個(gè)Spring Boot的web和aop starter其他的按項(xiàng)目實(shí)際需要加。下面是我用的 pom.xml 關(guān)鍵片段dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-aop/artifactId /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-jdbc/artifactId /dependency如果你是做日志落庫(kù)的場(chǎng)景還需要把數(shù)據(jù)庫(kù)相關(guān)的依賴加進(jìn)來(lái)。但要注意aop starter是必須的它會(huì)把 aspectjweaver 和 Spring AOP 相關(guān)類都拉進(jìn)來(lái)缺少這個(gè)依賴注解和切面類都不會(huì)生效。3.2 定義線程池配置核心參數(shù)的一次到位直接使用Spring默認(rèn)的異步執(zhí)行器不是不行但坑太多。默認(rèn)的 SimpleAsyncTaskExecutor 有個(gè)特點(diǎn)它每次執(zhí)行都會(huì)創(chuàng)建一個(gè)新線程不是真正意義上的復(fù)用高并發(fā)下線程數(shù)量會(huì)失控。更穩(wěn)妥的做法是自建一個(gè) ThreadPoolTaskExecutor 并且指定線程名前綴方便排查日志時(shí)知道是哪個(gè)線程跑的。下面是我項(xiàng)目里比較成熟的一套配置核心參數(shù)以“IO密集型任務(wù)”為基準(zhǔn)設(shè)計(jì)Configuration EnableAsync public class AsyncPoolConfig { Bean(asyncExecutor) public ThreadPoolTaskExecutor asyncExecutor() { ThreadPoolTaskExecutor executor new ThreadPoolTaskExecutor(); // 核心線程數(shù)日常并發(fā)量的大概值留點(diǎn)余量 executor.setCorePoolSize(8); // 最大線程數(shù)瞬時(shí)尖峰時(shí)的上限 executor.setMaxPoolSize(16); // 隊(duì)列容量當(dāng)核心線程滿時(shí)任務(wù)先排隊(duì) executor.setQueueCapacity(200); // 線程名前綴日志和監(jiān)控里一搜就能定位 executor.setThreadNamePrefix(async-log-); // 空閑線程存活時(shí)間 executor.setKeepAliveSeconds(60); // 拒絕策略隊(duì)列和線程都滿了由調(diào)用者線程執(zhí)行 executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy()); executor.initialize(); return executor; } }這里的每個(gè)參數(shù)都不是拍腦袋定的需要結(jié)合業(yè)務(wù)量去推。核心線程數(shù)先按接口QPS估算一般日常請(qǐng)求量下查詢或插入日志的耗時(shí)如果是10毫秒一個(gè)線程一秒能處理100個(gè)任務(wù)那么100 QPS只需要一個(gè)線程就能撐住考慮到波動(dòng)留三四倍余量選的8個(gè)核心線程足夠。隊(duì)列容量不要設(shè)得太大太大雖然不丟任務(wù)但會(huì)造成任務(wù)積壓日志延遲嚴(yán)重200這個(gè)值對(duì)日志類任務(wù)來(lái)說能容忍突發(fā)流量而不丟數(shù)據(jù)。拒絕策略我選 CallerRunsPolicy 是刻意的。線程池滿了之后這個(gè)策略會(huì)讓提交任務(wù)的線程也就是主業(yè)務(wù)線程自己去執(zhí)行任務(wù)相當(dāng)于降級(jí)回同步模式。這樣做的優(yōu)點(diǎn)是絕對(duì)不丟任務(wù)代價(jià)是某種極端情況下主線程會(huì)被拖慢。相比丟棄任務(wù)丟日志我更愿意接受偶爾的全同步兜底關(guān)鍵日志一條都不能少。還要注意最后一行 executor.initialize() 不是隨便寫的。ThreadPoolTaskExecutor 在容器啟動(dòng)時(shí)如果聲明成 Bean 且注入位置正確通常Spring會(huì)幫你初始化但有些場(chǎng)景下提前調(diào) getThreadPoolExecutor() 或使用 Lazy 注入時(shí)手動(dòng) initialize 能避免一些奇怪的懶加載問題。3.3 編寫一個(gè)自定義操作日志注解有了線程池我們還需要一個(gè)入口來(lái)標(biāo)記“哪些方法要走異步切面”。這里我選擇自定義注解而不是直接寫 Around(execution(...)) 這種大范圍切點(diǎn)。自定義注解的好處是精確到方法級(jí)別想控制哪些接口需要記錄就在方法上標(biāo)一個(gè)注解不用去匹配包路徑也不容易誤傷其他方法。Target(ElementType.METHOD) Retention(RetentionPolicy.RUNTIME) Documented public interface OperationLog { // 操作模塊名 String module() default ; // 操作類型如查詢、新增、修改、刪除 String type() default QUERY; // 備注信息 String desc() default ; }RetentionPolicy.RUNTIME 必須保留否則Spring AOP在運(yùn)行期拿不到注解信息。這個(gè)注解本身不包含復(fù)雜邏輯它存在的意義是給切面一個(gè)“鉤子”。3.4 編寫異步切面類接下來(lái)是核心部分——異步切面。先直接放完整代碼然后再逐段解釋。Component Aspect public class OperationLogAspect { private static final Logger log LoggerFactory.getLogger(OperationLogAspect.class); Autowired private AsyncLogHandler asyncLogHandler; Around(annotation(operationLog)) public Object record(ProceedingJoinPoint joinPoint, OperationLog operationLog) throws Throwable { long startTime System.currentTimeMillis(); Object result; try { result joinPoint.proceed(); } catch (Throwable throwable) { // 業(yè)務(wù)方法執(zhí)行失敗也照常記錄日志讓審計(jì)知道發(fā)生了異常 asyncLogHandler.save(buildLog(joinPoint, operationLog, startTime, null, throwable.getMessage())); throw throwable; } long costTime System.currentTimeMillis() - startTime; // 業(yè)務(wù)成功異步記錄正常日志 asyncLogHandler.save(buildLog(joinPoint, operationLog, startTime, costTime, null)); return result; } private OperationLogEntity buildLog(ProceedingJoinPoint joinPoint, OperationLog operationLog, long startTime, Long costTime, String errorMsg) { OperationLogEntity entity new OperationLogEntity(); entity.setModule(operationLog.module()); entity.setType(operationLog.type()); entity.setDesc(operationLog.desc()); entity.setMethod(joinPoint.getSignature().toShortString()); Object[] args joinPoint.getArgs(); if (args ! null args.length 0) { entity.setParams(JSON.toJSONString(args)); } entity.setStartTime(new Date(startTime)); entity.setCostTime(costTime); entity.setErrorMsg(errorMsg); return entity; } }切面本身的執(zhí)行時(shí)機(jī)是在業(yè)務(wù)方法調(diào)用的線程里也就是說攔截、計(jì)時(shí)、參數(shù)拼接這些輕量操作依然消耗主線程時(shí)間只不過真正耗時(shí)的數(shù)據(jù)庫(kù)寫入被我們轉(zhuǎn)嫁到了異步線程池。注意到切面里 try-catch 了業(yè)務(wù)方法的異常目的是保證無(wú)論業(yè)務(wù)成功還是失敗操作系統(tǒng)日志都被記錄不會(huì)因?yàn)橹髁鞒虉?bào)錯(cuò)就丟失審計(jì)信息??赡苡腥藭?huì)問既然用了Around通知是不是所有邏輯都寫在切面里就夠了為什么還要單獨(dú)搞一個(gè) AsyncLogHandler Bean原因很簡(jiǎn)單Async 注解必須作用在由Spring容器管理且通過代理調(diào)用的方法上如果你直接在切面類自己的方法上加 Async而被切面類內(nèi)部直接調(diào)用的方法是不經(jīng)過代理的異步就靜默失效了。所以把異步方法抽到另一個(gè)獨(dú)立Bean中通過自動(dòng)注入來(lái)調(diào)用才能保證代理生效。Component public class AsyncLogHandler { private static final Logger log LoggerFactory.getLogger(AsyncLogHandler.class); Async(asyncExecutor) public void save(OperationLogEntity entity) { try { // 這里模擬真實(shí)落庫(kù)或發(fā)送到消息隊(duì)列 log.info(異步保存日志: {}, JSON.toJSONString(entity)); Thread.sleep(100); } catch (Exception e) { log.error(異步日志保存失敗, e); } } }AsyncLogHandler 的 save 方法上有 Async(asyncExecutor)這個(gè)注解告訴Spring調(diào)用這個(gè)方法時(shí)不直接在當(dāng)前線程里執(zhí)行而是把它封裝成一個(gè)任務(wù)丟進(jìn) asyncExecutor 這個(gè)線程池。方法內(nèi)部我專門 try-catch 了一把雖然日志保存不會(huì)因?yàn)楫惓S绊懼髁鞒痰绻徊东@異常信息可能直接丟了后續(xù)想排查日志缺失原因都沒得查。這里的 Thread.sleep(100) 是刻意模擬耗時(shí)場(chǎng)景用來(lái)在測(cè)試時(shí)驗(yàn)證主線程確實(shí)沒被拖慢。如果只想對(duì)切面內(nèi)一小部分邏輯做異步而不想引入額外的Async方法也可以結(jié)合CompletableFuture在切面里提交任務(wù)但實(shí)際效果不如獨(dú)立異步Bean清晰推薦用上面的寫法。3.5 在業(yè)務(wù)方法上打上注解然后是業(yè)務(wù)側(cè)。拿一個(gè)簡(jiǎn)單的訂單查詢接口舉例RestController RequestMapping(/order) public class OrderController { GetMapping(/detail) OperationLog(module 訂單模塊, type QUERY, desc 查詢訂單詳情) public ResultString getOrderDetail(RequestParam(orderId) Long orderId) { // 模擬業(yè)務(wù)處理比如查庫(kù)、調(diào)外部接口 return Result.success(訂單詳情數(shù)據(jù)); } }加上 OperationLog 之后這個(gè)接口一旦被調(diào)用切面就會(huì)攔截。你不需要在業(yè)務(wù)代碼里寫任何日志相關(guān)邏輯所有橫切關(guān)注點(diǎn)都集中在切面和異步處理器里代碼整潔度比過去一行行手寫日志高出一大截。3.6 啟動(dòng)驗(yàn)證與耗時(shí)對(duì)比寫一個(gè)小的測(cè)試Controller接口驗(yàn)證異步效果。開啟兩個(gè)請(qǐng)求第一個(gè)走沒有異步切面的普通接口第二個(gè)走上文加了日志注解的接口。我用一個(gè)簡(jiǎn)單的循環(huán)調(diào)用接口100次統(tǒng)計(jì)平均響應(yīng)時(shí)間。測(cè)試結(jié)果非常直觀場(chǎng)景平均響應(yīng)時(shí)間日志寫入是否完成無(wú)AOP切面25ms無(wú)日志AOP同步寫入日志145ms已完成AOP異步寫入日志38ms異步完成日志稍后落庫(kù)再看線程池日志輸出里會(huì)出現(xiàn)類似 async-log-1、async-log-2 的線程名而主線程是 http-nio-8080-exec-XX。這從側(cè)面印證了日志任務(wù)確實(shí)被移交給獨(dú)立線程處理了主線程沒有被阻塞。4. 實(shí)戰(zhàn)中的坑與排查技巧4.1 異步靜默失效為什么 Async 加了卻沒效果這個(gè)坑我遇到太多次了。典型場(chǎng)景是代碼里明明寫了 Async但是方法還是同步執(zhí)行接口依舊被拖慢。原因無(wú)非下面幾種首先檢查啟動(dòng)類或配置類有沒有加 EnableAsync。這個(gè)注解是開啟異步代理的總開關(guān)漏了它Async 就是一個(gè)普通注釋Spring根本不會(huì)處理。其次是代理失效問題。如果異步方法是被同類中的另一個(gè)方法直接調(diào)用的比如在同一個(gè)Service里methodA() 調(diào) methodB()而 methodB() 上標(biāo)注了 AsyncmethodA() 里直接調(diào) methodB() 時(shí)走的是 this.methodB()不經(jīng)過Spring生成的代理對(duì)象異步自然就失效了。正確做法是把 methodB 拆到另一個(gè)Service里或者注入自身的代理對(duì)象。再就是方法訪問修飾符問題。Spring AOP默認(rèn)只能代理public方法如果 Async 標(biāo)注在private或protected方法上代理邏輯根本不會(huì)生效。這和AOP的CGLIB機(jī)制有關(guān)確保方法是public是基本要求。排查這個(gè)問題時(shí)可以開啟Spring AOP的debug日志在 application.yml 里加這么一行配置logging: level: org.springframework.aop: DEBUG然后啟動(dòng)看控制臺(tái)如果輸出中包含“proxy”相關(guān)的增強(qiáng)日志說明AOP代理創(chuàng)建成功了。也可以用強(qiáng)制類型轉(zhuǎn)換來(lái)驗(yàn)證AsyncLogHandler handler applicationContext.getBean(AsyncLogHandler.class); System.out.println(是否為代理對(duì)象: (handler instanceof org.springframework.aop.framework.ProxyFactoryBean));或者直接打印類名看到class ...$$EnhancerBySpringCGLIB$$...這樣的后綴就說明代理生效了。4.2 事務(wù)不回滾異步任務(wù)里寫的數(shù)據(jù)庫(kù)到底算什么這個(gè)問題的場(chǎng)景特別容易混淆。假如你在一個(gè)事務(wù)方法里調(diào)用了異步日志方法異步方法內(nèi)部自己去更新另一張表接著主事務(wù)拋異?;貪L。很多人第一反應(yīng)是“我都回滾了異步里寫的數(shù)據(jù)也應(yīng)該沒了”但實(shí)際上異步方法用的是單獨(dú)事務(wù)主事務(wù)的回滾管不到它。所以設(shè)計(jì)時(shí)有一條紅線需要心里有數(shù)凡是和主業(yè)務(wù)有強(qiáng)一致性要求的寫操作都不能放進(jìn)異步切面。比如訂單金額變更后更新賬戶余額表就不能用這種異步方案一旦主流程成功但異步更新失敗數(shù)據(jù)就永久不一致了。只有日志、審計(jì)、通知這類允許最終一致甚至允許丟失的數(shù)據(jù)才適合放進(jìn)異步邏輯。如果一定要在異步任務(wù)里做數(shù)據(jù)庫(kù)操作建議方法上顯式加上 Transactional(propagation Propagation.REQUIRES_NEW)讓異步方法自己開啟一個(gè)獨(dú)立事務(wù)并確保你不希望它被主事務(wù)影響時(shí)業(yè)務(wù)是接受的。不要指望Spring默認(rèn)行為幫你兜底。4.3 線程池滿與拒絕策略的取舍線程池參數(shù)設(shè)計(jì)不合理最常見的現(xiàn)象有兩種。一種是核心線程數(shù)太小、隊(duì)列容量太小高并發(fā)時(shí)大量任務(wù)被拒絕日志大量丟失另一種是核心線程數(shù)開太大低并發(fā)時(shí)白白占著系統(tǒng)資源。我在線上項(xiàng)目經(jīng)歷過一次報(bào)警某次大促流量沖高接口QPS從平時(shí)的500飆到3000日志切面線程池隊(duì)列迅速填滿由于當(dāng)時(shí)配置的是 DiscardPolicy 策略超出容量的任務(wù)全被靜默丟棄了。雖然業(yè)務(wù)接口沒受影響但事后復(fù)盤發(fā)現(xiàn)那段時(shí)間的操作日志缺口很大。從那之后我所有核心系統(tǒng)的線程池拒絕策略一律改成沒得商量的一條要么CallerRunsPolicy要么AbortPolicy加報(bào)警。丟數(shù)據(jù)永遠(yuǎn)比拖慢接口更不可接受尤其是審計(jì)類數(shù)據(jù)少一條后續(xù)糾紛都說不清楚。CallerRunsPolicy雖然會(huì)讓主線程在極端情況下幫忙干異步活但這是保數(shù)據(jù)的底線操作。同時(shí)線程池監(jiān)控必須跟上。Spring的ThreadPoolTaskExecutor可以通過 Actuator 暴露指標(biāo)或者你自己定時(shí)輸出線程池活躍數(shù)、隊(duì)列大小、任務(wù)完成數(shù)。我習(xí)慣在日志里每5分鐘打一次線程池狀態(tài)Scheduled(cron 0 */5 * * * ?) public void monitorAsyncPool() { ThreadPoolTaskExecutor executor SpringContextHolder.getBean(asyncExecutor); ThreadPoolExecutor poolExecutor executor.getThreadPoolExecutor(); log.info(線程池大小{}, 活躍數(shù){}, 隊(duì)列容量{}, 隊(duì)列當(dāng)前{}, 完成任務(wù)數(shù){}, poolExecutor.getPoolSize(), poolExecutor.getActiveCount(), executor.getQueueCapacity(), poolExecutor.getQueue().size(), poolExecutor.getCompletedTaskCount()); }發(fā)現(xiàn)隊(duì)列容量長(zhǎng)時(shí)間一半以上就要考慮擴(kuò)容或者排查是否有慢任務(wù)卡住了線程。異步任務(wù)也不能完全撒手不管監(jiān)控在手心里不慌。4.4 異步任務(wù)內(nèi)容膨脹從輕量日志到“偽異步”還有一個(gè)實(shí)戰(zhàn)體會(huì)很多人搞完了異步切面覺得“反正都異步了”就把重業(yè)務(wù)邏輯也往異步里塞這是大忌。異步不改變?nèi)蝿?wù)本身的耗時(shí)它只是讓耗時(shí)不再阻塞主線程但如果任務(wù)提交速度大于消費(fèi)速度隊(duì)列會(huì)積壓最終表現(xiàn)為日志延遲越來(lái)越久甚至觸發(fā)拒絕策略。有一次我們接了一個(gè)需求用戶下單成功后切面異步調(diào)用推薦算法實(shí)時(shí)計(jì)算相似商品并更新推薦列表。這個(gè)算法單個(gè)就要跑兩三秒并發(fā)高的時(shí)候隊(duì)列里堆了幾千個(gè)任務(wù)用戶下單后可能十幾分鐘后才看到推薦更新。后來(lái)把這個(gè)重任務(wù)移到消息隊(duì)列由獨(dú)立服務(wù)異步消費(fèi)才把問題解決。用AOP異步方案的準(zhǔn)則是單個(gè)任務(wù)執(zhí)行時(shí)間不超過幾百毫秒任務(wù)本身無(wú)狀態(tài)不依賴主流程返回結(jié)果允許一定的延遲到達(dá)。凡是滿足不了這三點(diǎn)還是老老實(shí)實(shí)用MQ或定時(shí)任務(wù)去扛別在AOP切面里硬磨。5. 結(jié)合實(shí)際項(xiàng)目的一點(diǎn)總結(jié)與擴(kuò)展建議這個(gè)方案在我項(xiàng)目里已經(jīng)穩(wěn)定運(yùn)行一年多再聊幾個(gè)擴(kuò)展方向。如果日志數(shù)據(jù)量很大不需要每個(gè)異步任務(wù)都去實(shí)時(shí)寫數(shù)據(jù)庫(kù)可以先寫到本地內(nèi)存隊(duì)列批量攢到一定條數(shù)或每隔幾秒統(tǒng)一刷庫(kù)減少數(shù)據(jù)庫(kù)I/O壓力。Spring的 Async 配合批量插入是天然契合的異步線程池本身就是一批一批地消費(fèi)任務(wù)。如果對(duì)日志的完整性有更高要求還可以在切面里把日志實(shí)體先序列化為JSON異步任務(wù)里先寫本地文件再由其他組件同步到日志平臺(tái)。這樣切面幾乎零耗時(shí)也不依賴外部存儲(chǔ)的可用性??傊悸肥枪潭ǖ腁OP負(fù)責(zé)“截”數(shù)據(jù)異步負(fù)責(zé)“搬”數(shù)據(jù)線程池負(fù)責(zé)“穩(wěn)住”吞吐。我在實(shí)際使用中還有一個(gè)體會(huì)可能就是這套方案最核心的底線思維異步化不能丟重點(diǎn)也不能全盤異步化。非核心動(dòng)作才配異步核心鏈路該同步還是同步否則排查線上問題時(shí)你會(huì)發(fā)現(xiàn)明明功能正常數(shù)據(jù)卻到處缺角那個(gè)滋味比接口慢一點(diǎn)難受得多。比例怎么拿捏多踩幾次坑就有感覺了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷九| 色婷婷丁香九月| 97高清国语自产拍| 久久99热免费最新版| 超碰在线人妻| 激情五月综合第一页| 五月丁香六月激情综合| 丁香五月六月综合激情| 思思热在线观看| 久久视这里只有精品| 综合另类激情| 综合久久十三| 大伊香蕉精品视频在线| 婷婷综合久久| 婷婷五月天小说| 婷婷五月天电影网| 俺去也五月天| 综合图片色色| 色五月婷婷亚洲最大| 最新激情五月天| 欧美激情综合色综合啪啪五月| 成人中文网| 国产亚洲99久久精品| 六月丁香激情综合| 久久在线人妻| 五月丁香激情欧洲啪啪| 人妻有码乱操| 国产精品激情AV久久久青桔| 99热综合| 精品一二三区久久AAA片| 久久99精品久久久久久噜噜| 丁香五月天婷婷激情| 亚洲AAAA网| 国产伦理精品高清在线观看网站一区二区 | 丁香社92视频| 热久91| 亚洲成人无码专区| 99热午夜精品| 精品九九久久| 婷婷五月色情| 狠狠色综合网| 色情五月丁香婷婷网| 99ri久久| 九九蜜臀精品| 丁香五月天精品| 欧美丁香婷婷天天操| 天天肏高清在线| www91色网站| 色色色五月天婷婷| 丁香狠狠操| 丁香五月桃花在线激情综合| 九月丁香八月婷婷久久综合久97| 久久女人天堂| 五月天婷婷在线观看精品男人| 久久视这里只有精品| 久99视频在线观看| 色久婷婷网| 开心五月六月婷婷| 亚洲 小说 欧美 激情 另类| 色婷婷丁香| 婷婷色Av| 天堂综合久久 | 91蜜桃婷婷狠狠久久综合9色| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 五月婷婷五月天天| 直接看的AV| 五月婷婷六月丁香色| 免费在线观看av网站| 久久只有18视频| 婷香五月| 操B视频在线播放| 欧美S码亚洲码精品M码| 91人人爽人人操| 91 久热| W色综合| 91狼友视频在线观看| 日韩天堂久久| 色婷婷电影网| 亚洲妇女熟BBW| 丁香五月色五月| 五月丁香成年黄色| 婷婷五六月丁香| 桃色激情婷婷伊人网| 五月丁香在线婷婷蜜桃| 久久久大香蕉| 成人无码免费一区二区中文| 丁香婷婷五月激情| 一区二区三区四区无码| 五月婷婷五月天| 婷婷亚洲天堂| 97极品在线| 婷婷伊人| 色色亚洲视频| 婷婷五月丁香综合网| 伊人久久大香线蕉AV最新午夜| 色噜噜狠狠色综合网| 人人澡天天色天天做| 五月婷婷六月基地| 五月丁香啪啪啪| 人妻激情网| 99综合网| 91凹凸在线| 99热精品在线观看| 国产精品久久..4399| 五月婷成人网| 日日爽日日| 三日本无码| 97资源欧美日韩大香蕉超碰一区| 激情五月丁香综合网站 | 日韩黄色电影| 久色大香蕉| www.超碰| 激情啪啪五月| 激情婷婷丁香色五月| xxxx五月激情| 夜夜爽天天干| 97人人操人人| 色婷婷五月在线| 综合久久十三| 五月婷婷综合色啪首页| 天天日天天操心| 亚洲av成人电影在线观看| 日本一级黄色电影| 久久多色| 99视频精品在线| 久99热| 欧美婷婷综合| www.henhengan| 亚洲精品字幕在线观看| 99久久久国产大片| 婷婷91| 日本久久精品18| 五月中旬婷婷丁香六| 婷婷色五月丁香六月欧美啪| 欧美丁香五月97色| 任你日视频| 九九九九无码| 五月天天天天天天天天天天天天天天天婷婷婷| 天天久久婷婷| 五月婷婷激情久久| 91porn一起草| 99久久久国产精品免费蜜乳tv| 丁香网五月天激情| 五月丁香婷婷五月色| 91好好热日本在线| 亚洲综合另类| 香蕉久久国产av一区二区| 日本成人噜噜| 婷婷性爱综合| 免费亚洲婷婷五月| 婷婷 伊人 久久| 天天射色五月天| 亚洲人妻av伦理| 婷婷五月天综合网| 99综合视频一体| 狠狠色丁香久久婷婷综合五月| 婷婷深爱五月丁香网| 蜜桃人妻无码AV天堂三区| 大香蕉婷婷色| 天天操夜夜操| 97涩涩丁香五月天| 五月丁香久久综合91| 激情涩涩网| 久久综合丁香激情五月| 99热免费网站| 被男人添B超爽视频| 色婷婷基地| 91综合色| 操操啪| 在线天堂9| 亚洲 小说 欧美 激情 另类| 成人在线视频网| 日韩无码人妻一区二区| 久久伊人9| 国产XXXX搡XXXXX搡麻豆| 色综合丁香婷婷| 五月天另类激情在线| 99在线视频。| 五月色影院| 在线成人国产| 大香蕉啪啪| 色色爽爽天天| 大香蕉啪啪啪| 丁香五月六月欧美| 九九久久高清| 亚洲热久久| 国在线激情网| 在线免费视频caop| 婷婷色五月激情强奸四射| 婷婷五月色图| 丁香成人五月天| 五月丁香亚洲五月| 激情九九九九| 婷婷五月激情四月综合 | 亚洲亚洲人成综合网络| WWW五月| 丁香五月色色婷| 囯产精品久久欠久久久久久九大| 天天色月| 丁香深五月婷婷| 这里只有精彩视频| 深爱 五月天| 成人在线日韩欧美| 99精品视频在线观看| www.婷婷五月天,com| 狠狠操狠狠| 干亚洲天堂| 少妇出轨做爰高潮A片| 五月丁香婷婷潮喷中文字幕| 久久激情网| 中文幕无线码中文字蜜桃| 99久久久国产精品免费蜜乳tv| 五月婷婷之综合激情在线| 六月婷婷在线视频| 五月天婷亚洲天综合网综合| 婷婷色狠狠| 色婷婷综合影院| 激情的五月婷婷蜜桃| 大战熟女丰满人妻AV| 日韩精品二三区| 欧美五月婷婷| 超碰九热| 婷婷五月婷婷| 天堂综合久久 | 丁香六月色情| 色色色色色色色色网站| 激情婷婷另类| 一级黄色影片| 四色五月视频| 婷婷.com| 五月天激情四射| 久久久久丁香婷婷五月天| 色婷婷丁香| 色色色com| 99热这里| 五月丁香六月激情欧美综合| 亚洲精品操一操、噜一噜、摸一摸、爽 | 综合aV在线| 91丨九色丨熟女|老版| 激情五月网站| 成人噜噜网| 99热97美女| 91九色首页| 丁香六月婷婷综合缴| Av性爱网站| 97碰人人操| 熟女人妻一区二区三区免费看| 五月天激情视频| 天天拍夜夜爽日日| 国产中文亚洲欧美日韩性交| yellow视频在线观看91| 亚洲 欧洲 国产 伦综合| 婷婷五月天激情AV影院| 开心五月六月婷婷| 丁香大香蕉| 五月天大香蕉婷| 夜夜谢天天干| 色婷婷基地| 亚洲中文乱字字幕在线永久| 五月婷导航| 七七九九色色| 天天日天天舔天天摸| 久久国产高清| 欧美六月婷婷| 99热99思午夜精品| 国产超碰av| 丰满老熟妇BBBBB搡BBB| 色情综合网| 99久热在线精品| 色五月天婷婷| 99久久五月婷婷| 俺去也在线www色官网| 成人在线网址| 99热永久在线观看| 亚洲激情亚洲激情 | 九九艹女| 无码AV大香线蕉伊人| 99精品视频在线观看| 91久久综合亚洲鲁鲁五月天| 丁香五月影视| 五月婷婷色影院| AV成人在线播放| 婷婷色色网站| 99久99久| 性爱网六月丁香| 欧美久久久中文字幕| 任你躁XXXXX麻豆精品| 五月天婷婷基地| 色爱亚洲| 97干在线| 亚洲国产精品VA在线看黑人| 五月丁香婷婷伊人| 色九九丁香九月色九九色| 337久久| 五月丁香大香蕉| 激情六月婷婷| 五月天国产| a网站免费观看| 激情AV| 99碰碰| 91色久| 免费看欧美成人A片无码| 婷婷五月天激情综合深爱| 九九99在线免费在线观看视频| 99色色网| 97ai婷婷| 天堂综合久| 99人妻碰碰碰久久久久| 色碰碰视频| 丁香五月婷婷基地| 男人天堂亚洲综合| 九九无码视屏| 99热免费精品| 97干在线| 91国产精品视频播放| 大香久久综合网| 99噜噜噜| 亭亭丁香aV| 人妻内射麻豆视频| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 91视频综合网| 亚洲操B| 成人精品视频99在线观看免费| 久久婷婷五月综合色欧美| 十二区无码| 99视频在线啪| av在线超清中文| 六月丁香五月激情婷婷| 欧美激情综合色综合啪啪五月| 99热国产| 丁香婷婷激情四射五月| 五月丁香激情综合| 天天干天天干天天干天天干天天干天天干天天 | 婷婷婷婷婷婷婷婷| 日本欧美成人片AAAA| 久久久GOGO无码啪啪艺术| 久久婷婷五月综合色欧美| 最新婷婷五月丁香| 日本精品在线噜噜噜| 激情五月网站| 激情五月天啪啪| 色噜噜狠狠色综无码久久合欧美| 丁香9月婷婷| 亚洲国产成人在线| 播五月丁香六月| 婷婷丁香激情综合色情| 成人丁香婷婷| 综合色播| 草综合14| 99re热视频这里只精品| 91碰超| 日日夜夜青青草| 操骚货在线| 99久久久久| 夜夜AVV| 人人澡天天色天天做| 99色免费视频| www.婷婷| 91精品久久久久| 丁香美女主播视频在线观看| 六月丁丁香| 欧美三级视频下载| 在线中文AV| 亚洲一级色电影| 色综合综合色| 欧美激情综合色综合啪啪五月| 欧美超碰亚洲| 97婷婷丁香五月| 欧美三级欧美一级| 色99婷婷五月天| 5月丁香综合网| 殴美激情综合网| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 激情欧美婷五月| 国产AV一区二区三区最新精品| 91无码一起草| 99无码免费视频| 99色色| 99色人| 国产精品久久99| 无码一级片| 丁香五月婷婷亚洲综合精品| 大香蕉久久久久| 色一色综合| 97干在线播放| 五月激激激情综合网| 婷婷激情综合网| 丁香婷婷激情| 婷婷五月天开心激情网| 日产精品久久久久久久蜜臀| 色五月婷婷在线| 色婷婷最新域名| 伊人丁香五月| 亚洲综合九九| 五月丁香激情综合| 中文字幕高清av| 涩综合网| 欧美三级欧美一级| www,色婷婷| 综合久久人妻| YW无码| 玖操97| 久99| 99热国产| 影音先锋777xfplay色资源网站| 免费无码毛片一区二区A片 | 少妇人妻人伦A片| 色色国产| 激情五月综亚网| 丁香婷婷婷| 伊人国产婷婷五月天| 天天操天天操天天操天天操天天操| 欧美狠狠一在草| 婷婷久久亚洲| 性生活视频98791| 亚洲中文字幕在线观看| 影音先锋激情网| 丁香五月激情澎湃一区| 五月丁香婷婷钟和色图| 日韩av高清| 噜噜噜色噜噜| 天天干肏夜夜| 丁香五月成人婷婷| 先锋资源91| 91超级碰在线视频| 亚洲黄色影视| 久热无码| 婷婷六月色情| 超碰成人影视| 噜噜在线| 综激情网| 青青草五月天| 色婷婷丁香五月观看| 国产午夜精品一区二区三区嫩草| 日本激情91| 老师把我爽高潮了免费A片| 久狠日av| 99ri精品在线观看| 婷婷色导航| 丁香五月天激情视频| 久色激情| 玖玖爱伊人| 97狠狠色| 激情五月天婷婷久久久久久久久久久| 激情综合五月| 久久精品性爱视频,| 欧美日本黄色| 99热大香蕉| 99热这里只有精品23| 操99| 婷婷丁香人妻久久在线观看| 激情 婷婷| 婷婷涩五月| 亚洲另类婷婷五月丁香在线播放| 久久精品99国产精品日本| 婷婷五月天免费| 裸体做A爰片毛片A片免费| 九月色婷婷| www99热| 在线中文字幕视频| 色五月婷婷天堂| 婷婷五月天在线观看免费| 琪琪色影音先锋| 91九色精品女同系列| 99久在线精品99re8热| 涩涩五月天| 久热免费视频| 能看的av网站| 伊人久久激情图区五月| 九一九九黄色| 婷婷六月天| 亚洲五月天婷婷综合| 伊人综合色干| 亚洲1区| 九九视频这里只有精品在线播放| 天天色视频| 丁香六月婷婷综合啪啪| 色情五月天小说| 天天草女人| 在线网黄| 成人在线99| 草榴视频黄色网| 亚洲性视频| 九九Av| WWW.久久.COM| 国产伊人大香蕉| 亚洲无码色| 五月婷婷在线综合| 精品五月视频婷婷在线观看| 狠狠干最新地址| 久热 91| 东北婷婷五月天| 久久新地址| 丁香五月激情图片婷婷| 色色色色色色色色网站| 五月天黄色激情小说| 就爱日五月天| 99精品综合视频| 婷婷综合五月天| 中文字幕丰满孑伦无码专区 | 91viP在线看| 1024在线视频| 色9月| 亚洲日韩一页精品发布| 丰滿爆乳一区二区三区| 五月丁香婷婷免费视频| 天天日天天日天天搞| 五月天堂色| 99天堂在线观看免费视频| 大香蕉伊人99| 狠狠搞狠狠操| 五月天婷婷社区| 丁香五月老师| 色九月| 蜜乳中文字| www.99精品视频| 538在线精品| 久9久成人精品视频| 日 日干 日日做| 五月丁香婷婷啪啪| 亚洲第一黄网| www.色五月.com| 一起草aV| 婷婷色基地在线看| 性爱网五月天| 97干干干丁香| 伊人久久婷婷| 99re这里有精品手机在线| 一区二区中文字幕| 丁香五月欧美色综合| 久久婷婷六月综合综合| 色五月色开心开心五月| 亚洲视频无| 26UUU欧美激情一区二区| 99九九精品| 综合亚洲AV| 五月天六月婷婷电影| 热99只有里视频| 五月天开心激情综合网| 五月天黄色激情小说| 免费AV黄在线播放| 丁香五月激情婷婷激情| 玖操97| 91无码视频| 精品久久这里热66| 999热这里只有精品| 五月婷婷天| 噜噜噜噜在线| 久久欧洲综合网| 九九九九九九九热| 色天天综合| 色吧五月婷婷| 五月天激情小说网| 久草五月婷婷| www.激情| 中文字幕无码AV| av国产精品| 久久久99精品| 日良久久| 99热这里精| 色XX综合网| 五月激情婷婷四射| 伊人热婷婷| 91男人资源站| WWW色五月| 九97免费视频| 99日精品视频| 五月婷婷六月丁香免费| 五月天中文字幕在线婷婷| 婷婷 亚洲图片 丁香| 日日操,天天操| 色噜噜狠狠色综合日日| www.99精品日操伊人乱碰在线| 九九久久视频| 亚洲黄色影视| 色婷亚洲| 一起草Av| 99热在线观看| 欧美激情五月天| 久久久人妻人伦| 全国最新疫情| 亚洲天天| 亚洲激情四谢| 色一情一乱一乱91Av| 区欧美日韩成人| 色亭亭丁香五月天| 九色婷婷| 九月激情综合婷婷| 大波美女VA网站| 91中文在线| 狠狠狠狠狠| ai97re99一本| 久久一级免费黄色片| a性生活久久无| 99热日本| 丁香色婷婷| 97色伦另类图片小说视频| 国产噜一噜天天噜| 色999五月色| 九九99久久精品| 国产精品黑丝| 五月天激情站| 日本五月天婷婷丁香| 国产67194| 久久五月婷综合| 97干综合网| 开心五月激情| 这里只有精品免费视频在线观看| 99热6精品| 九九久久偷拍| 婷婷亚洲天堂| 思思久久99| 五月丁香成人网| 色五月视频,小说| http:色情日本com| 九九色院| 婷婷五月香蕉| 伊人青草成人| 五月婷婷官网色| 9999热在线免费观看| 丁香五月天在线观看视频| AV操操操| 全部老头和老太XXXXX| 婷婷终合色图| 九九精品在线网| 狠狠色噜噜狠狠狠狠综合| 伊人五月丁香| 天天操婷婷| 久久久国产精品黄毛片| 神马欧美精| 丁香亭亭久久| 91九色中文字幕女在线观看| 专区无日本视频高清8| 五月大香蕉| 五月桃花网综合| 五月丁香色婷婷伊人| 日本高清综合网五月丁香| 五月丁香啪| 欧美精品99久久久| 美女激情综合| 99热在线爱| 婷婷五月天成人基地| 91久久久久久久久18| 成人综合视频在线| 日韩xx在线| 激情美女五月天| 99精品国产在热久久婷婷| 91无码一区人妻A片蜜| 天天肏屄夜夜爽| 天天搡日日搡aaaaⅩ| 91av色色乱视频| 五月丁香花激情综合网| 福利视频在线播放| 伊人春天av| 婷婷五月丁香五月丁香| 婷婷六月综合在线| 丁香婷婷激情综合五月激情 | www.国产亚洲69ty.久久久久久久久久久久| 六月婷婷八月丁香| 2022久久婷婷| 五月激情婷婷丁香天堂| 最新日韩AV中文字幕| 69色色视频| 亚洲宗合激情| 99re这里只有精品在线观看| 好叼操在线观看| www.五月天。com| 嫩BBB搡BBBB榛BBBB| 色综合久久88色综合天天人守婷| 精品夜夜澡人妻无码AV| 伊人超碰| 成人精品免费在线观看| 狠狠色婷婷777| www九月婷婷| 五月天婷婷成人网| 再次出发二| 五月丁香啪啪综合| 琪琪色五月天| 五月丁香六月婷婷免费| 婷婷丁香激情五月| 久草婷婷在线| 思思热视频在线| 五月丁香综合中文| 五月丁香六月婷| 99热这里都是精品| 色婷婷丁香五月天| 啪啪啪五月天| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 五月天伊人av| 99免费热视频在线| 日韩亚洲视频| 美臀自射自家人妻| 亚洲激情综合网| 婷婷福利影院| 婷婷色五月综合| 色五月婷婷伊人| 久久婷婷亚洲| 五月丁香久久久日婷婷久久婷婷日| 色爱综合网| 婷婷色播综合五月| 美女视频图片久久91| 欧美日本黄色| 99热地址| 婷婷五月天天aV| 视色综合| 噜噜噜噜综合在线| 丁香久月| 99色中文| 91操色| 丁香婷婷五月份| www热久久yy9| 九九99视频精品| 色婷婷成人| 婷婷五月丁香91| 五月丁香综合啪啪| 色999五月色| 亚洲 激情 中文| www久久久| 99热在线播放| 六月婷婷色| 538午夜激情| 五月天婷婷偷拍| 国产操碰| 丁香九月婷婷色| 五月丁香好婷婷A片网| 色噜噜狠狠色综无码久久合欧美| 色色网站免费| 激情五月亚洲综合网| 五月婷婷 婷婷五月 一区二区 久久久| 国产美女视频久| 五月香蕉综合| 九九热99熟女| 色噜噜狠狠色综合日日| 亚洲旡码| 欧美亚洲色色色色| 无码一区二区三区四区五区91c| www.狠狠操| 日本激情ⅩXX免费视频| 综合婷| 亚洲亚洲人成综合网络| 婷婷刺激综合| 色婷婷精| 俺也去五月婷婷丁| 久久ww| 狠狠999| 日本久久网| 五月天婷婷丁香人人操91| 青草视频在线观看视频| 亚欧州精品视频| 五月天激情视频五月天| 五月天婷婷色播综合在线| 激情五月天啪啪| 思思热99er| 成人无码精品1区2区3区免费看| 爆乳熟妇一区二区三区爆乳照片| 激情五月色在线播放| oumeisesewang| 在线网黄| 五月天丁香婷婷社区| 美女久久天堂| 性一交一乱一交A片久| 深夜男女福利刺激影院一区完整| 激情五月天开心| 亚洲亚洲亚洲AAAAAA| 中文字幕日产A片在线看| 东北婷婷五月天| 天天噜天天插| 日韩成人无码人妻| www九九| 久久综合五月天| 色视频五月天| 米奇影视五月天| 综合激情五月丁香| 五月激情综合婷婷| 天天 青草 制服丝袜 在线| 色婷婷97| Av大香蕉| 婷婷激情综合| 色五月婷婷av| 九九碰九九爱97| 射区导航| 97超碰人人操| 91人妻人人做人碰人人爽九色| 五月丁香九九| 色情五月天丁香社区| 婷婷影院欧美| 97婷婷在线| 婷婷终合色图| 色噜噜五月天| 色开心五月婷婷丁香HD| 9 9热这里有精品| 色停停影院五月天| 天天se在线视频| www.99精品视频| 九月丁香八月婷婷久久综合久97| 91好好热日本在线| 任你操精品免费| 日本一毛片| 91碰碰| 国产精品久久欧美久久一区| 日本啪啪视频HD| 99视频在线观看地址| 大香蕉在九| 人人操碰| 26uuu偷拍亚洲欧洲综合| 97碰碰在线看视频免费| 人人舔人人色人人高潮| 怡红院院久久| 久久婷婷婷婷伊人| 亚洲精品第一色色色色色色| 色欲五月婷婷| www狠狠| 婷婷激情四射| AV在线不卡播放| 日逼影音先锋AV男人资源站| 九九99热| 亚洲av网站| 色色网站观看| 色婷婷五月天综合网| 一级操逼内射在线视频| 五月综合丁香婷婷| 这里只有精品在线观看视频| 丁香五月影院| 欧美日韩中文国产一区发布| 人操综合| www.黄色片-久久成人国产精品在线播放-999AV| 97久久草草超级碰碰碰| 国产99美少妇| 久久人妻伊人| 久久久香| 国产在线aaa片一区二区99| 99热亚洲只有色| 十区AV| 九九家庭影院| 十月丁香九月婷婷综合| 成人国产综合| 一本大道嫩草AV无码专区| 九月婷婷人人操人人舔人人爱| 女操碰| 色狠狠伊人久久五月丁香| 深爱激情丁香| 婷婷综合激情| 日操夜操天天操不卡| 久热91精品| 国产夫妻操逼内射视频| 天天影视天天爽天天草| 99精品视频网站| 五月婷婷六月激情| 日韩999| 五月色俺婷婷| 人妻操逼视频| 成人久碰| 538午夜激情| www,天天干| 五月丁香婷婷五月色| yazhou seshipin| 婷婷在线激情| 欧洲第一无人区观看| 98永久精品| 伊人大香五月天| 亚洲综合激情五月久久| 欧洲色| 久久九九99桃花视频| 色狠狠综合网| www.五月婷婷| 丁香五月婷婷啪啪啪| 超碰狠狠色| 丁香六月婷婷色播| 狠狠色成人影片| 色噜噜狠狠狠狠色综合久欧美| 亚洲永久免费| 五月激情久久综合| 色综合久久综合中文综合网| 色色五月天 亚洲| 第四色婷婷日本| 婷婷五月天影院| 九九九九九999999| 天天操天天日天天爱| 丁五月激情视频免费| 成人精品视频99在线观看免费| 国产av基地| 五月婷婷丁香狠狠撸久久| 国产免费一区二区三州老师F1F1| 日本三级日本黄色| 丁香婷婷丁香五月欧美人| 另类视频综合| 91pornav在线| 天天色宗合| 日韩黄在免| 亚洲中文丁香| 色综合久久久久| 9 1在线视频| 深爱激情网五月天| 免费无码毛片一区二区A片| www久久99com| 色丁香五月婷婷| 成人做爰高潮A片免费视频| 99久久久久久久| AV天堂婷婷五月天| 图片区 小说区 区 亚洲五月| 丁香九月婷婷| 激情丁香六月| 久久久久久久久99精品| 亚洲成人在线五月天| 欧美日本国产| 六月丁香婷婷开心综合基地| 久久98| 热99国产精品| 五月天婷婷色色| 九九操操| 超碰免费人人| 亚洲区视频| 久久资源网五月婷| 九九热啪啪| 五月婷婷色色色| 99久久精品色老| 亚洲另类婷婷综合| 久久性刺激| 91操在线视频| 久久婷婷五月丁香网| 伊人网碰碰| www.综合久久.com| 噜一噜在线| 激情性爱五月| 久久五月天色婷婷| 婷婷午夜精品久久久| www.henhenl| 丁香五月婷婷基地| 色墦五月丁香| 激情五月天婷婷久久久久久久久久久| 久久久久久人妻| 婷婷五月天激情四射五月天激情| 人人操av| www 五月天 com| 超碰熟女农村在线69| 欧美va亚洲va在线播放| 婷婷伊人欧美| 五月婷婷激情综合网 | 五月丁香啪啪激情| 狠狠色综合网站久久久久| 色色激情五月天| 色婷婷六月天| 91综合在线| 大香蕉啪啪啪| 熟妇人妻中文字幕无码老熟妇 | 99色婷婷视频| 99热精品网| 国产成人AV| 国产VA亚洲VA96| www.99精品视频| www.色色五月天.com| 久久综合婷婷| 成人精品视频99在线观看免费| 久久久久人无码人妻| 日本nghangse中文字幕| 色婷婷www| 精品婷婷五| 5Www色5夜| 色玖玖综合| 国产五月丁香在线| 操B无码视频国语| 人人摸人人| 久久久18| 4399无码视频| 婷婷色综合av| 人人色人人摸人人看| 大香蕉AV电影在线| 欧美成人日韩| 久久这有这里精品| 久草视频大香蕉99| 五月天婷婷激情在线色图| 开心五月激情站| 香蕉97碰碰碰超视精品| 亚洲热综合| 国产资源91在线| 天天肏在线观看| 国产精品久久久爽爽爽麻豆色哟哟| 五月婷婷综合久久| 深夜男女福利刺激影院一区完整| 国产91资源在线| 久久综合影院| www,色中色| 欧美人人超级碰| 狠狠色婷婷| 色久婷婷五月| 人人综合五月人人婷婷| 色色色无码| 丁香五月亚洲综合| 精品人人操| 国产日产亚系列精品版优势| 伊人玖玖婷婷| 草综合14| 5月丁香婷婷| 2022久久婷婷| 夜精品无码A片一区二区蜜桃| http://www.sd-xiangsu.com/| 91操操| 有码一区二区三区| 五月天开心网| 久久性爱视频网站| 天天射射夜| www.久久爱.com| 丁香五月影| 日本一级黄色电影| 丁香五月AV综合激情| 97资源碰碰| 九九Y精品热播| 北京熟妇搡BBBB搡BBBB| 热99在线精品| 99re热免费观看视频精品| 国产伦理精品高清在线观看网站一区二区| 九九精品婷| 亚洲人妻av伦理| www.超碰在线| 五月丁香六月情| 丁香五月亚洲综合| 五月丁香综合啪啪| 激情图片婷婷| 国产激情一区| 成人做爰黄A片免费看直播室男男| 久久作爱| 丁香五月六月婷婷综合| 可以直接看的AV网站| A一级操| 99久久99九九九99九他书对| 99色免费| 亚洲丁香五冃97色| 99热精品免费| 色五月丁香五月| 五月丁香久久| 五月婷婷六月少妇激情| 丁香五月激情视频在线| 天天综合网、天天综合色 | 欧美激情xxxXX| 九九热亚洲中文在线观看免费| 超碰资源在线| 美女91一起草| 99情色五月天| 亚洲丁香婷婷| 99热网精品| 男男野外做爰全过程69| 五月婷婷影院| 超碰在线人妻| 久久伊人五月天| 大香蕉久久| 人人舔人人色人人高潮| 伊人久久五月天综合| 五月丁香激情综合| 综合五月激情网| 激情五月丁香激情综合网 | 91嫩草国产线观看亚洲一区二区| 色婷婷www| 超碰在线综合| 久久久久这里只有精品| 伊人AV五月婷| 五月天俺去也| 日日夜夜婷婷| 五月天婷婷在线播放免费| 五月天婷网| 亚洲免费99| 久色欧美| 强伦轩人妻一区二区电影| 五月天婷婷在线AN| 色婷婷婷婷五月天| 色停停五月,在线观看| 九九色综合九九色| 婷婷丁香五月婷婷| 色停停五月,在线观看| 久久人妻精品| 五月婷婷|欧美| 另类图片色五月| 色五月激情综合网| 大香蕉九九| 激情综合五月| 天天日天天肏天天奸| 激情6月| 久久香视频| A1片久久| 婷婷综合色| 丁香九月激情| 婷婷五月中文在线| 久久午夜理论| 综合图区激情| 五月天激情婷婷| 超碰色综合| 婷婷五月天小说网| 婷婷久久网| 婷婷五月丁香青青草在线| 6 9式性爱视频在线播放| 色色色五月婷| 丁香五月激情啪啪| 色狠狠六月| 超碰妻人人| 丁香五月天天高清在线| 五月深爱网| 伊人91| 大香蕉天堂色| 9久久久久| 99re思思热在线视频| 五月婷色丁香| 亚洲五月花| 六月丁香激情网| 办公室少妇激情呻吟A片在线观看| 日比视频91| 久久天堂色| 人妻综合网| 亚洲色色色色| 成人免费高清在线播放| 97婷婷色| 啪啪啪丁香五月| 亚洲啪啪啪啪| 九九热99热| 婷婷五月天伊人网| 亚洲精品婷婷| 香蕉99网| 久热久| 激情久久天天| 庭庭久久内射| 国产精品VIDEOSSEX久久发布| 久久一级免费黄色片| 久久婷五月婷| 夜夜操,天天撸| 九九综合九九| 国产在线网址1| www.天天色综合| 日本不卡五月婷婷丁香| 久久99视频| 黄网在线免费| 色婷婷99| 丁香五月在线看| 欧美日韩aaa| 有码一区二区三区| Se.婷婷五月天| 丁香六月综合| 精品人妻伦九区久久AAA片| 大香蕉婷婷丁香| 五月婷婷丁香大陆免费| 色婷婷综合久久久久| 五月婷婷综合在线亚洲视频| 五月丁香婷婷色色| 亚洲五月天天| 婷婷伊人网| 激情骚五月| 激情婷婷五六月天| 婷婷丁香成人| 任我肏视频精品| 六月丁香射婷婷欧美色图片| www.夜夜操| 天天干人人奸97| 丁香六月婷婷综合色| 99久在线精品99re8热| 爽tv | av在线资源| 99热思思| www.狠狠| 色综合色五月| 99∨VTV| 热99视频精品在线| 97搞在线| 91九色无码日韩| 人人妻久久妻| 日本欧美成人片AAAA| 婷婷色婷婷亚洲成人| 色香欲综合| 亚洲区在线| 色呦呦免费观看| 婷婷五月影院| 亚洲人人操BD| 婷婷五月成人| 欧美色99| 日本婷色| 99综合99| 四色AVwww| 超碰日韩成人| 五月婷婷久久综合| 婷婷六月色| 任我肏| 日韩成人电影在线播放| 天天色凹凸| 五月天社区狠狠| 99精品国产乱码久久久人妻| 久久婷婷丁香五月一二三| 99热这里只有精品3| 噜噜色五月| 91日视频| 五月丁香婷婷99| 这里只有精品免费视频| 色吊操色妞| 伊人色综在线| 淫视馆av三区| 激情综合网亚洲色图| 婷婷91视频| 99惹精品视频| 亚洲亚洲人成综合网络| www.狠狠干| 欧洲色区| 婷婷五月天xxx| 狠狠精品干练久久久无码中文字幕| 丁香婷最新动态| 开心激情站| 亚洲热手机在线观看| 久色网| 青青草深爱激情网| 香蕉久久国产AV一区二区| 色插综合网| 另类小说色婷婷| 这里只有精品视频国产| 九九热精品在线| 久久99热这里| 天天日中文| 狠狠色婷婷777| 婷婷激情综合色五月久久91| 日本五月天激情| 97婷婷在线视频| 伊人婷婷大香蕉| 婷婷激情中文综合| 99精品视频在线观看| 五月丁香六月婷婷中合网| 丁香六月婷婷综合在线| 人妻第九页| 99热免费精品| www久久久久| 色综合色五月| 99热国产国产| 九九九九精品精| 天天做天天爱天天要| 国产老熟妇亲子乱对白| 五月丁香福利| 婷婷天天舔| 亚洲综合网在线| 夜夜干天天操| 97色在线| 日日夜夜干| 99精品免费欧美小视频| 激情久久久久久久久久久| 色丁香五月婷婷| 五月婷高清视频| 久久无意婷婷| 色情五月婷| 99成人网站| 成人无码髙潮喷水A片| 欧美人人草| 超碰成人电影| 亚洲无码色| 这里只有久久精99| 国产亚洲色婷婷久久99精品91| 天天综合精品| 久热播这里只有精品| 久久99久久99精品免观看粉嫩| 99精品免费视频| 开心五月深爱五月丁香五月激情五月| 亚洲色人妻| 99久久久99久久91熟女| 色五月六月| 超级碰碰一区| 色色网站在线| 欧美3AaAa大片| 99久久99久久| 5月丁香六月婷婷| 婷婷国产五月天17c| 久操热线| 伊人久久五月天| 久久九九网| 91九色超碰| 色色婷婷五月| 久久成人人妻|