99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析 說實(shí)話寫這篇東西的起因很直接我接手過一個(gè)訪問量正在往上走的項(xiàng)目系統(tǒng)之前一直是單機(jī)部署內(nèi)網(wǎng)壓測(cè)、外網(wǎng)訪問都挺正??梢坏┌褢?yīng)用從1個(gè)實(shí)例擴(kuò)到3個(gè)實(shí)例線上立刻出問題。用戶前一個(gè)請(qǐng)求還在正常操作下一個(gè)請(qǐng)求回來就被引導(dǎo)去重新登錄客服那邊一天能收到幾十條“為什么老讓我重新登錄”的反饋。我排查了整整兩天中間試過調(diào)負(fù)載均衡策略、改Tomcat配置效果都不徹底最后拍板換成了標(biāo)題里這套組合Redis Spring Session。這不是網(wǎng)上常說的“臨時(shí)繞過”而是把Session的存儲(chǔ)位置從根本上搬到了應(yīng)用之外讓每一個(gè)實(shí)例都變成無狀態(tài)節(jié)點(diǎn)。如果你正在做微服務(wù)拆分、多實(shí)例部署或者只是單純想把單機(jī)應(yīng)用水平擴(kuò)容這套思路應(yīng)該能給你一個(gè)比較徹底、能直接落地的解決路徑。下面我把整個(gè)問題的來龍去脈、原理、實(shí)操步驟和上線后踩過的坑都梳理一遍內(nèi)容會(huì)偏“實(shí)戰(zhàn)記錄”風(fēng)格你可以邊看邊在本地復(fù)現(xiàn)。1. 單機(jī)Session的局限性多實(shí)例部署后為什么用戶被瘋狂踢下線1.1 一個(gè)真實(shí)故障輪詢策略導(dǎo)致用戶批量掉線先說當(dāng)時(shí)的現(xiàn)象。系統(tǒng)從單機(jī)擴(kuò)到3個(gè)實(shí)例前面掛了負(fù)載均衡策略是最常用的“輪詢”。邏輯上沒什么問題3臺(tái)機(jī)器平均分擔(dān)流量哪臺(tái)都能處理請(qǐng)求。結(jié)果用戶一登錄請(qǐng)求被分到實(shí)例A登錄成功JSESSIONID寫進(jìn)瀏覽器Cookie刷新頁(yè)面后下一個(gè)請(qǐng)求被輪詢到實(shí)例B實(shí)例B在自己的本地內(nèi)存里根本找不到這個(gè)Session于是判定用戶未登錄直接重定向到登錄頁(yè)。最迷惑人的是這個(gè)問題不是100%必現(xiàn)。同一個(gè)用戶點(diǎn)幾次有時(shí)能保持登錄有時(shí)被踢出來完全取決于當(dāng)前請(qǐng)求被分發(fā)到哪臺(tái)機(jī)器。我在本地復(fù)現(xiàn)的時(shí)候開著開發(fā)者工具看Network面板清一色的302跳轉(zhuǎn)Cookie明明沒丟服務(wù)器就是不認(rèn)。后來往日志里加了節(jié)點(diǎn)信息才發(fā)現(xiàn)所有“登錄無效”的請(qǐng)求都落在非登錄節(jié)點(diǎn)上。到這一步問題的定位已經(jīng)很明確HttpSession默認(rèn)只存在于單個(gè)JVM進(jìn)程內(nèi)實(shí)例之間互相不知道對(duì)方手里的Session。1.2 理解HttpSession的“本地宿命”狀態(tài)為什么只在單個(gè)實(shí)例里Java Web開發(fā)里HttpSession的默認(rèn)實(shí)現(xiàn)類是存在應(yīng)用服務(wù)器內(nèi)存里的也就是Tomcat、Jetty這類容器的JVM堆。當(dāng)你在代碼里執(zhí)行request.getSession().setAttribute(user, user)底層就是在當(dāng)前實(shí)例的堆內(nèi)存里維護(hù)一個(gè)Map結(jié)構(gòu)key是Session IDvalue是屬性集合。這個(gè)Map的生命周期被死死綁定在單個(gè)JVM上。單機(jī)部署時(shí)沒有問題因?yàn)樗姓?qǐng)求都打到同一個(gè)JVMSession數(shù)據(jù)天然可見。但一旦拆成多個(gè)實(shí)例每個(gè)實(shí)例都有自己獨(dú)立的內(nèi)存A實(shí)例保存的Session對(duì)B實(shí)例來說就是“不存在的數(shù)據(jù)”。負(fù)載均衡把請(qǐng)求撒到不同實(shí)例上時(shí)用戶會(huì)話自然就“丟”了。本質(zhì)是會(huì)話狀態(tài)Session State和計(jì)算節(jié)點(diǎn)Application Instance被綁死在一起橫向擴(kuò)容時(shí)狀態(tài)沒有跟著擴(kuò)容。1.3 ip_hash和Session復(fù)制為什么只是“緩解”而不是“修復(fù)”我第一反應(yīng)是改負(fù)載均衡策略把輪詢改成ip_hash讓同一IP的請(qǐng)求固定打到同一臺(tái)實(shí)例。這個(gè)方案在內(nèi)部辦公網(wǎng)絡(luò)環(huán)境下驗(yàn)證是有效的但放到公網(wǎng)環(huán)境就露餡了。移動(dòng)網(wǎng)絡(luò)下用戶經(jīng)常切換基站出口IP會(huì)變化公司、家庭、4G/5G網(wǎng)絡(luò)來回切換時(shí)IP也不固定還有一些代理和NAT場(chǎng)景同一個(gè)用戶每次請(qǐng)求的源IP根本不是同一個(gè)。IP一變化ip_hash就把請(qǐng)求分到另一臺(tái)實(shí)例用戶一樣被踢。更麻煩的是即使IP一直穩(wěn)定如果某臺(tái)實(shí)例要做滾動(dòng)發(fā)布或重啟固定在這臺(tái)實(shí)例上的所有在線用戶會(huì)在重啟期間集體掉線。ip_hash本質(zhì)上是在“請(qǐng)求入口”層面想辦法把用戶留在同一個(gè)節(jié)點(diǎn)上它沒有解決“Session狀態(tài)不共享”的根因只是降低了狀態(tài)串臺(tái)的概率。我也看過Session復(fù)制方案。Tomcat支持把Session變更廣播到集群中的其他節(jié)點(diǎn)這樣每個(gè)實(shí)例都復(fù)制一份全量Session。但復(fù)制帶來的問題同樣明顯隨著在線用戶增多集群內(nèi)需要同步的數(shù)據(jù)量成倍增長(zhǎng)廣播風(fēng)暴、網(wǎng)絡(luò)開銷、延遲抖動(dòng)很快會(huì)出現(xiàn)。而且這個(gè)方案強(qiáng)依賴具體應(yīng)用服務(wù)器廠商的實(shí)現(xiàn)換容器、換云平臺(tái)時(shí)兼容成本很高。Session復(fù)制把狀態(tài)從一個(gè)節(jié)點(diǎn)復(fù)制到所有節(jié)點(diǎn)本質(zhì)上還是在“單機(jī)Session”的框架里打轉(zhuǎn)治標(biāo)不治本。2. Redis Spring Session的組合原理這為什么算“最終方案”2.1 Spring Session接管了Session的生命周期而不是存?zhèn)€key那么簡(jiǎn)單要理解為什么這套組合能解決問題先搞清楚Spring Session干了什么。Spring Session不是一個(gè)簡(jiǎn)單的“Session工具類”它的核心是通過一個(gè)Servlet過濾器——SessionRepositoryFilter——把應(yīng)用原本使用的HttpSession實(shí)現(xiàn)整個(gè)替換掉。具體流程是這樣的請(qǐng)求進(jìn)入Servlet容器后SessionRepositoryFilter會(huì)先把原始的HttpServletRequest包裝成一個(gè)SessionRepositoryRequestWrapper。當(dāng)你調(diào)用request.getSession()時(shí)它不再?gòu)娜萜鞅镜氐腟essionManager里拿對(duì)象而是從Spring Session配置好的SessionRepository里去取。這個(gè)SessionRepository可以是基于Redis、JDBC、MongoDB等任意持久化存儲(chǔ)實(shí)現(xiàn)我們這里用的是RedisSessionRepository。整套機(jī)制對(duì)外暴露的接口仍然是標(biāo)準(zhǔn)的HttpSession所以業(yè)務(wù)代碼基本不用改動(dòng)以前怎么用session.setAttribute()現(xiàn)在還是怎么用。Spring Session在背后幫你完成了Session的創(chuàng)建、讀取、寫入、過期刪除并且把數(shù)據(jù)序列化后存到Redis。這里有一個(gè)關(guān)鍵點(diǎn)Session的狀態(tài)不再存放在應(yīng)用實(shí)例的本地內(nèi)存而是被抽離到一個(gè)獨(dú)立的、所有實(shí)例都能訪問的存儲(chǔ)層。2.2 Redis里到底存了哪些key一個(gè)登錄用戶的數(shù)據(jù)結(jié)構(gòu)長(zhǎng)什么樣光說“把Session存到Redis”有點(diǎn)抽象看完Redis里的實(shí)際數(shù)據(jù)結(jié)構(gòu)你會(huì)有更直觀的理解。Spring Session在Redis中主要維護(hù)以下幾類key。第一類是主數(shù)據(jù)key默認(rèn)前綴是spring:session:sessions:sessionId類型是Hash。這個(gè)Hash里存了Session的創(chuàng)建時(shí)間、最后訪問時(shí)間、最大不活躍間隔、以及你通過setAttribute寫入的每一個(gè)業(yè)務(wù)屬性。比如你用session.setAttribute(loginUser, userInfo)Redis里就會(huì)多出一個(gè)fieldfield名是sessionAttr:loginUservalue是序列化之后的用戶信息。第二類是過期索引key格式是spring:session:expirations:timestamp類型是Set。這里面保存了一批即將在指定時(shí)間點(diǎn)過期的Session ID供后臺(tái)任務(wù)定點(diǎn)掃描使用。Spring Session并不是完全依賴Redis的key過期機(jī)制來清理Session因?yàn)镽edis key過期事件并不可靠可能丟失、可能延遲。它的策略是每個(gè)被訪問的Session都會(huì)刷新自己的最后訪問時(shí)間同時(shí)由一個(gè)專門的維護(hù)任務(wù)在到達(dá)過期時(shí)間點(diǎn)時(shí)把還在集合里的Session ID找出來做顯式刪除。第三類是查詢索引key格式是spring:session:findByIndexName:索引名:索引值比如按用戶名建立索引之后可以快速查出某個(gè)用戶當(dāng)前對(duì)應(yīng)的Session列表。做強(qiáng)制下線、在線用戶列表這類功能時(shí)這個(gè)索引很有用。通過這幾種key的組合Spring Session把Session的讀寫、過期、查詢都安排得明明白白。Redis本身就是KV存儲(chǔ)Hash結(jié)構(gòu)天然適合存儲(chǔ)“屬性集合”這種數(shù)據(jù)形態(tài)TTL機(jī)制又和Session的過期時(shí)間能對(duì)應(yīng)上。選Redis的根本原因不是因?yàn)樗芫彺娑且驗(yàn)樗峁┝艘徽追植际江h(huán)境都能訪問的、帶超時(shí)能力的、結(jié)構(gòu)足夠靈活的數(shù)據(jù)存儲(chǔ)能力。2.3 這套組合帶來的三個(gè)直接收益收益是很直觀的。第一是實(shí)例徹底無狀態(tài)化。應(yīng)用節(jié)點(diǎn)不再持有用戶狀態(tài)新增機(jī)器、縮減機(jī)器、滾動(dòng)重啟對(duì)在線用戶沒有任何影響。用戶在某臺(tái)機(jī)器上登錄下一次請(qǐng)求被負(fù)載均衡分到另一臺(tái)機(jī)器依舊能從Redis里拿到同一個(gè)Session。擴(kuò)容從“有狀態(tài)擴(kuò)容”變成了“無狀態(tài)擴(kuò)容”技術(shù)上輕松了一個(gè)量級(jí)。第二是故障影響面大幅縮小。以前如果一臺(tái)實(shí)例宕機(jī)那臺(tái)機(jī)器上的所有在線用戶集體掉線?,F(xiàn)在實(shí)例宕機(jī)只要Redis集群還穩(wěn)著用戶根本感知不到后端少了一臺(tái)機(jī)器請(qǐng)求被自動(dòng)分發(fā)到其他健康實(shí)例Session照??捎?。第三是統(tǒng)一了會(huì)話管理能力。你可以通過Redis里的Session數(shù)據(jù)做全局的用戶登錄態(tài)清理比如后臺(tái)強(qiáng)制踢人下線、限制賬號(hào)同時(shí)在多端登錄、構(gòu)建實(shí)時(shí)在線用戶列表。這在單機(jī)Session時(shí)代幾乎不可想象但在多個(gè)微服務(wù)共享同一個(gè)Redis時(shí)這些功能實(shí)現(xiàn)起來非常順手。很多團(tuán)隊(duì)最后選這套方案不只是為了“解決掉線”而是為了把會(huì)話能力沉淀成一套基礎(chǔ)設(shè)施。3. 實(shí)操落地從依賴引入到雙實(shí)例驗(yàn)證3.1 依賴和版本選型Spring Boot 2.x/3.x別搞混直接給可用的依賴清單我用的是Maven。假設(shè)你的項(xiàng)目是標(biāo)準(zhǔn)的Spring Boot Web應(yīng)用需要引入三個(gè)starterdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-data-redis/artifactId /dependency dependency groupIdorg.springframework.session/groupId artifactIdspring-session-data-redis/artifactId /dependency版本號(hào)我沒有手動(dòng)指定而是交給Spring Boot的依賴管理統(tǒng)一控制。這里要特別提醒spring-session-data-redis的版本必須和Spring Boot版本匹配最省心的做法就是讓Spring Boot BOM來管理它。自己?jiǎn)为?dú)指定版本很容易踩到API不兼容的坑尤其是Spring Boot 3.x和2.x之間包名、配置項(xiàng)差異很大。我這里本地驗(yàn)證用的是Spring Boot 2.7環(huán)境但下面的配置我會(huì)同時(shí)給出Spring Boot 3.x需要調(diào)整的地方。Spring Boot 3.x把Redis配置的前綴從spring.redis.*改成了spring.data.redis.*Session相關(guān)的配置不變。碰到3.x項(xiàng)目別慣性照著舊文檔抄否則配置項(xiàng)根本不會(huì)生效。3.2 關(guān)鍵配置Redis連接、Session存儲(chǔ)與命名空間配置文件是重頭戲。先說一個(gè)最容易出錯(cuò)的點(diǎn)Spring Boot 2.x和3.x的Redis連接配置前綴不一樣。Spring Boot 2.x的配置spring: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3sSpring Boot 3.x的配置spring: data: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3s兩段配置的內(nèi)容幾乎一樣唯獨(dú)嵌套層級(jí)從spring.redis變成了spring.data.redis。我用的是Lettuce客戶端“Lettuce連接池”需要單獨(dú)啟用spring.redis.lettuce.pool.*或3.x的spring.data.redis.lettuce.pool.*才會(huì)生效。如果不配連接池高并發(fā)下Lettuce很容易出現(xiàn)連接等待超時(shí)生產(chǎn)環(huán)境一定要配。Session本身的配置如下spring: session: store-type: redis timeout: 30m redis: namespace: demo-session flush-mode: on_save save-mode: on_set_attribute這里解釋幾個(gè)參數(shù)背后的含義。store-type: redis是明確告訴Spring Boot用Redis存儲(chǔ)Session不帶這個(gè)參數(shù)時(shí)Spring Boot可能會(huì)根據(jù)classpath自動(dòng)推斷但顯式寫出來更可控。timeout: 30m是Session最大不活躍間隔單位是m代表分鐘這個(gè)值最終會(huì)寫入Redis的TTL。生產(chǎn)環(huán)境要根據(jù)業(yè)務(wù)形態(tài)設(shè)置純管理后臺(tái)可以設(shè)短一點(diǎn)電商網(wǎng)站購(gòu)物車場(chǎng)景可能需要更長(zhǎng)。redis.namespace是給當(dāng)前應(yīng)用設(shè)置Redis key前綴如果多個(gè)應(yīng)用共用同一個(gè)Redis實(shí)例一定要設(shè)置不同的namespace否則不同應(yīng)用的Session數(shù)據(jù)會(huì)互相干擾。flush-mode: on_save表示Session每次請(qǐng)求處理結(jié)束時(shí)才把數(shù)據(jù)寫回Redis這是默認(rèn)模式。還有一個(gè)模式是immediate每次調(diào)用setAttribute時(shí)立刻寫Redis實(shí)時(shí)性高但性能差一般不建議生產(chǎn)環(huán)境使用。save-mode: on_set_attribute表示只要Session屬性發(fā)生變化就標(biāo)記為需要保存這是默認(rèn)行為通常不需要改動(dòng)。如果要通過Java配置類來開啟Redis Session存儲(chǔ)可以加上一個(gè)EnableRedisHttpSession注解Configuration EnableRedisHttpSession(maxInactiveIntervalInSeconds 1800) public class SessionConfig { }這個(gè)注解里可以配置最大不活躍間隔秒數(shù)和spring.session.timeout是等價(jià)的。我個(gè)人更推薦用配置文件來管理改參數(shù)時(shí)不用重新編譯打包。3.3 自定義Cookie序列化器Cookie名字、HttpOnly與SameSiteSpring Session默認(rèn)使用名為SESSION的Cookie來傳遞Session ID但很多老項(xiàng)目前端約定的是JSESSIONID。為了兼容業(yè)務(wù)系統(tǒng)通常要自定義一個(gè)CookieSerializerBean public CookieSerializer cookieSerializer() { DefaultCookieSerializer serializer new DefaultCookieSerializer(); serializer.setCookieName(JSESSIONID); serializer.setCookiePath(/); serializer.setUseHttpOnlyCookie(true); serializer.setSameSite(Lax); return serializer; }setCookiePath(/)要特別注意。如果項(xiàng)目部署在/api這類子路徑下Cookie path設(shè)置不對(duì)瀏覽器會(huì)在跨路徑請(qǐng)求時(shí)不再攜帶Cookie導(dǎo)致Session丟失。setUseHttpOnlyCookie(true)能防止JavaScript讀取Cookie降低XSS攻擊后的信息泄露風(fēng)險(xiǎn)。setSameSite(Lax)用于控制Cookie在跨站請(qǐng)求時(shí)的發(fā)送策略對(duì)前后端分離的部署方式影響很大。如果你的系統(tǒng)還有HTTPS環(huán)境可以開啟serializer.setUseSecureCookie(true)確保Cookie只通過HTTPS傳輸。3.4 雙實(shí)例聯(lián)調(diào)腳本證明Session真的共享了配置全部搞定后驗(yàn)證邏輯很簡(jiǎn)單本地起兩個(gè)應(yīng)用實(shí)例端口分別設(shè)為8081和8082然后在8081上登錄獲取Cookie再用這個(gè)Cookie去訪問8082的接口。如果8082能返回當(dāng)前登錄用戶的信息說明Session已經(jīng)成功共享。第一步先在一個(gè)終端啟動(dòng)第一個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8081第二個(gè)終端啟動(dòng)第二個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8082假設(shè)項(xiàng)目里有一個(gè)登錄接口/api/login和一個(gè)獲取當(dāng)前用戶的接口/api/user/info。用curl先登錄curl -i -X POST http://localhost:8081/api/login \ -H Content-Type: application/json \ -d {username:admin,password:123456}響應(yīng)頭里能看到Set-Cookie: JSESSIONIDxxxxx; Path/; HttpOnly。把這個(gè)Cookie值記下來再去請(qǐng)求8082的接口curl -i http://localhost:8082/api/user/info \ -H Cookie: JSESSIONIDxxxxx正常返回用戶信息就是驗(yàn)證通過。這時(shí)再去Redis里檢查一下redis-cli keys demo-session:* hgetall demo-session:sessions:xxxxx能看到Session屬性已經(jīng)落在Redis里而且8082實(shí)例讀取的底層數(shù)據(jù)源是同一個(gè)Redis。這套驗(yàn)證在本地大概10分鐘就能跑完比純看理論踏實(shí)得多。4. 生產(chǎn)環(huán)境下踩過的坑亂碼、覆蓋、網(wǎng)關(guān)和內(nèi)存4.1 序列化亂碼與JSON反序列化失敗看懂根因比替換配置更重要上線運(yùn)行不到一周我就發(fā)現(xiàn)一個(gè)隱蔽問題Redis里存的Session屬性值有一大堆看不懂的字節(jié)。直接用hgetall查看某個(gè)Session時(shí)field的值長(zhǎng)這樣\xac\xed\x00\x05t\x00\x03com...這種以\xac\xed開頭的亂碼是Java標(biāo)準(zhǔn)JDK序列化機(jī)制的產(chǎn)物。Spring Session默認(rèn)使用JDK自帶的序列化器把對(duì)象轉(zhuǎn)成二進(jìn)制字節(jié)后再塞進(jìn)Redis。它的問題有兩個(gè)一是不可讀排查問題時(shí)瞪大了眼也看不出里面存的是什么二是兼容性差如果對(duì)象類的結(jié)構(gòu)發(fā)生變化比如新增字段、刪除字段舊數(shù)據(jù)反序列化時(shí)直接拋InvalidClassException。解決辦法是替換Redis序列化器。Spring Session默認(rèn)從springSessionDefaultRedisSerializer這個(gè)Bean獲取序列化器所以我只需要覆蓋這個(gè)Bean即可Bean public RedisSerializerObject springSessionDefaultRedisSerializer() { return new GenericJackson2JsonRedisSerializer(); }注意這里必須叫springSessionDefaultRedisSerializer不是隨便定義個(gè)RedisTemplate的序列化器。很多人在這里踩坑配置了RedisTemplateString,Object的序列化方式結(jié)果Session數(shù)據(jù)還是JDK序列化因?yàn)镾pring Session內(nèi)部根本不走RedisTemplate的默認(rèn)序列化邏輯。換JSON序列化之后還有一個(gè)更深的坑要提醒JSON串里默認(rèn)會(huì)帶上類信息class字段用來反序列化時(shí)確定目標(biāo)類型。一旦你的用戶類從User改名為Account或者在包里移動(dòng)了位置Redis里舊數(shù)據(jù)的類路徑已經(jīng)不存在了反序列化直接失敗。我后來定的規(guī)矩是涉及Session里保存對(duì)象的字段變更時(shí)要么提前清空線上Redis的Session前綴要么在代碼里寫一個(gè)兼容的轉(zhuǎn)換處理器。老數(shù)據(jù)有時(shí)候舍不得清但Session本來就是“丟了就讓用戶重新登錄”的臨時(shí)數(shù)據(jù)優(yōu)先保證系統(tǒng)可用比死守?cái)?shù)據(jù)更實(shí)際。4.2 用戶的并發(fā)請(qǐng)求導(dǎo)致Session覆蓋一個(gè)被低估的丟失更新問題這個(gè)坑不是馬上暴露的而是上線后功能越加越多才慢慢顯現(xiàn)?,F(xiàn)象是用戶同時(shí)打開多個(gè)瀏覽器標(biāo)簽頁(yè)在一個(gè)標(biāo)簽頁(yè)里更新了Session中的用戶資料隨后在另一個(gè)標(biāo)簽頁(yè)里操作時(shí)第一次更新“消失”了。根因要從Redis的讀寫模式說起。Spring Session在請(qǐng)求結(jié)束后把整個(gè)Session對(duì)象寫回Redis這個(gè)操作不是原子更新局部字段而是讀出Session、反序列化、修改屬性、整體寫回的過程。當(dāng)兩個(gè)請(qǐng)求分別落在兩個(gè)不同的實(shí)例上兩邊幾乎同時(shí)從Redis讀出同一個(gè)Session的同一個(gè)字段各自在本地做修改然后先后寫回Redis。后寫的那個(gè)會(huì)把先寫的覆蓋掉其中一個(gè)請(qǐng)求的修改就丟了。這種問題場(chǎng)景和并發(fā)寫數(shù)據(jù)庫(kù)記錄時(shí)的“丟失更新”完全一致只是很多人沒意識(shí)到Session也會(huì)遇到。我當(dāng)時(shí)的排查思路是確認(rèn)哪些數(shù)據(jù)會(huì)被高頻并發(fā)寫。比如用戶每次訪問時(shí)更新“最近訪問時(shí)間”這個(gè)字段就在并發(fā)時(shí)頻繁觸發(fā)覆蓋。解決辦法分兩路走一是把并發(fā)寫頻率最高的數(shù)據(jù)從Session里挪出去比如“最近訪問時(shí)間”這種數(shù)據(jù)完全可以通過Redis單獨(dú)記錄一個(gè)user:online:userId的key來管理不必塞進(jìn)Session二是盡量減少Session里的可變屬性總量Session只保留登錄憑證、用戶主鍵這類低頻變化的標(biāo)識(shí)性數(shù)據(jù)其余高頻業(yè)務(wù)數(shù)據(jù)走專門設(shè)計(jì)的Redis key。如果確實(shí)需要保留并發(fā)寫場(chǎng)景可以考慮把Session的存儲(chǔ)粒度做細(xì)或者引入分布式鎖來控制同一Session的寫并發(fā)。但我的真實(shí)感受是最佳策略不是“控制并發(fā)”而是“減少寫入”——Session的屬性越少、越穩(wěn)定這套方案就越穩(wěn)。它本質(zhì)上是一個(gè)定位標(biāo)識(shí)不是內(nèi)容倉(cāng)庫(kù)。4.3 網(wǎng)關(guān)轉(zhuǎn)發(fā)與前后端分離下的Cookie透?jìng)黜?xiàng)目改造到一定階段前端從服務(wù)端渲染換成了前后端分離請(qǐng)求統(tǒng)一走API網(wǎng)關(guān)。網(wǎng)關(guān)部署完之后又冒出一個(gè)新問題用戶明明登錄成功了緊接著請(qǐng)求業(yè)務(wù)接口卻返回401。瀏覽器里Cookie明明還在后端Session也存在Redis里但請(qǐng)求就是帶不到后端。排查下來發(fā)現(xiàn)是網(wǎng)關(guān)這一層把Cookie信息丟掉了。網(wǎng)關(guān)在轉(zhuǎn)發(fā)HTTP請(qǐng)求時(shí)如果配置里沒有顯式轉(zhuǎn)發(fā)Cookie頭后端拿到的請(qǐng)求里就不會(huì)包含JSESSIONID。后端的SessionRepository完全不知道該查找哪個(gè)Session自然判定未登錄。解決方式是在網(wǎng)關(guān)的轉(zhuǎn)發(fā)配置里把Cookie頭原樣透?jìng)?。以常見的網(wǎng)關(guān)配置為例在路由規(guī)則里加一行轉(zhuǎn)發(fā)Headerfilters: - PreserveHostHeader - RewritePath/api/(?segment.*), /$\{segment} default-filters: - DedupeResponseHeaderAccess-Control-Allow-Credentials Access-Control-Allow-Origin核心是確保轉(zhuǎn)發(fā)請(qǐng)求時(shí)保留瀏覽器提交的Cookie頭同時(shí)響應(yīng)時(shí)不要重復(fù)添加互相沖突的CORS頭??缬蚺渲靡彩莻€(gè)關(guān)鍵點(diǎn)。前后端域名不一致時(shí)后端必須配置CORS允許攜帶憑證Bean public CorsWebFilter corsWebFilter() { CorsConfiguration config new CorsConfiguration(); config.setAllowCredentials(true); config.addAllowedOrigin(https://frontend.example.com); config.addAllowedHeader(*); config.addAllowedMethod(*); return new CorsWebFilter(source - config); }這里有一個(gè)安全限制必須要知道allowCredentials(true)時(shí)allowedOrigins不能寫成*必須指定具體域名。瀏覽器規(guī)范明確禁止攜帶憑證的跨域請(qǐng)求使用通配符來源。前端調(diào)用時(shí)也要設(shè)置withCredentials: true否則即使后端允許瀏覽器也不會(huì)主動(dòng)攜帶Cookie。這個(gè)跨域問題排查起來比較費(fèi)時(shí)我每次都會(huì)先看瀏覽器Network面板里請(qǐng)求是否帶上了Cookie再看響應(yīng)頭里Access-Control-Allow-Credentials是否為true兩步能定位90%的問題。4.4 Redis內(nèi)存持續(xù)增長(zhǎng)與session過期回收失效還有一個(gè)經(jīng)典問題系統(tǒng)跑了一段時(shí)間后Redis內(nèi)存占用越來越高明明設(shè)置了Session過期時(shí)間數(shù)據(jù)卻沒有按預(yù)期釋放。這通常不是Spring Session沒做清理而是清理機(jī)制依賴某些前提條件。Spring Session的過期清理依賴兩個(gè)關(guān)鍵機(jī)制一個(gè)是通過spring:session:expirations:timestamp集合定時(shí)掃描另一個(gè)是Redis的過期key事件通知。如果Redis實(shí)例關(guān)閉了notify-keyspace-events配置Spring Session就無法收到key過期事件來觸發(fā)后續(xù)的刪除操作。雖然掃描任務(wù)也能兜底但事件通知關(guān)閉時(shí)清理效率和實(shí)時(shí)性都會(huì)下降內(nèi)存里會(huì)殘留更多等待淘汰的Session數(shù)據(jù)。建議在Redis配置里打開必要的事件通知notify-keyspace-events Exgx這個(gè)配置項(xiàng)開啟了過期key事件和通用命令事件。生產(chǎn)環(huán)境調(diào)整Redis配置后要記得驗(yàn)證生效用config get notify-keyspace-events確認(rèn)。更需要注意的另一個(gè)坑是Redis內(nèi)存淘汰策略。如果Redis配置的maxmemory-policy是allkeys-lru那么當(dāng)內(nèi)存達(dá)到上限時(shí)Redis會(huì)從所有key里挑選最久未用的key來淘汰Session數(shù)據(jù)也會(huì)被當(dāng)成普通緩存清掉哪怕它還沒到過期時(shí)間。結(jié)果就是用戶明明還在活躍Session卻被Redis強(qiáng)制刪除用戶被莫名其妙踢下線。這種情況特別難排查因?yàn)槿罩纠锟床坏饺魏螆?bào)錯(cuò)就是偶發(fā)掉線。后來我把Redis的內(nèi)存淘汰策略改成了volatile-lru這個(gè)策略只淘汰設(shè)置了TTL的key。Session主key自帶TTL業(yè)務(wù)緩存如果不需要被淘汰可以不帶TTL。這樣既能保證Redis內(nèi)存可控又不會(huì)誤傷活躍Session。同時(shí)我還寫了一個(gè)定時(shí)巡檢腳本每天檢查一次Redis內(nèi)存增長(zhǎng)曲線和spring:session:*的key數(shù)量如果發(fā)現(xiàn)Session數(shù)量異常增多基本都是某個(gè)接口在瘋狂創(chuàng)建新Session這時(shí)會(huì)去檢查業(yè)務(wù)代碼里是不是有“一登錄就訪問request.getSession(false)并觸發(fā)創(chuàng)建新Session”的邏輯。結(jié)尾改動(dòng)之外我留下的一點(diǎn)心得整套方案落地后再回看技術(shù)層面的難度其實(shí)不算高真正的難點(diǎn)在于兩處一是意識(shí)到“Session狀態(tài)必須和實(shí)例解耦”這個(gè)根本前提二是上線后通過實(shí)際問題把方案打磨到符合業(yè)務(wù)特性。如果你還在單機(jī)架構(gòu)里提前把Session遷到Redis并不是過度設(shè)計(jì)而是一筆很劃算的“架構(gòu)保險(xiǎn)”因?yàn)榈鹊綌U(kuò)容當(dāng)天再處理緊迫感和故障壓力會(huì)讓你沒有充足時(shí)間考慮細(xì)節(jié)。我個(gè)人的體會(huì)是遷到Redis Spring Session之后最需要改變的其實(shí)是“往Session里亂塞東西”的習(xí)慣。單機(jī)時(shí)代往Session塞什么都能跑但分布式環(huán)境下Session變成了分布式共享存儲(chǔ)每一次寫入都對(duì)應(yīng)一次網(wǎng)絡(luò)請(qǐng)求加一次序列化濫用會(huì)直接把Redis拖成瓶頸。我現(xiàn)在定的原則很簡(jiǎn)單Session里只放穩(wěn)定且低頻使用的核心標(biāo)識(shí)數(shù)據(jù)比如用戶ID、登錄令牌、少量偏好設(shè)置所有需要業(yè)務(wù)計(jì)算和頻繁變化的數(shù)據(jù)單獨(dú)設(shè)計(jì)Redis緩存key或落庫(kù)。這套原則比任何技術(shù)選型都更影響長(zhǎng)期穩(wěn)定。最后分享一個(gè)實(shí)用小技巧本地開發(fā)環(huán)境可以保留內(nèi)存存儲(chǔ)只把生產(chǎn)環(huán)境切到Redis避免每個(gè)開發(fā)同學(xué)都依賴一個(gè)共享的Redis實(shí)例。具體做法是在application.yml里用多環(huán)境配置區(qū)分dev和proddev環(huán)境不配spring.session.store-type讓它走Spring Boot默認(rèn)的內(nèi)存Sessionprod環(huán)境顯式配置成redis。這樣開發(fā)調(diào)試不受Redis狀態(tài)影響線上又能享受無狀態(tài)擴(kuò)容的紅利。兩套環(huán)境隔離好開發(fā)效率和系統(tǒng)穩(wěn)定性都可以兼得。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丁香五月婷婷综合精品素人| 五月天婷婷视频| 天天色综合图片| 99视频这里只有免费精品| 99er免费在线观看| 天天骑天天操| 可以免费观看的av| 免费AV在线网址| 久久婷婷色综合| 夜夜涩涩涩| 99色一| 激情五月,激情综合网| 久久思思热| 五月色色色| 日欧一片内射VA在线影院| 色99xx| 丁香六月婷婷久久高清| 91啪级电影| 五月丁香五月婷婷在线观看| 天天操天天干天天日| 97caop| 色很久综合| 色吊操色妞| 亚洲在线操| 婷婷五月天播| 激情人妻综合| 97超碰,人人舔,人人操,人人摸 | 久久天堂加勒比| 婷婷性爱影院| 久久久精品色色色| 大香蕉av在线| 久热精品在看| 欧美成人网婷婷综合在线| 人妻久久久久久久 | 激情五月综合第一页| 久久永久网址| 五月欧美丁香在线观看| 少妇人妻偷人精品无码视频新浪| 综激情网| 人人爱人人添| 日韩啪啪视频| 日熟女| 三区激情四射av| 99这里只有精| 婷婷丁香成人色综合| 色天使色婷婷| 激情婷婷五月天日本系列 | 99综合免费视频| 亚洲综合婷婷| 碰碰操91| 毛片色五月| 成人短视频在线观看| 伊人九九68| 婷婷永久在线| 91九色欧美| 日韩成人中文| 77799热| 色五月亚洲| 成人国产欧美大片一区| 人人爽天天莫| 九九色综合网| 69精品无码一区二区三区| 国产色色网站网址| 天天狠天天叉| 激情久久久久久久久久久| 久热视频这里只有精品68| 国产成人+综合亚洲+天堂| 91在线视频观看午夜福利| 国产亚洲99久久精品| 5月丁香婷婷激情网| 99性爱视频| 中文资源在线a| 26uuu欧美激情另类| 26uuu成人网| 亚洲久艹| www.色五月.com| 97五月天| 99热日韩这里只有精品| 五月婷婷色五月| 欧美激情久| http://www.lingjunshare.com/| 五月丁香网站| 久久aaa| 色婷视频| 97香蕉碰碰人妻国产欧美| 色婷婷www| 国产精品第一国产精品| 五月激情综合五月| 丁香六月婷婷综合| 九九热99re8热免费观看| 婷婷五月色激情欧美激情| 五月婷婷色欲| 人人干AV| 日日夜夜亚洲一区| 国产26uuu| 91聚色综合网| av五月天婷婷丁香| 丁香五月综合激情久久潮喷| 激情综合色播| aV欲望人妻中文字幕| 婷婷天堂综合| 亚洲AV免费在线| 久久久五月五丁香| 色综合激情| 婷婷久久精品| 精品人妻伦一二三区久| 亚洲色色五月天| 青青草成人网| 大香蕉狼人久久| 婷婷五月天国产在线播放| 亚洲久艹| 国产精品成人AV在线| 欧美操我| 丁香五月AV| 婷婷综合一二三| 狠狠狠狠狠干| 色综合久久88色综合天天99| 天天色综网| 色色五月天网站| 99re在线精品视频| 99热综合在线观看| 丁香五月a| 一本久久婷婷| 久久久人妻门| av操一操| 丁香婷婷啪啪| 色婷婷av在线观看| 精品夜夜澡人妻无码AV| 色五月天在线| 色婷av| 久婷五月| 一本九九色| 成人免费va| 97超碰在线观看免费| 色综合激情| 五月婷婷九九热| 免费看欧美成人A片无码| 99偷拍视频在线日本| 亚洲午夜一区二区| 婷婷6月综合网| 色综合天天| 国产Va视频| 精品一二三区久久AAA片| 色欲日日躁| 国产99久| 五月天婷婷综合免费| 丁香五月手机视频| 噜噜色五月| 狠狠丁香| 91色呦哟| 久艹大香蕉| 婷婷视频网| 99啪啪| 九九在线免费观看| 色五月婷婷自拍| 99久在线精品99re8热| 丁香婷婷人妻| 色婷婷啪啪综合网| 二色av| 熟女乱论网| 夜夜操加勒比| 国产97色在线| 久久99热 这里有精品| 婷婷最新地址| 九九re精品视频在线观看 | 丁香婷婷色五月激情综合| 99热精品网| 五月婷婷碰碰| 成人网址在线观看| 少妇婷婷五月天| seuuu婷婷| 亚美欧色影院| 中文字幕婷婷五月天| 1024操逼| www.五月婷婷| 激情五月四色| 狠狠色婷婷7| 婷婷五月色播天| 久久婷婷亚洲| 我爱婷婷五月天综合88| 大香蕉婷婷五月| 精品亚洲国产成人A片在线鸭王| 人人操人人爱丁香五月| 99色色爰| 婷婷丁香综合| 极品人妻VIDEOSSS人妻| 婷婷久久综| 色噜噜,噜噜色| 免费超碰在线| 成人国产欧美大片一区| 91AV婷婷| 免费五月婷婷网| 五月丁香啪啪啪| 电影91久久久| 五月激情婷婷在线| 五月婷婷五月天| 亭亭丁香久久五月| 999精品乱码77777| 久久ri精品视频| 九热免费视频| 99色色色色| 久久久97| 99久精品| 婷婷色综合中心站| 日本猛少妇色XXXXX猛叫| 开心激情五月天网| 天天摸天天高潮天天爽| 级情九色| 日韩欧美老妇性视频91久久久| 婷婷丁香六月天| 99精品在线| 五月天婷婷在线观看精品男人| 天天肏天天肏天天肏| 疯狂做受XXXX高潮A片| 91免费看片| jiujiu无码五区| 六月丁香婷婷大香蕉| 无码99| av在线免费网站 | 婷婷五月娱乐在线| 亚洲午夜成人av电影网| 色婷婷电影网| 欧美日比视频| 综合噜噜| 婷婷丁香激情综合色情| 亚洲99手机免费看视频| 26uuu.| 久热91精品| 欧美三级A做爰在线观看| 伊人五月婷婷| 久久999久久999久久999久久| 欧美视频在线观看噜噜| 精品国产va久久久久久久| 99自拍网| 99热久草| 99九九玖玖| 亚洲亚洲人成综合网络| 九九热精品| 97色在线视频| 婷婷丁香九月| 九九re精品视频在线观看| 九九无码视屏| 色人妻五月| av 一区三区四区| 丁香六月婷婷久久高清| 99精品国产在热久久婷婷| 亚州成人综合在线| jiujiuxiangjiaowang| 免费看欧美成人A片无码| 色情综合网| 99热精品观看| 大香蕉婷婷五月| 天天激情| 欧美婷婷成人| 天天激情欧美美女| 婷婷五月天六月丁香| 99热这里只有免费| 五月丁香婷婷开心| 五月婷婷啪| 日撸夜撸日操| 国产成人+亚洲+欧洲| 日在线V视频在线播放| 99热热九九| 亚洲激情亚洲激情 | 第五色婷婷| 五月色丁香| 99色性爰网络| 99热这里只有精品55| 99精吕视频在线观看了| 高清无码入口| 大香蕉婷婷五月| 99久久性爱| 天天爽天天摸| 99热一区| 五月综合激情| 天天日,天天干,天天操| 色色色色色色色色综合网| www夜夜操wwwcon| 久热这里只有精品66| 婷婷五月AA五月在线| 人人草成人视频| 天天日天天插天天操| 久久机热这里只有精品免费视频| 婷婷丁香久久五月综合| 婷婷五月天激情五月天网站| 99热.com| 色婷婷综合久久久久| 五月天婷婷亚洲| 狠狠干激情五月| 翔田千里无码| 色婷婷亚洲五月天| 91狠狠色| 国产精品色色| 好叼操在线观看| 97久久超视频| 午夜成人AV在线| 大香蕉久久伊人婷婷五月丁香| 亚洲色涩视频| 婷婷日日天天| 99热这里只有精品中文字幕| 国产成人av在线| 99性色| 九九这里有精品| 久久婷婷五月综合| 婷婷情色开心五月天99| 久久综合五月婷婷| 久久婷婷热| 激情婷婷五月女| 人人爽人人爽人人爽人人爽| 成年人丁香五月| 五月天色综合| 成人免费120分钟啪啪| 久久婷婷七月丁香| 婷婷娌伦网| 久99久视频| 丁香五月色播中文在线播放| 五月丁香婷在线| 人。妻久久| 婷婷四色五月| 99热综合| www.91AV.COM| 伊人久久激情图区五月| 久久综合丁香激情五月| 99热这里只有精品1| 202丰满熟女妇大| 97成人丁香| 91凹凸在线| 丁香五月天在线视频| 五月天自拍视频| 激情色色色| 东京热免费视频| 免费无码毛片一区二区A片 | 99性视频| 激情久久网| 久热视频A.| 可以免费看的av网站| 偷拍91九色| 五月丁香婷婷色| 人人操超碰| 欧美VA视频| 色色综合色视频| 亚洲va在线| 欧美精品18| 激情影院丁香五月| 东北黄色一级| 婷婷六月丁香激情综合| 九九AV在线| 国产成人AV| 色婷婷五月综合在线| 噜噜噜噜婷婷五月天| www.26uuu.com亚洲电影| 99九九在线观看免费| 疯狂做受XXXX高潮A片| 欧美日韩成人在线网| 五月天无码视屏播放| 五月天开心激情综合网| 99国产精品久久久久久久久久久| 色综合久网| 成人婷婷桔色| 亚洲永久免费| 96精品国产综合久久久久久| 五月开心六月婷婷在线播放网站| 五月婷婷深深爱| 国产性爱在线| 99色在线观看免费| 伊人网碰碰| 日本WwW色偷偷丁香花久久久京东热| 婷婷伊人综合中文字幕| 久久这里有精品视频| 五月婷婷五月天| 丁香五月大香蕉AV| 五月香蕉综合| 九九热黄色| 婷婷五月欧美AA片免费| 欧美性爱特黄一级aaaassss| 99热在线中文字幕| 9久热在线视频| 婷婷八月激情| 色婷婷操逼| 色五月激情综合网站| 亚洲激情 久久| pom538精品视频| 五月丁香六月激情| 大香蕉婷婷丁香| 99热色在线精品| 婷婷丁香在线| 婷婷色色网| 天天干,夜夜爽| 激情五月激情综合网| 亚洲AV无码一区二| 天天摸色吧天天摸色吧| 婷婷狠狠综合网入口| 成人操呦av| www.色五月.com| 狠狠色九月| 人妻精品久久久久久久| 日本人人超碰| 五月丁香成人| 97色吧| 天天干,天天舔| 天天日天天爽夜夜爽| 综合色图婷婷| 亚洲五月天狠狠| 五月婷婷无码| aaaaaa片| 激情五月天网| 激情网 五月天| 婷婷五月成人| 97自拍视频在线| 色色五月天丁香婷婷| 亚洲岛国电影| 五月婷婷啪啪网| 人人插操| 九九热这里只有国产精品| 五月天激情小说| 九九九九无码| 日日操日日撸| 天堂亚洲 在线| 五月丁香六月婷婷欧美综合| 中文网婷婷字幕婷| 五月天婷婷久久视频| 日本丰满久久| 青青草婷婷综合五月| 强壮的公次次弄得我高潮A片日本 | 99福利导航| 丁香五月欧美色综合| 69人妻人人澡人人爽久久| 视色综合| 曰本aaaaaa丈片| 久久婷婷五月天亚洲欧美| 丁香六月成人| 婷婷久久亚洲| 碰碰人人漕| 婷婷综合五月| 久久激情五月婷婷| 婷婷色五月激情| 亚洲综合色婷婷| 中文字幕永久在线| 五月天激情站| 草草夜夜操| 思思热在线精品视频网站| 99燥99日| 色J香五月天| 夜夜AVV| 五月天综合在线观看视频| 女同在线9| 婷婷五月另类网站| 五月天婷婷基地综合网| 五月婷婷丁香在线| 99ri在线播放| 激情五月天在线视频| 丁香六月婷婷激情综合| 免费无码毛片一区二区A片| 思思re视频在线| 日本色色视频| 婷婷夜夜操| 99视频在线观看视频| 日日综合网| 日韩精品一区二区亚洲AV观看| 国产综合色婷婷精品久久| 91狠狠综合久久| 成人看片网站| 天天橾夜夜爽| 91狠狠综合网| AA片在线观看视频在线播放| www色色com| 日本色色色| 精品一区二区三区四区五区六区介绍| 狠狠色丁香乆乆| 可似看的AV| www.婷婷,com| 激情婷婷五月天| 五月综合激情综合久| 色99xx| 91凹凸在线| 色五月婷婷五月丁香五月激情五月视频| 亚洲国产精品二二三三区| 色综合色综合网| 婷婷欧美激情综合| 极品人妻VIDEOSSS人妻| 欧美婷婷精品激情| 国产xxxxx在线观看| 日本视频久久| 97人人搞| 久久婷婷丁香六月天| 婷婷色偷拍| 久久精品婷婷| 日日操,天天操| 99人人干人人| 风流少妇A片一区二区蜜桃| 人妻综合网| 国产AV一区二区三区最新精品| 九九色综合视频| 久操无码| 色图亚洲91| 日本婷色| 桃色激情婷婷伊人网| 玖玖玖婷婷婷| 狠狠干狠狠色| 六月丁香激情| 五月综合婷婷网| av第一二区| 激情综合五月| 欧美人妻一区二区| 久久黄色免费视频| 婷婷六月综合| 色色五月婷婷网| 99人碰碰碰| 草操网| 九9九9无码| 欧美激情性做爰免费视频| 婷婷五月婷婷| 26uuu91| 婷婷久久五月丁香| 在线亚洲综合| 白人荫道BBWBBB大荫道| 黄色三级日本| 六月丁香激情网| 色噜噜综合网| www色婷婷com| 丁香五月激情久久麻豆| 色播五月婷婷| 99九九在线视频| 丁香五月婷婷乱| 狼人久草| 成人短视频免费观看| 色色色色色爱| 亚洲中文无码成人| 五月丁香福利| 夜夜AVV| 精品色色| 婷婷五月丁香啪啪| 亚城区在线| 99爱免费在线观看| 五月丁香综合啪啪| 色玖玖综合| 精品热九九| 五月天综合| 九九婷婷综合| 亚洲色 视频| 久久成人性爱| 性五月激情| www.射伊蕉婷婷| 亚洲免费成人电影AV| 少妇高潮呻吟A片免费看软件| 99热亚洲| 99色色| av网站中文| 99久久国产宗和精品1上映| 五月亭亭欧美女人| 殴美97色| 猫咪伊人AV| 99亚洲视频| 久久久婷婷五月亚洲97号色| 丁香五月天激情视频| 日日日影院| 黄色99网| 色的色综合| 深爱激情网五月| 91色色色| 妇激情基地| 婷婷性爱视频在线| 操久久精| 婷婷五月av| 综合色99| 九九综合伊人| 色久影院| 玖玖午夜视频| 成人免费在线电影| 百度4399有码精品V在线观看| 丁香五月激情综合久久| 玖玖99婷婷| 97色婷婷| 日逼影音先锋男人AV资源站| 免费观看全黄做爰的视频| 大香蕉人妻| www.婷婷五月天.com| 99热爱爱干干日| 91丨九色丨熟女丰满| 色播五月网| 天天干夜夜想| 久久婷婷五月天蜜桃| 色色色.COM| 日日撸日日操| 3www激情| 日日综合网| 夜夜爽天天日| 六月 丁香 视频| 五月婷婷六月丁香色| 中文乱子伦视频| 五月丁香中文字幕| 亚洲丁香五月天视频| 天天插综合| 99亚洲无码| 色播五月婷婷五月| 自拍盗摄 另类| 五月婷婷六月丁香激情| 成人综合伍月天| 天天色宗合| 婷婷丁香十月| 久99在线视频| 色色亚洲视频| 人妻内射一区二区在线视频| 色婷婷成人做爰A片免费看网站| 五月婷婷深深爱| 亚洲日韩乱码一区二区三区四区| 97色 五月天丁香| 久久婷婷五月综合网| 伊人久热91网| 久久婷婷色情7777网站| 人人干人人干骚美女| 开心四月婷婷在线色播播| 久久久婷丁香五月| 丁香五月婷婷色| 综合婷婷五月天| 久久婷婷网站| 婷婷五月天激情小说| 国产精产国品一二三在观看| 香蕉99网| 欧美精产国品一二三区| 深爱丁香网| sewuyuejiqingwang| 蜜桃五月天| 婷婷五月丁香91| 五月丁香六月激情在线| 日本狠狠干| 岛国AAAV| 婷婷五月色图| 五月激情丁香久久综合网| 人人舔天天| 久久婷婷五月天蜜桃| 欧美婷婷日本| 少妇人妻丰满做爰XXX| 五月网站| 色五月偷偷| 天天爽天天爽天天爽天天爽天天爽| 丁香五月狠狠综合欧美| 国产精品五月天婷婷| www久久艹| 99色婷婷| 超碰99热在线观看| 九九亚洲视频| 丁香欧美| WWW.99热| 久久综合五月天激情小说网站| 丁香婷婷六月| 色9999日韩国产| 日逼免费视频| 精品在线网站| 欧美操人| 九九热99精品| 五月丁香激情综合啪| 欧美日韩aaaa| 中文AV网站| 超碰2021| 99热在线播放| 色狠久| 五月婷婷婷婷| 五月丁香色色色| 色色色999| 五月激情丁香六月狠狠干| 久久性爱视频这里只有精品| 思思re99视频在线观看| 操草草草| 苗黎美女四级成人版一级二级毛片| 狠狠色五月| 激情五月网站| 日本五月天网站| 成人国产欧美大片一区| 久久人人九| 欧洲亚洲免费视频9| 丁香成人五月天| 欧美搡BBBBB摔BBBBB| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 变天就操逼婷婷五月| 操操天堂| 日日插日日干| 激情丁香五月| 大香蕉五月婷婷| 99热这里只有在线| 国产精品一区在线观看你懂的| 九九九九九九综合| 97色伦另类图片小说视频 | 中文字幕成人影视| 婷激情五月| 婷婷五月婷| 欧美人妻一区二区| 婷婷丁香社区| 色婷婷综合综合网| 五月天电影网| 六月丁香五月婷婷| 久9热视频| 激情丁香五月婷婷啪啪| 啪啪综合网| 国产老熟妇亲子乱对白| 丁香月六月| 男女啪啪做爰高潮无遮挡| 无码yw| 婷婷视频在线| 少妇搡BBBB搡BBB搡毛茸茸| 色五月综合网| 91九色无码日韩| 99久热在线精品99re6热| 天天操天天操综合| 色五月激情| 六月婷婷色色网| 婷婷另类开心| 激情五月影院| 色五月婷婷基地| 天天做天天爽| www99xxxx五月丁| 色小说婷婷五月天天天| 激情五月天婷婷五月天| 日韩久久色| 天天做天天爱天天爽| 五月婷婷激情啪啪| 婷婷丁香五月,狠狠综合| 俺也去色| 超碰av天堂| 婷婷六月激情| 丁香五月天婷婷大香蕉| 九九热99精品| AA片在线观看视频在线播放| 久久亚洲色导航| 久久婷婷亚洲| 99热亚洲| 亚洲综合1024| 大香蕉婷婷丁香视频在线| 91九色精品| 99热日| 2025天天日爽| 综合色吧| 99热在线观看| 九九热精品99| 日韩99视频| 69久久99精品久久久久| 婷婷婷久久久| 日本99在线视频| 久久婷婷丁香| 国产原创视频91九色| 亚洲欧州色情在线观看| 韩国97天堂| 五月天伊人综合| 五月久久| 婷婷色五月婷| 丁香五月综合激情啪啪| 成人国产综合| 婷婷久久丁香五月| 亚洲中文字幕av| 婷婷香蕉| 色九月婷婷| 色欲五月天| 色九九综合| 涩涩涩婷婷| 久久久天堂国产精品女人| 婷婷五月天激情在线观看 | AV在线免费播放| www久久99| 五月婷在线观看| 亚洲精品欧洲精品| 国产真实乱了老女人视频| 91操操操| 五六月婷婷久久| 亚洲色网络| 性爱五月婷婷| 九九色综合网| 影音先锋色色色资源色资源色| 伊人久久婷婷| 色婷五月天网站| 色婷婷狠狠久久综合五月| 免费观看的婷婷五月视频在线| 中文字幕av久久爽| 五月在线| 东京热伊人| 欧美性爱五月天| 天天草天天日| 久久久九九九 99| 综合在线色婷婷| 任你日视频| 99热最新| 婷婷激情丁五月| CAOBIBI| 日韩淑女人妻luan伦激情精品一区二| 99热国产精品| 亚洲欧洲中文日韩久久AV乱码| 婷婷综合六月| 国产婷婷五月天| 香蕉婷婷| 色婷婷色人人射| 九月av| www久久99| 开心五月天私房婷婷| 操逼五月婷婷| 99热这里都是精品| 色五月婷婷狠狠撸| 7777久久亚洲中文字幕| 久久东京热婷婷五月| 久久婷婷丁香五月一二三| 91综合视频丁香| 欧美 日韩 成人| 狠狠艹狠狠艹| 婷婷不卡基地| 婷婷色在线视频| ri电影在线| 亚洲视频一区| 五月丁香香蕉| 久久五月天激情婷婷| 五月婷九月| 婷婷色在线观看| www.人人操人人看人人想人人摸 人人人人操,COM | 午夜色丁香| 91超碰人人操| 亚洲无码影音| www.久久久.com| 色色丁香五月婷婷| 182TV大香蕉| 全部老头和老太XXXXX| 高清无码入口| 激情网 五月天| 超碰A V在线| 操骚货在线| 天干夜夜操| 婷婷久久欧美| 久久久精品99| 韩国真做片在线观看| 久久婷婷五月综合| 开心五月六月婷婷| 色级婷婷| 亚洲人人操| 中文成人在线| 五月丁香网av| 久久五月天丁香花| 五月激情小说| 99色视频在线观看| 天天操无码| 国产午夜精品AV一区二区麻豆| 五月婷婷深深爱| 婷婷丁香五月六月激情| 超碰在线人人| 五月婷婷亚洲综合在线| 九九在线精品| 丁香伊人网| 啪啪六月婷婷| 日日爱678| 五月婷婷日| www,黄色在线,con| 五月天婷婷色| 天天插综合网| 六月丁香激情婷婷| 婷婷6月综合网| 欧美图片丁香五月天| 婷婷五月丁香亚洲| 丁香五月婷婷超碰在线| 激情丁香图片| 色一情一乱一乱一区91Av| 久久国产高潮白浆免费观看99| 婷婷丁香六月| 丁香综合网| 日韩三级高清无码| 欧美英丁香开心快乐六月天网| 91九色首页| 色婷婷瘦婷婷日韩| 婷婷丁香久久网| 最近韩国日本免费高清观看| 在线视频你懂得| 丁香五月婷婷视频| 五月丁香六月婷婷久久久综合| 婷婷丁香视频在线观看免费| 免费99色| 久久久91精品| 国产精品涩涩涩视频网站| 开心五月婷婷激情| 天天干天天爽| 婷婷五月天免费视频| 思思99re这里只有| 色久婷婷网| 五月丁香网视频| 狼人婷婷久久| 久久9热好| 亚洲精品久久久久久久久久吃药 | 激情五月丁香综合网站| 婷婷激情五月天色| 色狠狠999综合网| 久久99久久99久久99人受| 五月丁香激情综合六月涩涩爱| 新激情综合| 99婷婷色| 五月丁香婷婷老司机| 天天干在线播放| 国产成人精品一区二区三区视频| 九九色综合网| 激情爱爱网站超大免费| 26uuu成人网| 欧洲激情精品婷婷| 小视频久久久aaa| 九九视频这里有精品| 久久这里有精品在线观看| 这里只有国产精品在线| 日本一级一级一级一级| 97干在线视频| 狼友超碰| 超级碰碰碰97免费| 99热99美国在线观看| 中文字幕五月久久婷| 午夜丁香六月婷| 丁香久久久| 久热超碰| 五月婷婷啪啪| 亚洲五月天激情| 五月婷丁香| 五月天婷婷成人网| 婷婷综合激情| 青青草激情网| 久久激情网| 欧美99热| 亚洲精品一区中文字幕乱码| 国产精品第一国产精品| 操骚货在线| 久热九九| 国产成人精品一区二三区熟女在线| 一点色成人网| 桃色五月天| 色色网站| 婷婷色影院| 无码人妻精品一区二区蜜桃色欲| 国产又爽又猛又粗的视频A片| 无码少妇高潮喷水A片免费| 国产偷人爽久久久久久老妇APP| 国产黄大片在线观看画质优化| 国产精品18久久久| 99热综合在线观看| 婷婷丁香色五月天| 去色色五月天| 丁香六月婷婷久久高清| 久久婷婷亚洲| 九九综合精品| 激情5月天天天| 久久黄色片| www.五月丁香| 五月激情小说网| 五月天激情网站| 丁香五月婷婷社区| 丁香香蕉婷婷| 色六月婷婷| 婷婷久久婷婷色五月| 青草性爱视频| A网在线欧洲| 五月丁香六月综合激情| PORNY九色9l自拍视频成人| 婷婷五月综合网| 69精品人人人人人人人人人| 国产特黄色精品一区二区三区精品无广告 | 国产精品国产成人国产三级| 春色激情| 日韩无码乱轮| 97人人操在线| 亚洲丁香五月天在线视频| 夜夜爽天天日| 99在线小视频| 婷婷九月丁香| 亚洲中文字幕在线观看| 日本nghangse中文字幕| 成人av观看| 亚洲综合久| 97激情五月天| 91人人爽久久涩噜噜噜| 色五月亚洲| 国产精品电影网| www久久久| 色五月婷婷777| 丁香久久久| 亚洲永久免费| 国产精品国产VA片国产| 色婷婷亚洲婷婷| 超碰人人色| 五月做爱| 久99视频| 亭亭五月天黑人2014| 成人欧美日韩| 国产成人精品一区二区三区视频 | 婷婷色五月丁香六月欧美啪| 五月丁香花免费视频| 激情五月天啪啪| 亚洲视频在线观看| 午夜丁香 婷婷| 亚洲综合在线播放| 青青草婷婷综合五月| 五月丁香自拍| 国产美女无遮挡裸体毛片A片| 丁香五月 无码| 色丁香五月天射婷婷爱婷婷| 亚洲情a| 一起草性爱不卡视频| 综合久久婷婷99| 婷婷激情四射五月天| 夜夜骑操AV| 99这里只有精品视频| 婷婷五月激情综合| 中文字幕第四色.999| 亚洲色欲欧美一区二区三区| 色婷婷五月天在线观看| 性做爰1一7伦| 99久久99久久| 秋霞电影理论| 九九九九国产| 久草五月丁香婷婷综合| 日日噜人人人做人| www 五月天 com| 色色色色色色色色综合网| 免费在线观看av网站| 天天做天天爱高潮片| 99乱视频| 小香蕉av| 婷婷五月天综合激情| 五月花激情| 开心激情网五月| 九九色影院| 99re热在线视频观看| 成人狠狠成人狠狠成人狠狠成人狠狠 | 亚洲综合无码| 色丁香婷婷| 日日做A爰片久久毛片A片英语| 99啪啪网| 精品无码99| 99精品久久| 丁香五月香蕉| 99视频在线精品免费观看2| 99热成人| 色综合色五月| 丁香五月激情网| 五月婷婷色色爱| 天天射夜夜爽| 久久久性爱视频| 久久综合五月婷婷| 这里只有国产精品在线| 99热在线看| 色婷婷综合成人| 色色综合网络| 国产真实乱了老女人视频| 91久久99久久91熟女精品| 激情五月天在线免费美女视频| 狠狠色婷| 五月丁香六月婷婷免费视频| 俺去也综合| 五月天婷婷基地综合网| 青草五月天| 老司机视频lsj爱就色| 日本色婷婷久久99精品91| 婷婷九月色| 婷婷午夜激情| 人人摸人人干| 91久久精品视频| 亚洲开心激情网| 九九成人| 91久久久久久久| 在线视频99| 4399伦理午夜| 丁香五月Av| 久久综合图片| 天天影视色综合网| 五月天丁香婷婷网| 337p午夜影院| 香蕉久久国产AV一区二区| 色99在线看| 久久丁香五月天| 国产人人操| 五月婷丁香亚洲| 六月色婷婷| 99er免费在线观看| 婷婷丁香成人| 五月丁香六月激情综合网| 亚洲天堂爱爱| 婷婷少妇激情| 国产婷婷综合| 东京热免费视频网站| 婷婷五月天开心网| 久久综合综合综合| 丁香五月a| 超碰免费人人肏| 色婷婷激情五月天| 五月丁香综缴情性爱| 久久久五月婷婷| 亚洲精品久久久久久久久久飞鱼 | 久婷婷久草| 六月丁香婷婷在线波多| 久久婷婷七月丁香| www色中色综合| 久久44| 亚洲aV写真天天综合网久久| 欧州婷婷五月天综合| 婷婷激情五月综合丁| 五月天操逼激情| dingxiangtingtingliuyue| 国av网| 开心五月丁香啪| 婷婷五月久久| 五月丁香在线婷婷美女| 天天日P天天射P| 日韩五月丁香| 《久久综合九色综合97婷婷| 91丨九色丨熟女| 久久综合中文| 激情五月天影院| 五月婷婷开心色伊人| 99久久国产宗和精品1上映| 久久草婷婷丁香网站| 射婷婷中文字幕| 5月婷婷激情网| 亚洲免费在线观看岛国| 日日综合网| 婷婷97碰碰| 五月天婷婷色色| 思思久ren热| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 国产丁香五月天婷婷| 久久九九热38| 韩国天天婷婷| 五月丁香六月成人| 日韩无码色色| 色综合99无码| 五月婷婷中文字幕AV| 91婷婷色 | 中国女人做爰A片| 综合色综合| 天天肏天天肏| 久99久在线| 婷婷五月在线综合| 亚洲三级无码| 狠狠色噜噜狠狠狠狠综合| 91大神操美女| 337p大胆噜噜噜噜噜91Av| 丁香五月婷婷久久综合激情网 | 久久思思热| 玖热精品综合视频| 99精品国产乱码久久久人妻| 色婷五月| 色九月国产| 人妻久久久久久久| 亚州激情网| 亚洲性爱AV| 99久.| 精品婷婷五月天| 婷婷激情四射五月天| 91日本在线| 五月天堂婷婷| 国内久久亭亭| 婷婷综合五月天| 三级大香蕉网| 丁香九月综合激情| 99激情视频| 久久久精品色色色| 色婷婷狠狠爱| 婷婷五月天首页激情| 五月丁香激情综合啪| 狠狠色 综合色区| 成人va视频| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 日韩1区2区| 新激情五月开心五月婷婷五月丁香五月| 在线综合91| 九九婷婷网五月天| 久久视频这里99| 九九五月天| 丁香性爱在线视频| 久久久激情视频| 五月丁香久久综合精品| 丁香六月婷婷久久亚洲天堂| av在线免费网站| 天天插天天很| 99免费在线视频| 九九综合色| 天天做天天爽| 色宗合,宗合网| 国产精品岛国片在线观看免费| 天天色播| 五月色综合网| 婷婷激情五月天激情在线| 99婷婷五月天激情| 99色色网| 久久小视频| 思思热在线精品视频网站| 在线观看免费狠狠色丁香香综合| 五月丁香久久| 五月天激情久久| 九九久久五月天综合伊人| 人人人操| 4399精品一区二区| 99色色网| 99热8| 五五月五月| 色噜噜狠狠色综合网| 一区二区三区四日本| 日本WWW九九九| 99热精这里只有精品| 色九月婷婷综合| 色五月婷婷777| 婷婷四色五月| 色婷婷久久综合丁香五月| 久久亚洲婷婷| 国产亚洲av片| 国产精品人成A片一区二区| 亚洲啪视频| 色色网五月激情| 99在线观看这里都是精品| 综激情网| 激情网色五月| 国产一区二区三区影院| 中文字幕不卡+婷婷五月| 色婷五月天综合网| 狠狠88综合久久久久噜噜噜| 性爱网五月天| 丁香狠狠色婷婷久久无码视频| 久久性爱视频| 91超碰九色| 天天日天天干天天爽| 婷婷丁香一月| 日本女天天爽| www.久久久久久久| 日韩精品一区二区三区,四区,五区视频| 天天插天天爽| 婷婷九月亚洲| 五月天激情网开心网| 成人欧美一区二区三区在线观看| www..999热久| 天堂网啪啪| 26uuu成人网| 成 人片 黄 色 大 片| 99爱在线视频| 亚洲AV综合网| 热99热9| 色丁香在线视频| 欧美天天爽| 婷婷精品| 久久9精品视频| 99ri视频在线观看| 精品日本视频444| 麻豆AV一区二区三区| 99热最新| 色欲久久综合| 久久亚洲无码| 99综合| 久久机热这里只有精品| 天天日人人| 六月婷婷狠狠| 99久久精彩视频。| 91九色精品女同系列| 91ncm视频| 久久九九九九| 婷婷99狠狠躁天天久久久九九九| 五月天激情综合| 丁香五月婷婷啪啪| 我爱大香蕉| 五月婷中文字幕| 丁香五月婷婷六月| 亚洲色模骚货| 久久婷婷五月天激情唯美| WWW.夜夜| 另类小说五月天激情| 婷婷综合网在线| 五月天婷婷久色| 久久er+| 天天日人人| 五月天激情网图片 - 百度| tingtingjiqingwuyue| 99热99日…..| 五婷婷六月合|