99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Drule2.0規(guī)則引擎從入門到排坑:配置、會話與生產(chǎn)實踐

Drule2.0規(guī)則引擎從入門到排坑:配置、會話與生產(chǎn)實踐 接手Drule2.0這套規(guī)則引擎的時候我心里其實有點嘀咕。項目從1.x升級過來舊的規(guī)則文件全得重寫接口層面也動了不少。當(dāng)時團隊里沒人系統(tǒng)整理過新版的用法文檔東一塊西一塊大多是一句“按老版本兼容”就帶過了。結(jié)果上線測試第一周我們就被規(guī)則不生效、會話狀態(tài)串掉這類問題連續(xù)錘了好幾次。后來我花了兩周時間把Drule2.0從配置、開發(fā)到上線排查的整套鏈路重新捋了一遍也把生產(chǎn)環(huán)境踩過的坑都補進了內(nèi)部使用手冊。這篇就當(dāng)是一個更詳細(xì)的外部版給正在或者準(zhǔn)備用Drule2.0的同行一個參考。內(nèi)容按照我對這套引擎的理解來組織重點放在“怎么用對”和“怎么排查錯”上適合后端開發(fā)、規(guī)則配置人員以及對規(guī)則引擎選型感興趣的同學(xué)。1. 規(guī)則引擎到底解決了什么問題先對齊一個認(rèn)知很多團隊把規(guī)則引擎當(dāng)成“if-else的替代品”這么理解不能說錯但容易用歪。以我參與的這個金融風(fēng)控項目為例最直接的痛點不是代碼寫不出判斷邏輯而是業(yè)務(wù)規(guī)則天天變下午三點業(yè)務(wù)方提需求說“貸款額度超過五萬且歷史逾期超過兩次的訂單要人工審核”第二天上午就要上線。傳統(tǒng)的做法是改代碼、發(fā)版、走回歸一套流程下來最快也得一兩天而且改一次代碼就要動一次測試用例成本嘩嘩往上漲。Drule2.0把“決策邏輯”從業(yè)務(wù)代碼里拆了出來變成了獨立的規(guī)則文件。規(guī)則文件可以由業(yè)務(wù)分析師或運營人員通過配置界面維護也可以由開發(fā)以文本形式提交到倉庫再走CI流程發(fā)布。推送一次規(guī)則相當(dāng)于業(yè)務(wù)邏輯的即時熱更新不需要重啟服務(wù)也不需要重新編譯主程序。再說深一層規(guī)則引擎的價值不只是“快”還有一個容易被忽略的點可審計。金融項目做風(fēng)控決策需要回答“這筆訂單為什么被拒”這個問題。如果判斷邏輯散落在代碼的十幾個if-else里你很難快速給出完整依據(jù)。規(guī)則引擎里每一條規(guī)則都有獨立的命名、條件描述和動作定義引擎執(zhí)行完還可以輸出詳細(xì)的決策軌跡我在第7章會專門講這個問題。Drule2.0和典型的Drools等老牌引擎相比最明顯的差異是降低了規(guī)則編寫的門檻同時把“規(guī)則集”和“會話生命周期”這兩個概念徹底分開了。這意味著同一條規(guī)則可以被不同業(yè)務(wù)場景以不同參數(shù)加載執(zhí)行也允許引擎在同一進程里跑多個相互隔離的規(guī)則會話。這個設(shè)計對于中大型項目來說很關(guān)鍵因為同一個風(fēng)控服務(wù)可能同時服務(wù)好幾個產(chǎn)品線每條產(chǎn)品線的規(guī)則模板和優(yōu)先級策略并不相同。如果只是幾十條固定判斷說實話硬編碼在代碼里并不丟人。規(guī)則引擎的優(yōu)勢要等規(guī)則量上了百、變更頻率上了周、參與維護的人超過兩三個之后才會明顯體現(xiàn)。所以我給你的第一條建議是先別急著給項目上規(guī)則引擎先盤一下規(guī)則的規(guī)模和變更頻率。2. 六個核心概念從規(guī)則文件到會話一次講透Drule2.0的官方文檔里概念很多但真正貫穿日常開發(fā)的其實就六個。把這六個概念和它們之間的關(guān)系搞明白后面所有配置和接口調(diào)用都不會跑偏。2.1 事實引擎操作的對象事實是進入規(guī)則引擎參與匹配的數(shù)據(jù)對象。它可以是一個訂單對象、一個用戶實體也可以是一個Map。引擎本身不關(guān)心事實的業(yè)務(wù)語義只把它當(dāng)作“是什么類、有哪些屬性、當(dāng)前值是多少”的數(shù)據(jù)載體。在Drule2.0的Java客戶端里事實通常是POJO規(guī)則里通過全限定類名加屬性引用來取值。比如規(guī)則文件里寫OrderInfo(amount 50000)就是在匹配一個名為OrderInfo的事實對象并且要求它的amount字段大于等于50000。有一點要注意同一個會話里可以插入多個不同類型的事實引擎在處理時會把這些事實統(tǒng)一放進工作內(nèi)存規(guī)則的條件部分可以引用其中任意一個或多個。2.2 條件與動作規(guī)則文件的一左一右規(guī)則文件里最核心的兩個部分是條件Left Hand Side簡稱LHS和動作Right Hand Side簡稱RHS。條件描述“什么時候觸發(fā)”動作描述“觸發(fā)后干什么”。條件部分通常由字段約束、邏輯組合和事實之間的關(guān)聯(lián)組成動作部分可以是修改變量值、調(diào)用日志、對外發(fā)消息或者只是簡單地把規(guī)則名記下來。我自己寫規(guī)則時的一個習(xí)慣是盡量讓動作簡單可控不要在動作里寫太復(fù)雜的處理邏輯。規(guī)則引擎適合做決策不適合做重型業(yè)務(wù)處理。如果某個動作需要調(diào)用第三方服務(wù)或者寫數(shù)據(jù)庫建議放到引擎外部去做規(guī)則里只輸出一個“建議結(jié)果”這樣可以保持規(guī)則文件的輕量。2.3 規(guī)則集獨立命名的規(guī)則容器規(guī)則集是一個邏輯容器把一組規(guī)則打包在一起。Drule2.0里一個規(guī)則文件或者一個發(fā)布包通常對應(yīng)一個規(guī)則集。規(guī)則集之間是隔離的這意味著你創(chuàng)建會話時只能加載指定的一個或幾個規(guī)則集不會互相干擾。項目里如果你的規(guī)則被分成“反欺詐規(guī)則集”“額度審批規(guī)則集”“黑名單規(guī)則集”它們在加載時就是獨立、隔離的。這帶來一個很大的好處你可以單獨測試、單獨發(fā)布某一個規(guī)則集而不影響其他正在運行的規(guī)則。2.4 無狀態(tài)會話與有狀態(tài)會話別選錯這是Drule2.0實際使用中最容易出問題的地方也是文檔里描述最抽象的地方之一。無狀態(tài)會話就像一次性的純凈水杯你把事實丟進去引擎當(dāng)場算完返回結(jié)果會話直接銷毀。適合一次請求一次決策的場景比如“判斷這個訂單要不要風(fēng)控攔截”。有狀態(tài)會話則像一個持續(xù)對話的窗口你可以在會話里分多次插入事實每次插入后觸發(fā)規(guī)則還可以在后續(xù)查詢之前規(guī)則的執(zhí)行結(jié)果。適合需要分階段決策、或者在一個流程里多次依賴上一次結(jié)果的場景。我強烈建議除非你的業(yè)務(wù)流程確實需要跨多次觸發(fā)保存中間狀態(tài)否則優(yōu)先用無狀態(tài)會話。有狀態(tài)會話用不好最典型的問題就是“上次請求的數(shù)據(jù)污染了本次結(jié)果”我在第7章會詳細(xì)講一個因為復(fù)用有狀態(tài)會話導(dǎo)致的線上事故。2.5 規(guī)則模板與動態(tài)參數(shù)前面說過Drule2.0降低編寫門檻主要體現(xiàn)在規(guī)則模板機制上。你可以在規(guī)則文件里定義模板變量比如minAmount和maxAmount然后在創(chuàng)建會話時傳入?yún)?shù)值。同一個規(guī)則集因為傳入?yún)?shù)不同可以形成“消費貸額度偏好模板”和“小微企業(yè)貸額度偏好模板”兩套執(zhí)行效果。這比舊版本里為每個商戶復(fù)制一份規(guī)則文件的做法干凈多了。以前我們給商戶A寫一份規(guī)則、給商戶B復(fù)制一份再改改參數(shù)結(jié)果規(guī)則數(shù)量指數(shù)級膨脹維護成本高到想罵人。用模板參數(shù)后一份規(guī)則同時服務(wù)幾十個不同配置的對象規(guī)則文件本身幾乎不需要重復(fù)維護。2.6 規(guī)則函數(shù)的擴展方式Drule2.0不可能覆蓋所有業(yè)務(wù)場景的自定義邏輯。文件里還預(yù)留了自定義函數(shù)的注冊接口開發(fā)人員可以寫一小段Java代碼把判斷邏輯打包注冊成函數(shù)規(guī)則里直接調(diào)用。比如根據(jù)身份證號計算年齡段、根據(jù)經(jīng)緯度判斷是否屬于同一城市這些邏輯就不是規(guī)則語言能優(yōu)雅表達(dá)的注冊成函數(shù)后在規(guī)則文件里用一行調(diào)用就行。這里有一個邊界要守好自定義函數(shù)應(yīng)該是“判斷工具”不要用自定義函數(shù)去操作其他事實對象或者修改全局變量否則會讓規(guī)則執(zhí)行的可預(yù)測性變得很差。3. 規(guī)則文件長什么樣一份風(fēng)格靈活但邊界清晰的配置Drule2.0的規(guī)則文件在社區(qū)版里支持好幾種格式不同行業(yè)使用習(xí)慣也不同。我基于實際項目經(jīng)驗把規(guī)則文件拆解成兩層來看。3.1 規(guī)則文件的基本骨架下面這段是個風(fēng)格類似DRL但做了簡化脫敏的示例用來展示核心字段的邏輯關(guān)系。Drule2.0對規(guī)則文件有一套schema校驗規(guī)則如果使用了不屬于本版本的關(guān)鍵字發(fā)布包在校驗階段就會報錯。具體的文件名后綴和packaging方式建議以你所用發(fā)行版的官方CLI或編輯器插件提示為準(zhǔn)。package demo.risk import com.example.dto.OrderInfo import com.example.dto.UserProfile rule 高危訂單攔截 when $order : OrderInfo(amount 50000, channel ONLINE) $user : UserProfile(riskLevel HIGH) then $order.setIntercept(true); $order.setReasonCode(AMOUNT_HIGH_WITH_RISK); drule.log(hit rule: HIGH_RISK_ORDER); end幾個關(guān)鍵點拆開說package表示所屬包名類似Java的包主要用于組織和隔離規(guī)則。import引入需要操作的事實類。不引入直接用字符串類名也可以但會犧牲編譯期檢查線上跑出來容易出類型不匹配。rule 名稱規(guī)則名稱在當(dāng)前規(guī)則集里必須唯一。一旦重復(fù)發(fā)布時直接報錯。我曾經(jīng)見過兩個同事各自加了同名規(guī)則結(jié)果發(fā)布校驗階段卡了好久。when條件區(qū)。上面示例里兩個模式之間默認(rèn)是“同時滿足”的關(guān)系。Drule2.0默認(rèn)所有條件都是與的關(guān)系如果你想表達(dá)“或”需要顯式使用or關(guān)鍵字或者拆成兩條規(guī)則。then動作區(qū)。用類似Java的語法修改變量、打日志。注意變量上的$前綴只是慣例方便區(qū)分規(guī)則變量和事實對象的內(nèi)部字段不是強制的。3.2 JSON風(fēng)格規(guī)則描述文件業(yè)務(wù)配置團隊更習(xí)慣的是JSON格式的規(guī)則描述。Drule2.0支持把規(guī)則拆成“描述動作腳本”的結(jié)構(gòu)。下面是我們在某個信貸審批場景里用過的簡化結(jié)構(gòu){ ruleSet: loan_check, ruleList: [ { ruleName: loan_overdue_check, description: 歷史逾期超過3次且當(dāng)前未結(jié)清的單直接拒絕, priority: 10, enabled: true, condition: { type: and, items: [ { field: overdueCount, operator: , value: 3 }, { field: currentStatus, operator: , value: UNPAID } ] }, action: { type: script, script: order.setResult(REJECT); order.setReason(OVERDUE); } } ] }JSON格式對非開發(fā)人員相對友好而且天然支持模板變量替換。配置人員不需要理解Java語法只需要知道字段名、比較符和結(jié)果集就能自己維護一套規(guī)則。我們把字段清單維護成一份數(shù)據(jù)字典上面的overdueCount、currentStatus就是字典里的標(biāo)準(zhǔn)字段規(guī)則配置人員照著字典寫基本不會出界。3.3 條件操作符的種類和用法Drule2.0常用操作符大概是這些操作符示例含義說明status CLOSED等于字符串用雙引號amount 10000數(shù)值比較age 25數(shù)值比較和上面一樣支持整數(shù)與小數(shù)!status ! BLOCKED不等于inchannel in [APP, MINIAPP]屬于給定集合not inlevel not in [LOW, MEDIUM]不屬于給定集合matchesmobile matches ^1[3-9]正則匹配containstagList contains VIP集合字段包含某元素exists/not existsexists(SubOrder)工作內(nèi)存中是否存在某類事實實際項目中遇得最多的是兩種問題一是字符串比較漏了引號導(dǎo)致當(dāng)成字段名解析二是時間類型的比較沒有嚴(yán)格統(tǒng)一格式導(dǎo)致規(guī)則執(zhí)行結(jié)果前后不一致。時間字段我建議統(tǒng)一轉(zhuǎn)成時間戳long類型再比較不要直接比較日期字符串。3.4 動作區(qū)支持的不只是賦值動作區(qū)看起來像Java但它主要做三類事情給事實對象的字段賦值比如order.setResult(REJECT)。調(diào)用規(guī)則引擎內(nèi)置API比如drule.log()輸出執(zhí)行日志或者用drule.insert()往工作內(nèi)存里插入一個新事實從而觸發(fā)后續(xù)規(guī)則。調(diào)用注冊好的自定義函數(shù)比如if (riskUtil.isBlack(mobile)) { ... }。動作區(qū)不適合做的是長時間阻塞的IO操作、復(fù)雜事務(wù)、需要異步回調(diào)的流程。遇到這些需求更合理的做法是規(guī)則只負(fù)責(zé)設(shè)置一個標(biāo)記值真正的處理邏輯放到引擎外部通過監(jiān)聽器或者后置鉤子去完成。4. 引擎內(nèi)部是怎么找到那條規(guī)則的優(yōu)先級、沖突與規(guī)則鏈用規(guī)則引擎的人經(jīng)常有一個疑問“我插入了事實引擎到底按什么順序執(zhí)行規(guī)則如果好幾條規(guī)則都能匹配上先執(zhí)行誰”這一章把順序問題講透。Drule2.0的處理機制并不神秘它本質(zhì)上做的是模式匹配匹配完成之后再進行規(guī)則沖突的解決與激活執(zhí)行。4.1 規(guī)則執(zhí)行的兩階段流程第一階段是“匹配”。事實插入工作內(nèi)存后引擎會把事實對象和當(dāng)前規(guī)則集里的所有規(guī)則條件進行匹配。注意不是順序遍歷那種簡單匹配引擎內(nèi)部有一個索引結(jié)構(gòu)來緩存模式與事實之間的關(guān)聯(lián)這也是為什么大量規(guī)則下引擎的執(zhí)行性能依然能穩(wěn)住的原因。這個階段的結(jié)果是產(chǎn)生一個“激活表”也就是“哪些規(guī)則在當(dāng)前事實組合下被滿足”。第二階段是“執(zhí)行-沖突解決”。如果激活表有多條激活的規(guī)則引擎按照議程Agenda的次序逐條執(zhí)行動作區(qū)的代碼。一條規(guī)則動作執(zhí)行完畢后如果它向工作內(nèi)存插入了新事實或者修改了已有事實引擎會重新進行匹配產(chǎn)生新一輪激活繼續(xù)執(zhí)行直到?jīng)]有新激活規(guī)則為止。4.2 優(yōu)先級是怎么排的數(shù)字越大越先跑Drule2.0里的規(guī)則優(yōu)先級用priority字段控制默認(rèn)值是0。數(shù)值越高在當(dāng)前議程里越靠前執(zhí)行。規(guī)則文件里可以寫成rule 高優(yōu)先級規(guī)則 priority 100 when ...在JSON風(fēng)格里對應(yīng)priority: 100。我在配置優(yōu)先級時踩過一個教訓(xùn)不要指望同一事實下互不相關(guān)的規(guī)則也嚴(yán)格按照優(yōu)先級排順序。優(yōu)先級只在“匹配同一組事實的規(guī)則”之間的執(zhí)行順序上有意義如果規(guī)則觸發(fā)的條件本質(zhì)上不同那么它激活的時機都不一樣硬調(diào)優(yōu)先級反而不容易理解。把規(guī)則按業(yè)務(wù)階段分層優(yōu)先保證層內(nèi)順序正確跨層的順序交給事實流轉(zhuǎn)去控制是我目前覺得最清晰的做法。4.3 沖突解決的三條隱性規(guī)則如果優(yōu)先級相同且都匹配了同一組事實Drule2.0內(nèi)部按照一個固定的規(guī)則來排序雖然不同發(fā)行版可能略有差異但大致思路是規(guī)則的“特化程度”高者優(yōu)先。也就是條件寫得越具體、約束條件越多的規(guī)則系統(tǒng)認(rèn)為它信息量更大越該先執(zhí)行。事實插入順序靠前的優(yōu)先。先插入的事實匹配出來的激活規(guī)則排在前面。如果規(guī)則文件里顯式聲明了規(guī)則順序按聲明的先后關(guān)系執(zhí)行。實際配置中不要指望這些隱性排序來解決業(yè)務(wù)問題而是要對“同時命中且互相影響”的規(guī)則設(shè)置顯式的優(yōu)先級防止隱性排序變化時出現(xiàn)行為抖動。4.4 規(guī)則鏈與重復(fù)觸發(fā)保護規(guī)則動作里可以插入新事實并觸發(fā)后續(xù)規(guī)則這形成了規(guī)則鏈。規(guī)則鏈可以簡化復(fù)雜決策流程的表達(dá)但有一個危險如果規(guī)則A的動作為事實X設(shè)置了一個值而規(guī)則B的條件又依賴這個值等規(guī)則B執(zhí)行完后又反過來修改了事實X導(dǎo)致規(guī)則A再次激活就可能無限循環(huán)。Drule2.0在循環(huán)防護上提供了開關(guān)配置同時建議規(guī)則作者在容易形成環(huán)的地方設(shè)置觸發(fā)次數(shù)上限這類業(yè)務(wù)條件。遇到線上規(guī)則無限循環(huán)問題先看日志里有沒有同一個規(guī)則名反復(fù)出現(xiàn)再檢查動作區(qū)是否改動了條件區(qū)依賴的字段。關(guān)于規(guī)則鏈還有一點非常重要如果一條規(guī)則的觸發(fā)條件里依賴了自己動作修改過的字段最好仔細(xì)測試否則很容易出現(xiàn)“你以為只跑一次實際被再次激活”的情況。除非確有需要否則條件字段和動作修改字段應(yīng)該盡量錯開。4.5 決策表Excel也能做規(guī)則Drule2.0的配置中心支持把規(guī)則以決策表形式導(dǎo)入。決策表比較適合“條件多、結(jié)果為離散值”的場景第一行放條件字段下一行放比較符第三行放具體條件值最后一行放結(jié)果。決策表在后臺會被引擎編譯成規(guī)則文件。業(yè)務(wù)團隊非常喜歡這種方式因為它和Excel篩選的操作習(xí)慣一致。但決策表不擅長的是處理復(fù)雜邏輯組合比如多表關(guān)聯(lián)判斷還是老老實實用規(guī)則文件更穩(wěn)妥。5. 從搭建到跑通第一次請求集成流程和關(guān)鍵步驟這章直接上實操。我用JavaKotlin混合的微服務(wù)項目環(huán)境來演示不過Drule2.0本身也提供了其他語言的客戶端思路是一樣的。建議先在一個干凈的Spring Boot工程里跑通最小鏈路再對接現(xiàn)有業(yè)務(wù)。5.1 工程依賴與初始化項目構(gòu)建工具如果是Maven第一個動作是引入Drule2.0的客戶端依賴以及對應(yīng)的規(guī)則包解析器。依賴配置的具體groupId和版本號跟隨你的發(fā)行版走公司內(nèi)部如果使用私有倉庫以私服坐標(biāo)為準(zhǔn)。引入依賴后建立一個配置類把規(guī)則集發(fā)布到本地緩存的路徑配好。Configuration public class DruleConfig { Bean public RuleEngineService ruleEngineService() { RuleEngineOptions options RuleEngineOptions.builder() .ruleBasePath(/opt/rules) .enableCompileCache(true) .build(); return new RuleEngineService(options); } }這里面的關(guān)鍵點是ruleBasePath指向存放規(guī)則文件或發(fā)布包的目錄。Drule2.0啟動時會掃描這個目錄下的規(guī)則包并預(yù)編譯所以規(guī)則文件的改動雖然可以不重啟服務(wù)但發(fā)布到該目錄的時機需要和你的文件同步更新機制配合好。5.2 創(chuàng)建無狀態(tài)會話并執(zhí)行一次決策首次跑通最推薦的方式是寫一個單元測試直接創(chuàng)建會話、插入事實、觸發(fā)執(zhí)行、斷言結(jié)果。Test void testHighAmountOrderShouldBeIntercepted() { RuleEngineService service ruleEngineService(); RuleSession session service.newSession(risk_control_rule_set); OrderInfo order new OrderInfo(); order.setAmount(80000); order.setChannel(ONLINE); session.insert(order); session.fireAllRules(); assertTrue(order.isIntercept()); assertEquals(AMOUNT_HIGH, order.getReasonCode()); }分步驟解釋newSession(risk_control_rule_set)根據(jù)規(guī)則集名稱創(chuàng)建一個無狀態(tài)會話。session.insert(order)把訂單對象當(dāng)作事實插入工作內(nèi)存。session.fireAllRules()執(zhí)行所有匹配規(guī)則的激活項。動作區(qū)通過order.setIntercept(true)直接修改了傳入對象。由于Java對象引用傳遞主線程的order對象在fire之后已經(jīng)發(fā)生了變化所以后面可以直接斷言。這是最簡單也最穩(wěn)妥的使用方式。事實對象會被直接修改因此要特別注意不要在同一個請求里對同一個對象開多個會話操作否則可能出現(xiàn)并發(fā)覆蓋。5.3 創(chuàng)建有狀態(tài)會話并分階段觸發(fā)有狀態(tài)會話適合依賴“上一次規(guī)則執(zhí)行結(jié)果”的場景。比如先走一次反欺詐校驗結(jié)果沒問題再走額度審批。示例RuleSession session service.newSession(credit_flow_rule_set); OrderInfo order new OrderInfo(); order.setAmount(30000); UserProfile profile new UserProfile(); profile.setRiskLevel(MEDIUM); session.insert(order); session.fireAllRules(); session.insert(profile); session.fireAllRules(); OrderDecision decision session.getGlobal(decision);有狀態(tài)會話持有了工作內(nèi)存中的事實所以能在多個階段之間保留狀態(tài)。它的問題是如果整個會話執(zhí)行過程中發(fā)生異常會話里所有中間狀態(tài)都必須主動清理否則下一次復(fù)用就會受影響。上面代碼里沒有做關(guān)閉嚴(yán)格的寫法應(yīng)該在finally塊里調(diào)用session.dispose()釋放會話或者干脆每次請求都創(chuàng)建新會話。如果你用的是有狀態(tài)會話并且容器是線程池的一定要想清楚“這個會話是否會被多個線程共用”。無狀態(tài)會話沒有這個問題因為它每次請求都新建并銷毀。5.4 監(jiān)聽器和審計日志配置Drule2.0提供事件監(jiān)聽機制可以在規(guī)則命中前后、議題激活前后掛鉤子實現(xiàn)審計日志收集、指標(biāo)量統(tǒng)計等功能。實現(xiàn)接口后注冊進會話即可。正常情況下線上會記錄以下內(nèi)容請求唯一ID、進入引擎時間、命中的規(guī)則名列表、每條規(guī)則的動作結(jié)果摘要、總耗時。這些審計數(shù)據(jù)是從“結(jié)果”回溯到“原因”的鑰匙建議一定在早期就配上不然后面出問題排查成本很高。5.5 一個常見的跑通后問題很多第一次接入Drule2.0的團隊會困惑為什么我在配置中心改了規(guī)則測試數(shù)據(jù)也變了但線上執(zhí)行的還是老結(jié)果排查方向通常是緩存沒刷新或者新舊版本規(guī)則集名一樣導(dǎo)致發(fā)布包被覆蓋。Drule2.0的規(guī)則編譯緩存是按規(guī)則集名版本號做的如果你的發(fā)布包沒有顯式改變版本號規(guī)則集會繼續(xù)沿用緩存版本。修改規(guī)則并發(fā)布時建議帶一個遞增版本號同時確認(rèn)配置中心的緩存刷新策略是否覆蓋了所有實例節(jié)點。6. 幾個容易忽略的配置細(xì)節(jié)會話隔離、緩存與規(guī)則數(shù)量控制規(guī)則引擎用久了你會發(fā)現(xiàn)真正讓你頭疼的往往不是規(guī)則寫得不對而是引擎在特定配置下的表現(xiàn)不符合直覺。這一章講三個值得提前做好的配置決策。6.1 會話隔離級別怎么選Drule2.0本身支持多規(guī)則集隔離但同一個規(guī)則集能不能被多個會話安全并發(fā)執(zhí)行取決于會話的隔離級別。默認(rèn)來說無狀態(tài)會話每次新建相對安全。如果追求性能優(yōu)化想用會話池復(fù)用對象一定要確認(rèn)會話里是否有全局變量。我見過一個案例規(guī)則動作區(qū)往全局變量里存了用戶ID會話池復(fù)用后第二個用戶跑同一條規(guī)則時讀到的全局變量還是第一個用戶的ID直接導(dǎo)致風(fēng)控規(guī)則誤判。后來我們把全局變量的使用全部禁止改為通過事實對象的字段傳遞才徹底解決。全局變量能不用就不用這是我在Drule2.0實戰(zhàn)里學(xué)到的第一課。6.2 編譯緩存的正確打開方式規(guī)則文件發(fā)布后第一次被請求時需要編譯編譯耗時可能到幾百毫秒甚至更多。如果希望冷啟動也體驗良好可以開啟異步預(yù)編譯。Drule2.0支持在規(guī)則集發(fā)布時主動觸發(fā)一次編譯把產(chǎn)物放入本地緩存目錄。配置緩存時要注意清理策略長期運行的服務(wù)如果規(guī)則包版本頻繁升級本地緩存會留下大量歷史版本的編譯產(chǎn)物占用磁盤空間。建議文件保留數(shù)量和保留時間都做一個明確限制。6.3 規(guī)則數(shù)量多少算太多社區(qū)里總有聲音問“Drule2.0能支撐多少條規(guī)則”我個人的經(jīng)驗是單規(guī)則集內(nèi)規(guī)則數(shù)量控制在幾百條級別是完全沒有問題的引擎內(nèi)部的索引機制能支持相對可觀的規(guī)則量。真正帶來性能麻煩的是“規(guī)則之間有大量交叉引用且觸發(fā)鏈較長”的情況并不是規(guī)則條數(shù)本身。打個比方一萬條彼此獨立的規(guī)則就像一萬個獨立的檢查關(guān)卡跑完也就挨個過一遍但十條互相觸發(fā)的規(guī)則可能形成指數(shù)級循環(huán)把引擎卡死。所以做規(guī)則架構(gòu)設(shè)計時與其糾結(jié)條數(shù)不如把每一條規(guī)則的邊界劃清楚盡量減少規(guī)則之間的隱式依賴。7. 生產(chǎn)環(huán)境踩坑實錄四類高頻問題的完整排查鏈路這章寫的都是我親眼見過甚至親手踩過的坑每個項目的背景細(xì)節(jié)都做了脫敏處理但排查鏈路是完整的。希望你看完能少走一半彎路。7.1 規(guī)則“命中”了但動作沒生效現(xiàn)象測試環(huán)境規(guī)則跑得好好的上線后日志里能看到命中的規(guī)則名但訂單并沒有被攔截結(jié)果值也沒有按預(yù)期改寫。排查鏈路首先檢查動作區(qū)是否加了對字段非空的約束。我們遇到過的事實是動作區(qū)執(zhí)行了order.setResult(REJECT)但后面的另一個動作分支又把result覆蓋成了空值。打開完整審計日志看動作區(qū)代碼塊的執(zhí)行順序。因為同一組事實同時命中多條規(guī)則時執(zhí)行順序由優(yōu)先級決定如果你在低優(yōu)先級規(guī)則里做了覆蓋高優(yōu)先級規(guī)則的結(jié)果就會被沖掉。檢查規(guī)則文件里是否有多個同名規(guī)則。同名沖突在發(fā)布時可能被攔截但舊版本規(guī)則集如果還殘留在緩存里新規(guī)則命中后動作可能被舊規(guī)則的后續(xù)執(zhí)行覆蓋。最后結(jié)論是這個場景本質(zhì)是優(yōu)先級設(shè)計不合理多條規(guī)則共享同一個輸出字段卻沒有約定唯一最終寫者。修復(fù)方案是調(diào)整優(yōu)先級并增加字段寫入前的前置校驗同時在測試環(huán)境增加了一個“同一字段多次寫”的靜態(tài)掃描。7.2 有狀態(tài)會話復(fù)用時發(fā)生的用戶數(shù)據(jù)串號現(xiàn)象兩個用戶并發(fā)請求A用戶跑到某一步時突然出現(xiàn)B用戶的用戶名和訂單金額被錯誤地打進了審計日志。排查鏈路第一反應(yīng)懷疑緩存鍵設(shè)置錯了。查完緩存沒問題但發(fā)現(xiàn)服務(wù)里復(fù)用了同一個規(guī)則會話對象。查看會話創(chuàng)建代碼發(fā)現(xiàn)為了性能優(yōu)化之前人把newSession()結(jié)果放進了本地線程池的ThreadLocal里期望同一線程復(fù)用。問題是ThreadLocal并不能保證同一個用戶的請求始終落在同一個線程。于是出現(xiàn)了A用戶的會話事實還沒清空B用戶的請求就插入到同一會話的情況。臨時方案是調(diào)高會話對象的使用周期把它從請求級改成業(yè)務(wù)級終態(tài)方案是把有狀態(tài)會話改成無狀態(tài)會話不保留跨請求狀態(tài)。這是有狀態(tài)會話最典型的坑一旦出現(xiàn)數(shù)據(jù)串號后果比規(guī)則不生效更嚴(yán)重。我的建議是除非業(yè)務(wù)有強需求否則不要為了解決性能問題去復(fù)用會話性能和正確性之間永遠(yuǎn)要優(yōu)先正確性。7.3 時間比較出現(xiàn)跨天差異現(xiàn)象一條“超過當(dāng)天18點不做自動審批”的規(guī)則晚上八點應(yīng)該攔截但實際沒有攔截。排查鏈路先檢查規(guī)則條件里的時間字段類型。發(fā)現(xiàn)規(guī)則寫的是currentTime 18:00:00字符串直接比較。不同規(guī)則節(jié)點所在服務(wù)器的時區(qū)一致但字符串格式在進入規(guī)則引擎前被某個環(huán)節(jié)轉(zhuǎn)換成了帶時區(qū)的日期時間導(dǎo)致比較結(jié)果和預(yù)期不符合。修復(fù)方式是把時間字段統(tǒng)一轉(zhuǎn)成時間戳再比較同時在前置接口層把日期時間標(biāo)準(zhǔn)化規(guī)則文件里禁止直接比較日期字符串。這個問題同時提醒我們規(guī)則引擎的匹配結(jié)果嚴(yán)重依賴事實對象的值因此“進入引擎前的事實清洗”要和“規(guī)則條件設(shè)計”放在一起考慮。字段時區(qū)不統(tǒng)一、格式不統(tǒng)一的臟數(shù)據(jù)進入引擎后規(guī)則寫得再對也可能得到錯結(jié)果。7.4 規(guī)則循環(huán)導(dǎo)致引擎卡死現(xiàn)象某個訂單觸發(fā)了某條規(guī)則后進程CPU飆升請求一直不返回直到超時。排查鏈路查看引擎日志發(fā)現(xiàn)同一個規(guī)則名在短時間內(nèi)被激活了上百次。打開該規(guī)則的動作區(qū)發(fā)現(xiàn)它修改了條件區(qū)依賴的一個字段條件滿足后再次激活形成了自觸發(fā)循環(huán)。查看規(guī)則文件歷史這個規(guī)則原本是修改另一個輔助字段的后來一次重構(gòu)把賦值對象改錯了指向了條件區(qū)的判斷字段。修復(fù)方向是把動作區(qū)和條件區(qū)完全解耦明確哪些字段是“輸入字段”哪些字段是“輸出字段”并用規(guī)則文件注釋標(biāo)明。循環(huán)觸發(fā)看起來很嚇人但其實規(guī)則引擎本身有防護機制如果你的版本沒有自動打開循環(huán)保護建議在配置中心里打開。同時給規(guī)則集設(shè)置合理的執(zhí)行超時時間就算真出現(xiàn)循環(huán)也能保證請求快速失敗而不是拖垮整個服務(wù)。8. 規(guī)則引擎上線前的檢查清單從測試到灰度最后這部分不是總結(jié)而是我們上線前用的內(nèi)部清單你完全可以抄走做二次確認(rèn)。規(guī)則編寫階段每條規(guī)則是否有清晰、唯一的命名說明字段里是否寫了業(yè)務(wù)含義。條件區(qū)是否有可以提前合并的模式減少無意義的重復(fù)匹配。動作區(qū)是否直接或間接修改了條件區(qū)依賴的字段如有是否顯式設(shè)計過循環(huán)策略。輸入字段的數(shù)據(jù)類型是否統(tǒng)一字符串格式是否滿足規(guī)則條件的格式要求。測試階段是否準(zhǔn)備了最小正向用例、最小反向用例和邊界值用例。是否測試了字段為空、字段類型異常、對象為null的場景。是否驗證了規(guī)則優(yōu)先級與你預(yù)期一致而不是僅靠“跑通得到正確結(jié)果”來推斷。是否在新規(guī)則集發(fā)布時對舊規(guī)則集做了回歸對比。發(fā)布與灰度階段規(guī)則集版本號是否遞增。是否先在一臺機器或少量流量上灰度。是否配置了規(guī)則執(zhí)行的監(jiān)控面板至少能看到命中率、平均耗時、異常規(guī)則名。是否部署了規(guī)則快速回滾能力?;貪L不只是把規(guī)則集降級還要確認(rèn)本地編譯緩存的清理。從運維角度我還建議給規(guī)則引擎單獨設(shè)置性能監(jiān)控指標(biāo)不要和應(yīng)用主流程的指標(biāo)混在一起。因為規(guī)則引擎的耗時波動往往能告訴你業(yè)務(wù)規(guī)則最近是不是出了變化把它獨立出來定位問題會快很多。我個人在實際操作中的一個體會是Drule2.0本來就可以成為業(yè)務(wù)和工程之間的一層“通用語言”。讓業(yè)務(wù)方用JSON格式維護基礎(chǔ)規(guī)則讓工程師把需要復(fù)雜邏輯的規(guī)則收口成自定義函數(shù)兩者結(jié)合規(guī)則引擎在團隊里才能真正用起來而不是變成一個誰都敬而遠(yuǎn)之的黑盒。希望這份偏實戰(zhàn)的梳理能幫你省下我當(dāng)初填坑的那些時間。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
人妻久久久| 精品无码99| 99热6精品| 熟女国产在线一区二区三区四区| 婷婷导航| 五月婷婷激情久久| 五月激情视频网| 狠狠狠狠狠狠草| 丁香五月av| 色五月首页| 国产,欧美,学生妹,视频| 思思国产99| 高清a片基地| 欧美三日本三级少妇三99| 久久婷婷丁香五月宗合| 99久久超级| 日本九九网| 91精品婷婷国产综合久久| 69精品人人人人人人人人人| 夜夜操天天干| 色婷婷婷婷| 五月丁香狠狠爱婷婷综合| 日韩在线一级| 久久九九99.www| 亚洲精品亚洲人成人网| 亚洲熟妇无码乱子AV电影| 九九家庭影院| 九九精品在线视频观看| 午夜九九九九九九九九九九九九九| 五月天丁香综合| 久久您您综合网| 操一区| 六月婷婷激情小说网| 婷久久高清| 丁香六月在线| 五月丁香六月香香蕉| www.开心激情| 色婷五月天激情| www.综合久久.com| 51XX嘿嘿午夜无码| 91碰九色| 99热爆在线| 亚洲免费看片| 99爱精品| 被男人添B超爽视频| 91大神操美女| 色婷视频| 五月激情综合网| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 亚洲五月天伊人| 91人妻人人做人碰人人爽九色| 9热超碰| 99热青青草| 欧美VA在线| 亚洲中文字幕在线电影| 天堂呦 呦百度搜索-百度搜索| 久久激情网| 国产色色视频| 牛色色碰| 变态另类色图| 日本系列_4页_777FP| 色色色宗合网| 五月天另类图片区99| 色婷婷av综合网| 激情婷婷丁香| 日本123区日韩欧美不卡在线看| 五月天成人综合| 五月 成人 婷婷| 人人摸人人| 丁香五月婷婷色偷偷| 五月婷婷丁香色播网| 婷婷成人综合五月| 五月丁香色婷婷| 美欧成人视频| 99精品在线| 99超级碰免费视频| 婷婷五月开心六月AV| 丁香五月停停av| 色婷婷精| 丁香伊人网| 激情综合五月丁香| 深爱丁香网| 凹凸7777操操操| 日日鲁鲁夜夜爽爽| 婷婷成人AV| 日本三级中国三级99| 五月丁香性爱| 北条麻妃九九九国产精品视频| 免费无码毛片一区二区A片| 色情一区二区播放| 亚洲欧美婷婷五月色综合| 人妻久久久久久| 亚洲综合在线播放| 国产毛片精品一区二区色欲黄A片| 五月婷婷色色色| 婷婷五月天成人| 另类小说五月天| 四川BBB搡BBB爽爽视频| 五月丁香九九| 79色色免费| 天天操婷婷| 黄网免费观看| 中文字幕高清av| 97碰超级人人看| 99re思思精品视频在线观看| 亚洲精品色| 丁香五月激情五月| 中文字幕 中文字幕明步| 色网站9| 久热久| 五月婷婷网五月在线| 成人电影在线免费试看| 色吧婷婷五月亚洲| 人人澡天天色天天做| 婷婷五月综合丁香久久| 六月丁香婷婷五月天| 六月婷伊人| av五月天婷婷丁香| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 久久久婷婷五月天| 婷婷六月丁香在线| 六月婷婷久久| 亚洲视频无| 人人搡人人| 天天综合久久| 99re思思久久| 啪啪激情网| 丁香色啪综合| 亚洲精品又粗又大又爽A片 | 丰满少妇乱A片无码| 久热爱大香蕉在线蜜臀悦色| 色婷婷先锋| 97干欧美| 日本操碰碰| 日本不卡五月婷婷丁香| seav天堂| 亚洲国产成人裸舞| 啪啪啪丁香五月| 亚洲中文无码成人| 国外亚洲成AV人片在线观看| 婷婷五月丁香在线观看| 国产偷人爽久久久久久老妇APP| 国产激情AV| 九九热在线精品视频| 婷婷色色欧美综合网| 天天爱天天做天天日| 日本系列_4页_777FP| 91色色色视频| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 久久这里都是精品免费| 亚洲精品久久久无码| 婷婷和五月天| 超喷97免费在线视频| 操人妻90p| 九九热99热| 99热99精品| 99热这里只有精品9| 五月婷无码| 欧美色色色| 日日影院 | 亚洲五月天天| 国产人人操| 五月香六月婷| 一区二区免费看| 五月丁香激| 99啪99| 日韩性视频| 99久久99久久综合| 香蕉AV777XXX色综合一区| 婷婷丁香六月影视| 婷婷综合伊人| 99亚州综合精品成人网| 婷婷性爱无码视频| 久久精品系列| 欧美性做爰大片免费看办公室 | 人人爽亚洲| 国产操逼视频网站| 婷婷丁香色五月| 日本色婷婷综合| 99国产在线精品视频| 天天综合网网欲色| 337p大胆噜噜噜噜噜91Av| 开心五月婷婷| 色狠久| 色色五月婷婷久久| 色网五月婷婷| 九九九九这里只有精品| 天天爽天天草| 婷婷亚洲五| 国产视频色色色色色色色| 九九在线这里只有精品视频| 天天日天天做天天舔| 99色| 噜噜狠狠色综合久| 五月丁香六月欧美| 狠狠做五月| 色婷婷中文| 五月天开心网| 日本性激情色播| g00d人体西西| 婷婷97色| 久久婷婷色| 婷婷伊人久久综合| 色欲婷婷夜夜| 五月婷婷丁香啪啪| 五月天啪啪网| 久久精品国产AV一区二区三区 | 干一干xxxx| 五月天综合| 黄色AAAAA| 午夜色婷婷| 在线中文字幕免费视频| 五月婷婷丁香| 狠狠干无码| 99热12| 久久久久9| 丁香九月激情在线视频| 九九热精品视频在线观看| 99爱在线观看视频| 久久人妻情侣| 亚洲99激情| 超碰国产AV| 99国产精品白浆在线观看免费| 韩国激情五月天综合网| 九九色综合视频| 激情五月第四色| 色五月自偷自拍婷婷婷婷| 天天干,天天日| 五月天综合| 久久成人综合五月天| 久久久性爱视频| 情色五月天 网站| 色综合久| 成人精品视频99在线观看免费| 97干欧美| 久久人操| 色色色色综合网| 五月丁六月香| 丁香五月天资源网| 六月婷婷色| 精品人妻久久久久久久| 99热这里只有精品50| 女人露出p毛视频www网站| 一级二级色大片| 国产av网| 色婷婷色| 五月婷婷熟女| 激情综合色| 色婷婷激情| 99热线观看9| 日韩一级| 综合爱久久| 伊人天堂婷婷| av成人在线播放| ...婷婷五月综合不卡,国产在线手机| 色444综合网| 五月婷婷影视| 性爱人人网| 小色小蛇伊人婷婷色香五月| 欧美大香蕉视频| 久久人操-久草婷婷-成人AV| 秋霞AV美国| 天天综合亚洲综合| 亚洲成人综合在线| 天天操综合网| 亚州第一黄网| 久久久五月天| 久久这里只有精品99| 超碰国产在线观看| a久久| 婷婷五月精品中文字幕| 丁香五月天无码| 成人操呦av| 婷婷五月大香蕉| 9l视频自拍九色9l黑人| 久热re视频在线观看网站| www.色婷婷| 亚洲精品亚洲人成人网| 日韩婷婷| 天天操婷婷| 五月天综合久久| 国产免费一区二区三区三州老师F1F1.CC | 99热啪啪| 九九综合精品| 日本狠狠干| 亚洲热热视频| 99热这里只有精品8| 五月天啪啪视频| 色婷婷狠| 思思久久精品| 无码色| 久久激情网| 二色av| 激情人妻综合| 婷婷综合| 国产FREESEXVIDEOS性中国| 色五月激情五月天| 色五月婷婷在线| 99热91| www色婷婷| 六月天婷婷| 九九热AV| av婷婷六月丁香社区在线观看| 亚洲A片成人无码久久精品青桔| av国产精品| 99热精品在线观看| 九色99视频| 大香蕉久久伊人网| 99啪99| 久久久久亚洲AV成人无码电影| 激情六月婷婷| 色亚洲视频| 色婷五月丁香久亚洲| 天天操天天日天天爽| 开心综合激情综合| 夜色综合网| 欧美日韩99| 九九色逼| 丁香五月成人自拍| 久久九九爽| 色婷婷婷av | 98永久精品| 丁香五月欧美激情| 亚洲综合五月天综合| 99re这里只有精品首页| xx久久| 久久九九免费视频| 欧美人人草草| 99精品热| 色婷婷五月中文字幕在线dvd| 五月亭亭开心网| 婷婷丁香熟妇综合网| 激情综合婷婷| 亚洲热久| 性爱在线播放av| 六月天丁婷婷| 五月天婷婷久久| 极品人妻VIDEOSSS人妻| 丁香激情五月少妇| 99热欧| 色综合激情| 亚洲综合久| 亚洲亚洲人成综合网络| 原琪琪色影院| 婷婷射婷婷舔| 激情综合网亚洲色图| 99re热视频这里只精品5| 14色综合婷婷| 久操香蕉| 亚洲五月天综合色| 欧美影院| 五月婷久久久久综合| av线电影| 婷婷五月综合啪| 色爽九九| 人妻Av在线| 亚洲99综合| 激情九九综合网| 丁香六月啪啪啪| 日韩二区搞逼插逼毛片| 啪啪91| 五月天激情啪啪| 久久三级视频| 九九99在线视频| 丁香六月亚洲| 超碰亚洲天堂| www91在线| 日本九九热| 九九色婷婷| 日韩AV在线免费| 开心 五月 综合| 婷婷五月天网| 欧美激情-区二区三区| 久久综合这里只有精品1| 天天操屄网| 色色国产| 婷婷八月激情| 97色色婷婷| 久草婷婷视频| www.av骚货| 久碰视频| 无码一区二区三区四区五区| 二色av| 97艹| 色综合激情| 91夫妻视频| WWW,五月天| 婷婷五月色综合| 欲色人妻| 深爱激情婷| 欧美顶级少妇做爰HD| 久久久18| 久机视频这只有精品| 亚洲午夜一区二区| 荷兰av一级| 欧美久久久中文字幕| 性爱七区| 色五月欧美| 另类天堂| 99玖玖精品| 色情五月综合婷婷| 婷婷五月天激情综合网| 狠狠久久婷五月| 欧美韩国日本| 国产精产国品一二三在观看| 97人人干| www.色婷婷.com| 婷婷五月天奸女| 欧美色频| 夜夜资源站| 欧美在线视频免费播放| 欧美三级黄色片久久| 色五月丁香婷婷| 成片免费观看大全| 日本婷婷五月天| 激情丁香久久| 亚洲婷婷久久综合| 伊人干综合| AV在线免费播放| 91精品91久久久中77777久久玖玖九九 | 狠狠狠狠狠| 婷婷激情图片| 这里只有精品在线免费视频| 开心五月婷婷激情| 亚洲av网站| 综合狠狠伊人| 亚洲乱码日产精品BD| www.色窝| 大香蕉久久久久久久久| www,8050,午夜三级| 色色色网站| 99热这只有| 午夜69成人做爰视频| 激情五月丁香激情综合网| 又大又粗九一在线| 亚洲精品国产精品乱码视99| 婷婷涩涩五月天| 欧洲亚洲免费视频9| 欧美日综合| 天天爽天天操| 天天天久久人人人合| 奇米网大香蕉| 五月婷婷婷婷| 丁香五月亚洲婷婷| 久久久久婷| www.色99| 亚洲 五月 婷婷 成人| 91久女| 婷婷色中文字幕| 97超级碰碰碰久久久| 能看的av网站| 婷婷丁香色五月亚洲| 久热在线中文字幕色999舞| 五月草影视| 91丨九色丨熟女丰满| 五月丁香成人| 91超级碰人人操| 欧美性爱丁香五月| 免费黄网不卡AV| 五月丁香亚洲综合网| 综合色色综合| 成人无码髙潮喷水A片| 色五月丁香伊人五月| 黄色五月婷婷| 91av视频| 99视频精品在线| 色婷婷狠狠久久综合五月| 影音先锋色婷婷| 在线VA视频| 国产综合丁香五月天| 玖玖99婷婷| 六月丁香激情网| 久色视频| 国产欧美精品AAAAAA片| 久久丁香| 97 A I色色| 婷婷五月天堂网| 大香蕉久久伊人网| 日韩无码专区| 97碰人人操| 色婷婷五月天激情久久| 婷婷激情视频| 色五月天 丁香| 激情五月六月婷婷| 久久久噜噜噜久久人妻| 天天干天天干天天干天天干天天干天天干天天| AV在线免费播放| 黄色片avv| 大香蕉婷婷| 亚洲色优| www色五月天| 天天激情5月天亚洲| 一起草日本| 91久久99久久91熟女精品| 色五月人妻| 五月天综合区| caopeng超碰| 丁香五月影视| 五月久视频| 色偷偷色婷婷| 亚洲精品操一操、噜一噜、摸一摸、爽 | 开心婷婷五月综合| 五月天综合网| 五月婷婷五月| 色啪网| 99色在线视频| 噜噜色婷婷| 丁香婷婷五月天色播| 综合色图区| www. 五月. com| 超碰日韩成人| 亚洲国产精品VA在线看黑人| 亚洲成人网站在线观看| 99爱在线精品视频免费观看| 婷婷五月大香蕉| 99热精品无码| 激情www| 夜夜爽天操| www.日韩艹| 五月在线婷色| 色综合激情图区| 伊人五月天久久| 色婷婷成人丁香| 色五月婷婷丁香五月| 狠狠操天天操| 丁香五月视频在线观看| 日本丁香五月婷婷| ji'qing'luan'ren'lun| 无码激情精品色婷婷久久久久| 五月天合网| 看婷婷五月天网| 99久久九九| 五月婷婷色色色| 欧美精品啪啪| 色婷婷视频| 色婷婷综合视频| 午夜免费试看| 狠狠操天天操| 99re思思热这里| 色婷婷狠狠色| 嫩草AV久久伊人妇女超级A| 97成人丁香| 五月天婷亚洲综合在线嫩草网| 九九精品热播| 久激情| 曰日爽日日操| 综合色吧| 午夜丁香| 97涩涩丁香五月天| 欧美激情综合色丁香婷婷五月天| 五月丁香六月激情欧美综合| av在线免费网站 | 热的国产99热| 六月婷婷狠狠做| 五月丁香久久丝袜啪啪| 日韩啊啊啊| 97性视频| 99九九精品| 国外亚洲成AV人片在线观看| 色九九九综合| 爆乳熟妇一区二区三区爆乳| 色色色视频免费无码 | 综合99久久天天综合| 五月婷婷亚洲| 袁子仪视频观看| 西瓜美女a片| 人人爱人人摸人人澡| 26uuu欧美| 色爱爱综合网| AV色五月婷婷| 婷婷五月天色综合翘| 99热精品9| 狠狠干,狠狠操| 亚洲欧美综合7777色婷婷| 色婷久久| 热99re| 色婷婷丁香五月| 精品视频这里只有精品| 97人人草| 丁香五月开心五月激情| 天天综合91入口| 婷婷五月婷婷| 91久久婷婷| 五月婷在线| 美女婷婷六月色| 精品无码久久久久久久久| 秋霞网在线观看理论91| 婷婷五月另类网站| 色情五月婷| www.99色| 日日影院 | 婷婷五月天激情五月天| 伊人色综合久久久| 99re在线观看视频| 在线观看日韩12345区| 五月丁香六月婷婷亚洲| 天天色99| 婷婷久久五月天| 丁香五月冃欧美| 99在线视频操999| 激情五月天婷婷丁香| 激情五月婷婷综合| 久久激情五月婷婷| 98国产精品综合一区二区三区| 99热精品网| 五月天无码视屏播放| 高清无码网址| 影音先锋男人av资源站| 青青草搞屄视频网站| 五月婷婷啪啪| 九月丁香八月婷婷加勒比| 99久在线| 日日干天天| 99热热热99精品丁香| 香蕉狠狠爱视频| 五月婷视屏在线观看| 91中文在线| 五月丁香大相交| 涩五月色婷婷| 青青久久五月| www.久久五月天.com| 91男同| 日韩成人电泉AV| 婷婷六月天精品| 亚洲六月色| 婷婷综合影院| 五月丁香五月婷婷在线观看| 射满了还射免费在线观看 -午夜版全集-新视觉影院| 另类视频五月天| 欧美激情xxxXX| 99热在线观看| 99热九九在线| 五月婷婷六月丁香色| A片一曲| 五月天艹天天| 天干天天干天天天天天| 婷婷亚洲综合| 最新日韩久热免费视频看看| 人妻无码视频网| 色吧五月婷婷| 97香蕉久久超级碰碰高清版| 色狠狠色噜噜AV天堂五区消防| 亚洲婷婷五月天综合| 啪精品| 丁香婷婷天堂| 日本欧美成人片AAAA| 五月丁香六月香香蕉| 婷婷五月情天| 久久九精品| 综合激情网五月激情| 99热这里| 欧洲不卡视频| 日本一级特黄大片AAAAA级| 婷婷五月激情图片| 久久久宗合| 久热 91| 色五月天丁香婷婷| 在线视频另类| 日本一级一级一级一级| 超碰在线国产| 五月丁激情| 95精品区一区二| 人妻操在线看| 天花AV无码| 五月天播播中文字幕| 激情婷婷五月少妇| 激情另类综合| 亚州激情网| 99热久久这里只有精品| 五月天婷婷影院影院| 色.五月综合网| 丁香五月天激情网| 久99久99精品免| 97在线综合| 另类天堂| 丁香五月AV| 爱婷婷五月| 996热re视频精品视频这里| 五月丁香999| 国产免费一区二区三区三州老师F1F1.CC | 久9视频免费播放| 国产免费AV在线| 丁香六月婷| 色综合开心五月深爱五月| 婷婷五月激情基地| 国产精品美女| 丁香婷婷六月激情文学| 久久综合九色综合97婷婷| 深情五月天| 色情五月天。| AA丁香综合激情| 久久九九蜜| 大香蕉Av在线| 色色亚洲| 丁香六月无码播放| 日韩久久视频| 午夜精品久久久久久久爽| 开心激情播播五月天| 丁香久久五月婷综合| 久久综合五月天| 五月天黄色激情小说| 人妻激情视频| 激情五月天。| BT综合在线视频观看| 99re熱| 婷婷六月综合基地| 婷婷五月天AV| 日本偷拍九九九| 欧美日韩99| 伊人婷婷五月| 五月丁香另类图片| 久久久精品免费啪啪国| 99综合久久| 天天干天天 亚洲| 91九色 婷婷| 亚洲日韩乱码一区二区三区四区| 婷婷狠狠操| 广东99色在线| 婷婷五月天丁香社区| 国语精品探花| 丁香五月婷婷基地| 曰本aaaaaa丈片| 久久激情五月婷婷| 日本成人噜噜噜| 99re思思精品视频在线观看| 亚洲精品在线视频| 新激情婷婷| 婷婷久热| 综合激情视频| 麻豆123区| 91操人视频| 79精品视频在线观看,| 欧美99热| 激情综合网激情五月天| 亚洲小说欧美激情| 白人荫道BBWBBB大荫道| 丁香婷婷影院| 五月丁香婷婷伊人| www.av视频xx999.com| 色综合狠狠色| 色色丁香婷婷五月天| 亚洲五月婷| 97干网站| 九九热在线观看视频| 色色色色色色色色色999| 亚洲国产婷婷色五月| 91丨九色丨老农村| 99精品久久久久久久久| 亚洲V国产V欧美V久久久久久 | 91九色无码内射| 国产古装妇女野外A片| 婷婷午夜| 色情丁香五月婷婷精品| 亚洲视频色婷婷| 婷婷五月天第四色| 欧美综合丁香网| 欧美欧盟性爱网| 久久婷婷啪啪视频| 丁香色成人| 午夜日韩久久久网站| 99精品综合| 98国产精品综合一区二区三区 | av网站不卡在线| 影音先锋女人av鲁色资源网小说免费| 久久草人妻| 色色色色区| 91美女被操| 97超碰在线免费观看| 婷婷激情五月天小说| 色欲香综合网| 五月天婷婷爱丁香中文字幕| 丁香五月在线伊人| 成人天天爽| 久久久久久久丁香五月天婷婷| 综合久久9| 亚洲旡码| 特黄三级片| 日韩成人av在线| 婷婷综合色色| 五月丁香久久精品在线观看| site:xmssd.com| 激情五月天婷婷久久久久久久久久久| 久久婷婷成人视频| 日本婷婷网| 色情五月天首页| 开心激情站婷婷五月天| 日韩操逼小电影| 精品久久久人妻| 五月婷婷六月天| 久一网站| 色婷婷色99国产综合精品| 激情久久丁香| 久久激情综合| 色婷婷五月六月丁香综合视频| 夜夜操狠狠操| www.热99热| 激情小说五月天中文字幕| 天天爽天天爽夜夜爽| 五月丁香六月激情啪| 五月天婷婷乱论小说| 五月丁香自拍| 久久99网| 在线成人va| 久久一级免费黄色片| 色女人久久| 看黄的网站18禁| 久色中文| 婷婷激情图片| 色欲色香综合网| 九九亚洲| 国产三级在线播放| 中文字幕人妻在线| 婷婷爱综合| 亚洲成人噜噜| 六月婷婷激情| 日韩无码专区| 婷婷玖玖丁香| 亚洲五月丁香综合网| 久草xx性爱视频| 国产九九一区二区三区| 婷婷色婷婷| 超碰一区二区| 丁香激情久久| 色婷婷a三区麻| 在线视频99| 男人的天堂五月丁香| 69人人操人人爽| 97综合在线| 狠狠色精品综合| 日韩ac不卡无码| 色婷婷综合久久| 91婷婷在线| 色婷婷五月综合在线| 五月丁香六月婷婷a v| 99视频这里有精品| 久热大香蕉| 91九色无码内射| 五月开心婷婷网| 天天日,天天射,天天舔| 色激情五月| 久久综合最新网址| 亚洲国产婷婷色五月| 亭亭五月天成人| av狠狠操| 婷婷久久婷婷| 成人久久天天x资源站| 激情综合激情综合| 风流少妇A片一区二区蜜桃 | 男人综合网| 亚洲另类电影| 日逼免费视频| 青草激情综合| 日韩AV在线免费| 精品久久婷婷五月天| 99热这里有精品| 开心激情站| 99偷拍视频在线日本| 丁香五月婷婷少妇| 99久视频| 97色精品视频 | 色丁香五月天| 婷婷黄色网| 免费99情趣网视频| 亚洲激情综合| 五月天婷婷狂暴白浆| 婷香五月| 丁香五月婷婷AV在线| 少妇人妻人伦A片| www.婷婷六月天| 五月激情婷婷丁香天堂| 婷婷成人五月天| 九九精品自拍| 五月婷婷啪啪啪啪| 精品国产AV色一区二区深夜久久 | 97在线观视频免费观看| 97碰碰视频在线观看免费| 99精品免费欧美小视频| 色色色色五月| 九伊人网| 六月综合在线| 精品人妻伦九区久久AAA片| 中文字幕婷婷| 婷婷五月天日逼| 大香蕉久热| 婷婷五月丁香色色| 五月丁香久久久| 色综合综合综合| 无码日本精品XXXXXXXXX| 九九aV| 六月丁香啪啪| 99热这里只有精品免费| 天天日天天舔| 亚洲色99| 性爱视频久久| 丁香六月婷婷| 91男同视频| 狠狠插狠狠操| 中文字幕人成乱码在线观看| 精品一二三区久久AAA片 | 五月天婷a在线| 91狼友视频在线观看| 北条麻妃九九九国产精品视频| 97丨九色丨国产丨PORNY| 天天弄天天操| 99久久超级| 欧洲色区| 婷婷综合玖玖五月| 金品在线视频99| www91在线| 99久在线精品99re8| 亚洲天堂久久| 五月婷婷开心爱| 五月天激情婷婷小说| 婷婷五月天日本无码| 五月丁香五月婷婷| 91碰超| 亚洲色色色| 久久久91精品| 激情碰碰碰| 精品牛仔裤超碰| 天天玩夜夜操天天爽| 韩国婷婷丁香五月| 丰满人妻一区二区三区| 啊V视频在线观看| 五月婷婷激情综合| 超91热| 丁香五月AV| 婷婷五月天丁香社区| 丁香六月婷婷色XXXXX| 99热线观看9| 亚洲性爱干干| 丁香六月婷婷姐网| 欧美性爱五月天| 国产精品天天狠天天看| 超碰无码老师| 91色婷婷综合久久中文字幕二区| 婷婷丁香六月五月天| 狠狠狠夜夜夜| 九九视频在线观看| 色135综合网| 天久久久久| 久久久人妻不卡| 五月婷六月婷婷| 思思re99视频在线观看| 夜夜操加勒比| www.五月婷婷久久.com| 国产五月天激情小说| 久色| 无码视频国内精品久久久| 婷婷综合日本| 秋霞电影理论| 婷婷情色激情| 久久XX| 久操干| 人人添人人| 成人国产综合| 婷婷WWW久久| 97自拍视频在线| 停停五月丁香| 六月丁香久久| 九色91视频| 婷婷情色激情| 天天操夜夜操| 色哟哟精品| 亚洲成人在线五月天| 激情综合网五月激情| 色 噜噜 九月 婷婷| 欧美成性色| 五月婷婷啪啪网| 色婷婷成人久久| 色色网站观看| 狠狠干狠狠色| 久久精品五月| 天天日天天做天天操| 色五月激情网| 久久久久久久8| 久久这里只有欧美| 国产看真人毛片爱做A片| 国产日韩av片| 丁香六月婷婷综合缴| 久久婷婷综合五月天| 99ri在线播放| 久久久这里有精品| 狠狠色 综合色区| 99er免费在线观看| 看片视频在线免费日产在线看| 久久99久久久| tingting五月天亚洲| 在线中文av| 婷婷婷狠狠| 99超在线| 天天干天天日天天操| 五月婷婷啪啪啪| 噜噜操操| 丁香五月成人丝袜| 六月 丁香 视频| 亚洲综合色婷| 五月天激情中文字幕| 国产69久久久欧美黑人A片| 久热婷婷| 成人丁香五月| 激情五月,色五月| 99人妻碰碰碰久久久久禁片| 婷婷激情在线| 色99热| 青青久久大香蕉| 六月色婷婷| 乱乱av| 思思热再线视频| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 99精品久久久久久久| 月婷婷婷婷五月| 五月天之色情综合网| 丁香五月婷久久| 综合 蜜月 婷婷| 九九在线视频| 激情中文在线| 五月婷婷啪| 伊人大香蕉在线视频| 九九综合| 91超碰九色| 99热综合| 婷久看人爽| 精品久久久中文字幕大豆网推荐理由| 2020久久婷婷五月| 九久久九精品视频| 丁香六月成人| 婷婷狠狠97| 五月婷婷无码| 丁香六月av| 亚洲欧洲中文日韩久久AV乱码| 丁香六月天婷婷开心综合| 九九九AAA热视频| 五月丁香中文| 久热91| 午夜成人AV在线| 久久亚洲色导航| 99日热在线视频| 精a品a| 99在线视频播放| 激情五月天综合网| 久久99色色| 91久久久久久久久久| 婷婷色在线| 桃色激情婷婷伊人网| 99精彩视频在线观看| 亚洲综合视频网| 丁香九月综合| 91 久热| 久99久视频| 久久久er热| 亚洲成人中文字幕| 五月丁香婷婷六月| 五月色导航| 国产精品国产| 亚洲乱码日产精品BD| 亚洲色综合性| 婷婷五月激情网| 日韩在线视频9色| 久久精彩免费视频| 成人超碰AV| 亚洲色综合色网| 亚洲99热| 欧美人人草| 五月婷婷干干干| 五月婷婷伊| 五月天综合婷婷| www,婷婷| 成人精品在线| 五月丁香综合网| 激情深爱五月天| 天天摸人人摸| 婷婷五月天激情四射五月天激情| 97色综合| 色色色成人网| 色爱五月天| 97色色色视屏| 久久99精品久久久久久青青AR| 欧美成人精品三区综合A片| 99免费视频| 色五月天激情| 久久久久久久久18久久| 激情五月丁香五月| 99色在线视频| 五月丁香六月婷婷不卡免费无码| 久热99热| 69人人操人人爽| 国产激情久久| 999热在线视频| 强伦轩人妻一区二区电影| 思恩热国产视频右线观看| 天天操五月天| 日本性视频| 亚洲综合九九| 日韩九区| 色色五月天婷婷丁香| 五月天婷婷伊人| 婷婷五月成年人| 综合色图区| 久青操| 97色碰碰公开视频| 日逼AV影音先锋男人资源站| 99热这里是精品| 色色综合激情| 五月综合无码| 深夜激情网| 激情五月综合色婷婷| 婷婷丁香六月综合激情站| 97影院一级片| 激情九九九九| 久草五月丁香婷婷综合| 刘玥av在线| 国产SUV精品一区二区883| 九九aV| 99在线69| 狠狠丁香| 色色亚洲| 婷丁香五月天| 天天肏高清在线| 色五月天综合网| www激情婷婷com| 四色99久久| 丁香六月情| 激情小说五月欧美亚洲丁香| 99色热综合| 天天日天天做天天操| 五月婷婷亚洲综合网| 五月婷婷色男女| 色综合色欲综合天天免费| 91色久| 丁香五月婷婷六月婷婷| 91九色首页| 九九视频在线观看视频6 | 五月婷婷婷婷| 五月综合久久| 丰满少妇猛烈A片免费看观看 | 99操视频| www色五月| jiZZdr| 欧美成人AAA片一区国产精品| 天天插天天干| 内射爽无广熟女亚洲| 桃色成人网| 97在线天堂| 色色综合五月| 国产视频福利| 五月丁香综合| 亚洲婷婷月丁香五月| 欧美综合婷婷欧美综| 天天综合.com| 日本激情五月天‘| 日本色狠狠| 激情五月天色播| 另类在线| 少妇人妻人伦A片| 五月天激情亚洲| 五月天激情综合网| 丁香六月激情| 久久小视频免费| 五月丁香六月停停| 激情婷婷六月天| 丁香五月电影| AA片在线观看视频在线播放| 黄色热99| 草草影院爱爱| 亚洲五月天第一综合干| 精品一区二区三区木瓜| 99视频网| 99日韩| 国产无遮挡又黄又爽免费网站| 99日热在线视频| 亚洲旡码| 丁香色播五月天| 五月亭亭开心网| 婷婷色在线| JlZZJlZZ8JlZZ亚洲熟女| 97性视频| 99精彩视频在线观看| 综合一本道| 欧美久热| 狠狠狠狠草草| 综合激情婷婷| 丁香婷停五月激情综合深爱| 婷婷成人五月天成人文学| 五月天色图| 182无码| 区区久久妻| 操人妻视频91| 久久99热这里只有精品首| 国产熟妇的荡欲午夜视频| 91性人人| 梁铮版《蜘蛛女侠》在线| 久久视频这里有精品99| 超碰人人超碰| 亚洲九九99精品视频在线播放| 97久久精品| 亭亭五月激情亚洲在线| 六月婷婷啪啪| 97久久久久久久久久久| 日韩成人中文字幕| www,婷婷| 色五月 五月婷婷| 超碰高清在线| 亚洲99视频| 天天色综网| 国产精品成av人在线视午夜片| 91精品久久久久久77777| 五月网在线| 综合久久综合| 日美三级| 五月色欧洲| 婷婷丁香五月激情| 亚洲啪啪精品| 日操五月婷| 99热精品中文字幕| 色五月婷婷AV| 五月色天五月色| 9久久精品| 91精品久久久久久久| 日本婷婷色日| 麻豆AV一区二区三区| 天天激情5月天亚洲| 久久五月婷婷丁香| 91 久热| 亚洲激情图文小说| 五月婷在线观看| 97碰碰视频| 久久成人人妻| 九九久久99| 最新日韩久热免费视频看看| 五月激情网络| 丁香五月五月婷婷欧美大香蕉| 色www.con| 色五月在线观看| 久9久视频精品| 五月婷婷六月爱| 播播网色播播| 丁香婷色| 日韩99视频| enecarbon-materials.com污K127封锁请涟系@wip1688 | 99热精品中文字幕| 欧美婷婷色| 五月丁香六月日逼| 能看的AV| 五月天婷亚洲天综合网综合| 天堂综合久| 色噜久| 亭亭玉月丁香| 一区三区视频有限公司| 第一区久久网站| 欧洲色区| 夜夜夜夜做天天天做无码视频| 激情丁香五月婷婷| 九九热在视频| 色五月婷婷网| 国产在线6| WWW.国产| 激情五月六月丁香| 97精品人人A片免费看| 天天舔天天摸天天射| 国产亚洲精品久久久久苍井松 | 九九热99热| 丁香六月AV| 99热日本| 亚洲综人色综网| 九九热精品|