99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

GraphRAG開(kāi)源項(xiàng)目橫向?qū)Ρ龋毫蠓桨概c選型指南

GraphRAG開(kāi)源項(xiàng)目橫向?qū)Ρ龋毫蠓桨概c選型指南 這兩年的RAG賽道熱鬧程度堪比早年的微服務(wù)架構(gòu)之爭(zhēng)。就算你不專(zhuān)門(mén)刷開(kāi)源資訊也大概率聽(tīng)過(guò)了GraphRAG這個(gè)關(guān)鍵詞。它要解決的問(wèn)題很直接傳統(tǒng)RAG把文檔切成碎片存進(jìn)向量庫(kù)遇到需要跨文檔、多跳推理甚至全局總結(jié)的問(wèn)題時(shí)召回質(zhì)量經(jīng)常撐不住。而GraphRAG的思路是把大模型抽取出來(lái)的實(shí)體和關(guān)系整理成知識(shí)圖譜再在圖上做檢索和總結(jié)。過(guò)去一年里微軟、螞蟻集團(tuán)、香港大學(xué)研究團(tuán)隊(duì)等陸續(xù)把各自方案開(kāi)源社區(qū)里一夜間冒出幾十個(gè)相關(guān)項(xiàng)目。這篇文章不做概念科普直接挑6個(gè)最有代表性的開(kāi)源項(xiàng)目逐個(gè)拆開(kāi)看再橫向PK一輪最后給你一套能直接抄作業(yè)的選型方法。1. 先弄清楚GraphRAG到底在解決什么問(wèn)題再談選型很多人在對(duì)比GraphRAG項(xiàng)目之前最先問(wèn)的是“我到底要不要上GraphRAG”。我的回答通常是別急著上先弄清楚自己是不是真的遇到了傳統(tǒng)RAG解決不了的問(wèn)題。如果只是做一個(gè)簡(jiǎn)單的FAQ機(jī)器人文檔量小、問(wèn)題也集中那傳統(tǒng)向量檢索加上普通RAG完全夠用硬上GraphRAG只會(huì)給自己增加成本和運(yùn)維負(fù)擔(dān)。但如果你處理的是企業(yè)內(nèi)部知識(shí)庫(kù)、技術(shù)文檔、法律合同、研究資料這類(lèi)文本就會(huì)發(fā)現(xiàn)向量召回有幾個(gè)繞不過(guò)去的坎。1.1 傳統(tǒng)RAG的三大老毛病切碎、丟全局、單跳傳統(tǒng)RAG的流程大家都很熟了文檔切塊、向量化、存進(jìn)向量庫(kù)查詢(xún)時(shí)用相似度召回TopK塊再拼進(jìn)Prompt交給大模型回答。這套流程在單點(diǎn)事實(shí)問(wèn)答上表現(xiàn)不錯(cuò)比如“A產(chǎn)品的發(fā)布日期是哪天”“B模塊的配置項(xiàng)有哪些”。但稍微復(fù)雜一點(diǎn)問(wèn)題就來(lái)了。第一個(gè)毛病是切塊會(huì)切斷邏輯關(guān)系。一份技術(shù)文檔講“權(quán)限體系”前半部分在第一章定義角色后半部分在第四章說(shuō)明角色和API Key的綁定方式中間隔了幾十頁(yè)。向量化之后這兩個(gè)塊在語(yǔ)義空間里可能離得很遠(yuǎn)但問(wèn)題恰恰需要同時(shí)看到兩者才能回答。第二個(gè)毛病是“全局性問(wèn)題”完全無(wú)從下手。比如你問(wèn)“這份文檔集里團(tuán)隊(duì)對(duì)數(shù)據(jù)保留策略一共提過(guò)哪些不同的說(shuō)法”或者“過(guò)去一年的項(xiàng)目總結(jié)中反復(fù)出現(xiàn)的主題有哪些”。這類(lèi)問(wèn)題不針對(duì)某一個(gè)塊而是要遍歷整個(gè)語(yǔ)料庫(kù)做歸納向量召回天然不擅長(zhǎng)。第三個(gè)毛病是多跳推理。用戶(hù)問(wèn)“哪些權(quán)限變更是由合規(guī)要求引起的”解決這個(gè)問(wèn)題可能需要先定位“合規(guī)要求”相關(guān)文檔再找到對(duì)應(yīng)“權(quán)限設(shè)計(jì)”的章節(jié)最后回到“變更記錄”里確認(rèn)。每一步單獨(dú)看都能用向量召回但把整條鏈路串起來(lái)普通RAG沒(méi)有這個(gè)能力因?yàn)樗緵](méi)有“圖”這種關(guān)系結(jié)構(gòu)。1.2 知識(shí)圖譜補(bǔ)的不是檢索是“記憶結(jié)構(gòu)”GraphRAG的核心轉(zhuǎn)變是不再把文檔看成一塊一塊的獨(dú)立文本而是讓大模型先抽取出文檔里的實(shí)體人、系統(tǒng)、概念、事件和關(guān)系“屬于”“依賴(lài)”“導(dǎo)致”“修改”整理成一張知識(shí)圖譜。這張圖本身就是一個(gè)結(jié)構(gòu)化記憶它保存的不是文本片段而是事物之間的連接方式。有了圖之后“權(quán)限體系”和“API Key綁定”之間無(wú)論相隔多少個(gè)章節(jié)只要在抽取時(shí)形成了“角色-綁定-API Key”的邊回答多跳問(wèn)題時(shí)就能沿著關(guān)系路徑逐步回溯。而像“數(shù)據(jù)保留策略有哪些不同說(shuō)法”這種全局問(wèn)題GraphRAG會(huì)先把圖劃分成若干個(gè)社區(qū)直觀理解就是把聯(lián)系緊密的實(shí)體和關(guān)系圈成一組再按社區(qū)做摘要和歸納。這比逐段拼答案可靠得多。這也是為什么GraphRAG真正有價(jià)值的場(chǎng)景往往是“文檔量大、關(guān)系復(fù)雜、需要綜合提煉”的知識(shí)庫(kù)而不是一句話(huà)就能答出來(lái)的知識(shí)問(wèn)答。1.3 為什么2024到2025年開(kāi)源項(xiàng)目會(huì)集中爆發(fā)GraphRAG不是2024年才提出的概念但真正形成開(kāi)源生態(tài)是最近一年多的事。背后有三個(gè)推力一是大模型能力跟上來(lái)了實(shí)體抽取和關(guān)系分類(lèi)的質(zhì)量到了一個(gè)能用的臨界點(diǎn)抽出來(lái)的圖不再是一團(tuán)亂七八糟的線二是企業(yè)級(jí)知識(shí)庫(kù)的長(zhǎng)期維護(hù)需求太普遍大家都需要一種比“定期重建向量庫(kù)”更長(zhǎng)效的結(jié)構(gòu)性方案三是圖算法工具鏈成熟了社區(qū)檢測(cè)、最短路徑、PageRank這類(lèi)經(jīng)典算法可以直接套用。于是我們看到一個(gè)很有意思的局面大廠、高校、圖數(shù)據(jù)庫(kù)廠商各自帶著不同的基因沖進(jìn)這個(gè)賽道。要說(shuō)清楚它們的差別不能只看功能列表得看它們各自把成本花在了哪個(gè)環(huán)節(jié)。這一塊我在下一章逐個(gè)拆。2. 六個(gè)開(kāi)源項(xiàng)目逐個(gè)拆解各家打法和定位差異這里先說(shuō)明一點(diǎn)社區(qū)里GitHub上掛著GraphRAG名號(hào)的項(xiàng)目不下幾十個(gè)LlamaIndex的圖譜索引、LangChain的GraphCypherQAChain也都有相關(guān)能力。但我這次只聚焦“獨(dú)立成型的開(kāi)源項(xiàng)目”也就是從文檔索引到查詢(xún)問(wèn)答形成完整鏈路、能被別人直接部署使用的方案。篩下來(lái)最值得展開(kāi)的是這6個(gè)。2.1 微軟GraphRAG定義了“索引-社區(qū)-雙模式查詢(xún)”的基準(zhǔn)范式微軟的GraphRAG是2024年年中開(kāi)源的社區(qū)里絕大多數(shù)人第一次接觸GraphRAG就是從它開(kāi)始的。它的工作流現(xiàn)在基本成了這個(gè)方向的行業(yè)基準(zhǔn)文檔切塊后讓LLM從每個(gè)chunk里抽取實(shí)體和關(guān)系構(gòu)建起一張全局知識(shí)圖譜接著用Leiden算法對(duì)圖做分層社區(qū)檢測(cè)把聯(lián)系緊密的節(jié)點(diǎn)圈成一個(gè)社區(qū)再讓LLM對(duì)每個(gè)社區(qū)生成摘要形成“社區(qū)報(bào)告”。查詢(xún)時(shí)提供兩種模式局部搜索以問(wèn)題命中的實(shí)體為中心沿圖譜擴(kuò)展鄰居節(jié)點(diǎn)找回上下文全局搜索則把社區(qū)報(bào)告按map-reduce的方式逐一歸納適合回答“整個(gè)語(yǔ)料庫(kù)層面的趨勢(shì)和主題”。優(yōu)點(diǎn)很清晰功能覆蓋最全、文檔最完善、社區(qū)討論最多后來(lái)者幾乎都在和它對(duì)標(biāo)。但它的代價(jià)也最明顯——貴。構(gòu)建階段每個(gè)chunk都要調(diào)用一次LLM做實(shí)體抽取而且提示詞設(shè)計(jì)得很重輸出的是結(jié)構(gòu)化JSON。部署成本這件事我后面會(huì)專(zhuān)門(mén)算一筆賬這里先記住一個(gè)結(jié)論微軟GraphRAG是最能打地基的方案但不是最便宜的方案。2.2 港大LightRAG雙層圖加增量更新把索引成本打下來(lái)LightRAG由香港大學(xué)的研究團(tuán)隊(duì)開(kāi)源倉(cāng)庫(kù)掛在港大數(shù)據(jù)科學(xué)實(shí)驗(yàn)室下。它和微軟方案最大的區(qū)別在兩點(diǎn)一是圖的結(jié)構(gòu)從一層變成了兩層底層是具體的實(shí)體和關(guān)系頂層是抽象出來(lái)的主題概念?;卮鸺?xì)粒度問(wèn)題時(shí)用底層回答全局性問(wèn)題時(shí)直接走頂層主題層不用把整個(gè)社區(qū)的摘要都map一遍所以全局查詢(xún)便宜很多。二是增量更新被設(shè)計(jì)成了默認(rèn)能力。新文檔加入時(shí)只需要抽取出新實(shí)體、找到與已有圖之間的關(guān)聯(lián)邊并入現(xiàn)有圖譜即可不需要全量重建索引。這對(duì)企業(yè)知識(shí)庫(kù)太重要了因?yàn)槲臋n是持續(xù)增長(zhǎng)的每次更新都重建一次圖成本和時(shí)間都耗不起。LightRAG整體給人的感覺(jué)是輕、快、省。缺點(diǎn)也真實(shí)存在它更多是學(xué)術(shù)團(tuán)隊(duì)的作品生態(tài)和運(yùn)維工具不如大廠項(xiàng)目成熟真到了千萬(wàn)級(jí)節(jié)點(diǎn)、需要分布式存儲(chǔ)和監(jiān)控告警的場(chǎng)景得自己補(bǔ)不少工程化工作。2.3 螞蟻集團(tuán)GraphRAGGraphScope加持走企業(yè)級(jí)圖計(jì)算路線螞蟻集團(tuán)開(kāi)源的這個(gè)GraphRAG項(xiàng)目另一個(gè)繞不開(kāi)的關(guān)鍵詞是GraphScope——螞蟻內(nèi)部的圖計(jì)算引擎也已開(kāi)源多年。這套方案的定位和微軟、港大都不太一樣它不追求“在一個(gè)Python腳本里跑完全流程”而是把GraphRAG建在真正的圖數(shù)據(jù)庫(kù)和圖計(jì)算平臺(tái)之上。在我理解里它有兩條核心能力值得關(guān)注。一是Text2GQL把用戶(hù)自然語(yǔ)言轉(zhuǎn)換成圖查詢(xún)語(yǔ)言讓大模型直接在圖數(shù)據(jù)庫(kù)里做精確查詢(xún)比如“找出所有依賴(lài)A模塊并且由B團(tuán)隊(duì)負(fù)責(zé)的系統(tǒng)”這類(lèi)帶復(fù)雜約束的問(wèn)題用文本召回很吃力但用圖查詢(xún)語(yǔ)言可以按條件準(zhǔn)確圈定。二是檢索融合先用向量召回候選實(shí)體再回到圖里做子圖擴(kuò)展和關(guān)系推理兼顧了模糊語(yǔ)義和結(jié)構(gòu)化關(guān)系。這個(gè)項(xiàng)目是最“重”的一個(gè)組件多、依賴(lài)多上手門(mén)檻明顯高于前面兩個(gè)。但如果你面對(duì)的是百萬(wàn)級(jí)甚至更大規(guī)模的企業(yè)知識(shí)圖譜需要跑圖算法、需要和現(xiàn)有圖基礎(chǔ)設(shè)施打通那它是六個(gè)項(xiàng)目里最接近“生產(chǎn)系統(tǒng)”的一個(gè)。2.4 Neo4j LLM Graph Builder圖數(shù)據(jù)庫(kù)老牌廠商的“傻瓜式”入口Neo4j是圖數(shù)據(jù)庫(kù)領(lǐng)域的老牌玩家LLM Graph Builder是它官方開(kāi)源的GraphRAG落地工具。它最大的特點(diǎn)是可視化程度極高提供一個(gè)Web界面上傳本地文檔或連接數(shù)據(jù)源在界面上配置實(shí)體類(lèi)型、關(guān)系類(lèi)型和抽取規(guī)則點(diǎn)幾下按鈕系統(tǒng)就會(huì)用LLM把知識(shí)抽取出來(lái)寫(xiě)入Neo4j庫(kù)之后你既可以用自然語(yǔ)言對(duì)話(huà)也可以直接在Neo4j的可視化面板里探索這張知識(shí)圖譜。對(duì)于團(tuán)隊(duì)里沒(méi)有專(zhuān)職算法工程師、但業(yè)務(wù)上又需要知識(shí)圖譜的業(yè)務(wù)分析師來(lái)說(shuō)這套方案的入門(mén)體驗(yàn)是最好的。它不需要從零寫(xiě)編排代碼圖譜的質(zhì)量也可以直接在畫(huà)布上看出來(lái)。但它同樣有取舍所有能力都依賴(lài)Neo4j數(shù)據(jù)庫(kù)如果公司沒(méi)有部署Neo4j或者不想額外引入一套圖數(shù)據(jù)庫(kù)基礎(chǔ)設(shè)施門(mén)檻就不低了。另外知識(shí)圖譜的數(shù)據(jù)模型設(shè)計(jì)哪些算實(shí)體、哪些算關(guān)系、要不要做關(guān)系類(lèi)型歸一仍然需要人來(lái)做判斷工具只是讓這個(gè)過(guò)程更直觀并不能替你決定領(lǐng)域建模。2.5 NebulaGraph GraphRAG用圖算法社區(qū)檢測(cè)省掉一大筆LLM總結(jié)費(fèi)NebulaGraph是國(guó)內(nèi)團(tuán)隊(duì)開(kāi)源的一款分布式圖數(shù)據(jù)庫(kù)它同樣推出了自己的GraphRAG項(xiàng)目。這個(gè)項(xiàng)目讓我眼前一亮的地方是它在社區(qū)檢測(cè)和社區(qū)描述上走了完全不同的一條路不是讓LLM把每個(gè)社區(qū)從頭到尾精讀一遍再總結(jié)而是先用圖算法識(shí)別出社區(qū)結(jié)構(gòu)再基于社區(qū)里實(shí)體的統(tǒng)計(jì)信息、關(guān)系分布、節(jié)點(diǎn)重要度用模板化方式生成社區(qū)描述。什么意思呢傳統(tǒng)方案里全局搜索的成本幾乎全部消耗在“讓LLM總結(jié)社區(qū)”上NebulaGraph把這一步換成了可計(jì)算的圖統(tǒng)計(jì)量token消耗大幅下降。構(gòu)建階段同樣用LLM抽取三元組但后續(xù)的社區(qū)匯總不再需要逐條調(diào)用大模型這一點(diǎn)在生產(chǎn)環(huán)境里是實(shí)打?qū)嵉念A(yù)算節(jié)省。它還配套了Text2Cypher的能力把自然語(yǔ)言問(wèn)題轉(zhuǎn)換成Cypher查詢(xún)?cè)贜ebulaGraph上執(zhí)行。它的短板是生態(tài)整體偏小社區(qū)里的案例、教程和踩坑記錄比微軟GraphRAG少一個(gè)量級(jí)遇到冷門(mén)問(wèn)題能搜到的答案不多。2.6 FastGraphRAG不用LLM抽實(shí)體構(gòu)建速度最快的“異類(lèi)”FastGraphRAG的定位和前面所有項(xiàng)目都不同。它干脆不做實(shí)體抽取而是把每個(gè)文檔塊作為一個(gè)圖節(jié)點(diǎn)用embedding相似度來(lái)建邊。成本和速度優(yōu)勢(shì)是碾壓性的沒(méi)有LLM抽取環(huán)節(jié)索引構(gòu)建幾乎就等于“向量化加算相似度”跑一個(gè)幾百篇文檔的庫(kù)只需要幾分鐘token消耗可以忽略不計(jì)。查詢(xún)時(shí)它會(huì)在圖上做遍歷和排序再結(jié)合向量檢索召回相關(guān)塊最后交給LLM生成答案。它把LLM的調(diào)用集中在生成階段并且會(huì)緩存頁(yè)面級(jí)摘要后續(xù)查詢(xún)同一個(gè)區(qū)塊時(shí)可以復(fù)用長(zhǎng)期運(yùn)行成本控制得相當(dāng)好。當(dāng)然這種設(shè)計(jì)的代價(jià)也很明確它的“圖”表達(dá)的是文檔間的關(guān)聯(lián)強(qiáng)度而不是實(shí)體間的語(yǔ)義關(guān)系可解釋性弱、做不了精確的關(guān)系查詢(xún)。它的定位在我看來(lái)就是“敏捷試水”——快速驗(yàn)證GraphRAG是不是適合你的場(chǎng)景如果驗(yàn)證完發(fā)現(xiàn)需要更強(qiáng)的結(jié)構(gòu)能力再遷移到其他更重的方案。3. 同臺(tái)PK構(gòu)建成本、查詢(xún)模式、更新機(jī)制、上手門(mén)檻的橫向?qū)Ρ软?xiàng)目單個(gè)看都不錯(cuò)放在一起比才有意思。下面這張表是我自己整理的核心差異不涉及具體版本的細(xì)枝末節(jié)重點(diǎn)看設(shè)計(jì)取向。3.1 一張表看清六家底牌項(xiàng)目代表組織核心思路索引構(gòu)建成本查詢(xún)模式增量更新主要依賴(lài)上手難度微軟GraphRAG微軟LLM抽實(shí)體Leiden社區(qū)社區(qū)報(bào)告最高LLM調(diào)用密集局部搜索、全局搜索、DRIFT偏重改建成本高自帶圖結(jié)構(gòu)向量索引外部依賴(lài)少中等LightRAG香港大學(xué)雙層圖實(shí)體/主題中等統(tǒng)一抽取流程局部、全局、混合設(shè)計(jì)友好天然支持本地圖向量索引外部依賴(lài)少簡(jiǎn)單螞蟻GraphRAG螞蟻集團(tuán)圖計(jì)算Text2GQL較高依賴(lài)LLM抽取向量召回子圖展開(kāi)GQL查詢(xún)支持依賴(lài)圖數(shù)據(jù)庫(kù)圖數(shù)據(jù)庫(kù)/圖計(jì)算引擎較難Neo4j LLM Graph BuilderNeo4j可視化工坊LLM入庫(kù)中等自然語(yǔ)言轉(zhuǎn)Cypher查詢(xún)支持圖數(shù)據(jù)庫(kù)upsertNeo4j數(shù)據(jù)庫(kù)簡(jiǎn)單NebulaGraph GraphRAGNebulaGraph團(tuán)隊(duì)圖算法社區(qū)檢測(cè)模板化總結(jié)較低社區(qū)匯總不用LLMText2Cypher圖檢索一般NebulaGraph圖數(shù)據(jù)庫(kù)中等FastGraphRAG開(kāi)源社區(qū)文檔塊建圖不做實(shí)體抽取最低幾乎不用LLM圖遍歷向量召回天然適合本地圖向量索引簡(jiǎn)單從表格里能明顯看出兩個(gè)極端微軟和螞蟻是“重結(jié)構(gòu)、重關(guān)系”FastGraphRAG是“輕結(jié)構(gòu)、快迭代”LightRAG、Neo4j和NebulaGraph處在中間帶上。選哪個(gè)本質(zhì)上是在“語(yǔ)義結(jié)構(gòu)精度”和“構(gòu)建運(yùn)維成本”之間做權(quán)衡。3.2 索引構(gòu)建開(kāi)銷(xiāo)拆解最燒錢(qián)的地方在“讓LLM抽實(shí)體”六個(gè)項(xiàng)目里除FastGraphRAG外幾乎都要經(jīng)歷“LLM抽取實(shí)體關(guān)系”這一步而這恰恰是整個(gè)GraphRAG流程里最燒token的環(huán)節(jié)。為什么因?yàn)長(zhǎng)LM不是只讀一遍文本它要理解每個(gè)chunk的語(yǔ)境輸出格式固定的實(shí)體列表、關(guān)系列表、屬性列表還要處理實(shí)體歸一化——比如“蘋(píng)果”和“Apple Inc.”出現(xiàn)在不同文檔里必須合并成同一個(gè)實(shí)體。這個(gè)過(guò)程涉及的輸入輸出token數(shù)量遠(yuǎn)大于傳統(tǒng)RAG里單純做一次embedding的消耗。按我的經(jīng)驗(yàn)粗算同樣是索引一份幾千頁(yè)的文檔集傳統(tǒng)RAG可能只需要跑一遍向量化而標(biāo)準(zhǔn)的GraphRAG構(gòu)建階段在每個(gè)文檔塊上都要額外觸發(fā)一次甚至多次LLM完整調(diào)用。整體成本差出兩個(gè)數(shù)量級(jí)是常有的事。很多人在小數(shù)據(jù)集上跑著沒(méi)感覺(jué)一上生產(chǎn)語(yǔ)料就發(fā)現(xiàn)賬單漲瘋了原因就在這里。NebulaGraph的聰明之處就在這個(gè)環(huán)節(jié)它避開(kāi)了“讓LLM逐社區(qū)寫(xiě)報(bào)告”的高昂操作用圖統(tǒng)計(jì)量生成模板化描述等于把最貴的部分?jǐn)D出去了一大塊。而LightRAG的做法是壓縮提示詞和輸出結(jié)構(gòu)用更簡(jiǎn)潔的抽取格式來(lái)降本。3.3 查詢(xún)模式差異全局搜索是GraphRAG的靈魂也是最難控制成本的一環(huán)GraphRAG之所以區(qū)別于普通RAG很大程度是因?yàn)樗峁┝恕叭忠暯恰钡牟樵?xún)模式。但六家實(shí)現(xiàn)全局視角的方式完全不同成本也差得很遠(yuǎn)。微軟GraphRAG的全局搜索實(shí)行的是map-reduce把上一階段生成的所有社區(qū)報(bào)告逐一讓LLM歸納再做整體合并。答案質(zhì)量確實(shí)高但token消耗與社區(qū)數(shù)量成正比數(shù)據(jù)量一大就很?chē)樔?。LightRAG走了巧路用高層級(jí)主題節(jié)點(diǎn)近似“全局”查詢(xún)時(shí)只對(duì)相關(guān)主題層做歸納理論上便宜很多。NebulaGraph直接不依賴(lài)LLM總結(jié)社區(qū)用統(tǒng)計(jì)信息回答“什么樣的話(huà)題最集中”“哪些實(shí)體聯(lián)系最緊密”。FastGraphRAG因?yàn)闆](méi)有實(shí)體圖嚴(yán)格說(shuō)沒(méi)有傳統(tǒng)意義的全局搜索只能通過(guò)全圖遍歷給出近似。這里我想給一個(gè)很實(shí)際的建議你要先分辨用戶(hù)問(wèn)題到底屬于“事實(shí)查詢(xún)”“局部關(guān)系查詢(xún)”還是“全局趨勢(shì)查詢(xún)”。只做前兩類(lèi)根本不需要上全局搜索只有第三類(lèi)需求占比較高時(shí)花高昂的token成本才值得。這個(gè)問(wèn)題我見(jiàn)過(guò)太多人搞反了一上來(lái)就追求全局搜索實(shí)際上業(yè)務(wù)里90%的問(wèn)題都是查具體事實(shí)。3.4 增量更新企業(yè)長(zhǎng)期使用最容易忽視的維度做POC的時(shí)候大家都用靜態(tài)文檔集很少考慮更新。但真實(shí)的知識(shí)庫(kù)是活的每周都有新文檔、修訂和刪除。這時(shí)候增量更新能力直接決定你愿意多頻繁地刷新索引。微軟GraphRAG在這塊歷來(lái)是最被吐槽的。修改一批文檔后相關(guān)圖結(jié)構(gòu)和社區(qū)劃分很可能需要重新計(jì)算實(shí)踐中不少團(tuán)隊(duì)的策略是定期全量重建。LightRAG和FastGraphRAG由于設(shè)計(jì)之初就考慮了增量并入更新體驗(yàn)要順暢得多。Neo4j和NebulaGraph因?yàn)榈讓邮钦嬲膱D數(shù)據(jù)庫(kù)做局部更新有天然優(yōu)勢(shì)只是操作入口在數(shù)據(jù)庫(kù)這邊需要順手維護(hù)數(shù)據(jù)一致性。螞蟻GraphRAG的更新能力同樣依賴(lài)圖數(shù)據(jù)庫(kù)的upsert語(yǔ)義生產(chǎn)環(huán)境用起來(lái)問(wèn)題不大。所以如果你知道自己短期內(nèi)文檔會(huì)有持續(xù)更新請(qǐng)把“增量更新”放在和“回答質(zhì)量”同等重要的位置來(lái)評(píng)估。4. 我實(shí)際跑下來(lái)的幾個(gè)關(guān)鍵結(jié)論與避坑點(diǎn)這一章講的都是我在本地和測(cè)試環(huán)境里跑這幾個(gè)項(xiàng)目時(shí)總結(jié)出來(lái)的實(shí)操體會(huì)有些和官方文檔寫(xiě)的不完全一樣。4.1 別被“全局搜索”帶偏先算清token賬我第一次跑微軟GraphRAG時(shí)用的是公司里一個(gè)約800篇文檔的知識(shí)庫(kù)只建了一次索引token消耗量比我預(yù)想的高出好幾倍。原因之一是實(shí)體抽取階段不是只調(diào)用一次模型某些復(fù)雜chunk可能觸發(fā)重試和多輪解析而且實(shí)體歸一化階段為了處理同名實(shí)體會(huì)追加額外調(diào)用。所以我的建議是任何項(xiàng)目在上生產(chǎn)之前先拿50篇文檔跑一遍把構(gòu)建期的token量摸清楚再按總文檔量線性外推算算月成本會(huì)不會(huì)超預(yù)算。如果超了要么合并到更小的chunk、精簡(jiǎn)抽取提示詞要么直接考慮NebulaGraph或FastGraphRAG這類(lèi)降本設(shè)計(jì)更激進(jìn)的方案。這一步千萬(wàn)別省。4.2 數(shù)據(jù)預(yù)處理比選哪個(gè)項(xiàng)目更重要六個(gè)項(xiàng)目跑下來(lái)我的一個(gè)強(qiáng)烈感受是幾乎所有項(xiàng)目對(duì)“臟文本”的容忍度都很低。同一份文檔里如果同一個(gè)產(chǎn)品既有英文名、縮寫(xiě)又有中文名LLM抽取時(shí)很容易把它們當(dāng)成三個(gè)不同實(shí)體。如果文檔里還夾雜表格、頁(yè)眉頁(yè)腳、亂序章節(jié)圖的質(zhì)量會(huì)肉眼可見(jiàn)地變差。動(dòng)手抽實(shí)體之前一定要做幾件事統(tǒng)一格式、用正則清理頁(yè)眉頁(yè)腳、拆分復(fù)合文檔、把明顯同義的稱(chēng)呼做歸一化。這是純體力活但它對(duì)最終答案質(zhì)量的影響比在六個(gè)項(xiàng)目之間反復(fù)橫跳選哪個(gè)都大。我見(jiàn)過(guò)不少團(tuán)隊(duì)花了兩周做選型論證最后死在數(shù)據(jù)沒(méi)清洗上太可惜了。4.3 依賴(lài)圖數(shù)據(jù)庫(kù)的項(xiàng)目先把環(huán)境坑填平再評(píng)估性能Neo4j和NebulaGraph這兩個(gè)項(xiàng)目都強(qiáng)依賴(lài)自身圖數(shù)據(jù)庫(kù)所以有一類(lèi)問(wèn)題避不開(kāi)部署。Neo4j社區(qū)版相對(duì)省心起一個(gè)容器就能連NebulaGraph涉及的組件多一些啟動(dòng)參數(shù)和網(wǎng)絡(luò)配置也比單機(jī)工具復(fù)雜。螞蟻GraphRAG則更接近一套分布式系統(tǒng)組件編排、資源規(guī)劃都是額外成本。我的建議是把“環(huán)境準(zhǔn)備時(shí)間”也當(dāng)成項(xiàng)目選型的評(píng)價(jià)指標(biāo)。如果你團(tuán)隊(duì)里沒(méi)人熟悉目標(biāo)圖數(shù)據(jù)庫(kù)一個(gè)項(xiàng)目光是部署調(diào)通可能就要花上一兩天這部分隱形成本常常被忽略。4.4 本地小模型用在抽取階段效果會(huì)明顯打折很多人為了省API費(fèi)用會(huì)想用Ollama部署本地小模型跑全套流程。我的實(shí)測(cè)結(jié)論是生成階段用小模型還能接受抽取階段千萬(wàn)不要省。實(shí)體抽取和關(guān)系分類(lèi)對(duì)指令跟隨能力要求非常高小模型容易漏實(shí)體、抽錯(cuò)關(guān)系、輸出的JSON格式不穩(wěn)定這些問(wèn)題不會(huì)讓程序報(bào)錯(cuò)但會(huì)讓整張圖的質(zhì)量悄悄劣化最后問(wèn)答階段返工排查非常痛苦。如果預(yù)算有限折中方案是抽取階段用能力較強(qiáng)的大模型API社區(qū)總結(jié)和答案生成階段用便宜模型或本地模型。這是一條很實(shí)用的成本優(yōu)化路徑六個(gè)項(xiàng)目里絕大多數(shù)都支持分開(kāi)配置不同環(huán)節(jié)的模型前提是你愿意花時(shí)間把配置拆開(kāi)。5. 選型框架按你的業(yè)務(wù)場(chǎng)景去挑而不是按熱度去挑最后一章講選型。我不打算給一個(gè)“哪個(gè)最好”的答案因?yàn)楸緛?lái)就不存在。下面這套框架是我自己做項(xiàng)目評(píng)估時(shí)固定用的按這個(gè)順序走一遍基本不會(huì)選錯(cuò)。5.1 六類(lèi)典型場(chǎng)景對(duì)應(yīng)的推薦方案場(chǎng)景A要做全局趨勢(shì)分析、周期性總結(jié)報(bào)告文檔量大、預(yù)算充足、更新不頻繁。選微軟GraphRAG。它的全局搜索模式和社區(qū)報(bào)告機(jī)制就是為此設(shè)計(jì)的。場(chǎng)景B做一個(gè)中小規(guī)模的企業(yè)知識(shí)庫(kù)問(wèn)答機(jī)器人文檔量在幾千篇以?xún)?nèi)、每周有更新。選LightRAG。成本低、增量友好、上手快絕大多數(shù)團(tuán)隊(duì)?wèi)?yīng)該從這里起步。場(chǎng)景C企業(yè)已經(jīng)有圖計(jì)算或圖數(shù)據(jù)庫(kù)基礎(chǔ)設(shè)施知識(shí)圖譜規(guī)模大、查詢(xún)條件復(fù)雜。選螞蟻GraphRAG。它能扛住真正的生產(chǎn)規(guī)模但前提是你養(yǎng)得起對(duì)應(yīng)的工程團(tuán)隊(duì)。場(chǎng)景D業(yè)務(wù)方希望自己能維護(hù)圖譜不想每次改數(shù)據(jù)模型都找算法工程師。選Neo4j LLM Graph Builder??梢暬缑婧团渲没鞒汤土耸褂瞄T(mén)檻適合業(yè)務(wù)團(tuán)隊(duì)直接參與。場(chǎng)景E預(yù)算緊張但又有跨文檔綜合問(wèn)答需求。選NebulaGraph GraphRAG。圖算法社區(qū)檢測(cè)代替LLM總結(jié)是成本控制最聰明的一刀。場(chǎng)景F只是想快速驗(yàn)證“GraphRAG適不適合我的業(yè)務(wù)”或者給領(lǐng)導(dǎo)做Demo。選FastGraphRAG。低成本、高速度先證明方向再談深度。5.2 一套可復(fù)用的七步評(píng)估法第一步列出業(yè)務(wù)里最常見(jiàn)、最頭疼的10個(gè)真實(shí)問(wèn)題標(biāo)注每一題是事實(shí)查詢(xún)、局部關(guān)系查詢(xún)還是全局趨勢(shì)查詢(xún)。這步做完基本就知道要不要上全局搜索了。第二步統(tǒng)計(jì)語(yǔ)料規(guī)模、更新頻率和單次更新量。哪怕是“每周新增200篇”這種粗略數(shù)字也比沒(méi)有強(qiáng)它可以用來(lái)直接推導(dǎo)增量更新的重要性。第三步估算成本上限。按第4章的方法拿小樣本先跑通再線性外推把每月token賬單和管理成本寫(xiě)進(jìn)決策文檔。第四步盤(pán)團(tuán)隊(duì)的技術(shù)棧。有沒(méi)有人熟悉圖數(shù)據(jù)庫(kù)有沒(méi)有人搞過(guò)向量檢索Python和API調(diào)用的工程經(jīng)驗(yàn)是否足夠這直接決定了“重方案”可不可行。第五步選兩個(gè)候選項(xiàng)目在同一份小語(yǔ)料上各跑一遍。不要只跑官方示例要用自己的真實(shí)文本甚至最好用業(yè)務(wù)里實(shí)際問(wèn)得最多的那10個(gè)問(wèn)題來(lái)評(píng)測(cè)。第六步對(duì)比答案質(zhì)量時(shí)不光看“說(shuō)得對(duì)不對(duì)”還要看“找不到信息時(shí)會(huì)不會(huì)亂編”。GraphRAG因?yàn)槎嗔藞D譜約束整體上比普通RAG更穩(wěn)但不同項(xiàng)目的圖譜質(zhì)量差異很大這一輪要著重觀察。第七步給生產(chǎn)環(huán)境做一次壓力評(píng)估查詢(xún)并發(fā)量、索引構(gòu)建時(shí)間、更新耗時(shí)、運(yùn)維干預(yù)次數(shù)。這一步?jīng)Q定項(xiàng)目能不能從Demo走到上線。5.3 如果讓我現(xiàn)在從頭搭一套我會(huì)怎么做結(jié)合我自己的經(jīng)驗(yàn)最務(wù)實(shí)的路徑是混搭而不是單選。先用FastGraphRAG跑通一個(gè)最小原型驗(yàn)證業(yè)務(wù)問(wèn)題類(lèi)型確認(rèn)值得投入后再把正式索引遷到LightRAG上利用它的輕量和增量更新維持日常運(yùn)轉(zhuǎn)。等到某一天用戶(hù)需求里真正大量出現(xiàn)“跨文檔綜合分析”這類(lèi)任務(wù)再考慮引入微軟GraphRAG的全局模塊作為補(bǔ)充。不用指望一步到位GraphRAG生態(tài)還在快速演進(jìn)今天的最優(yōu)解可能半年后就變成次優(yōu)解。保持對(duì)這幾個(gè)項(xiàng)目的關(guān)注尤其是它們?cè)诔杀究刂粕系男聞?dòng)作比死抱著某個(gè)框架要?jiǎng)澦愕枚唷?
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丁香色五月婷婷17C| 日日爽日日| 99久| 亚洲超碰在线| 九九热精品视频在线观看| 天天操B| 色综合激情| 亚洲综合网激情五月天| 婷婷综合网站| 中文AV在线观看| 久久久国产精品黄毛片| 色色亚洲视频| 丁香六月啪啪啪| 婷婷五月天激情综合网| 五月丁香六月日逼| 99激情网| 婷婷视频网| 日操夜操天天操不卡| 天天操无码| 五月天色导航| 天天爽日日搞| 天天日天天插天天操| 六月激情丁香一道本7777| 日韩成人综合网| 色五狠狠| 激情网婷婷婷| 色青青五月| 色综合色五月| 99ri精品视频在线观看| 久久综合中文字幕| 99碰网站| 91人操| 色99xx| 欧美内射AAAAAAXXXXX| 久久丁香五月天| 激情五月天小说网| 五月天偷拍| 综合五月婷婷| 天天五月丁香五月| 五月天国产成人| 久久视频婷婷| 91久久综合| Av在线不卡一区| 天天干人人奸97| 99免费视频| 中文字幕在线免费观看视频| 91婷婷丁香| 婷婷在线激情| 翔田千里 50岁 无码| 五月婷婷天| 丁香五月 六月婷婷首页| 第四色婷婷最爱| 久久99免费视屏| 丁香六月婷婷开心| 色色色777| 五月花综合| 91色九| 激情综合国产| 丁香综合婷婷开心激情网| 五月婷婷久久大香蕉| 丁香 亚洲 久久| 天堂亚洲 在线| 久久成人亚洲欧美电影| 亚洲色色五月| 亚洲午夜av| 99精品自拍视频| 色五月色五天色情网| 99婷婷国产最新视频| 五月天综合久久丁香91| 五月天丁香六月综合| 99热超碰在线| 五月丁婷婷| 六月婷色六月| 九色无码| 五月天激情综合网| 五月综合激情网| 在线色婷婷| 六月婷在线| 九九超日本| 婷婷色吧| 亚洲成色综合网站免费观看| 四色五月婷婷| www.婷婷五月| 久久久潮喷-久久久九九-成人AV| 婷婷午夜综合| 99热无码精品| 十月色综合| www.开心激情| 五月大香蕉| 久久香蕉影院| 婷婷玖玖丁香| 亚洲激情网站无码| 丁香五月天综合| 26UUU欧美激情一区二区| 六月撸婷婷| 五月丁香综合激情| 91碰碰视频在线观看| 91久久久久久久久久18| 丁香五月婷婷激情四射| 一二三区视频韩国| 91狠狠色色丁香婷婷综合久久| 日韩成人电影AV| 欧美搡BBBBB摔BBBBB| 亚洲av| 无码色综合| 在线综合91| 狠狠爱婷婷| 99黄色性生活| 五月亚洲| 香蕉AV777XXX色综合一区| 国产首页在线| 丁香五月综合激情久久潮喷| 丁香五月婷婷五月| 91 影音先锋| 丁香五月婷婷五月基地| 如何安全看伊人婷婷| 日逼免费视频| 99久久6| 久久九网| 日日日日做夜夜夜夜无码| 亭亭社区五月天| 夜夜爱伊人| 99噜噜噜在线播放| 五月婷婷丁香综合| 婷婷五月天伊人| 激情开心五月天| 超级碰碰一区| 色五月色综合| 97色婷婷| 9久精品| 激情五月婷婷老师| 强壮公让我夜夜高潮A片视频| 香蕉色色网| 丁香五月天无码AV| 五月天综合久久| 亚州成人综合在线| 深爱丁香激情| 国产精品久久久久久久久久| 女性自慰系列第五页| 91艹人| 综合网天天| 97五月天| 玖玖在线视频福利| 亚洲综合久| 国产一级黄色影片,| 五月天丁香网| 大香蕉婷婷丁香视频在线| 色六月 婷婷| 色播丁香| 99视频内射三四| 色丁香五月婷婷综合久久| 综合丁香婷婷五月天| 五月亭亭开心网| 日韩av手机在线观看| 六月色色| 噜噜噜久久| 九九激情视频| 五月婷婷六月丁香在线视频免费在线观看| 中文字幕+中文在线| 丁香六月视频免费观看| 俺来也狠狠| 色五月久久成人婷婷| 欧美婷婷日本| 五月天激情国产综合婷婷婷就去爱| 九九热精品在线| 中字幕视频在线永久在线观看免费 | 99 福利 导航| 五月丁香激情综合| 91精产一区三区免费观看| 激情综合网激情五月丁香| 亚洲丁香花色| 婷婷五月丁香激情色情| 色五月丁香A欧美com | 生活片五区| 久久婷婷视频| www91在线| 综合五月网| 日本婷婷激情四射中文字幕在线观看| 天天色官网| 无码人妻丰满熟妇奶水区码| 天天干、天天日日| 国产免费av网站| 色婷婷六月天在线| 婷婷综合另类| 九九这里是免费的视频5| 日韩大片艹艹| 国产亚洲在线观看| 青青草蜜臀| 久久久国产精品黄毛片 | 五月丁香婷婷欧美色图视频五月丁香777电影 | 少妇人妻人伦A片| 天天性视频| 日日干天天| 日本三级中文字幕| 丁香六月综合激情| 五月丁香好婷婷姑娘综合网| 久久婷婷综合五月| 丁香五月在线播放| 99热99ai| 亚洲成人网址在线观看| 五月婷婷综合视频| 婷婷久久午夜网| 成人做爰A片免费看视频| 加勒比色色| 丁香五月狠狠在线观看| 婷婷五月天激情五月天深爱五月天| 五月丁香久久激情综合| 在线视频另类| 五月伊人综合| 九一九九黄色| 99爱视频在线观看这里只有精品| 激情婷婷五月色| 亚洲精品另类| 色色色9| 亚洲激情校园| 亚洲免费综合一区| 日韩综合久久| 草婷婷在线| 九九综合网| 人人色婷婷| 婷婷综合色色| 国产人人操| 99久在线| 五月婷婷开心亚州在线| 五月婷婷啪| 99国产精品久久久久久久久久久| 激情五月婷婷五月| 五月丁香天天| 五月天天堂久久| 久久激情网| 五月丁香婷婷婷婷综合网| 亚洲精品第一国产综合亚AV | 久热9| www.日日日.com| 99热欲| 亚洲综合久| 色狠狠图片| 久婷久婷| 午夜成人av在线| www.久久久.com| 五月天六月天| 最新色色五月天| 黄色片久久| 97九色视频| 亚洲激情AV| www.wuyuetian啪啪| 97精品欧美91久久久久久久| 26uuu国产激情视频| AV在线观看网站| 日本www免费九九| 综合网色| 婷婷色综合av| 这里只有精品免费观看网占| 丁香五月婷婷呀| 国产精品色婷婷久久久精品| 亚洲综合婷婷六月丁香五月| 六月婷婷深深爱| 九九99精品免费播放| 久久综合爱| 色综合天天天天做夜夜| 好吊丝aV| 亚洲丁香婷婷五月天综合色| 五月天久久婷婷| 99视频在线看| 九九热视频精品999| 另类视频综合| 99久精品视频| 五月天久久综合婷婷| 亚洲综合五月天综合| 激情五月综合网最新| 丁香亭亭激情四射| www九九免费视频| 国产精品国产| 天天日日夜夜| 91操在线视频| 五月开心啪啪| 天堂亚洲 在线| 久99久视频精品| 99日韩网站| 色情·com| 内射综合网| 欧美月久久| 狠狠色婷婷综合开心影视| 青草青草视频2免费观看| 色色性爱视频| 五月丁香啪啪网| 国产亚洲色婷婷久久99精品91| 久久这里99| 十月丁香婷婷| 99成人无码| 亚洲另类电影| 99精品成人无码A片观看金桔| 欧美在线视频99| 狠狠干狠狠干| 亚韩在线视频| 91五月天| 被男人添B超爽视频| 五月天色图| 五月婷婷色色色| 丁香五月人妻| 99精品久久| 婷婷五月色情天| av色婷婷| 色婷婷小说网| 操人妻AV| 94干大香蕉| 久久精品五月| 久热九九| 中文成人在线| 丁香啪啪中文字幕| 色色色区| 色一情一乱一乱一区9| 久久青草国| A片试看50分钟做受视频| 九九99久久| 日本欧美成人片AAAA| 日韩一区二区A片免费观看| 99爱视频| 婷婷五月天天激情| 激情婷婷久久| 色色色视频免费无码| 婷婷色无码| 第一区久久网站| 婷婷六月天精品| 99久久综合精品五月天| 狠狠操综合| 大香蕉伊人99| 国产又粗又大又爽又黄| 九九精品碰| 五月激情婷婷国产精品久久久久久| www.久久久久久久| 国产丁香五月天婷婷| www.狠狠干com| 亭亭五月色男人| 色婷另类| 国产真实乱了老女人视频| 五月J香蕉婷婷| 亚洲婷婷综合视频| WWW,五月天| 婷婷狠狠五月综合| 真实亲子乱子伦高清在线观看| 五月丁香婷婷婷激情爱爱| 久久久精品色| 网站免费一站二站| 色色六月| 久热这里只有精品3| 亚洲综合婷婷五月| 久久三级视频| 久久久日韩特色特黄AAAA| 综合99视频| 99九九精品视频| 亚洲色情激情丁香五月| 久久婷婷五月综合色奶水99啪| 五月婷婷大香蕉| 婷婷性爱五月天丁香网| 丁香婷婷综合精品六月初| 我要射综合| 激情五月丁香婷婷| 99原创自拍视频在线观看| 婷婷五月色惰| 99色视| www色五月天| AA久久| 无码人妻丰满熟妇奶水区码| 成人一级片| 丁香婷五月| 五月丁香啪啪综合| 综合久久十| 五月丁香综合激情| 激情婷婷五六月天| 色五月欧美| 色综合婷婷| 绿色小导航AV| 亚洲免费99| 激情www| 亚洲色区17| 天天噜天天插| 99日本在线| 久热精品免费视频4| 日韩日比视频| 久久婷婷五月综合色丁香| 五月天另类激情在线| 高清国产AV| 色五月丁香婷婷综合| 五月丁香激情婷婷| 亚洲另类毛片| 丁香六月亚洲综合 | 久草婷| 丁香婷婷五月激情综合| 成人在线网址| 欧美日韩成人在线观看| 亚洲丁香五月天视频| 免费亚洲婷婷中文字幕| 日韩黄在免| 色色色色热热| 色色五月婷婷| 色色色999| 色婷婷丁香五月天在线观看| 欧美人与性动交CCOO| 丁香激情四射| 六月婷婷综合激情| 久久综合影院| 99久久久久久www| 操精品9| 九九热这里有精品23| 色婷婷五月天av在线| 婷婷六月激情| 久热久操久热久草国产91| 久久99成人性爱高清视频| 国外亚洲成AV人片在线观看| 婷婷综合五月天激情| 狠狠插狠狠插| 天天操夜夜夜夜爽| www.99热| www.日韩艹| 大地9中文在线观看免费高清| 亚洲五月婷婷| 狠狠狠狠狠狠| 综合网啪| 色狠狠综合网| 日本久热| 五月婷六月| 99精品久久久| 五月丁香偷拍| 伊人婷婷激情| 五月九九综合| 综合图片色色| 五月丁香精品| 丁香六月婷婷| 69午夜成人影片| 精品久久久久成人码免费动漫| 欧美视频五区| 狠狠干综合| 色八月婷婷| 色色射| 色播五月婷婷综合| av九九| 色婷婷丁香五月丁香| 大伊香蕉精品视频在线| 婷婷色爱| 99热青青草| 日韩色久| 2050人人操免费工开爱| 男人大jjc女人免费视频| 狠狠干 狠狠操| 色级婷婷| 91chinese在线| 激情综合婷婷五月| 婷婷五月丁香综合网| 亚洲综合激情五月| 99自拍视频网站| 色五月激情网| 亚洲丁香五月在线观看| 91精产品自偷自偷综合| 99热综合| 精品久久久人妻| 99久热在线精品| 亚洲网视屏| 婷婷五月色| 五月天成人综合| 丁香婷婷五月天色综合| 99精品小视频| 婷婷精品视频| 婷久久久| 婷婷射图| 国产美女最新VA在线免费观看| 激情五月天.色网| 色婷婷88| 99秘 在线| 久久影视婷婷五月| 99啪啪| 久久99热 这里有精品| 日本久碰| 亚洲操人| 无码99| 五月激情丁香六月狠狠干| 九九九激情网| 另类视频五月天| 久久人妻人人槡| 丁香激情网| 久久婷婷七月丁香| 99色视频| 九热视频这里只有精品| 五月婷婷久久综合| 丁香五月婷婷激情中文| 午夜丁香婷婷| AAA亚洲AV| 婷婷五月情| www.金莲av| 亲子乱AV一区二区三区下载| 99综合激情久久精品久久| 二色AV| 狠狠色综合久久久久| 熟女网站久久| 五月丁香六月婷婷在线观看| 天天情天天狠天天透| 色综合播放| 天天插天天插| 亚洲激情婷婷| 久久综合人妻| 色色色在线免费视频| 亚洲视频国产一区| 久久久.www| 99操99| 久久多色| 婷婷五月AV| Av性爱网站| 亚洲免费99| 大香人妻| 青青草原亚洲久| 啪啪91| 思思热在线视频精品| 甈你aaaaa| 狠狠草天天草| 99久久久| 超碰91在线| 五月婷婷日本| 色色色色色九九九九九| 九九99久久精品| 五月激情婷婷综合| 婷婷五月色惰| 色色色热| 成人va在线播放| 26uuuuuuuu国产| 怡红院院久久| 天天干天天干天天干天天干天天干天天 | 激情五月婷婷啪啪| 丁香婷婷五月天亚洲| av最新在线| 国产午夜精品AV一区二区麻豆| 亚洲色婷婷五月天| 99热这里只有精品4| 久久停停超碰| 久久只有18视频| 超碰色综合| 九九99热久久精品66中文字幕| 激情欧美五月丁香| 日本色爽| 99A级片| 91久久五月天| 久久久精品AV| 五月丁香婷婷啪啪| 色欧美影院| 大天天伊人| 五月丁香六月花| 五月丁香色婷婷综合| 天天拍久久| 操逼在线视频| 婷婷激情丁香五月婷婷激情丁香五月婷婷| 99热99ai| 亚洲第精品| 翔田千里无码| 五月天婷婷无码视频| 曰日爽日日操| 婷婷久久丁香| 九月丁香亭亭| 成人片在线播放| 丁香六月婷婷| 999热这里只有美国精品| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 五月激情综合性爱| 狼友视频在线观看18| 日本精品99| 噜综合| 深爱激情九九五月天 | 久久丁香五月综合六月激情红杏视频| 亚洲色色在线| 国精产品一区二区三区| 欧美成人无码高清一区二区三区| 五月开心婷婷| 26uuu精品一区二区| 激情五月婷黄版| 俺去啦综合网| 99婷婷国产最新视频| 色啪影院| 777精品久无码人妻蜜桃| 在线中文AV| 操操操91| 六月丁香久久| 色了色综合| 亚洲美女网Va| 99热久| 天天日夜夜爽| 超碰成人黄色网| 丁香六月婷婷色XXXXX| 黄色99热| 五月丁香怕怕综合| 婷婷丁香色五月| 婷婷五月大香蕉| 久久免费操| 丁香激情网| 婷婷六月久久| 婷婷免费精品视频| 人人草人人视| 婷婷激情综合| 婷婷激情四射五月天| 99综合视频一体| 热久久国产视频| 丁香五月天.com| 农村熟妇高潮精品A片| 日韩AV中文字幕在线| 操一区| 精品无码99| 久久ab| 人人草人人爱| 亚洲精品网址| 五月天激情综合网俺也去| 国内婷婷丁香社区在线播放| 六月丁丁香| 国产做爰视频免费播放| 操人久久| 丁香六月婷婷综合在线| 亚洲综合99| 日韩啪啪自拍| www.色五月| 婷婷狠狠色| 国产日韩欧美| 综合激情婷婷| 天天摸天天舔天天天天爽| 久久九区| 色吊丝av中文字幕| 久久婷婷五月综合色播| 精品人妻久久久久久| 香蕉AV福利精品导航| 色情婷婷。| 日日操,夜夜撸| 热99在线| 色婷| 色色免费网战视频| 国产成人精品亚洲线观看| 美女激情综合| 五月天影院| 成人无码精品1区2区3区免费看| 狠狠爱婷婷丁香| 色色综合视频| 校花娇喘呻吟校长陈若雪视频| 狼友视频在线观看18| 青青草成人网| 色婷婷激情视频| 综合色天天| 日韩在线视频网站| 黄久久久| 噜噜国产| 国产伊人大香蕉| 丁香五月婷婷综合精品素人| 99re这里只有精品视频了| 国产成人精品一区二区三区视频| 99综合色色色| 人妻久久久久久久| 婷婷五月丁香综合| 九九综合九九| 97AV人人插人人操| 综合激情站| 久热精彩视频98| 久久成人天| 欧美性猛交XXXX乱大交极品| 天天爱天天做天天舔| 外国碰视频网站97| 91九色在线视频| 激情开心五月天| 丁香六月激情国产| 婷婷五月天伊人网| 丁香色五月AV在线| 欧美影院| 丁香婷婷午夜| 岛国av网站| 99视频在线观看视频| 五月涩涩网| 综合激情五月丁香| 天天玩天天摸| 中文国产五月天| 国外亚洲成AV人片在线观看| 色综合五月在线| 99年操人人爽| 婷婷激情五月天小说校园| 风流少妇A片一区二区蜜桃 | 麻豆AV一区二区三区| 人妻22p| 综合激情网五月激情 | 直接看的AV| 91久草五月天婷婷| 久久丝袜婷婷| 99热在线观看免费中文| 99视频只有精品| WWW、日本色丁香、co m| 日本va欧美va国产激情| www超碰| 欧美性爱五月天| 色欲人妻综合aaaaaaaa网| 超碰人人色| 精品色色网| 婷婷五月在线影院| 噜噜国产| 青草青草久热这里只有精品| 99热在线观看| 天天色综网| 99re热在线观看| 久久九九热视频| 天天综合干| www.五月天婷婷| 色五月婷婷五月久久| www,黄色在线,con| 婷婷久久丁香| 六月99天天婷婷激情综合| 婷婷五月天影院| 色性综合| 国产在线网址1| www.99热精品| 琪琪理论片| 超碰97在线观看免费| 婷婷五月色花丁香社区| 91久久精品国产91性色TV| 日本va欧美va欧美精品88| 99久久久免费| 99热午夜精品| 婷香五月| 99色免费视频| 五月丁香婷婷综合网| 日本色色影片| 狼友视频在线观看18| 色五月天丁香| 五月天开心网| 五月婷婷亚洲| 亚洲色情免费网| 久久九⑨| 欧美成人AAA片一区国产精品| 九九这里都是精品| 香蕉婷婷色五月| 日本久久极品| 噼里啪啦完整版中文在线观看| WWW.夜夜操.com| 操逼五月天| 久热久| 蜜臀99精品| 久久996re热这里只有精品无码| 九九re精品视频在线观看| 5月婷婷性视频| 秋霞av不能| 大地9中文在线观看免费高清| 丁香五月天电影| 精品综合久久久久久五月天| 五月激情婷婷综合| 4399在线观看免费高清毛片| 另类天堂| 久久性爱视频| 狠狠狠狠狠草| 日本啪啪天堂| 婷婷激情四射五月天| 九九热精品视频| 狠狠色成人影片| 婷婷五月欧美综合| 9l视频自拍9l九色成人| 9久久网| 国产成人AV不卡| 亚洲五月天婷婷| 深爱综合网| 人人草人人爱手机视频看看 | 大香蕉婷婷色| 丁香五月社区| 天天色综合网1| 狠狠婷婷爱| 99re在线观看| 1769在线观看欧美国产| 午夜伊人大香蕉| 亚洲亚洲人成综合网络| 99久久极情精品一区| 26uuu欧美| 欧美综合五月丁香五月天| www.婷婷网| 激情综合久久| 久久久精品AV| 大香蕉大香蕉在线影院| 色开心五月婷婷丁香HD| 久久曰9| 亚洲精品无人区| 色九九综合| 影音先锋一区| 96精品久久久久久久久| 日本狠狠干| 日日撸夜夜操| 五月婷婷av| 婷婷涩五月天综合| 五月婷婷深爱六月| 天天艹天天色| 六月丁香婷婷色69| 丁香五月天导航| 日韩无码专区| www热久久yy9| 色婷婷综合综合网| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 人人玩人人橾| 色五月婷婷五月丁香五月激情五月视频 | AA丁香综合激情| 五月天婷婷在线观看| 综合婷婷| 久久HD| 激情五月天婷婷| 国产精品一区在线观看你懂的| 五月丁香六月婷婷激情视频在线观看免费 | 热热久久精品视频| 九九sese| 99视频精品8 | 婷婷丁香色情| av大香蕉| 天天做天天爱天天爽| 欧美在线| 九九精品9| 色婷婷五月天| 色屌丝中文字幕| 天天操天天插| 亚洲人妻av伦理| 欧美大肥婆大肥BBBBB| 激情综合五| 国产古装妇女野外A片| 婷婷最新地址| www.久9| 久久图色4| 欧美视频五区| 五月丁香啪| 激情五月天之六月婷婷| 精品皮股午夜AV| 国产午夜一区二区三区| 欧美成人va| 婷婷五月天精品| 国产精品大香蕉| 色五月婷婷小说亚洲中文字幕组| 99a级片| 五月天之色情综合网| 婷婷五月天激情小说| 玖玖99福利| 欧美精品熟女一区二区| 狠狠99| 99精品视频网| WWW色色色COM| 免费婷婷| 色婷天天| 很操日本7| 丁香六月无码播放| 五月天激情图片| 99re热视频这里只精品| 9久久狠狠的| 人人妖人人97| 成人av在线网站| 丝袜激情网| 天天在线久久综合 | 日本欧美成人片AAAA| 色级婷婷| aaaaa不卡| 天天干天天射色综合| 久久色婷婷| 亚洲V国产V欧美V久久久久久| 成人在线观看一区| 激情综合播播| 五月激情综合美女久久| 婷婷伊人五月天| 狠狠综合久久综合| 青青草a在线| 亚洲综合五月天婷婷| 五月婷婷深深爱| 综合精品啪啪| 99热20| 五月丁香六月婷婷色情| 秋霞免费视频| 欧美视频五区| 日日夜夜综合| 狠狠爱激情网| 色婷婷丁香女女| 五月丁香六月婷婷亚洲天堂网站| 青草激情综合| 蜜桃五月天| 人操人| 在线VA视频| 99久久婷婷五月综合| 九九婷婷激情综合网| www99热| 欧美黄色韩日网| 精品亚洲国产成AV人片传媒| 在线色色| 色停停五月,在线观看| 99在线精品免费视频| 亚洲成人av在线| 国产成人+亚洲+欧洲| 五月丁香综合网| 97人人操在线| 五月天婷婷乱论小说| 免费黄网不卡AV| 丁香六月开心| 色五月婷婷激情五月| www,com,五月色色| 精品国产AV色一区二区深夜久久| 亚洲123区高清入口| 99热6这里只有精品6| 丝袜人妻| 9 99免费视频| www.99热这里只有精品| 丁香色婷婷| 国产激情视频在线观看| 婷婷丁香激情综合色情| 内射在线CHINESE| 99九九综合久久九九| 丁香五月在线| 丁香六月婷婷激情| 色狠狠图片| 国产做A爰片毛片A片美国| 26uuu青青| av网址在线| 99热天堂| 97在线/亚洲| 探花搜索结果 - 黄上黄| 思思热精品在线观看| 五月天丁香婷婷网| 性爱电影科技贸易有限公司| 91色久| 97色色色色色色色| 六月婷婷综合| 99re视频在线| 婷婷五月激情基地| 欧美内射AAAAAAXXXXX| 五月婷婷内射网| 亚洲人妻AV| 婷婷色五月偷拍| 久久婷综合| 丁香激情五月综合网| 五月天婷婷小说| 色色色在线免费视频| 香蕉久久国产AV一区二区| 天天噜天天插| 成人AV在线电影| 九九RE视频在线精品| 婷婷色综合| 五月天日日操夜夜操 | 99热在线观看免费精品| 丁香五月婷婷亚洲人| av在线激情| 日本久久高清| 亚洲综合99| 婷婷伊人无码| 天堂成人A片永久免费网站 | 久久思思热| 五月丁综合在线观看| 婷婷五月欧美综合| 啪啪六月婷婷| 国产AV不卡福利| 人人操AV| 99丁香五月婷| 日韩AV无码影片| 婷婷五月天在线观看第二页| 91精品丝袜久久久久久久久粉嫩| 丁香六月综合激情| 96丁香六月婷婷蜜桃综合久久| 深爱五月激情| 五月婷婷丁香伦理网| 伊人网色婷婷五月天| 人妻久久久久久久久久久| 色婷婷在线影院| 99热99色| 色综合色综合色综合高潮| 蜜桃婷婷丁香综合久久开心亚洲| 九九草热在线观看| 丁香花狠狠婷婷亚洲中文字幕| 精品人妻一区二区三区四区不卡在| 欧美激情中文字幕| 夜夜骑夜夜操| 五月天中文网| 大香蕉大香蕉在线影院| 天天插综合| 99热这里有精品2| 九月丁香欧美综合| www.超碰| 婷婷五月综合激情免费视频| 性天堂久久| 狠狠色丁香| 色吧五月婷婷| 六月婷婷激情| 久久婷婷青青草| 五月婷婷草| 精品福利911| 色九月国产| 九九99精品| 影音先锋777xfplay色资源网站| 999婷婷综合| 久久97久久99久久综合欧美| 另类激情五月天| 久久婷婷啪啪视频| www.色窝| 激情婷婷综合网| www色婷婷| 欧美丁香五月| 久久这里这里有精品免费视频| 五月色亭丁香| 九九这里有精品| 曰日爽日日操| 久久机热这里只有精品免费视频| 伊人狼人干| 欧美性爱五月天| 无码色色色色色| 久久五月婷综合网| 天天操天天插| www婷婷| 99热热九九| 91 九色 入口| 中文字幕精品无码一区二区| 婷婷五月花| 四色AVwww| 亚洲五月天第一综合干| 九九re视频在线视频| 99热婷婷| 五月婷婷色播| 日本成人噜噜| 深爱五月婷婷开心中文字幕| 大香蕉天堂色| 欧美在线| 激情五月天网| 天天舔天天摸天天射| 国产成人亚洲综合亚洲| co超碰在线观看| 99综合视频| 日本狠狠网| 日在线V视频在线播放| 婷婷五月天黄色| 中文字幕在线不卡视频| 国产 码在线成人网站| 色香欲综合| 色青五月天| 丁香五月天欧美成人| 粉嫩av懂色av蜜臀av熟妇| 亚洲天堂有码| www.91av.com| 婷婷五月天激情小说| 91碰在线| 久久精品人妻| 99精品视频免费观看| 特级片神马电影| 婷婷狠狠久久| 色婷婷基地在线| 欧美日韩123| 婷婷玖玖丁香| 色99婷婷五月天| 五月婷婷综合成人| 超碰成人公开| 99热久久这里只有精品| 色99在线| 五月婷婷中文字幕| 五月天com| 婷婷丁香久久| av操一操| 色婷婷综合网站| 激情综合五月激情| 任你草| 色婷婷综合网站| 粉嫩av懂色av蜜臀av熟妇| 五月天丁香久久| caopeng97人人| 五月伊人婷婷999| AV在线二十六页| 丁香六月婷婷久久亚洲天堂| 九九99精品免费播放| AⅤ网站在线看| 欧洲MV日韩MV国产| 日韩一本操| 9久久狠狠的| 久久曰9| 婷久久久| 九九综合网| 一区操| 日本在线观看91| 欧洲电影在线观看免费版英语版| 欧美色男人网站| 欧美情色电影一区二区| 五月天精品| 三男玩一女三A片| 四LLL少妇BBBB槡BBBB| 午夜色婷婷| 婷婷五月天av| 少妇人妻人伦A片| 婷婷五月激情四射手| 99婷五月| 激情婷婷22月间| 综合亚洲AV| 色色色色色五月丁香| 日本久久视频| 五月天色婷婷激情综合| 亚洲激情五月婷婷日日| 激情影院免费视频婷婷五月天| 亚洲、热| 丁香五月另类小说| 五月天婷婷综合免费| 丁香五月首页| 久9视频| 婷婷激情综合| 无码成人AAAAA毛片AI换脸| 黄色三级毛片中字| 亚洲V国产V欧美V久久久久久| 射婷婷中文字幕| 热婷婷在线视频| 99色天堂| 色情五月综合婷婷| 婷婷丁香色五月天久久88| 色5月婷婷| 丁香五月天堂网| 人人操99| 嫩草AV久久伊人妇女超级A| 婷婷九月久久| 热99精品视频五月| 99丁香五月婷| 国产精品视频久久99| 99愛国产| 91人人网| CHINESE熟女老女人HD视频| 日本91在线播放| 久久久91精品| 91免费看片| 五月婷婷熟女| 婷婷丁香五月天综合网| 色狠狠综合网| 成人五月天丁香婷| 免费看欧美成人A片无码| 国产99久| 另类A片| 九九成人精品| 天天摸天天肏| 无码 av电影| 92久久| 天天天添天天操| 婷婷六月色| 九九综合| 五月色亚洲| 欧美在线看| 五月永久激情| 五月婷婷丁香五月| 日本猛少妇色XXXXX猛叫| 9 大屁股在线视频精品| 丁香五月香蕉在线| 老司机伊人| 五月天综合久久| 九色地址91视频| 激情丁香九九五月综合网| 狠狠做六月爱婷婷综合aⅴ| 99热这里只有精品4| 91Chinese在线| 九九大香视频| 五月丁香婷婷啪啪综合网| 五月婷婷激情性爱| 五月激情四射网站| 日韩成人av在线| 91精品电影18T| 人人干女人| 大香伊人久色| 99综合免费视频| 五月婷婷中文字幕| 无码人妻少妇色欲AV一区二区| 日韩黄色电影| 99色一| 成人做爰高潮A片免费视频| 91打屁股视频网站| 99热这里只有精品热| 天天日,天天插| 九九爱精品网站| 色。 日日日| 另类视频一区| www.yw色| 操射国产日本| 99噜噜噜在线播放| AV在线中文| 欧美五月婷婷| 97男人天堂| 五月色欧洲| 狠狠色丁香| 久月婷婷| 久久婷婷五月天综合| 五月天婷婷成人网| 亚洲精品国产成人AV在线| 丁香五月天婷婷中文字幕| 婷婷五月丁香基| 五月婷人妻| 五月婷丁香| 婷婷五月乱交换| 色婷婷五月天天天干天天操天天爽 | 亚洲视频无| www.开心激情| 亚洲乱码日产精品BD| 久久黄色免费视频| 综合激情站| 亚洲黄色精品| 99热只有| 五月婷丁香久久综合| 呦呦v线| 五月天婷婷丁香六月| 秋霞九九无码| 丁香五月婷婷亚洲另类| 精品久久99| 秋霞免费三级片| 色婷婷欧美| 曰曰久久| 天天操天天曰| 91丨九色丨老熟女激情| 青青福利网| 四川BBB搡BBB爽爽视频| 91艹人| 成人中文网| 亚洲五月综合色播| 大香伊人久色| 五月天婷婷成人资源站| 亚洲综合五月天| 熟女激情网| 色999亚洲人成色| 天天日日天天| 202丰满熟女妇大| 69激情小说| 欧美婷婷色| 玖久精品视频9| 超碰人人摸人人操| 久久五月婷婷电影| 色五月天综合网| 丁香九月综合| 激情AV| 天天干,噜噜色,狠狠色| 狠狠色婷婷在线| 日韩精品超碰在线观看| 五月天婷婷影院影院观看| 婷婷六月久久| 色婷婷婷婷| 狠狠草网| 97九色视频| 一婬一伦一区二区三区| 97色色网| 丁香蜜臀黄色婷婷五月天| 激情六月丁香| 色婷婷丁香| 日本欧美成人片AAAA| 丁香激情六月天婷婷| 99精品综合在线| 六月久久狠狠| 牛牛热这里只有jingpin| 亚洲99精品欧美一区| 日韩高清久久| 六月天婷婷| 天天操夜夜玩!| 亚洲精品另类| 九九干视频| 五月婷婷综合网| 天天日天天爽| 婷婷五月中文在线视频| 大香蕉五月| 人妻人人操| 欧美成人网婷婷综合在线| 久久9情免费| 五月婷婷丁香| 狠狠色噜噜色狠狠狠综合色| 亚洲五月天另类小说图片| 婷婷六月色开| 欧美性生交XXXXX无码小说 | 久久九色| 亚洲瑟瑟精品在线| 日亚二欧美| 91热爆在线| 五月丁六月香| 亚洲国产成人综合| 99久久国产宗和精品1上映| 六月婷婷开心| 久久99最新| 9在线9在线婷婷在线国产| 夜夜骑夜夜操| 五月丁香六月香综合激情| 成人综合视频在线| 欧美槡BBBB槡BBB少妇|