99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

信念上下文圖:讓AI記憶系統(tǒng)“知其所以信”

信念上下文圖:讓AI記憶系統(tǒng)“知其所以信” 記憶系統(tǒng)不能只知道“記住了什么”還要知道“為什么在當(dāng)前時(shí)刻仍然相信這個(gè)結(jié)論”。這句話是信念上下文圖Belief Context Graph要解決的核心問題。在傳統(tǒng) RAG 或?qū)υ捴值挠洃浽O(shè)計(jì)里系統(tǒng)通常把用戶說過的話、偏好、狀態(tài)抽取成若干條結(jié)構(gòu)化記錄遇到新問題時(shí)按相似度召回。這種設(shè)計(jì)有兩個(gè)明顯缺陷一是舊記錄和新信息沖突時(shí)系統(tǒng)不知道該信哪一條二是系統(tǒng)給出的答案即使來自記憶也無法解釋這條記憶為什么成立、由什么證據(jù)支撐、在什么上下文范圍內(nèi)有效。信念上下文圖把“事實(shí)記錄”與“信念判斷”分開用節(jié)點(diǎn)保存實(shí)體、事實(shí)、證據(jù)、事件和上下文用邊保存支持、反駁、限定和時(shí)間關(guān)系再通過置信度更新讓記憶具備動(dòng)態(tài)調(diào)整能力。下面從概念、數(shù)據(jù)模型、Python 最小實(shí)現(xiàn)、算法細(xì)節(jié)、驗(yàn)證方法和生產(chǎn)落地幾個(gè)方面完整走一遍這套設(shè)計(jì)。1. 記憶系統(tǒng)只知道“記住了什么”還不夠1.1 事實(shí)、記憶和信念差在哪里先做一個(gè)最簡單的區(qū)分。在數(shù)據(jù)庫或日志里“用戶 2025-03-01 說喜歡美式咖啡”是一條事實(shí)在系統(tǒng)內(nèi)部緩存里“用戶喜歡美式咖啡”可能是一條記憶但在做推薦、回答用戶問題或者生成個(gè)性化內(nèi)容時(shí)系統(tǒng)真正依賴的是“用戶現(xiàn)在偏好美式咖啡”這個(gè)信念。事實(shí)的特點(diǎn)是客觀且不可變。用戶說了一句話這個(gè)行為一旦發(fā)生就不會(huì)改變哪怕用戶第二天改口第一天說過這句話仍然是事實(shí)。記憶是對(duì)事實(shí)的選擇性保存它決定了系統(tǒng)在后續(xù)運(yùn)行中能回看哪些信息。信念則是系統(tǒng)對(duì)某個(gè)主體當(dāng)前狀態(tài)做出的推斷它帶有時(shí)效性、置信度和上下文邊界。實(shí)際項(xiàng)目中最容易犯的錯(cuò)誤是把三者混在同一張表里??吹接脩粽f過“我愛喝美式咖啡”就直接寫入一條user_preference 美式咖啡。這條記錄沒有來源、沒有時(shí)間、沒有置信度、沒有上下文。等到用戶說“最近開始戒咖啡因”系統(tǒng)要么把舊記錄覆蓋掉要么新老記錄同時(shí)存在導(dǎo)致問答時(shí)出現(xiàn)矛盾結(jié)果。信念上下文圖的核心改動(dòng)就是讓“記憶”從扁平記錄升級(jí)為帶證據(jù)鏈和上下文邊界的信念網(wǎng)絡(luò)。系統(tǒng)不再問“我記住了什么”而是問“我現(xiàn)在為什么相信這個(gè)結(jié)論以及在什么條件下它仍然成立”。1.2 現(xiàn)有 RAG 與記憶組件容易踩的坑當(dāng)前常見的記憶方案通常分成三類文本快照、JSON 結(jié)構(gòu)化記錄、向量檢索記憶。文本快照實(shí)現(xiàn)簡單但召回準(zhǔn)確率低JSON 記錄易于查詢卻很難表達(dá)證據(jù)、反駁和時(shí)間窗口向量檢索適合語義召回但并不能回答“兩條向量沖突時(shí)該信誰”。一個(gè)典型場景是對(duì)話助手長期記憶。用戶在第一輪說喜歡喝美式咖啡系統(tǒng)把它寫入向量庫。第二輪用戶說最近戒咖啡了系統(tǒng)又把這條寫入向量庫。第三輪助手被問到“用戶適合喝什么飲品”由于兩條向量都與問題相似召回結(jié)果可能同時(shí)包含美式咖啡和戒咖啡信息。生成層如果沒有額外邏輯最后輸出的答案就是模棱兩可的。問題不在向量檢索而在于記憶層缺少“信念管理”。系統(tǒng)沒有判斷哪些舊結(jié)論應(yīng)該被削弱哪些新結(jié)論應(yīng)該被新增也沒有能力解釋為什么舊結(jié)論已經(jīng)過時(shí)。信念上下文圖的作用正是在這一層補(bǔ)齊結(jié)構(gòu)讓記憶不再只是內(nèi)容的堆積而是帶有判斷依據(jù)的動(dòng)態(tài)視圖。1.3 信念上下文圖到底解決什么問題可以把信念上下文圖理解為“給每條關(guān)鍵結(jié)論配上證據(jù)鏈和上下文標(biāo)簽”的圖結(jié)構(gòu)記憶。它解決三類問題。第一是溯源問題。回答“用戶喜歡什么咖啡”時(shí)系統(tǒng)能順著信念節(jié)點(diǎn)找到支持證據(jù)看到原始文本和發(fā)生時(shí)間而不是只返回一個(gè)沒有來源的偏好值。第二是更新問題。當(dāng)新證據(jù)與舊信念沖突時(shí)系統(tǒng)通過置信度更新函數(shù)調(diào)整舊信念并記錄歷史版本而不是簡單覆蓋或同時(shí)堆積。第三是上下文限定問題。用戶在工作中喜歡美式咖啡在健康管理階段戒咖啡因這兩個(gè)信念并不必然沖突因?yàn)樗鼈兲幱诓煌录舷挛?。圖結(jié)構(gòu)可以把兩個(gè)信念掛到不同事件節(jié)點(diǎn)上系統(tǒng)在回答時(shí)先確認(rèn)自己位于哪個(gè)上下文再?zèng)Q定使用哪個(gè)信念。一句話概括信念上下文圖讓記憶系統(tǒng)從“知道什么”走向“知其所以信”。2. 信念上下文圖的數(shù)據(jù)模型2.1 節(jié)點(diǎn)設(shè)計(jì)實(shí)體、事件、證據(jù)、信念、上下文在設(shè)計(jì)圖之前先明確節(jié)點(diǎn)類型。這里使用一個(gè)可落地的五類節(jié)點(diǎn)方案實(shí)體節(jié)點(diǎn)、事件節(jié)點(diǎn)、證據(jù)節(jié)點(diǎn)、信念節(jié)點(diǎn)和上下文節(jié)點(diǎn)。節(jié)點(diǎn)類型語義典型屬性是否可變實(shí)體節(jié)點(diǎn)人、商品、組織、地點(diǎn)等客觀對(duì)象id、name、entity_type可更新歸一化信息事件節(jié)點(diǎn)發(fā)生在某個(gè)時(shí)間點(diǎn)的事件id、event_type、timestamp不可變證據(jù)節(jié)點(diǎn)支持或反駁信念的原始記錄id、text、source、timestamp不可變信念節(jié)點(diǎn)系統(tǒng)對(duì)主體狀態(tài)或偏好的推斷id、predicate、confidence、history僅置信度等狀態(tài)可變上下文節(jié)點(diǎn)場景、話題、地域、會(huì)話等描述信息id、context_type、context_value可更新實(shí)體節(jié)點(diǎn)解決“這個(gè)信念是關(guān)于誰或什么的”。事件節(jié)點(diǎn)解決“這條記錄發(fā)生在什么時(shí)間、什么場景”。證據(jù)節(jié)點(diǎn)解決“為什么會(huì)有這個(gè)信念”。信念節(jié)點(diǎn)解決“系統(tǒng)當(dāng)前認(rèn)為什么成立”。上下文節(jié)點(diǎn)解決“這個(gè)信念在什么范圍內(nèi)有效”。五個(gè)節(jié)點(diǎn)類型不是固定的。生產(chǎn)項(xiàng)目可以根據(jù)業(yè)務(wù)增加“來源用戶節(jié)點(diǎn)”“審核狀態(tài)節(jié)點(diǎn)”等但核心原則不變事實(shí)類節(jié)點(diǎn)不可變推斷類節(jié)點(diǎn)可變兩者必須分開存儲(chǔ)。如果事實(shí)和信念混在一個(gè)節(jié)點(diǎn)里后面做版本回放和解釋輸出時(shí)會(huì)非常困難。2.2 邊設(shè)計(jì)支持、反駁、限定與時(shí)間關(guān)系節(jié)點(diǎn)本身只是圖里的頂點(diǎn)真正承載“知其所以信”的是邊。一次完整的證據(jù)到信念的傳播至少需要體現(xiàn)四類關(guān)系。第一類是“證據(jù)支持信念”用SUPPORTS表示。例如證據(jù)節(jié)點(diǎn)“用戶說愛喝美式”指向信念節(jié)點(diǎn)“用戶偏好美式咖啡”。第二類是“證據(jù)反駁信念”用REFUTES表示。例如證據(jù)節(jié)點(diǎn)“用戶說要戒咖啡因”指向同一個(gè)信念節(jié)點(diǎn)。第三類是“信念屬于實(shí)體”用BELONGS_TO表示。信念節(jié)點(diǎn)指向?qū)嶓w節(jié)點(diǎn)表達(dá)這個(gè)信念是關(guān)于哪個(gè)人的。第四類是“證據(jù)發(fā)生上下文”用CONTEXT_OF表示。證據(jù)節(jié)點(diǎn)指向上下文節(jié)點(diǎn)表達(dá)這條證據(jù)發(fā)生在什么時(shí)候、哪個(gè)話題下。邊還可以帶上權(quán)重和有效期。SUPPORTS和REFUTES邊上的weight表示該證據(jù)對(duì)信念的修正力度。時(shí)間關(guān)系可以建模為事件節(jié)點(diǎn)上的timestamp屬性也可以通過邊屬性valid_from和valid_until表達(dá)。設(shè)計(jì)邊的時(shí)候要克制不要為每一種細(xì)粒度語義單獨(dú)造一種邊類型。初始階段保留四到五種邊類型比頻繁調(diào)整邊類型更容易讓系統(tǒng)穩(wěn)定。2.3 置信度與信念狀態(tài)如何表示置信度是信念節(jié)點(diǎn)區(qū)別于事實(shí)節(jié)點(diǎn)的關(guān)鍵屬性。這里用一個(gè)取值區(qū)間統(tǒng)一表示-1表示完全反對(duì)該信念0表示無法判斷1表示完全支持該信念。置信度區(qū)間含義使用方式0.7 到 1.0高置信度信念回答時(shí)優(yōu)先采用但保留來源說明0.4 到 0.7中等置信度信念回答時(shí)加入“可能”修飾或繼續(xù)收集證據(jù)0.0 到 0.4低置信度信念不建議直接用于決策需要補(bǔ)充驗(yàn)證-0.4 到 0.0偏否定系統(tǒng)傾向認(rèn)為該信念不成立-1.0 到 -0.4強(qiáng)烈否定表示立場清晰的反向結(jié)論信念節(jié)點(diǎn)不僅保存當(dāng)前置信度還要保存歷史版本。使用history數(shù)組記錄每次更新的舊值、新值、觸發(fā)證據(jù)和時(shí)間這樣即使更新邏輯出錯(cuò)也能回溯到任意歷史狀態(tài)。除了置信度還需要保存last_updated時(shí)間。長時(shí)間沒有新證據(jù)支持的信念會(huì)發(fā)生時(shí)間衰減last_updated是衰減計(jì)算的基礎(chǔ)字段。3. 在 Python 中用 NetworkX 實(shí)現(xiàn)最小閉環(huán)3.1 環(huán)境準(zhǔn)備實(shí)現(xiàn)最小閉環(huán)不需要圖數(shù)據(jù)庫先使用 Python 的 NetworkX 驗(yàn)證數(shù)據(jù)模型和更新算法。這個(gè)方案適合算法驗(yàn)證、小規(guī)模原型和單元測(cè)試。依賴如下pip install networkxPython 版本建議 3.9 及以上。如果生產(chǎn)環(huán)境準(zhǔn)備切換為圖數(shù)據(jù)庫比如 Neo4j 或 NebulaGraph也可以先保留 NetworkX 版本作為業(yè)務(wù)層模型再通過適配器同步到圖數(shù)據(jù)庫。下面示例會(huì)自動(dòng)生成一個(gè)小的信念上下文圖并完成一次“支持證據(jù)加入”和一次“反駁證據(jù)加入”的全過程。示例中的數(shù)據(jù)結(jié)構(gòu)用于說明思路落地時(shí)要結(jié)合自己的包名、路徑和實(shí)體 ID 生成規(guī)則調(diào)整。3.2 構(gòu)建圖的輔助函數(shù)先寫一組底層函數(shù)。這組函數(shù)分別完成節(jié)點(diǎn)創(chuàng)建、邊創(chuàng)建和信念更新后續(xù)場景只需要調(diào)用它們。import networkx as nx from datetime import datetime class BeliefContextGraph: def __init__(self): self.g nx.DiGraph() def add_entity(self, entity_id, name, entity_typeperson): self.g.add_node( entity_id, node_typeentity, namename, entity_typeentity_type, ) def add_event(self, event_id, event_type, timestamp): self.g.add_node( event_id, node_typeevent, event_typeevent_type, timestamptimestamp, ) def add_evidence(self, evidence_id, text, source, event_id): self.g.add_node( evidence_id, node_typeevidence, texttext, sourcesource, event_idevent_id, ) self.g.add_edge(evidence_id, event_id, relationOCCURRED_IN) def add_context(self, context_id, context_type, context_value): self.g.add_node( context_id, node_typecontext, context_typecontext_type, context_valuecontext_value, ) self.g.add_edge(context_id, context_id, relationSELF_REF) def add_belief(self, belief_id, predicate, entity_id, confidence): self.g.add_node( belief_id, node_typebelief, predicatepredicate, entity_identity_id, confidenceconfidence, last_updateddatetime.now().isoformat(), history[], ) self.g.add_edge(belief_id, entity_id, relationBELONGS_TO) def connect_evidence_to_belief(self, evidence_id, belief_id, relation, weight0.3): self.g.add_edge( evidence_id, belief_id, relationrelation, weightweight, )這里有幾個(gè)設(shè)計(jì)點(diǎn)需要說明。證據(jù)節(jié)點(diǎn)通過OCCURRED_IN連接到事件節(jié)點(diǎn)是為了后續(xù)查詢時(shí)能從證據(jù)找到發(fā)生時(shí)間也能從時(shí)間線反查證據(jù)。上下文節(jié)點(diǎn)里的SELF_REF邊是占位寫法實(shí)際項(xiàng)目中上下文節(jié)點(diǎn)應(yīng)該連接到證據(jù)節(jié)點(diǎn)表達(dá)“這條證據(jù)處于某個(gè)上下文”具體連接方式見下一節(jié)的完整案例。connect_evidence_to_belief中的relation只允許傳SUPPORTS或REFUTES由調(diào)用方保證。更嚴(yán)謹(jǐn)?shù)膶懛ㄊ窃诜椒ɡ锛有r?yàn)這里為了保持示例精簡省略了校驗(yàn)邏輯。3.3 模擬一次對(duì)話新增支持證據(jù)下面演示用戶明確表達(dá)咖啡偏好的場景。時(shí)間設(shè)為2025-03-01系統(tǒng)構(gòu)造一個(gè)事件節(jié)點(diǎn)、一個(gè)證據(jù)節(jié)點(diǎn)和一個(gè)信念節(jié)點(diǎn)。graph BeliefContextGraph() # 實(shí)體 graph.add_entity(u_001, 用戶小張, entity_typeperson) # 上下文咖啡話題 graph.add_context(ctx_001, topic, coffee) # 事件2025-03-01 用戶談?wù)摽Х绕?graph.add_event(evt_001, user_statement, 2025-03-01T10:00:00) # 證據(jù)原始對(duì)話內(nèi)容 graph.add_evidence( evidence_idevi_001, text我愛喝美式咖啡每天都要來一杯, sourcedialog:2025-03-01:10:00:00, event_idevt_001, ) # 把證據(jù)放到咖啡話題上下文 graph.g.add_edge(evi_001, ctx_001, relationCONTEXT_OF) # 信念用戶偏好美式咖啡初始置信度 0.6 graph.add_belief( belief_idb_001, predicateprefers_coffee_type, entity_idu_001, confidence0.6, ) # 支持證據(jù)連接 graph.connect_evidence_to_belief( evidence_idevi_001, belief_idb_001, relationSUPPORTS, weight0.4, )初始置信度設(shè)為 0.6 而不是 1.0是因?yàn)橐淮伪磉_(dá)雖然明確但從記憶系統(tǒng)角度看仍然存在用戶隨口一說、場景特殊、語義被誤解析等可能。后續(xù)證據(jù)越多置信度才會(huì)逐步逼近高分。3.4 模擬一次觀念變化新增反駁證據(jù)用戶之后又說要戒咖啡因。這時(shí)系統(tǒng)不是刪除舊信念也不是盲目新增一個(gè)相反的偏好而是為舊信念加入一條反駁證據(jù)再通過更新函數(shù)調(diào)整置信度。# 事件2025-06-10 用戶談?wù)摻淇Х?graph.add_event(evt_002, user_statement, 2025-06-10T20:30:00) # 證據(jù) graph.add_evidence( evidence_idevi_002, text最近開始戒咖啡因了先把美式停掉, sourcedialog:2025-06-10:20:30:00, event_idevt_002, ) # 反駁連接 graph.connect_evidence_to_belief( evidence_idevi_002, belief_idb_001, relationREFUTES, weight0.5, ) # 現(xiàn)在先不調(diào)用更新函數(shù)下一節(jié)實(shí)現(xiàn)更新算法后再執(zhí)行到這里圖結(jié)構(gòu)已經(jīng)包含兩個(gè)證據(jù)節(jié)點(diǎn)一個(gè)指向b_001的支持邊一個(gè)指向b_001的反駁邊。系統(tǒng)已經(jīng)具備“可解釋”的基礎(chǔ)看到b_001時(shí)能同時(shí)找到支持和反駁兩條證據(jù)鏈。4. 關(guān)鍵算法信念更新、沖突消解和上下文限定4.1 為什么不能用簡單的置信度加減一種直覺做法是支持一次置信度加 0.2反駁一次減 0.2。這種方案有兩個(gè)問題。第一重復(fù)證據(jù)被無限疊加。同一條用戶消息如果因?yàn)閷?duì)話重放、任務(wù)重試被寫入兩次置信度會(huì)被推高但證據(jù)并沒有增加新的信息量。第二加減法沒有上限約束。三條支持證據(jù)就可能把置信度推到 1.0 以上后續(xù)只能做截?cái)嗵幚斫財(cái)鄷?huì)丟失更新強(qiáng)度信息。更好的做法是把置信度更新建模為“向新證據(jù)方向移動(dòng)”。每次更新保留舊置信度的一部分再加上新證據(jù)的一部分這樣單條噪聲不會(huì)讓信念劇烈波動(dòng)多次同類證據(jù)又能逐漸增強(qiáng)或削弱信念。4.2 基于證據(jù)強(qiáng)度的加權(quán)更新把證據(jù)表達(dá)為一個(gè)取值在-1到1之間的evidence_value。完全支持為1完全反駁為-1中立為0。更新公式如下new_conf old_conf weight * (evidence_value - old_conf)這個(gè)公式的直觀含義是新置信度從舊置信度向證據(jù)值移動(dòng)了weight比例。weight越大單條證據(jù)對(duì)信念的改變?cè)矫黠@weight越小信念越穩(wěn)定。在代碼中實(shí)現(xiàn)如下def update_belief(graph, belief_id, evidence_value, weight, reason_evidence_id): node graph.g.nodes[belief_id] old_conf node[confidence] new_conf old_conf weight * (evidence_value - old_conf) new_conf max(-1.0, min(1.0, new_conf)) new_conf round(new_conf, 4) node[last_updated] datetime.now().isoformat() history node.setdefault(history, []) history.append( { old: old_conf, new: new_conf, evidence: reason_evidence_id, time: datetime.now().isoformat(), } ) node[confidence] new_conf return new_conf注意evidence_value和weight是兩個(gè)不同概念。evidence_value由證據(jù)內(nèi)容計(jì)算得到表達(dá)這條證據(jù)對(duì)信念的立場weight由系統(tǒng)配置決定表達(dá)這條證據(jù)的可信程度或重要程度。參數(shù)含義常見值調(diào)大影響調(diào)小影響evidence_value證據(jù)對(duì)信念的立場強(qiáng)度-1 到 1單條證據(jù)改變方向越強(qiáng)證據(jù)更趨向中立weight證據(jù)對(duì)舊信念的修正力度0.1 到 0.5信念波動(dòng)大、反應(yīng)快信念穩(wěn)定、反應(yīng)慢繼續(xù)上一節(jié)場景對(duì)b_001執(zhí)行一次反駁更新update_belief( graph, belief_idb_001, evidence_value-0.8, weight0.5, reason_evidence_idevi_002, ) print(graph.g.nodes[b_001][confidence])初始置信度是 0.6更新后是0.6 0.5 * (-0.8 - 0.6) 0.1。這就是一條強(qiáng)反駁證據(jù)的效果系統(tǒng)不再認(rèn)為用戶當(dāng)前偏好美式咖啡但也沒有徹底斷言用戶討厭美式咖啡因?yàn)閮H有 0.1 的置信度低于決策線。4.3 時(shí)間衰減與上下文窗口除了一次性更新還需要考慮時(shí)間因素。一個(gè)半年沒有新證據(jù)支持的信念即使當(dāng)時(shí)置信度很高現(xiàn)在也應(yīng)該適當(dāng)衰減。這里可以采用半衰期衰減from datetime import datetime, timedelta def time_decay(graph, belief_id, nowNone, half_life_days90): node graph.g.nodes[belief_id] if now is None: now datetime.now() last_updated datetime.fromisoformat(node[last_updated]) elapsed_days (now - last_updated).days decay_factor 0.5 ** (elapsed_days / half_life_days) node[confidence] round(node[confidence] * decay_factor, 4) node[decayed_at] now.isoformat() return node[confidence]當(dāng)elapsed_days等于 90 天時(shí)置信度變?yōu)樵瓉淼囊话氲扔?180 天時(shí)變?yōu)樗姆种?。這樣舊證據(jù)的影響力會(huì)隨時(shí)間自然減弱。上下文窗口則決定“哪些證據(jù)屬于同一場景”。如果新增反駁證據(jù)發(fā)生在健康管理場景而舊信念屬于工作場景的咖啡偏好不應(yīng)該直接減弱舊信念。一個(gè)簡單的上下文匹配規(guī)則是只有與舊信念關(guān)聯(lián)的上下文節(jié)點(diǎn)相同或?qū)儆谕桓讣?jí)時(shí)才執(zhí)行更新。實(shí)際項(xiàng)目中可以給每個(gè)信念增加context_ids屬性更新前檢查證據(jù)的上下文與信念的上下文是否重疊。若不重疊則新建信念節(jié)點(diǎn)保留舊信念不變。5. 運(yùn)行驗(yàn)證斷言、查詢與解釋輸出5.1 圖結(jié)構(gòu)完整性校驗(yàn)完成建圖和更新后需要驗(yàn)證系統(tǒng)沒有出現(xiàn)結(jié)構(gòu)錯(cuò)誤??梢詫懸唤M校驗(yàn)函數(shù)覆蓋節(jié)點(diǎn)類型、邊關(guān)系、必填字段三個(gè)維度。def validate_graph(graph): for node_id, data in graph.g.nodes(dataTrue): if data[node_type] belief: assert confidence in data, fbelief {node_id} missing confidence assert history in data, fbelief {node_id} missing history assert last_updated in data, fbelief {node_id} missing last_updated if data[node_type] evidence: assert event_id in data, fevidence {node_id} missing event_id for src, dst, data in graph.g.edges(dataTrue): assert relation in data, fedge {src}-{dst} missing relation validate_graph(graph) print(graph structure ok)這段校驗(yàn)代碼適合放到 CI 或單元測(cè)試?yán)?。只要記憶寫入流程發(fā)生變化就先跑一遍結(jié)構(gòu)校驗(yàn)避免臟數(shù)據(jù)進(jìn)入圖庫。5.2 信念更新結(jié)果驗(yàn)證驗(yàn)證方向是否正確需要檢查三個(gè)關(guān)鍵結(jié)果舊信念置信度是否下降、新證據(jù)的反駁邊是否存在、信念歷史是否正確追加。b1 graph.g.nodes[b_001] assert b1[confidence] 0.5 assert graph.g[evi_002][b_001][relation] REFUTES assert b1[history][-1][old] 0.6 assert b1[history][-1][new] 0.1 print(belief update result ok)這里把history[-1]作為最近一次更新記錄。如果使用圖數(shù)據(jù)庫可以改用時(shí)間戳倒序或版本號(hào)字段效果相同。5.3 可解釋查詢結(jié)果信念上下文圖的最終目標(biāo)是可解釋。寫一個(gè)explain_belief函數(shù)把影響某個(gè)信念的全部證據(jù)和邊關(guān)系輸出為人類可讀結(jié)構(gòu)。def explain_belief(graph, belief_id): belief graph.g.nodes[belief_id] result { belief_id: belief_id, predicate: belief[predicate], confidence: belief[confidence], supporters: [], refuters: [], } for src, _dst, data in graph.g.in_edges(belief_id, dataTrue): if data[relation] SUPPORTS: evidence graph.g.nodes[src] result[supporters].append( { evidence_id: src, text: evidence.get(text), weight: data.get(weight), } ) if data[relation] REFUTES: evidence graph.g.nodes[src] result[refuters].append( { evidence_id: src, text: evidence.get(text), weight: data.get(weight), } ) return result result explain_belief(graph, b_001) print(result)這時(shí)系統(tǒng)回答用戶問題時(shí)可以攜帶這樣的解釋結(jié)構(gòu)對(duì)于“用戶偏好美式咖啡”這個(gè)信念有哪條原始對(duì)話支持有哪條原始對(duì)話反駁當(dāng)前置信度是多少歷史更新過幾次。從下游應(yīng)用看這就從“只返回答案”升級(jí)為“返回答案和依據(jù)”。6. 常見問題與排查鏈路6.1 置信度反復(fù)震蕩現(xiàn)象同一條用戶消息被重復(fù)導(dǎo)入信念置信度連續(xù)變化沒有穩(wěn)定下來的趨勢(shì)。原因?qū)懭雽尤鄙僮C據(jù)去重。對(duì)話日志重放、任務(wù)重試、消息消費(fèi)重復(fù)投遞都可能導(dǎo)致同一份證據(jù)被寫入多次。檢查方式查詢證據(jù)節(jié)點(diǎn)總數(shù)對(duì)比原始消息去重后的數(shù)量檢查證據(jù) ID 是否包含內(nèi)容指紋或消息唯一 ID。處理建議證據(jù) ID 建議使用source timestamp text_hash生成寫入前先判斷節(jié)點(diǎn)是否存在。如果圖數(shù)據(jù)庫支持合并語義也可以使用MERGE代替CREATE。6.2 新舊信念上下文不匹配仍被覆蓋現(xiàn)象用戶在健康話題下說“戒咖啡因”導(dǎo)致工作場景下的“喜歡美式咖啡”信念被錯(cuò)誤削弱。原因更新算法只看了證據(jù)立場沒有判斷上下文是否一致。健康管理的證據(jù)與職場咖啡偏好屬于兩個(gè)不同場景不應(yīng)該互相更新。檢查方式打印證據(jù)所在上下文和信念所在上下文對(duì)比context_type和context_value。處理建議在update_belief前增加上下文匹配判斷。匹配則更新舊信念不匹配則創(chuàng)建新的信念節(jié)點(diǎn)。每個(gè)信念需要配置context_ids不能把上下文信息丟失。6.3 實(shí)體別名導(dǎo)致圖碎片化現(xiàn)象同一個(gè)用戶在不同的對(duì)話來源中被寫成“小張”“zhang_san”“用戶張三”系統(tǒng)因此創(chuàng)建了多個(gè)實(shí)體節(jié)點(diǎn)信念無法聚合。原因缺少實(shí)體歸一化步驟沒有在做圖寫入前將別名映射到同一實(shí)體 ID。檢查方式搜索實(shí)體類型為person的節(jié)點(diǎn)按名稱聚合統(tǒng)計(jì)重復(fù)度觀察相同真實(shí)用戶是否擁有多個(gè)實(shí)體 ID。處理建議在寫入層引入實(shí)體解析服務(wù)??梢韵扔靡?guī)則和同義詞表再考慮基于嵌入向量的實(shí)體對(duì)齊。也可以在實(shí)體節(jié)點(diǎn)上維護(hù)aliases字段查詢時(shí)統(tǒng)一使用 canonical_id。6.4 證據(jù)權(quán)重設(shè)置過于主觀現(xiàn)象有人把支持證據(jù)權(quán)重設(shè) 0.8有人把反駁證據(jù)權(quán)重設(shè) 0.1導(dǎo)致相同業(yè)務(wù)場景下的信念更新結(jié)果差異極大。原因權(quán)重沒有形成統(tǒng)一策略配置散落在代碼或數(shù)據(jù)庫。檢查方式統(tǒng)計(jì)所有證據(jù)邊的 weight 分布檢查是否存在異常閾值。處理建議為不同證據(jù)來源配置標(biāo)準(zhǔn)權(quán)重。用戶明確表達(dá)類證據(jù)建議權(quán)重 0.4 到 0.5第三方結(jié)構(gòu)化數(shù)據(jù)建議權(quán)重 0.3模型推斷類建議權(quán)重 0.1 到 0.2。權(quán)重可以存為配置項(xiàng)不要硬編碼在業(yè)務(wù)代碼里。7. 生產(chǎn)落地從 NetworkX 到工程化7.1 記憶系統(tǒng)架構(gòu)建議NetworkX 適合算法驗(yàn)證但生產(chǎn)環(huán)境需要更強(qiáng)的并發(fā)、事務(wù)和查詢能力。一個(gè)可落地的分層架構(gòu)如下。業(yè)務(wù)層: 對(duì)話服務(wù) / 推薦服務(wù) / 問答服務(wù) | 記憶服務(wù): 證據(jù)抽取模塊 - 實(shí)體解析模塊 - 信念更新模塊 - 解釋生成模塊 | 存儲(chǔ)層: JSON 文件快照 / 圖數(shù)據(jù)庫 / 向量數(shù)據(jù)庫記憶服務(wù)內(nèi)部證據(jù)抽取模塊負(fù)責(zé)從對(duì)話中識(shí)別值得記錄的信息實(shí)體解析模塊將文本中的對(duì)象映射到統(tǒng)一實(shí)體 ID信念更新模塊執(zhí)行置信度計(jì)算解釋生成模塊為下游組裝可讀證據(jù)鏈。存儲(chǔ)層可以同時(shí)使用圖數(shù)據(jù)庫和向量數(shù)據(jù)庫。圖數(shù)據(jù)庫保存節(jié)點(diǎn)、邊、置信度和上下文關(guān)系向量數(shù)據(jù)庫保存證據(jù)文本的嵌入向量用于語義召回。兩者互補(bǔ)向量庫負(fù)責(zé)找相似圖庫負(fù)責(zé)判斷該信誰。7.2 與向量庫 RAG 結(jié)合的路徑在 RAG 流程中信念上下文圖可以作為一個(gè)中間層。常規(guī) RAG 流程是“問題 - 向量召回 - 拼接上下文 - 生成回答”。引入信念上下文圖后流程變?yōu)椤皢栴} - 向量召回候選證據(jù) - 載入候選證據(jù)相關(guān)的信念上下文圖 - 判定證據(jù)沖突與置信度 - 生成回答”。差異在于生成階段不再直接使用原始檢索文本而是使用經(jīng)過信念過濾和排序后的結(jié)論。具體實(shí)現(xiàn)時(shí)可以在證據(jù)節(jié)點(diǎn)中保存embedding_key向量庫以該 key 為主鍵。召回命中某個(gè)證據(jù)后通過證據(jù) ID 反向查找關(guān)聯(lián)信念節(jié)點(diǎn)再讀取該信念的支持者、反駁者和置信度。這樣 RAG 召回的不再是孤立文本而是有結(jié)論依據(jù)的完整證據(jù)鏈。7.3 生產(chǎn)環(huán)境檢查清單上線前建議逐項(xiàng)檢查如下內(nèi)容。檢查項(xiàng)檢查內(nèi)容通過標(biāo)準(zhǔn)證據(jù)唯一性證據(jù) ID 是否穩(wěn)定可復(fù)現(xiàn)同一消息重復(fù)投遞不會(huì)生成兩個(gè)證據(jù)實(shí)體歸一化同名異寫實(shí)體是否合并查詢同一用戶只返回一個(gè) canonical_id上下文完整性信念是否都掛接上下文節(jié)點(diǎn)不存在無上下文的全局信念歷史可回溯信念節(jié)點(diǎn)是否保留 history任意時(shí)間點(diǎn)可恢復(fù)先前置信度時(shí)間衰減策略是否有過期任務(wù)清理弱信念低置信度信念不會(huì)無限膨脹解釋輸出關(guān)鍵結(jié)論能否輸出支持者與反駁者回答“為什么”時(shí)能看到證據(jù)鏈權(quán)重配置證據(jù)權(quán)重是否統(tǒng)一管理權(quán)重來自配置而非散落硬編碼審核機(jī)制置信度低于閾值的信念如何處理有丟棄、歸檔或人工復(fù)核路徑這套清單不是一次寫代碼就能完成的而是要在數(shù)據(jù)寫入、更新、讀取三個(gè)階段分別落實(shí)。8. 擴(kuò)展方向多智能體、遺忘策略與可解釋 AI8.1 多智能體記憶共享與隔離在只有一個(gè)用戶一個(gè)助手的場景里圖結(jié)構(gòu)可以相對(duì)簡單。進(jìn)入多智能體場景后同一個(gè)用戶可能與多個(gè)助手交互每個(gè)助手可能擁有不同的觀察范圍。信念上下文圖可以通過agent_id前綴隔離不同智能體寫入的證據(jù)和信念也可以設(shè)計(jì)共享層名為“用戶咖啡偏好”的信念節(jié)點(diǎn)可被多個(gè)智能體讀取但各智能體自己的觀察證據(jù)單獨(dú)存儲(chǔ)。這種設(shè)計(jì)避免了“A 助手了解到用戶喜歡美式咖啡B 助手不知道結(jié)果推薦了拿鐵”這類信息割裂問題。共享層讓結(jié)論可見隔離層保護(hù)觀察來源。8.2 長期記憶的衰減與遺忘時(shí)間衰減只是最簡單的遺忘策略。生產(chǎn)環(huán)境可以結(jié)合三種操作弱化置信度低于 0.2 的信念自動(dòng)降權(quán)不再參與決策。歸檔將超過 180 天無更新的證據(jù)和信念移動(dòng)到冷存儲(chǔ)。刪除當(dāng)信念被反駁次數(shù)超過閾值且置信度長期低于下限時(shí)標(biāo)記為失效。歸檔和刪除都必須保留審計(jì)日志。對(duì)記憶系統(tǒng)來說“為什么刪除”和刪除本身同樣重要否則未來問題排查會(huì)失去線索。8.3 把信念上下文圖作為可解釋性接口很多應(yīng)用現(xiàn)在的解釋方式是文本模板比如“根據(jù)您的歷史偏好為您推薦”。這種解釋無法驗(yàn)證也無法追問。信念上下文圖則提供結(jié)構(gòu)化的解釋哪個(gè)證據(jù)支持了結(jié)論哪個(gè)證據(jù)反駁過舊結(jié)論置信度為什么從 0.6 降到 0.1。從工程角度這套設(shè)計(jì)最有價(jià)值的練習(xí)是給每一個(gè)結(jié)論補(bǔ)上一條證據(jù)鏈讓系統(tǒng)在被問到“為什么”時(shí)能夠輸出一段可靠的依據(jù)。剛開始實(shí)現(xiàn)時(shí)不用追求算法復(fù)雜先把“事實(shí)不可變、信念可變、證據(jù)可追溯”這三個(gè)原則落地再逐步加入時(shí)間衰減、上下文匹配和實(shí)體歸一化。這樣構(gòu)建出來的記憶系統(tǒng)才能真正從“記住內(nèi)容”走向“理解依據(jù)”。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色五月激情| 丁香六月激情| 最新五月天婷婷影| ..真实国产乱子伦对白在线_欧| Xx色综合| 丁香久久在线| 99riAv1国产在线观看| 色天堂在线| 婷婷五月激情网| 日韩成人综合网| 91久操| 九九色99| 不卡成人免费| 五月丁香影院| 精品乱码久久久久| 五月婷六月综合在线观看| 97久久婷婷色| 99热99色| 1024操逼视频| 婷婷激情丁五月| 超碰av在| 激情五月丁香五月| 国产三级秋霞| 色五月天.con| 亚洲午夜一区二区| 欧美激情综合五月色丁香| 色五月亚洲| 丁香五月色| 成人AV播放| 无码AV免费精品一区二区三区| 99爱免费在线视频| 噜噜噜噜噜久| 9l视频自拍9l九色9l成人| 中文字幕免费高清电视剧| 六月丁AV| 精品99网站| 亚洲六月色婷婷| 色色99| www.深爱激情| 天天干电影| 激情啪啪五月天| 奇米网大香蕉| 成人AV片播放| 五月天色站| 日日夜夜狠狠| 国产成人综合在线| 啪啪综合网| www激情com| 五月天激情国产综合AV| 六月丁香深深爱| 九九综合网色全集| 99热全是精品| 超碰成人电影| 九色91国产| 91色性感五月婷婷丁香| 色婷婷综合电影| 国产精产国品一二三在观看| 99情色五月天| 我想看国产大学生口爆吞精的视频| 久久久精品色| 婷婷丁香五月天激情| 夜夜夜夜夜操| 五月丁香婷婷成人综合网| 亚洲人妻AV| 激情六月天婷婷| 五月色亭丁香| 欧美内射AA| 久久久久这里都是精品| 五月涩涩网| 激情欧美婷五月| 丁香五月大香蕉AV| 久操福利| 狠狠色婷婷丁香六月| 深爱开心激情网| 他改变了拜占庭| 婷婷五月综激情| 欧美精产国品一二三区| 五月婷婷,六月激情| 五月激情四射网站| 丁香成人五月天| 伊人久久大香线蕉av最新| 中文字幕精品在线观看| 成人精品视频99在线观看免费| www.婷婷五月天,com| 五月天婷婷六月激情网| 大香蕉伊人99| 天天日婷婷| 精品A√| 色色射| 99热9| 狠狠五月天婷婷| 丁香五月六月激情| 五月婷婷 激情五月| 久久久27操| 免费AV在线| 婷婷香五月天| 欧美 日韩 成人| 天天干,天天操,天天射| 五月丁香六月合| 色五月婷婷DVD| 婷婷丁香18| 日韩成人电影在线播放| 免费观看全黄做爰的视频| 婷婷丁香五月天之开心少妇| 五月婷婷深深的爱| 五月天成人在线视频网站| 激情五月天com| 六月丁香色色| 熟女国产在线一区二区三区四区| 国产.亚洲.欧洲视频在线| 久久久婷婷婷| 丁香五月婷婷五月| 5Www色5夜| 天堂爱啪啪| 99久久思思| 大香蕉婷婷丁香视频在线| 亚洲不卡| 免费看无码视频A级| 99视频色在线观看| 射久久丁香五月| 久久五月婷6 9| www.91AV.com| 99无码免费视频| 五月丁香色五月| 五月丁香成人| AV网站免费在线| 国产色五月婷婷| 婷婷五月天综合在线| 久久38视频| 5月丁香婷婷| 思思久久青草热| 天天日 天天草| 麻豆观看夏晴子| 色开心五月婷婷丁香HD| 五月婷婷二月丁香| 啪啪啪丁香五月| 色色色99韩| 色呦呦美女| 91日本在线免费| 超碰成人免费| 婷婷综合视频| 立川无码av| 日韩 中文 欧美| 激情色情五月天| 这里只有精品视频在线看| 婷婷中文字幕| 五月天婷婷丁香花| 九九爱激情| 久久杏爱视频| 六月丁香五月天| 94干大香蕉| 婷婷五月激情视频| 丁香五月婷婷综合精品素人| 色婷婷97| 丁香五月激情综合| 视色网在线播放| 色玖玖| 五月婷婷色播视频| 天天揷综合网| 天天艹夜夜艹| 99热自拍| 超碰av在| 五月丁香六月婷婷久久肏| 日韩精品电影| 开心激情五月天网| 美女激情综合| 99视频| 九九热这里只有精品23| 北条麻妃伊人 | 色偷偷综合| 丁香色五月婷婷17C| 欧美成人无码一区二区三区| 99国产在线精品视频| 亚洲人妻一区二区| 婷婷五月色情| 丁香五月色| 精品网站99| 国产一级视频a| 开心激情播播五月天| www.cao.com久久| 亚洲色五月天| 伊人网欧美在线男人天堂五月丁香| 激情婷婷五月| 欧美色爱五月天| 久久视频婷婷| 亚洲乱码日产精品BD| 9久久精品视频| 色欲av伊人久久大香线蕉影院| 激情五月天婷婷丁香| 五月婷婷,狠狠操| 婷婷在线免费| 超碰97色| 99久精品视频| 婷婷六月插屄激情| www久久久| 97碰碰碰免费公开在线视频| 五月激情网综合| 国产午夜精品AV一区二区麻豆| 激情婷婷五月基地| 色五月xxx| 午夜激情四射影院| 婷婷丁香成人| 久久aaaa片一区二区| 91视频综合网| 无码字幕中文| 99国产精品久久久久久久久久久| 色婷婷五月天成人网| 色婷婷综合综合网| 亚洲综合五月天婷婷| 久久大香蕉同僚| 丁香五月777| 激情五月天丁香| 玖玖婷婷五月天| 一区二区中文字幕| 激情超碰网| 99在线观看| 六月天丁婷婷| 久久杏爱视频| 热99国产精品| 中文字幕永久免费| 五月天丁香色色| 中文字幕视频在线播放| 五月婷婷久久久久| 狠狠婷婷色| 九九青青草成人| 激情五月,色五月| 99ri视频在线观看| 九九中文色色| 久久久日韩特色特黄AAAA| 婷婷五月天伊人网| 超碰在线国产| 超碰操网| av网址在线| 天天草比天天爽| 婷婷六月丁香1| 久久se 综合网| 婷婷五月天色播| 婷婷激情人妻| 日本激情91| 思思热久热| 婷婷五月丁香五月天| 激情五月图| aa久久| 94干大香蕉| 久久五月天综合| 婷婷激情丁五月| 天天综合色丁香| 亚洲第一黄网| 五月天激情四射| 天天se在线视频| 五月天伊人久久| 伊人狼人干| 9|无码久久久久久| 久久婷婷成人综合色怡春院| 操人91| 五月天综合视频| 久久婷婷六月综合| 日韩成人无码| 五月四色激情| 久久久国产精品黄毛片| 91肏肏肏| 另类丁香综合| 激情网第九色| 开心五月激情| 奇米影视在线视频| 久久久久亚洲AV无码网影音先锋| 色综合网址| 91要啪| 超碰资源在线| 婷婷五月色综合| 婷婷另类小说| 色色色综合网| 婷婷五月天99综合网站| 午夜日日| 九九碰九九爱97超| 丁香五月天婷婷久久| 九六五月天婷婷| 五月丁香好婷婷A片网| 丁香五月天综合网| 天天干电影| 九九精品自拍| 免费黄色视频网址| 夜夜嗨一区二区三区直播内容| 无码人妻AV久久久一区二区三区| 日韩欧美性爱| 97亚洲色 torrent magnet| 色婷婷91| 久久黄色网扯| 99精品视频网站| 极品五月天| www.99视频| 色九月婷婷综合| 中文av网| 久久久婷婷色五月资源网| 九九热在线99| www.日韩艹| 五月天激情电影| 97操碰视频| 日韩成人网址| 丁香六月婷婷开心婷婷网| 中文字幕av久久爽一区| 久久视频九九视频| 91久久久久久久| 国产乱妇无乱码大黄AA片| 亚洲一二三网| 色五月婷婷青娱乐| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 不卡的AV网站| 99视频自拍| 精品99爱免费视频在线观看| 久久综合五月天| 99久久九九视频| 六月丁香停| 久久99精品久久久久久三级| 清色五月天| 激情综合五月婷婷丁香| 日韩黄在免| 欧美日韩成人免费在线| 天天做天天爱天天玩夜夜爽| 操一操干一干| 久99在线视频| 六月合五月婷| WW婷婷五月天com| 六月婷婷久久| 夜夜爽天天干| 日韩啪啪视品| 婷婷5月开心6月| 成人一级片| 色婷婷狠狠禁久久| 天天开心AV色综合婷婷五月天| 无码人妻电影| 欧美精产国品一二三区| 久草狼人| 九九热re99re6在线精品| 五月婷六月丁香| 91Chinese在线| 婷婷丁香社区| 九九在线视频| 天天色99| 另类激情中文| 亚洲自拍天堂| 日本色爽| 91丨九色丨熟女丰满| 激情五月狠狠| 91久热| 婷婷WWW久久| 色婷婷最爱五月| 国产欧美第五十五页| 国产伊人大香蕉| 丁香激情婷婷网| 亚洲激情久久| 99热啪啪| 久/久精品99看9| 久久综合激情| 婷婷伊人网| 婷婷九月丁香| 五月丁香在线| 激情婷婷狠狠干| 九九成人视频| 五月丁香久久激情网| 国产精品涩涩涩视频网站| 毛片蕉地一二| 九九無妻| 五月丁香色| 五月婷婷六月开心| 一操久久| 丁香六月婷婷综合激情欧美| 性爱动图国产麻豆一区二区三区| 免费看欧美成人A片无码| 日韩好吊操| 丁香婷婷综合激情五月色| 99热20| 亚洲日韩乱码一区二区三区四区| 五月开心深深爱激情综合| 97操碰日本女人| 26uuu国产激情视频| AV片在线观看| 91九色丨国产丨爆乳| 操操自拍| 91色色色| 婷婷婷婷色| 色婷婷AV在线| 91操人视频| 五月婷色丁香| av在线免费网站 | 91精产一区三区免费观看| 九九無妻| 91精品熟女| 亚州男人天堂婷婷五月| 大香蕉伊人99| 婷婷综合在线观看视频| 五月丁香花视频| 性一交一乱一交A片久久四色| 五月丁香五月激情综合色综合| 免费在线观看av网站| 丁香五月天中文字幕| 五月天婷婷免费| 色婷婷激情| 激情五月色综合国产精品| 沈娜娜av| www.色五月| 五月天综合图片| 噜噜噜狠狠色综| 天天干一干| 五月婷婷综合久久| 热99精品视频观看| 日本久草福利| 国产乱子轮XXX农村| 蜜桃五月天| 婷婷五月综合网| 色五月丁香五| 深爱激情五月网| 久久婷婷五月综合啪| 黄色激情久久| 热久久这里只有三级视频| 99re8在这里只有精品| 涩涩涩.com| 99色婷婷视频| 婷婷网影院| 国产精品天天狠天天看| 国产激情视频在线观看| 五月丁香777| 久草久青福利| 99热e| 秋霞少妇AV网站| 五月天色综合| 久久丁香久久| 久久这里只有精品视频26| PORNY九色9l自拍视频成人| 五月婷婷伊| 色婷婷丁香五月| AV成人在线播放| 婷婷丁香五月,狠狠综合| 六月色播| 69精品人人人人人人| 精品影院| 蜜臀AV在线观看| 久久五月婷| 天天色噜| 思思热这里只有精品| 六月丁香婷婷网| 99熟女| 五月婷激情影院| 色色综合院| 两性婷婷丁香五月| 日韩久久成人| 激情五月天色| 色情激情五月| 天天插天天很| 能看的av片| 激情小说五月天社区丁香| 狼友超碰| 在线观看亚洲视频影院| www.97碰碰com| 99热99| 婷婷五月丁香性爱| 密视AV综合在线| 九月丁香婷婷基地| 99热草草| 五月停亭久久电影| www.色色com| 丁香五月婷婷总啪啪| 91中文狠狠综合| 中文字幕欧美日韩VA免费视频| 丁香五月婷婷在线| 欧美久热| 在线18av | 国自产拍偷拍精品啪啪一区二区| 最近中文字幕2019视频1| 51国精产品自偷自偷综合 | 青青草伊人婷婷| 婷婷中合| 性爱网六月丁香| 香蕉97碰碰碰超视精品| www.jiujiujiu| 久久婷婷综合网| 大香蕉精品视频| 另类专区在线| 婷五月天在线草| 色婷婷成人影片| 色婷婷影音| 日本va视频| 丁香五月天AV| 九九99精品| 五月激情在线| 91九色PORNY肉丝在线| 久草婷| 久久久五月天网站| 久久婷婷五月天| 婷婷综合网在线| 丁香五月天网友自拍啪啪啪视频| 色激情五月| 五月亭亭开心网| 日韩成人无码| 98永久精品| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 国产精品久久99| 丁香六月婷婷综合色| 五月亚洲激情| 婷婷五月天亚洲| 色狠狠色| 激情影院69| 人妻激情在线| 噜噜噜精品欧美成人在线观看| 看久久性爱99视频| 亚洲色色色| 九九热内射| 丁香九月婷| 久久机热这里只有 | 亚洲av电影在线| 婷婷狠狠18禁久久| 超碰AAAAAAV| 人人摸人人澡人人| 我淫我色婷婷五月天激情四射| 婷婷成人AV| 色婷婷五月基地在线| 色99网| 久色激情| 伊人婷婷综合| 色婷婷色五月天| 色五月亚洲| www.综合久久| 亚洲性爱日韩无码| 99热这里只有精品8| 4399在线观看免费高清毛片| 五月天免费色| 国产操碰| 人妻激情网| 99久久a线观| 黄网在线观看免费| 亚洲成人AV电影网| 人妻在线中文字幕久久| 97精品综合| 久艹久| 日本熟妇人妻在线| 大香蕉久操| 色婷婷久久综| 婷婷五月天久久| 日本精品人妻无码77777| 久久与婷婷| www.狠狠艹| 国产性av| 伊人超碰| 亚洲精品久久久久久久久久吃药| 色999亚洲人成色| 另类激情五月在线视频欧美| 成片免费观看大全| 夜丁香五月婷婷| 黑人糟蹋人妻HD中文字幕| 色99日韩| 超碰人人操人人干| 97人人操| 91色在线/日韩| 色哟哟性爱av| 97性视频| 国産精品| 狠狠色综合网| 99九色视频在线观看| 成年人最刺激的综合网| 婷婷性爱视频在线| 丁香五月激情五月| 97碰碰碰| 在线成人网址| 99在线精品观看99| 高清无码入口| 99热99思午夜精品| 欧美大片| 天天天摸夜夜夜玩| 色婷狠狠| 久久婷婷五月综合激情国产| 五月丁香欧美综合| 伊人久久婷婷| 丁香五月天偷拍| www.夜夜| 色婷婷先锋| 99久久人人| 激情五月天影院| 色色综合激情| a网站免费观看| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 欧美情色一区| 深爱激情网综合| 亚洲黄色av网站| 色五月婷婷网| 噜噜噜噜婷婷五月天| 五月天色区| 成人五月天在线视频在线观看| 中字幕视频在线永久在线观看免费| 五月婷婷综合网在线播放| 免费无码毛片一区二区A片| www.狠狠狠.com| 色综合网页| 丁香五月伊人| 精a品a视a频| 青草视频在线观看视频| 色99视频| 婷婷五月天视| 日本大逼91| 色综合com| 岛国资源站| 性视频久久| 一區四區歐美日韓| 91久久免费| 丁香五月婷久久| 久久精彩视频99| 色色色在线观看| 五月丁香六月综合激情| 五月天久久丁香| 成人龟情网丁香五月| 六月综合婷婷开心伊人| 色综合夜夜| 狠狠色中色| 99在线热| 99在线精品免费视频| 久久婷婷亚洲| 超碰熟女农村在线69| 丁香婷婷九月| 日日操,夜夜爽| 99热播放| 国产精品A片在线| 激情婷婷五月| 可以免费观看的AV| 天天操天天操| 九九九九综合| 99热999| 欧美在线| 激情视频网址| 玖玖婷婷五月天| 色国产五月| 999精品乱码77777| 91九九热| AV在线不卡播放| 激情五月天色色| 99热手机在线精品| 五月丁香六月婷婷在线播放| 综合久久婷婷五月丁香| 久久超视频| 99色综合久久| 99re6在线视频精品免费| 五月天婷婷操逼视频| 婷婷五月天美女视频| 天天爽在线视频| 九九av在线| 开心婷婷五月综合| 成人龟情网丁香五月| 五月天婷婷久久视频| 操日视频| 丁香六月综合激情| 激情五月天 婷婷| 亚洲人妻一区二区| 97色伦另类图片小说视频| 婷婷久久欧美| www.99视频| 蜜臀av粉嫩av懂色av| 97干在线免费| 久久久噜噜噜操操操| 色欧美色色色| 最近中文字幕2019视频1| 97干在线视频| 五月色综合| 色婷婷六月| 99啪啪| 久久久婷婷婷| 五月婷婷婷| 中文字幕综合网| 天天综合五月| 9久视频| 影音先锋色婷婷| 夜夜资源站| 亚洲视频五区| 午夜大香蕉| 99热最新| 涩五月婷婷| 99无码| 国产亚洲精品久久久久苍井松| 五月婷婷六月丁香| 免费无码毛片一区二区A片| 人妻AV中文系列| 色色色色色色色色色影院| 五月丁香婷婷成人网| 婷婷丁香中文字幕| 亚洲中文AV网站| 久久精品99久久久久久久久| AV成人在线播放| 999热在线视频| 五月丁香六月婷婷综合在线| 蜜臀A∨在线水帘洞| 婷婷五月天无码视频| 夜夜夜夜做天天天做无码视频| 色五月婷婷激情五月| 天天夜夜六月丁香五月婷婷老师| 色色色免费视频| 婷婷娌伦网| 成人综合伍月天| rr天天操| 天天日天天爽夜夜爽| 桃色五月天| JlZZJlZZ8JlZZ亚洲熟女| 激情文学 综合 九月| 九九色播五月丁香| 丁香五月天信号| 色五月婷婷丁香婷婷| 六月丁香激情网| 丝袜人妻| 婷婷中文字幕网站| 黄色片精品| 狠狠夜夜五月丁香| 色五月天电影| 9999久久久久| 玖色色综合| 操操操操操操婷婷五月天| 久久这里只有精品16| 日日噜噜夜夜狠狠久久丁香六月| 偷拍五月丁香| 久久日曰| 九九视频这里只有精品在线播放| 五月综合色播播丁香婷婷| 综合99视频| 五月激情综合网| 六月婷婷AV| 狠狠香婷婷五月| 亚洲va在线∨a天堂va欧美va| 五月丁香大香蕉| YW无码| 激情无码五月天| 婷香五月激情视频| 最近中文字幕2019视频1| 色www.con| 精品综合五月| 狠狠综合网| 久久婷婷五月综合啪| 一个色的综合| 色婷婷狠狠爱| 日韩精品99久久| 丁香五月婷婷六月婷| 99热热这里只精品996小说| 激情婷婷丁香| 性色播| 99热亚洲精品| 久久五月天精品视频| 六月婷婷之青青草| 六月婷婷综合| 五月天婷婷久草丁香| 五月天婷婷开心| 伊人啪啪网| 久久久久久久久久久97| 99综合激情久久精品久久| 五月婷婷丁香六月| 色五月综合| 天天色天天| 热99.com婷婷| 99热99这里有免费的精品| 婷婷丁香六月| 四月婷婷五月色综合| 色婷婷69| 久久精品婷婷五月丁香| 亚洲精品婷婷| 久久九九99.www| 手机AVAV天堂看网| 深爱五月婷婷| 色欲婷婷夜夜| 26uuu成人网| 日本色色图| 97人人搞| 综合另类视频| 91丨九色丨白浆| www.91婷婷| 婷色五月天| 99人妻碰碰碰久久久久| 五月婷婷综合在线视频小说| 1024人妻无码中文字幕| 天天狠狠色综合| 九月丁香八月婷婷加勒比| 天天摸夜夜爽天天做| 国产成人一区二区三区在线观看| 天天天操天天天爰| 丁香五月天啪啪| 免费的日逼视频| 精品色色| 婷婷玉月丁香五月在线视频| 激情图片亚洲| 26uuu欧美激情另类| 久久婷婷五月天丁香| 婷婷丁香激情| 色吧99| www.夜夜操.com| 日熟女| 久久久91| 天天天操天天天爰| 无遮羞AV| 99热免| 日韩欧美老妇性视频91久久久| 成人在线日韩欧美| 丁香五月婷婷黑人妻黄色电影院| 99这里只有精| 五月婷庭丁香在线| 久久丁香婷| 这里只有精品视频在线| PORNY九色9l自拍视频成人| 泰州成人视频| 99久久er| www.久久爱.c n| 婷婷啪啪| 色婷婷色情| 人人叉久| 99热激情| 色久激情在线| 九九99九九99| 亚洲妇女熟BBW| 情婷婷五月天| 丁香婷婷五月天激情四射| 五月激情综合网| 天天天天做夜夜夜夜做| 99日本视频| 97色色视频| 精品51XX| 日本三级黄色大片| 97超碰,人人舔,人人操,人人摸| 五月天激情无码| 丁香婷婷久久 | 我淫我色婷婷五月天激情四射| 久热免费| 成人视频九九| 久热伊人在91| 99自拍视频在线观看| 九九精品在线观看视频6| 日本久久精品18| 亚洲人人操| 五月婷婷丁香五月天| 丁香婷婷五月天色综合| 色天堂操| 亚洲精品一区无码A片| www.五月丁香| 在线五月色播| 婷婷99狠狠躁天天躁中文| 99激情视频| 99九九视频| 九九热在线视频,| 黄色五月婷婷| 色婷婷四虎| 日韩一级片| 六月久久婷婷| 国产高清精品色| 久久机热这里只有精品免费视频| 色开心五月丁香| 五月天婷婷基地| WWW.17C亚洲精品| 色高清无码视频| 婷婷六月丁香激情| 99精品97| 五月天婷婷色综合| 色婷婷成人做爰A片免费看网站| 涩综合网| 国产欧美va| 色五月六月婷婷| 99er这里只有精品| 思思99久久| 狠狠色噜噜色狠狠狠综合色| 国产成人精品一区二区三区视频| 成人一级片| 婷婷深爱五月| 天天夜夜六月丁香五月婷婷老师| 婷婷国产日本欧美| 六月丁香婷婷视频综合在线观看| 怡春院久操| ady狠狠入| 激情五月丁香五月综合| 裸体做A爰片毛片A片免费| 91综合在线| 色一情一乱一乱一区91| 操骚货在线| 天天狠狠干| www一区二区三区| 亚洲瑟瑟精品在线| 五月 丁香 欧美| 久久五月天精品视频| www.婷婷| 亚洲综合色婷婷| 一起草Av| 亚洲av网站| 九九久久五月天| 色五月婷婷操逼| 六月婷婷香蕉| 色婷婷情片| 九九热99熟女| 91婷婷色 | 色色99| 99热这里只有精品1| 色播综合| 日日夜夜天天综合| 婷婷综合网| 99操视频| 激情婷婷六月天| 120分钟婬片免费看| 另类天堂| 青青久在线视频免费观看| 少妇2做爰HD韩国电影| 专区无日本视频高清8| 九九视频在线观看视频6| 这里只有精品96| 99久操视频| 五月婷九九草| 成人在线视频一区| 国产老熟妇亲子乱对白| 久操大香蕉| 久婷婷五月激情| 99视频精品8| Www.狠狠| 99久超碰| www激情| 最近免费中文字幕大全高清大全1| 亚洲字幕AV一区二区三区四区 | 激情文学 综合 九月| 色综合香蕉视频| 激情五婷网| 成人视频九九| 丁香婷婷视频一区二区| 特级西西4444www无码| 天天肏在线观看| 99成人在线观看| 精品一二三区久久AAA片| 丁香五月停停av| 婷婷五月精品中文字幕| 色色五月天婷婷| 激情五月综合六月丁香婷婷狠狠干| 五月天婷婷成人资源站| 欧洲色色| 香蕉久久国产AV一区二区| www.色五月| 日韩一级网站| 色综合久久五月| 五月丁香六月婷婷视频| 欧美三日本三级少妇三99| 婷婷导航| 国产婷婷五月| 日韩色色小视频| 婷婷激情五月天在线| 久99久精品| 欧美性色A片免费免费观看的 | 99自拍视频网站| 丁香五月亚洲无码| 五月天激情视频| 色婷婷五月天| 婷五月天六| 五月天丁香啪啪综合| 精品无码99| 婷婷综合久久| 五月停停99| 激情婷婷五月天。| 色亚洲激情| 久热91| 精品久久婷婷| 婷婷激情五月天亚洲综合| 色欲久久久久久综合网综合网| 91超级碰碰碰| 五月婷婷日本| 色色色色色色综合| 超碰99热| 九九美女视频| 日日夜夜青青草| 99啪啪视频| 9色免费网| 狠狠88综合久久久久噜噜噜| 久久久久人妻| 婷婷亚洲在线| 色婷婷内射| 色色色婷婷五月| 99爱在线| 色婷婷五月天激情在线播放| 五月丁香亭亭操逼| 狠狠狠狠青草| 伊人狠狠综合| 99热伊人| 任你爽视频| 久热这里只有精品6| 欧美叉叉叉BBB网站| 亚洲中文字幕AV| 噜噜狠狠色| 超级碰碰一区| 婷婷综合激情五月综合| 狠狠综合| 欧美色五月| 玖玖在线| 色9月| www.99热这里只有精品| 99久久国产综合精品五月天喷水\| 五六月婷婷| 五月婷婷丁香| 97九色视频| 日狠狠| 婷婷国产五月天17c| 99只有这里是精品| 亚洲妇女熟BBW| 5月婷婷视频网站综合| www,久久久| 97久人人| 91激情五月开心| 日91高清无玛| 五月激情小说| 无码橾| 久久久久网站| 婷婷五月天久久综合88| 99视频只有精品| 无码动漫AV| 九九热最新| 蜜臀av粉嫩av懂色av| 久热99热| 嫩草视频在线观看| 五月婷中文字幕| 97人人看| 日韩1区2区| 成人五月天在线观看| av色色国产| 色五月婷婷激情综合网| www.久久| 伊人国产婷婷五月天| 久久黄色片| 俺去啦综合网| 国产色香蕉精品五夜婷| 丁香五月社区| 99热主页日本| 91性高潮久久久久久久久| 99热成人精品| 激情五月天天| 久久久久丁香婷婷五月天| 操逼巨乳91| 色九九综合| 91热er| 色婷插| 在线综合网| PORNY九色9l自拍视频成人| 久久激情五月婷婷| 伊人婷婷激情| 99在线视频喷水| 91超碰在线播放| 成人噜噜网| 99人妻碰碰久久久禁片| 在线可以看的av网址| 日韩精品一品二区三区的使用体验| 久久久97| 亚洲成人电影aaaa| 婷婷丁香五月基地| 婷婷九月亚洲| 综合99在线| 久9草在线观看视频| 亚洲精品色| 秋霞黄色一级久久| 99亚洲精品综合在线| 九九热最新| 激情婷婷五月女| 91日韩在线| 五月婷婷开心丁香| 九九精彩久久| 亚洲精品又粗又大又爽A片 | 色婷婷五月天中文字幕| 久久久一级AAA| 激情久久丁香| 五月天免费色| 六月激情丁香一道本7777| 99热8| 婷婷精品性性性性性性性| 久热综合| 五月婷婷亚洲天堂97色婷婷| 庭庭久久内射| 五月 丁香 欧美| 射区导航| 开心色色五月天综合| 色色五月丁香婷婷| 五月天五月婷五月激情网| 99九九玖玖| 一本色综合色| 色婷婷香蕉| 另类综合网| 色五月丁香五月| 久婷婷久草| 99热免| 99re这里| 天色综合网站| 三级黄网站| 综合亚洲AV| 色综啪啪网| 婷婷深爱五月| 66色在线日韩| 激情宗合网激情五月天| 国产精品电影| 激情熟女网| 真实的国产乱XXXX在线91| 五月丁香婷婷综合网| 欧美色色色色色| 婷婷久久六月费| 色婷婷五月影视| 99玖玖在线视频| 成人久碰| 中字幕视频在线永久在线观看免费| 香蕉视频91| 综合色五月| 九玖欧洲亚洲| 久久99热这里| 青青热视频| 五月天久久www| 9在线9在线婷婷在线国产| 丰满老熟妇BBBBB搡BBB | 99九九精品视频| 激情婷婷丁香色五月| 5月丁香综合图区| 亚洲人人操| 九九热最新地址| 久久婷婷网| 色五月在线播放| www.亚洲激情| 久久99久久99精品免视看婷婷| 丁香五月激情六月欧亚激情综合导航| 哇嘎成人久久| 5五月综合网亚洲| 婷婷国产五月天17c| 国产AV成人精品| 婷婷色五月大香蕉在线| 婷婷五月花| 91色色色| 亚洲综合另类| 丁香六月婷婷| 九九这里有精品| 综合激情视频| 99热这里只有精品4| 久久99精品久久只有精品| 久久亚洲婷婷| 五月婷丁香| 激情五月天 婷婷| 天天爽天天干| 亚洲精品视频在线播放| 26uuu日韩| 激情视频网址| 色婷婷99| 久久精品国产精品| 久99999热视频在线观看免费| 国产暴力强伦轩1区二区小说| 亚洲精品视频在线| 久久视频在线视频| 风流少妇A片一区二区蜜桃| 少妇性BBB搡BBB爽爽爽电影| 免费视频WWW在线观看网站| 免费看欧美成人A片无码| 久久一级AV| 中文超碰视在线| 中文字幕性爱视频| 亚洲不卡欧洲| 五月丁香综合啪啪| 婷婷五月天777| 我要射综合| 丁香婷婷色五月| 五月婷婷五月色| 色综合com| 婷婷99| 久9精品视频在线| 人人操人人看97干| 大香蕉婷婷五月天| 99热在线里有精品| 天天操天爱综合| 婷婷五月天综合网| 99综合网| 日本欧美成人片AAAA| 久99久视频精品| 欧美在线视频9| 日韩久久视频| 婷婷五月天xxx| 国产色五月| 免费啪啪亚州视频| 国产亚洲在线观看| 亚洲无码影音| a九九热www| 亚洲激情高潮| 精品久久艹| 热久久99热欧美国产亚洲| 69凹凸成人综合网| 91视频人人做97| 乱女乱妇熟女熟妇综合网站| 人妻精品久久久久久| 婷婷欧美综合| 青青草免费公开视频| 久久九九经典| 狠狠色丁香五月婷巨| 天天做 天天爱| w婷婷五月婷婷w| 日产精品久久久久久久蜜臀| 蜜桃婷婷狠狠久久综合| 99久久久国产大片| 天天爽天天做| 日本五月婷婷| 色色色色色九九九九九| 中文字幕在线不卡| 亚洲精品性色| 婷婷视频网| 日韩人人操| 性五月激情| 可以看的av网站| 日本三级大片| 成人短视频免费观看| 欧美99热| 国产三级片91| 韩国不卡AC视频| 色五月大香蕉| 久久狠狠干| 亚洲精品又粗又大又爽A片 | 欧美日韩国产一区| 密乳视频| 丁香五月香蕉| 欧美日本高清视频99| 久久狠狠色| 五月婷婷AV| 毛片蕉地一二| 丁香婷婷久久激情| 丁香啪啪| 亚洲xx网| 天天爽天天摸| 五月香婷婷| 国产在线黄色| 五月婷婷丁香大香蕉| 99热这里只有精品98| 久久久.COM| 俺去婷婷 丁香| 婷婷五月丁香色情| 99精品综合视频| 色综合久久中文| 婷婷五月视屏| 激情五月天。| 99r这里只有精品哦| 婷婷丁香花五月天| 婷婷丁香黄色| 婷婷干五月综合在线播放| 成人婷婷深爱综合网| 99久久九九| 狠狠综合色网| 日日夜夜狠狠干| 蜜乳久AV| 五月丁香婷婷五月色| www.色婷婷.com| 五月婷在线观看| 色综合久久88色综合天天99| 影音先锋91资源站| 色亚洲欧洲| 丁香婷婷久久综合在线| 天天肏天天爽夜夜爽| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 丁香五月婷婷av| 婷婷丁香五月激情密臀av| 妻久久人久久| 99干在线| 久久性爱视频这里只有精品| 操操综合网婷婷| 伊人婷婷五月天av| 七月婷婷色香综合网| 丁香五月天欧美在线| 久久人妻超碰一区| 天天爽曰日爽| 久久caop| 激情婷婷五月天在线观看| A短视频免费在线观看| 天天添天天摸天天天天做| 黑人巨粗进入警花疼哭A片| 伊人婷婷激情| 婷婷影视久久| 日日夜夜爽| 热久69| 亚洲AV中文在线| 五月婷婷久久综合| 日日操夜夜撸|