引用来源、答案溯源与知识更新
让用户知道答案依据并保持知识新鲜。
- 用自己的话解释“引用来源、答案溯源与知识更新”及其核心术语。
- 在真实 AI 产品场景中识别何时应该使用本课方法。
- 完成一份可沉淀进“Prompt 模板、RAG 流程、Agent 工作流与评测集”阶段任务的实践产出。
REAL SCENE
先从一个真实场景开始
助手回答“年假为 10 天”,页面附了公司制度首页链接,但真正支持结论的是旧版附件中的一行,现行制度已经改为 12 天。一个看似权威的链接不等于可验证引用;知识版本、有效期和结论级证据必须对应。
PLAIN EXPLANATION
说人话:它到底是什么?
答案溯源要求把每个重要结论与实际支持它的原文片段关联,引用应包含标题、章节或页码、版本和有效时间,并让用户打开定位。知识更新则维护来源抓取、审核、发布、归档、删除和重建索引的生命周期。引用质量要检查证据是否真正蕴含结论,而非仅主题相关。
结论到证据映射
生成结果可拆为 claim,每个事实 claim 关联一个或多个 citation。引用片段需直接支持结论,跨片段推断标明推理关系;模型的常识或推测不能伪装成来源内容。
- 数字、日期和政策必须逐项引用
- 引用文本与展示页面一致
- 无支持 claim 自动阻止或标记
引用交互与可信表达
用户应能看到来源名称、更新时间和片段,在原文中定位;权限不足时不能通过引用预览泄露内容。不确定、冲突或过期证据要显式提示,并提供查看全部依据或纠错入口。
- 引用链接使用稳定文档标识
- 权限校验发生在每次打开
- 移动端也能快速回到原文
知识更新生命周期
来源变化可通过轮询、Webhook 或人工发布触发解析和索引;新版本经过质量检查后原子切换,旧版本归档。更新延迟、失败积压和索引—原文不一致需要监控与对账。
- 业务生效时间与抓取时间分开
- 重大变更触发回归评测
- 删除请求清理缓存和派生数据
引用必须实际支持具体结论,而不是展示主题相关链接。
来源、版本、页码、有效期和权限共同决定证据可信度。
知识更新以可审核的版本切换、对账与回归保证新鲜度。
KEY POINT
这节课最重要的结论
- 为什么重要
- 这决定了与算法和工程团队共同设计 Prompt、RAG、Agent 和评测方案时,团队是否拥有一致、可验证的判断标准。
- 适用边界
- 当问题目标、数据来源或失败成本发生变化时,不要机械套用;先重新确认假设和风险等级。
EXAMPLES
正确案例与常见反例
回答把“12 天”作为 claim,引用现行 V3 制度第 4.2 节并展示生效日期;点击高亮对应句子。若旧版与新版冲突,系统只使用当前有效版本并说明变化。发布新制度后通过审核切换索引并运行政策问题回归。
模型输出数字后统一附官网首页,引用片段只含“休假管理”标题,没有具体条款。检索同时使用 V1 和 V3,按相似度选旧版;文档更新失败没有告警,用户也看不到来源日期或提交纠错。
“输出结构需 claimId 与 citationIds,引用保存 documentVersion、section/page、charSpan、validFrom/To。渲染前校验 ACL 和片段仍存在;发布新版本以 activeIndex 原子切换,旧索引保留回滚窗口并对账。”
HANDS-ON
必做实操任务
本节产出:“Prompt 模板、RAG 流程、Agent 工作流与评测集”阶段任务中的《引用来源、答案溯源与知识更新》一页实践卡
步骤 1从一段答案拆出事实、建议和推测,给事实逐项匹配支持片段。
步骤 2检查十组引用属于直接支持、部分支持、主题相关还是矛盾。
步骤 3设计桌面与移动端查看来源、定位原文、冲突提示和纠错交互。
步骤 4画出知识创建、审核、发布、更新、归档、删除与索引切换流程。
实践结果会自动保存在本机,并进入项目工坊的任务来源。
用户问题:____
Claim 1:____ 类型:事实/建议/推断
Citation:document____ version____ section/page____ span____
支持程度:直接 / 部分 / 主题 / 矛盾
生效时间:____ 抓取时间:____
Claim 2:____
无证据或冲突处理:____
引用展示与原文定位:____
权限复核:____
知识来源与负责人:____
更新触发:____ 审核:____ 发布:____
索引原子切换/回滚:____
对账、延迟和失败告警:____
归档删除及缓存清理:____CHECKLIST
产品经理工作检查表
MASTERY QUIZ
掌握测验
达到 60% 即可完成本课。
INTERVIEW
常见面试题
展开参考回答
将答案拆为 claim,让每个关键事实绑定直接支持的原文片段、文档版本、章节页码和业务有效期;界面可定位原文并处理无证据、冲突和推断,打开时重新鉴权。知识侧建立抓取、解析、审核、原子发布、归档删除、索引缓存清理与对账,重大更新运行回归并监控新鲜度。
RECAP & FURTHER READING
重点回顾、延伸阅读与下一步
- 1
围绕“引用来源、答案溯源与知识更新”继续阅读:阅读模型或 AI 框架的官方概念文档,区分能力原理、评测条件与真实产品限制。
- 2
用“答案溯源、引用、知识更新”作为检索词,分别写下一条定义、一条适用边界和一个反例。
- 3
对照本课正确案例与反例,寻找一个公开案例并记录其中可复用的判断与不能照搬的条件。