有证据的回答

外部证据在什么情况下足以改善回答,值得建设检索系统?

先判断何时需要检索并批准来源版本,再测试合格段落与更新,决定证据不足时的回答路径,最后核验关键结论。

AI VISTA / DECISION01 / 03
当前判断当知识经常变化、访问权限重要、关键结论必须可追溯时,检索才更可能值得。
01输入
02验收
03边界
带回真实任务复核✓

判断分支

先回答这个主题真正要做的决定。

  1. 先问↓

    回答所需事实是否会变化,是否受版本或权限约束,重要结论是否必须可追溯?

  2. 如果↓

    这些条件成立,就先批准来源,再比较检索命中、引用支持和无证据处理。

  3. 否则✓

    优先用审核过的固定内容或直接查权威来源,不为少量稳定事实建设 RAG。

完整案例

跨地区请假助手该引用哪一版制度?

员工同时看到集团手册、地区补充规则和刚更新的假期通知。关键词相同,但适用地区、生效日期和访问权限不同。

最终产物一张检索试验表与引用审计表:分别检查可用段落是否被找到,以及引用是否支持结论。
01错误捷径

把所有 PDF 放进向量库,只要回答带链接,就把它视为“有证据”。

02更好的判断

先建立权威来源与覆盖关系,再决定是否需要检索;检索结果必须携带地区、版本、生效日期和权限,并让关键结论对应到支持它的具体片段。

03如何验收

用已知答案、已过期制度、跨地区冲突和无权限问题共同测试;重要结论逐条受来源支持,过期内容不胜出,无权限内容不被泄露。

进入与离开信号

知道何时进入,也要知道什么时候已经足够。

主题页不是无限深入的知识目录。进入信号帮助你判断当前问题是否属于这一层;完成信号用来决定是否继续下一主题,而不是用阅读时长代替成果。

AI VISTA / DECISION STATUS有证据的回答
01从这里进入
  • 关键回答需要引用或可追溯依据
  • 资料按地区、版本或权限产生冲突
  • 团队准备建设 RAG 却没有维护责任
02达到这些信号后离开
  • 权威来源、覆盖范围与负责人已登记
  • 重要结论由有效片段真正支持
  • 过期、冲突和无权限问题会安全停止

如果有证据的回答还要调用工具或委派任务,先确定谁控制下一步、工具效果与状态,再设计动作权限。

11 项实践

按顺序建立判断、制作产物,再用真实案例复核。

01 Prompt、RAG、微调怎么选?先定位错误再试验从失败原因出发,比较提示词、请求时检索与微调;用同一保留集检查质量、严重错误、成本和维护条件。 有证据的回答 02 先判断 RAG 值不值得做在增加检索链路之前,比较知识变化速度、资料规模、引用要求、访问权限和维护成本。 有证据的回答 03 RAG 知识库入库前,怎样批准资料来源和版本?在切块和建索引前,按权威原件、负责人、使用权、受众、生效日期和冲突,决定哪一版资料可以作为 RAG 回答依据。 有证据的回答 04 PDF、表格和图片入 RAG 前,怎样验收抽取质量?在切块前逐项对照原件与抽取结果,验收 OCR 文字、阅读顺序、表头与单元格、图示关系和可返回原件的位置。 有证据的回答 05 RAG 文档怎么切块?先让限定条件和出处保持完整用固定长度、重叠和标题结构三种方案对照跨段条款与表格,记录完整证据、来源位置、检索成本,再决定分块边界。 有证据的回答 06 RAG 关键词、向量、混合检索与 Rerank 怎么选?做一次同题对照固定语料、权限、切块和上下文预算,用编号、自然语言改述与混合问题比较 BM25、向量、RRF 和重排的完整证据、延迟与成本。 有证据的回答 07 先评测 RAG 检索,再判断回答质量用一组小型检索试验,先检查正确段落、无答案问题、文件版本、排序与权限边界,再评价生成回答。 有证据的回答 08 企业 RAG 如何做文档级权限过滤?从检索到引用逐层验证把用户身份、租户和文档 ACL 传到每个索引片段;逐层检查搜索、上下文、引用、缓存与撤权后的拒绝行为。 有证据的回答 09 RAG 文档更新或撤稿后,怎样验证索引已生效?沿来源、入库、片段与向量清理、搜索可见性、缓存和回答逐层验收,不把“索引任务成功”误当成知识库已更新。 有证据的回答 10 RAG 证据不足时怎么答?回答、澄清、无法确认或转人工检索结果不足以支持结论时,按缺少的条件、来源状态、权限和后果,选择有据回答、具体追问、说明无法确认或人工接手。 有证据的回答 11 检查引用是否真的支持答案、是否仍然有效逐条检查重要结论是否被引用片段支持、是否使用正确版本,并经得起时效性复核。 有证据的回答

不适用边界

这个主题页不会替你做什么?

有证据的回答仍可能误读、过期或遇到冲突;来源治理、引用审计和人工升级必须分开设计。

01不要把向量检索本身当作权威来源02不要用一个链接掩盖结论没有被片段支持03无法执行权限过滤时,不要把资料接入生成链路
当来源、版本、权限和无答案处理都已登记,再决定是否值得长期维护检索系统。