有证据的回答
外部证据在什么情况下足以改善回答,值得建设检索系统?
先判断何时需要检索并批准来源版本,再测试合格段落与更新,决定证据不足时的回答路径,最后核验关键结论。
AI VISTA / DECISION01 / 03
当前判断当知识经常变化、访问权限重要、关键结论必须可追溯时,检索才更可能值得。
01输入
02验收
03边界
带回真实任务复核✓
判断分支
先回答这个主题真正要做的决定。
- 先问↓
回答所需事实是否会变化,是否受版本或权限约束,重要结论是否必须可追溯?
- 如果↓
这些条件成立,就先批准来源,再比较检索命中、引用支持和无证据处理。
- 否则✓
优先用审核过的固定内容或直接查权威来源,不为少量稳定事实建设 RAG。
完整案例
跨地区请假助手该引用哪一版制度?
员工同时看到集团手册、地区补充规则和刚更新的假期通知。关键词相同,但适用地区、生效日期和访问权限不同。
最终产物一张检索试验表与引用审计表:分别检查可用段落是否被找到,以及引用是否支持结论。
01错误捷径
把所有 PDF 放进向量库,只要回答带链接,就把它视为“有证据”。
02更好的判断
先建立权威来源与覆盖关系,再决定是否需要检索;检索结果必须携带地区、版本、生效日期和权限,并让关键结论对应到支持它的具体片段。
03如何验收
用已知答案、已过期制度、跨地区冲突和无权限问题共同测试;重要结论逐条受来源支持,过期内容不胜出,无权限内容不被泄露。
进入与离开信号
知道何时进入,也要知道什么时候已经足够。
主题页不是无限深入的知识目录。进入信号帮助你判断当前问题是否属于这一层;完成信号用来决定是否继续下一主题,而不是用阅读时长代替成果。
01从这里进入
- 关键回答需要引用或可追溯依据
- 资料按地区、版本或权限产生冲突
- 团队准备建设 RAG 却没有维护责任
02达到这些信号后离开
- 权威来源、覆盖范围与负责人已登记
- 重要结论由有效片段真正支持
- 过期、冲突和无权限问题会安全停止
11 项实践
按顺序建立判断、制作产物,再用真实案例复核。
01 Prompt、RAG、微调怎么选?先定位错误再试验从失败原因出发,比较提示词、请求时检索与微调;用同一保留集检查质量、严重错误、成本和维护条件。 有证据的回答 02 先判断 RAG 值不值得做在增加检索链路之前,比较知识变化速度、资料规模、引用要求、访问权限和维护成本。 有证据的回答 03 RAG 知识库入库前,怎样批准资料来源和版本?在切块和建索引前,按权威原件、负责人、使用权、受众、生效日期和冲突,决定哪一版资料可以作为 RAG 回答依据。 有证据的回答 04 PDF、表格和图片入 RAG 前,怎样验收抽取质量?在切块前逐项对照原件与抽取结果,验收 OCR 文字、阅读顺序、表头与单元格、图示关系和可返回原件的位置。 有证据的回答 05 RAG 文档怎么切块?先让限定条件和出处保持完整用固定长度、重叠和标题结构三种方案对照跨段条款与表格,记录完整证据、来源位置、检索成本,再决定分块边界。 有证据的回答 06 RAG 关键词、向量、混合检索与 Rerank 怎么选?做一次同题对照固定语料、权限、切块和上下文预算,用编号、自然语言改述与混合问题比较 BM25、向量、RRF 和重排的完整证据、延迟与成本。 有证据的回答 07 先评测 RAG 检索,再判断回答质量用一组小型检索试验,先检查正确段落、无答案问题、文件版本、排序与权限边界,再评价生成回答。 有证据的回答 08 企业 RAG 如何做文档级权限过滤?从检索到引用逐层验证把用户身份、租户和文档 ACL 传到每个索引片段;逐层检查搜索、上下文、引用、缓存与撤权后的拒绝行为。 有证据的回答 09 RAG 文档更新或撤稿后,怎样验证索引已生效?沿来源、入库、片段与向量清理、搜索可见性、缓存和回答逐层验收,不把“索引任务成功”误当成知识库已更新。 有证据的回答 10 RAG 证据不足时怎么答?回答、澄清、无法确认或转人工检索结果不足以支持结论时,按缺少的条件、来源状态、权限和后果,选择有据回答、具体追问、说明无法确认或人工接手。 有证据的回答 11 检查引用是否真的支持答案、是否仍然有效逐条检查重要结论是否被引用片段支持、是否使用正确版本,并经得起时效性复核。 有证据的回答
不适用边界
这个主题页不会替你做什么?
有证据的回答仍可能误读、过期或遇到冲突;来源治理、引用审计和人工升级必须分开设计。
01不要把向量检索本身当作权威来源02不要用一个链接掩盖结论没有被片段支持03无法执行权限过滤时,不要把资料接入生成链路
当来源、版本、权限和无答案处理都已登记,再决定是否值得长期维护检索系统。