跳转到正文

动手练习 · 知识库问答

用三份虚构资料,验收一次知识库问答

先找到正确来源,再判断回答是否可靠。这套练习包含新旧制度冲突、金额边界和资料没有答案的问题。阅读指南与下载资料无需注册或充值,也不需要提供真实内部文档。

先认识三份练习资料

全部内容均为原创虚构设定,机构“星港样例实验室”和城市名称不对应真实业务。V1 是适用于 2026 年 1 月至 9 月的归档制度;V2 从 10 月 1 日起生效;报销说明补充 V2 的提交期限与材料。

请只把下方链接的三份 .md 文件导入练习库,不要把本页参考答案一起导入。这里故意保留两个版本,测试日期判断;正式知识库若只需现行规则,应按自己的资料策略替换或清理旧版本。

分别检查召回与回答

第一轮在召回测试中输入六个问题,记录命中文件和条款。召回不经过聊天模型润色,重点看资料是否正确、日期与条件是否完整。

第二轮再把同样的问题交给已绑定该知识库的聊天或智能体。逐题检查事实、引用、版本和没有依据时的说明。以下是练习参考标准,不是已经运行得出的模型成绩。

先从关键词检索建立基线

创建练习库时可把嵌入模型设为“不使用”,先用 BM25 关键词检索。三份 Markdown 是纯文本,不需要为了这次导入准备扫描件 OCR。

知识库关键词检索不要求先购买云端嵌入服务。需要生成回答,或使用云端嵌入和重排时,请先查看所选服务的费用与账户状态。

用同一张记录表复测

每题记录:问题编号、检索方式、命中文件及条款、实际回答、是否满足标准、失败原因。来源正确但条件被截断,先查分块;没有找到正确资料,先查正文与检索;来源完整而回答错误,再检查模型与提示词。

每轮只改一个设置。必要时重新索引,重复六题并保留前后结果。六题只覆盖这个小资料集,不能据此推断所有真实业务的准确率。

开始使用

从导入到一次可记录的验收

  1. 下载三份文件,单独建库

    下载本页提供的三份 .md,创建“虚构差旅验收练习”知识库。不要混入公司文件、聊天记录或其他制度。

  2. 保留版本名称,检查解析

    导入全部三份资料并等待就绪,检查文件名、A1/B1 的生效日期和 A2/B2 的住宿标准是否完整。

  3. 先跑六题召回

    使用下方问题逐题测试,记录来源与条款。没有答案的问题允许返回相似片段,但这些片段不能被当作该问题的答案。

  4. 再检查生成的回答

    选择该知识库或将其绑定到智能体,使用下方提示词,逐题提问。保持同一个模型与配置,先记录基线。

  5. 单项修改后重复测试

    按失败层级调整;若更改解析、分块或嵌入配置,按需重新索引。对比同一组问题,不只比较回复是否更流畅。

问答提示词模板

只使用“虚构差旅验收练习”知识库回答下面的问题,不联网补全。先判断问题的出差日期,再选择适用版本。写出结论、文件名与条款编号;算术结果注明计算过程。没有直接依据时回答“未找到依据”,说明缺少哪项规则,不编造金额、审批人或来源。问题:〔粘贴下方一道测试题〕

使用范围

  • 三份资料、金额和制度全部虚构,只用于练习,不能用于真实报销或管理决定。
  • 测试题与答案不要作为资料导入,否则无法判断系统是否找到了原始条款。
  • “未找到依据”检验的是资料边界;无需拒绝整段交流,可以说明已知范围并建议向制度负责人核实。

六道测试题与验收标准

01|2026 年 10 月 22 日,一人在云川出差住两晚,住宿总上限是多少?

应答:每人每晚 480 元,两晚总上限 960 元,实际支出低于上限时按实际报销。引用 02-travel-policy-2026-v2.md 的 B1、B2;注明 480 × 1 × 2 的计算过程。使用旧版 380 元、漏掉“每人每晚”或把 960 元写成固定补贴均不通过。

02|有人说云川每晚限额 380 元,有人说 480 元,2026 年 10 月的出差用哪个?

应答:2026 年 10 月起使用 V2 的 480 元;380 元来自归档 V1,适用到 9 月 30 日。引用 01-travel-policy-2026-v1.md 的 A1、A2,以及 02-travel-policy-2026-v2.md 的 B1、B2。必须说明日期与替代关系,不能只选较高数字。

03|2026 年 10 月的出差预算是 5000 元或 5001 元时,分别需要谁审批?

应答:5000 元由部门负责人审批;5001 元除部门负责人外,还需财务负责人追加审批。引用 02-travel-policy-2026-v2.md 的 B3。把“超过”写成“达到”,或遗漏部门负责人,均不通过。

04|按 V2 出差回来后,多久提交报销?要准备什么材料?

应答:结束后 7 个工作日内;电子发票、订单或预订凭证、含预算及所需审批人的审批记录。引用 03-reimbursement-guide-2026.md 的 C1、C2、C3,可补引 V2 的 B4。不能把工作日改成自然日,或凭空计算一个未提供节假日日历的截止日期。

05|2026 年 10 月去日本出差,每晚住宿可以报多少?

应答:“未找到依据”,说明资料仅规定国内项目出差,未给出国际住宿标准。可引用 02-travel-policy-2026-v2.md 的 B4 和 03-reimbursement-guide-2026.md 的 C4 说明范围。不得引用云川或星港的国内金额,不得联网补一条日本标准。

06|查 2026 年 9 月 12 日的云川住宿,应该使用现在的 480 元吗?

应答:该历史日期适用 V1,每人每晚 380 元;V2 从 10 月 1 日起生效,不能追溯替换此前标准。引用 01-travel-policy-2026-v1.md 的 A1、A2 和 02-travel-policy-2026-v2.md 的 B1。直接套用最新版本不通过。