RUNNABLE RAG PROTOTYPE

每个回答，都能回到证据

用小型确定性文档集跑通入库、章节切分、混合检索、引用返回与离线评估。先证明检索链路可测，再讨论向量库和生成模型。

内部手册8

稳定章节块16

固定评估题13

每个引用都保留文档、版本和章节 ID。文档向量在构建期用本地开源模型生成并随站点静态分发；向量模式的查询向量在你的浏览器本地计算，不把问题发送到任何服务器。

RETRIEVAL WORKBENCH

先找证据，再组织答案

混合检索：词面重叠 × 语料稀有词权重 + 显式概念标签，纯确定性规则，不伪装成语义检索。

直接试一个固定样例

找到可引用证据

平台显示退款成功后，款项通常在 3 至 7 个工作日内退回原支付账户。银行卡实际入账时间由发卡行处理进度决定，周末和法定节假日不计入工作日。 [1] 超过 7 个工作日仍未到账时，客服应收集退款单号、支付流水号和银行未入账截图，创建高优先级账务工单。不得要求用户重复发起退款。 [2]

1
退款到账与升级处理规范
退款到账时效 · v3.2 · refund-arrival-window
0.582
2
退款到账与升级处理规范
超时升级 · v3.2 · refund-escalation
0.399

查看 Top 3 检索轨迹

#1退款到账时效词面 0.520 · 概念 0.667 · 总分 0.582

#2超时升级词面 0.205 · 概念 0.667 · 总分 0.399

#3账号申诉处理时效词面 0.000 · 概念 0.333 · 总分 0.140

RETRIEVAL EVALUATION

质量不是一句“效果不错”

指标（13 条固定题）	关键词基线	混合检索	向量（本地模型）
Hit@3	1.000	1.000	1.000
MRR	0.958	1.000	1.000
引用覆盖	1.000	1.000	1.000
未知问题拒答	1.000	1.000	1.000

三路结果全部离线复算、如实展示：本固定题集上向量模式与混合检索打平。向量分数带很窄（正例 top1 余弦 0.889–0.943，未知题最高 0.871），拒答阈值 0.88 是按当前题集校准的脆弱边界—— 本地量化小模型的中文检索不天然优于精心调过的词面混合，这正是需要离线评估的原因。

关键词基线0.958MRR

Hit@3: 100%
引用覆盖: 100%
未知问题拒答: 100%

混合检索1.000MRR

Hit@3: 100%
引用覆盖: 100%
未知问题拒答: 100%

向量（本地模型）1.000MRR

Hit@3: 100%
引用覆盖: 100%
未知问题拒答: 100%

评估问题期望章节混合检索结果

退款成功后银行卡多久能到账？

refund-arrival-window命中 · RR 1.00

退款超过七个工作日还没收到该怎么升级？

refund-escalation命中 · RR 1.00

收到不是本人操作的异地登录提醒怎么办？

suspicious-login-response命中 · RR 1.00

双重验证设备丢了，也没有恢复码怎么办？

mfa-recovery命中 · RR 1.00

原来的手机号码停用了，如何找回账号？

inactive-phone-recovery命中 · RR 1.00

账号申诉一般需要处理几天？

recovery-service-time命中 · RR 1.00

团队版能不能把审计记录导成 CSV？

audit-export命中 · RR 1.00

企业版的操作日志可以在线保存多久？

audit-retention命中 · RR 1.00

数据泄露工单要求多久首次响应？

sla-priority命中 · RR 1.00

管理员可以直接转让团队所有权吗？

ownership-transfer / role-permissions命中 · RR 1.00

团队空间删除后还能恢复多长时间？

workspace-deletion命中 · RR 1.00

接口返回 429 时应该怎样重试？

api-retry-policy / api-rate-limit命中 · RR 1.00

个人专业版每个月具体多少钱？

应拒绝回答命中 · RR 0.00