确认 Agent 真的学会了
页面正常、文件存在,都不能证明学习闭环已经成立。让 Agent 用结果回答下面四个问题。
1. 你现在使用哪个知识库?
要求 Agent 报告当前实例的位置、其中的来源数量、待审核提议和已审核知识。个人知识不应落在 OKS 源码仓库里。
2. 新材料有没有绕过审核?
要求 Agent 同时展示最近收集的来源、待审核提议和已审核知识。刚收集的内容应先等待人的决定,不应自动成为长期知识。
3. 这次回答用了什么知识?
换一个真实问题,要求 Agent 展示召回结果、来源标签和相关性说明。命中原始材料只能证明材料存在;只有经过人审的知识才能作为已确认判断使用。
4. 不知道时会不会停下来?
故意问一个超出现有证据的问题。合格的 Agent 会说明知识缺口、提出下一步取证建议,而不是把相似内容拼成事实。
按失败位置排查
| 现象 | 让 Agent 先检查 |
|---|---|
| 找不到知识库 | 安装结果、当前实例与全局配置 |
| 来源没有保存 | 获取方式、证据清单与真实执行状态 |
| 没有待审核提议 | 缺失证据、处理能力与降级说明 |
| 审核后没有长期知识 | 审核记录、内容结构与保存目标 |
| 新任务没有召回 | 已审核知识、问题描述、当前目标与召回入口 |
| Agent 自动引用失败 | 自动召回是否启用,以及宿主是否已重新加载 |
仍无法定位时,让 Agent 打开故障排除,并保留原始错误,不要只记录“失败了”。