为什么分数上涨的 Agent 策略,我们仍然不让它上线
一次离线自进化实验里,训练集分数上涨、验证集下跌。本文写下验证集不可见、工具故障出分母、回归集否决权,以及搜索证据不等于可上线提案,解释分数变好为什么仍不能直接发布。
阅读全文没有泛泛而谈的行业通识,只有我们在落地大模型与 Agent 时踩过的坑与验证过的方案。
一次离线自进化实验里,训练集分数上涨、验证集下跌。本文写下验证集不可见、工具故障出分母、回归集否决权,以及搜索证据不等于可上线提案,解释分数变好为什么仍不能直接发布。
阅读全文
客服 Agent 的长期记忆不能停在对话里说已经记下。本文记录跨会话偏好如何抽取、审核和落库,以及为什么当轮应答不等于保存成功,下一轮是否照做才是验收标准。
阅读全文