aifollow.news
返回 Rohan Paul
Rohan Paul· @rohanpaul_ai · X· · 原发布时间 AI 评分54

MIT 与 Meta 论文提出用任务结果修正 AI 智能体的旧笔记

AI 导读

ReHarness 在每次任务后,让修订智能体依据检索到的笔记和任务结果,缩小或纠正旧笔记的适用范围,且只使用笔记原始任务中的事实。在三个基准和三个前沿模型上,其平均归一化增益为 0.240,最佳原始轨迹基线为 0.168。

原帖引用 · AI 翻译

@rohanpaul_ai
译文 · 以原文为准

麻省理工学院和 Meta 的一篇新论文发现,如果能根据旧笔记下次被使用时发生的情况对其进行修正,智能体的记忆效果会更好。

在工作中学习的智能体会保存过去任务的笔记,并再次使用。笔记一旦写下就很少更改,因此过于宽泛或过时的经验会持续误导智能体。

每项任务结束后,ReHarness 会将检索到的笔记和任务结果交给一个修订智能体。该智能体仅使用笔记所对应原始任务中的事实,缩小或修正每条笔记的适用范围和内容。

在 3 项基准测试和 3 个前沿模型上,它的归一化增益平均为 0.240;这一指标表示相对于无记忆智能体,可能实现的改进中实际实现的比例。表现最好的原始轨迹基线得分为 0.168;在使用 Claude 的 CL-Bench 测试中,重放完整原始历史所用的词元数是其 3.4 倍。

如果你的智能体会从经验中学习,就让每次任务的结果修改曾影响该任务的笔记,而不只是添加新笔记。

来源:Rohan Paul · x.com

论文
发现内容有误?提交纠错