让Code Agent从自己的错误中进化:ReTerm探索失败驱动的RSI
代码写错、命令报错之后,终端智能体往往会沿着错误假设一直做下去,把预算耗光。复旦、港中文 MMLab 和上海交大的研究者提出 ReTerm,让智能体先修复自己造成的失败现场,再依据修复成败更新模型参数,形成“自己犯错、自己恢复、从结果中学习”的循环。
论文里有个直观例子:PyStan 装好了但 import pystan 仍报错,普通 GRPO 训练的模型反复卸载重装,ReTerm-GRPO 训练的模型则去查安装路径,发现模块实际在 stan 目录,改用 import stan 才走对方向。
13 小时前