AWS 与 HSBC 提出 Double Ratchet:仅用 10 个样本自进化评估器,实现智能体无监督自我提升
原标题:Self-improving agents have always needed a human to write the grader.
AWS 与汇丰银行联合研究推出“Double Ratchet”框架,解决了自进化智能体依赖人工编写评估器的痛点。该机制让评估器与智能体技能同步演化,仅基于 10 个标注样本构建规则检查,即可达到与真实标签或人工评分标准相当的训练效果(保留 88%-110% 的性能增益)。这一方法显著降低了智能体自我改进对高质量人工反馈的依赖门槛。
- •Double Ratchet 框架允许评估器与智能体同步进化,无需预先定义复杂的评分标准。
- •仅需 10 个标注样本即可构建有效的规则型评估器,在代码、SQL 等任务中表现优异。
- •实验数据显示,该方法能保留 88% 至 110% 相对于使用真实标签或人工评分标准的性能增益。