Rohan Paul (@rohanpaul_ai)T2·78 分
Google 提出 VeriCUA 框架 校验智能体任务完成状态
原标题:New Google and University of Hong Kong paper argues that when AI agents use computers, their own “ta...
- VeriCUA 通过构建需求清单并执行代码/文件级检查来验证任务完成,拒绝采信智能体的自我声明。
- 在 ScienceBoard 测试中,VeriCUA 的误报率为 5.4%,显著优于 VLM 裁判(24.8%)和脚本验证器(21.7%)。
- 对于依赖智能体输出进行训练或评估的场景,应优先检查机器实际状态(如保存的文件)而非视觉截图。