Rohan Paul (@rohanpaul_ai)T2·78 分
Google 发布 PLE 基准:最强 AI Agent 工程任务仅得 50.6%
原标题:New Google paper finds that the best AI agent scores only 50.6% on physical engineering jobs, often ...
- PLE 基准包含 85 个真实工程任务,要求 Agent 阅读约 61 个项目文件并输出图纸或报告。
- Claude Opus 5.5 以 50.6% 的得分领先,但仅 41.3% 的设计输出满足了所有硬性约束。
- 建议开发者在构建工程 Agent 时,将硬性安全与代码限制作为设计门控,并优先优化模型选择而非仅调整脚手架。