Rohan Paul (@rohanpaul_ai)T2·72 分
Deepnote 发布主动式智能体基准 12 款前沿模型同台竞技
原标题:This is a beautiful concept for a benchmark.
- 基准将智能体置于含 6 年详细历史的合成企业 Slack 中,考察其主动介入判断、服务调用选择与人员 @ 通知
- GPT-6 Astra 以 8.97 分居首,GPT-6.1 Sol 以 8.65 分且单任务成本仅 0.11 美元,性价比显著优于第三名 Claude Fable 5.2 的 1.87 美元
- 评测由两个 LLM 评审对照参考答案打分,数据集与基准代码均已开源