机器之心 (微信公众号)T2·78 分
OpenDS 基准发布:最强模型真实网络搜索准确率仅 39%
原标题:最强模型准确率仅39%!当Deep Search真正进入复杂的真实互联网
- 提出 OpenDS 新范式,聚焦真实开放网络中无预给定证据位置与获取方式的复杂搜索场景。
- 构建 OpenDS-World 基准,涵盖视频帧、播客、论文图表及需下载文件等多模态异构资源。
- 实测数据显示最强模型准确率仅 39%,表明现有 Agent 在跨源推理与交互式页面操作上仍不足。
AI 聚合热点事件 · 2026/10/30
港科大(广州)等机构提出 OpenDS 任务范式及 OpenDS-World 评测基准,旨在评估 AI Agent 在真实开放网络环境中的端到端深度搜索能力。测试显示,面对多模态、异构资源及交互式访问需求,当前最强模型的准确率仅为 39%,暴露了现有智能体在自主规划与复杂信息整合上的显著短板。
曲线只比较全程持续完整观测的同一批信源;缺口小时数据已插值平滑,保持趋势连续。
原标题:最强模型准确率仅39%!当Deep Search真正进入复杂的真实互联网