Artificial Analysis (@ArtificialAnlys)T1·68 分
Artificial Analysis 更新基准:以任务耗时取代流式速度
原标题:Announcing the next version of Artificial Analysis API Performance Benchmarking: Time per Task is no...
- 核心指标从“每秒 Token 数”转向“任务耗时”,更贴合智能体场景下的实际效率评估。
- 引入“端到端输出速度”,涵盖请求发送至最终 Token 接收的全过程,包括首 Token 前的等待时间。
- Token 计数来源改为各提供商 API 报告值,而非统一使用 o200k_base 分词器,以提高数据准确性。