Artificial Analysis (@ArtificialAnlys)T1·72 分
SubQ Snap 1.1 发布 以低幻觉率并列决策榜第一
原标题:Subquadratic has released SubQ Snap 1.1, tying d1-ultra and Elephant 9B for first on the Artificial ...
- SubQ Snap 1.1 在 AA 决策指数得分为 65,与 d1-ultra 和 Elephant 9B 并列第一,领先第四名 8 分。
- 核心优势在于低幻觉率:非幻觉率为 86%,仅次于 Elephant 9B,高于 d1-ultra;其策略是在不确定时选择“I don't know”。
- 性能权衡:准确率仅为 20%(d1-ultra 为 32%),但上下文窗口达 384K,远超竞品的 32K/16K。
- 成本效益:每百万任务成本约 $30,约为 Elephant 9B 的 3.6 倍,但与 d1-ultra 相当。