Rohan Paul (@rohanpaul_ai)T2·78 分
马普所新论文:开启推理后不同大模型更趋同,连错误也一致
原标题:New Max Planck paper finds that turning on reasoning makes different LLMs agree more, even on mistak...
- 开启推理后模型间一致性上升,但全体模型共同答错的人群占比同步上升 2.0 至 2.4 个百分点
- 推理链最长的样本上,校正后一致性降至约 0.31 至 0.39,说明长推理并不必然带来更独立的判断
- 多模型集成纠错的前提是错误不相关,部署前应检查模型集合中是否至少有一个模型能给出正确答案