术语slug: readout-head

读出头

Readout Head

以单 token 编码每个候选选项并直接打分、经 softmax 归一化的决策输出机制

收录情报动态

共 1 篇 · 第 1/1 页
Rohan Paul (@rohanpaul_ai)T2·基座大模型
78 分
开源决策模型 Karpo 登顶 300 项评测榜首

Karpo 发布 0.8B 至 31B 六款开源权重决策模型,其中 31B 版本以 73.9 分在 Decision Index 300 项评测中并列第一。该模型以读出头替代自回归解码,每个选项仅需单 token 打分,零生成 token 且输出恒为合法答案,在 Amazon ESCI 与 New Yorker Caption 上均超过 Gemini Decision 1。