返回热点榜
llm热度 9.9°

AI 聚簇研判事件 · 2026/10/12

DHSA 提出推理时偏好对齐新范式:仅用 256-16384 个控制参数即可达到 DPO 水准

1 篇报道存证1 家独立信源交叉印证持续跟踪至 2026/10/12 12:05:00
全景综述与最新动态
1 家信源交叉印证

研究团队提出直接隐状态对齐(DHSA)方法,通过残差竞争图(RCM)量化模型内部支持或抵消偏好的计算作用,实现无需修改基座权重的推理时动态干预。该方法仅需引入少量控制参数(256-16384),即可在保持基座模型多样性的同时,达到与 DPO 相当的对齐效果,揭示了“输出符合偏好”与“内部作用一致”之间的差异。

最新动向/研究团队提出直接隐状态对齐(DHSA)方法,通过残差竞争图(RCM)量化模型内部支持或抵消偏好的计算作用,实现无需修改基座权重的推理时动态干预。该方法仅需引入少量控制参数(256-16384),即可在保持基座模型多样性的同时,达到与 DPO 相当的对齐效果,揭示了“输出符合偏好”与“内部作用一致”之间的差异。

热度曲线逐小时热度走势

2 个完整观测小时
连续完整观测不足 3 个小时,暂不绘制趋势曲线。

TIMELINE报道时间线

共 1 篇 · 最新优先
  1. 量子位 (微信公众号)T2·78 分

    DHSA 提出推理时偏好对齐新范式:仅用 256-16384 个控制参数即可达到 DPO 水准

    原标题:偏好对齐也能在推理时完成!256-16384个控制参数达到DPO水准

    • 提出残差竞争图(RCM)技术,将外部偏好映射回推理时的原生计算,量化组件对目标的支持或抵消作用。
    • 发现即使模型输出符合偏好,内部仍可能存在抵消目标的计算作用,DPO 等训练方法并未完全消除这种内部竞争。
    • DHSA 方法通过少量控制参数在推理时直接干预隐状态,实现了不动基座权重且达到 DPO 水准的对齐效果。
DHSA 提出推理时偏好对齐新范式:仅用 256-16384 个控制参数即可达到 DPO 水准 | Today for AI