直接偏好优化

一种无需训练奖励模型即可通过偏好数据直接优化语言模型的方法