人类反馈的强化学习(Reinforcement Learning from Human Feedback,RLHF)是用人类偏好信号优化模型输出方向的方法,核心构成包括偏好数据采集、奖励模型训练与策略优化,解决的是模型输出难以对齐人类价值观的问题,并不解决偏好标注分歧的问题。
人类反馈的强化学习是什么?
人类反馈的强化学习(Reinforcement Learning from Human Feedback,RLHF)是用人类偏好信号优化模型输出方向的方法,核心构成包括偏好数据采集、奖励模型训练与策略优化,解决的是模型输出难以对齐人类价值观的问题,并不解决偏好标注分歧的问题。
🔗 本文链接