RecodeX 重构消息,本教程介绍如何通过直接偏好优化、QLoRA和UltraFeedback数据集,在单GPU上实现大型语言模型与人类偏好的对齐,无需奖励模型。