Meta发布全新后训练方式CGPO,编程水平直升5%
转载2 years ago
Meta发布全新后训练方式CGPO,编程水平直升5%

来源丨新智元 CGPO框架通过混合评审机制和约束优化器,有效解决了RLHF在多任务学习中的奖励欺骗和多目标优化问题,显著提升了语言模型在多任务环境中的表现。CGPO的设计为未来多任务学习提供了新的优化路径,有望进一步提升大型语言模型的效能和…

36 0 0