扫码查看

基于Ray的大模型对齐训练框架,PPO流程封装得完整,显存优化上下了功夫。

OpenRLHF
微信微博邮箱复制链接