Hugging Face Blog·· 2026-05-07AI 评分45
vLLM V0 到 V1 迁移:RL 训练中先保正确性再谈优化
vLLM V0 to V1: Correctness Before Corrections in RL
AI 导读
PipelineRL 通过修复 processed rollout logprobs、V1 运行时默认值、inflight 权重更新路径和 fp32 lm_head 四项问题,使 vLLM V1 在 GSPO 训练中的 clip rate、KL、entropy 和 reward 指标回归 vLLM V0 参考轨迹。
来源:Hugging Face Blog · huggingface.co