感谢 @vllm_project 团队的出色工作,实施起来非常容易! PipelineRL 被 NeurIPS 拒绝真是令人愤慨。当我向很多人解释飞行中更新的工作原理时,他们都坚持认为它有问题,根本行不通。但它的确非常新颖。