强化学习 Rollout 与训练之间如何同步权重并控制策略陈旧？

rollout 用的是 vLLM 还是自家引擎，权重同步怎么做的。