后训练综合问答

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

87 道原题
  1. ORM 和 PRM 应该怎么组合?

    原题
  2. rollout 为什么经常比 trainer 更贵?

    原题
  3. stale sample 为什么会把 RL 训练弄飘?

    原题
  4. OpenRLHF 和 veRL 分别更像什么?

    原题
  5. DPO 为什么训练稳,但不一定适合 reasoning / agent 主线?

    原题
  6. dynamic beta 到底在缓解什么问题?

    原题
  7. 为什么 sequence-level 更新在 2025-2026 更重要?

    原题
  8. Qwen3 四阶段为什么不能少 fusion?

    原题
  9. Agent 训练为什么不是 function calling?

    原题
  10. tool safety 和 text safety 为什么不是一回事?

    原题