后训练章节追问

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

46 道原题
  1. DPO 里的 $\beta$ 到底控制什么?

    原题
  2. 什么时候会优先用 DPO,而不是直接上 RLHF?

    原题
  3. GRPO 相比 PPO 的核心价值是什么?

    原题
  4. 怎么一句话区分 DAPO / VAPO / GSPO?

    原题
  5. 为什么说 RLVR 不能"凭空创造知识"?

    原题
  6. Qwen3 的 Hybrid Thinking 模式为什么重要?

    原题
  7. 数据飞轮最容易在哪一步翻车?

    原题
  8. 去污染为什么不能只做字符串去重?

    原题
  9. LoRA 里的 B=0 初始化为什么这么关键?

    原题
  10. 什么时候应该 merge LoRA,什么时候不 merge?

    原题