强化学习与对齐

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

194 道原题
  1. 【RL训练异常定位】遇到 reward 异常、熵崩溃、显存不足或吞吐下降时,能不能定位原因? 「字节Seed」

    原题
  2. 【反向KL在对齐中的应用】为什么对齐几乎都用反向KL? 「腾讯」

    原题
  3. 【多轮对话Reward Shaping】在多轮对话的RL训练中,如何设计Reward Shaping,以平衡单轮回复质量与全局任务达成率? 「字节跳动」

    原题
  4. 如果落到代码实现,GRPO的流程原理是什么? 「字节跳动」

    原题
  5. 【GRPO基本认知】是否了解GRPO?GRPO听说过吗?GRPO是什么?用过GRPO么? 「美团、阿里巴巴」

    原题
  6. 【DeepSeek-V3强化学习方法】DeepSeek-V3使用的强化学习方法是什么? 「百度」

    原题
  7. 【GRPO/DAPO on/off-policy】GRPO/DAPO是on-policy还是off-policy思路? 「字节跳动」

    原题
  8. 【GRPO与PPO对比】相比PPO省略了哪一步? 「字节跳动」

    原题
  9. 【GRPO与SFT关系】GRPO跟SFT的关系 「百度文心」

    原题
  10. 【GRPO动机】论文里为什么用GRPO?直接用GRPO不行吗? 「字节跳动」

    原题

    原题未提供论文身份及被比较的训练路线。