后训练综合问答

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

87 道原题
  1. SFT 为什么只对 assistant token 算 loss?多轮时所有 ASST 都要开放吗?

    原题
  2. 工业级 SFT 数据工程怎么设计?

    原题
  3. 什么是 PSFT?为什么值得在面试里提?

    原题
  4. RM、ORM、PRM、Verifier、Judge 怎么区分?

    原题
  5. 开放式任务 vs 可验证任务的奖励设计本质区别?

    原题
  6. 合成数据(GPT-4 蒸馏)的深层隐患?

    原题
  7. Length Bias 怎么处理?

    原题
  8. Reward Hacking 怎么防?

    原题
  9. Benchmark Contamination 怎么防?

    原题
  10. 数据飞轮怎么设计?

    原题