大模型基础面试题

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

96 道原题
  1. 解释一下prefix-tuning

    原题
  2. 解释一下P-tuning

    原题
  3. 解释一下Prompt-tuning

    原题
  4. 解释一下混合精度的原理

    原题
  5. 训练的时候用float16、bfloat16还是float32,为什么?

    原题
  6. 怎么解决训练使用float16导致溢出的问题

    原题
  7. DeepSpeed中ZeRO系列的原理

    原题
  8. 训练时数据长度不一致怎么办,以及如何优化训练速度

    原题
  9. 为什么需要增量预训练?

    原题
  10. 增量预训练的过程当中,loss上升正常吗?

    原题