大模型基础面试题题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集 题目目录96 道原题隐藏关联题目排序默认排序面经最多31解释一下prefix-tuning原题 关联题目Prefix-tuning 如何通过可训练前缀适配模型?模型训练与对齐 / 参数高效微调原理机制进阶0篇相关面经32解释一下P-tuning原题 关联题目P-tuning 如何学习连续提示参数?模型训练与对齐 / 参数高效微调原理机制进阶0篇相关面经33解释一下Prompt-tuning原题 关联题目Prompt-tuning 如何工作,它训练哪些参数?模型训练与对齐 / 参数高效微调原理机制进阶0篇相关面经34解释一下混合精度的原理原题 关联题目混合精度训练如何工作,为什么能改善训练资源效率?模型训练与对齐 / 分布式训练与计算硬件原理机制进阶0篇相关面经35训练的时候用float16、bfloat16还是float32,为什么?原题 关联题目FP16、BF16 与 FP32 有什么区别,训练时如何选择?模型训练与对齐 / 分布式训练与计算硬件比较选型进阶0篇相关面经36怎么解决训练使用float16导致溢出的问题原题 关联题目FP16 训练发生数值溢出时,如何定位和处理?模型训练与对齐 / 训练框架、调参与排障故障排查进阶0篇相关面经37DeepSpeed中ZeRO系列的原理原题 关联题目ZeRO-1、ZeRO-2 和 ZeRO-3 有何区别?模型训练与对齐 / 分布式训练与计算硬件比较选型进阶3篇相关面经38训练时数据长度不一致怎么办,以及如何优化训练速度原题 关联题目训练样本长度不一致时,如何组织批次并减少无效计算?模型训练与对齐 / 训练框架、调参与排障方案设计进阶0篇相关面经39为什么需要增量预训练?原题 关联题目为什么要对已有语言模型进行继续预训练,适用于哪些需求?模型训练与对齐 / 预训练、续训与 SFT技术决策进阶0篇相关面经40增量预训练的过程当中,loss上升正常吗?原题 关联题目继续预训练时 loss 上升是否正常,如何判断和排查?模型训练与对齐 / 训练框架、调参与排障故障排查进阶0篇相关面经暂无题目共 96 道原题 · 显示 31–40 道展开全部96题上一页1…345…104 / 10下一页