三一树根

1 篇面经14 道面试题

开始复习

已筛选

共 14 道题

排序:

4632
什么是梯度累积,它如何帮助大模型微调?
模型训练与对齐训练框架、调参与排障
原理机制
进阶
8457
大语言模型的最后一层输出头是什么,输出张量的形状如何确定?
模型基础与推理模型架构与表示
原理机制
基础
8458
强化学习中的 Return(回报)是什么,如何计算?
模型训练与对齐强化学习与奖励
概念解释
基础
8459
预训练与 SFT 的学习率数量级通常怎样选择,为什么不同?
模型训练与对齐训练框架、调参与排障
技术决策
进阶