已筛选

共 6433 道题

排序:

4864
原始 Transformer 为什么将输入词嵌入乘以模型维度的平方根?
模型基础与推理模型架构与表示
原理机制
进阶
4865
Transformer 中 Dropout 通常如何设置,训练与推理时有什么区别?
模型训练与对齐训练框架、调参与排障
原理机制
进阶
4866
GELU 激活函数的计算公式是什么?
模型基础与推理模型架构与表示
原理机制
基础
4867
Swish 激活函数的计算公式是什么?
模型基础与推理模型架构与表示
原理机制
基础
4868
使用 GLU 门控的前馈网络如何计算?
模型基础与推理模型架构与表示
原理机制
进阶
4869
GEGLU 前馈块如何计算?
模型基础与推理模型架构与表示
原理机制
进阶
4870
大模型 SFT 的训练样本应采用什么输入与监督数据格式?
模型训练与对齐训练数据构建与治理
操作实践
进阶
4871
大语言模型 PPO 对齐训练中的输入数据与采样记录如何组织?
模型训练与对齐训练数据构建与治理
原理机制
进阶
4872
常见的大模型训练数据集与获取渠道有哪些?
模型训练与对齐训练数据构建与治理
操作实践
基础
4873
领域大模型预训练或继续预训练时,如何选择和组织训练语料?
模型训练与对齐训练数据构建与治理
方案设计
进阶