模型架构与表示

本分类共 8 个专题 · 1155 道题

已筛选

共 140 道题

排序:

4162
MLA 相比 MHA 有什么优势和代价?
模型基础与推理模型架构与表示
比较选型
进阶
4538
如何看待 Transformer 与 SSM、Mamba 等新架构的未来发展?
模型基础与推理模型架构与表示
开放讨论
—
4693
Transformer 中哪些模块可以共享权重,需满足什么条件?
模型基础与推理模型架构与表示
原理机制
进阶
4761
用 PyTorch 从零实现 LayerNorm。
模型基础与推理模型架构与表示
代码题
进阶
4804
DeepSeek-V4 的模型架构与工作机制是什么?
模型基础与推理模型架构与表示
原理机制
深入
4807
RMSNorm 如何进行归一化?
模型基础与推理模型架构与表示
原理机制
进阶
4855
从 Word Embedding 到 BERT,NLP 预训练方法如何演进?
模型基础与推理模型架构与表示
概念解释
基础
4866
GELU 激活函数的计算公式是什么?
模型基础与推理模型架构与表示
原理机制
基础
4867
Swish 激活函数的计算公式是什么?
模型基础与推理模型架构与表示
原理机制
基础
4929
MoE 专家在训练中如何形成分工与专业化?
模型基础与推理模型架构与表示
原理机制
进阶