Transformer 从接收用户输入到生成输出会经历哪些主要步骤？

知识专题：Transformer 与注意力题目类型：原理机制技术难度：基础

相关面经：2 篇收录题集：6 份

暂无参考答案

未标记

询问 AI

选择 AI 平台

Kimi 千问 ChatGPT

自动带入当前题目

本题目录

相关面经

2 篇

百度

2026-09-22面经合集

查看原面经 →

请介绍 Transformer 处理用户输入的主要流程

蚂蚁国际

AI 应用 / Agent 开发

2026-03-28暑期实习一面

查看原面经 →

transformer的核心机制是什么？能不能用一个具体的例子串一遍里面所有概念？

收录题集

6 份

预训练与架构

阿东玩 AI · AgentGuide · 4 条原题

查看题集 →

- 【ChatGPT前向传播】ChatGPT单次前向传播完整流程是什么？「阿里巴巴」
LLaMA与Decoder-only架构「字节跳动、百度、百度文心、美团、阿里巴巴」
- Llama2的推理流程？
- 【推理链路】大语言模型，用户输入query后，大模型推理的完整链路是什么样的？请描述从输入预处理（tokenization、padding）、模型前向传播（transformer层计算）、解码策略（如自回归生成）到输出后处理（detokenization）的完整流程。「阿里巴巴」

展开其余 1 条原题

预测与微调大模型预测是怎么做的，为什么大模型和标准模型的准确率有什么区别？微调是怎么做的，基座是什么，有用过更高级的模型吗？输入的特征是什么？大模型在场景上的优势？
- 请解释大模型预测的推理过程（自回归生成），
- 输入特征（如tokenized文本），

深度学习基础汇编

阿东玩 AI · AgentGuide · 2 条原题

查看题集 →

注意力机制与多头注意力介绍Transformer中的注意力机制，包括：
- Transformer前向过程及每一步输入输出形状。
- 【Transformer前向流程】如果从一句输入到输出完整走一遍流程，你会怎么串 embedding、位置编码、attention和FFN？「字节跳动」

大模型基础

AMIT SHEKHAR · ai-engineering-interview-questions · 1 条原题

查看题集 →

- Inside ChatGPT: What Happens After You Hit Enter?

深度网络架构

Rocky Ding · AIGC-Interview-Book · 1 条原题

查看题集 →

- Transformer的输入包含哪些内容？各部分的作用是什么？

注意力机制

Rocky Ding · AIGC-Interview-Book · 1 条原题

查看题集 →

- Transformer的输入包含哪些内容？

展开剩余 1 份题集

模型架构与工作原理

Rocky Ding · AIGC-Interview-Book · 2 条原题

查看题集 →