返回全部题目← 上一题34 / 67下一题 →题库/模型基础与推理/Q-4697线性注意力的基本原理是什么,它有哪些适用边界?知识专题:Transformer 与注意力题目类型:原理机制技术难度:深入收录题集:3 份暂无参考答案未标记未标记待复习已掌握收藏询问 AI选择 AI 平台KimiKimi(新窗口打开)Qwen千问(新窗口打开)OpenAIChatGPT(新窗口打开)自动带入当前题目本题目录收录题集相关题目收录题集3 份深度学习基础汇编阿东玩 AI · AgentGuide · 2 条原题查看题集 →Transformer复杂度与加速:了解哪些加速方式?哪些大模型用了线性attention?具体怎么做?【线性注意力复杂度降低与实现】线性注意力(LinearAttention)如何将复杂度从O(N^2)降低到O(N)?手撕linear attention。 「字节跳动」大模型基础面试题阿东玩 AI · AgentGuide · 1 条原题查看题集 →Linear Attention(线性注意力)是什么?快手高频面试题Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →是否了解线性注意力相关题目4 题0036Transformer 中的 Attention 如何计算?同一知识专题题目类型:原理机制技术难度:进阶相关面经:18 篇0268Self-Attention 为何利于并行训练,与 RNN 相比有哪些局限?同一知识专题题目类型:比较选型技术难度:进阶相关面经:2 篇0572Self-Attention 为什么需要 Scaling?同一知识专题题目类型:原理机制技术难度:进阶相关面经:2 篇0575手写 Multi-Head Attention。同一知识专题题目类型:代码题技术难度:进阶相关面经:2 篇♥♥♥♥♥← 上一题已到最后一题← 上一题如何分析 Transformer 各模块的 FLOPs 及其随序列长度的变化?下一题 →手写 Self-Attention。