返回全部题目← 上一题75 / 91下一题 →题库/模型训练与对齐/Q-5691多模态预训练常用哪些任务和损失,分别学习什么能力?知识专题:预训练、续训与 SFT题目类型:原理机制技术难度:进阶收录题集:11 份暂无参考答案未标记未标记待复习已掌握收藏询问 AI选择 AI 平台KimiKimi(新窗口打开)Qwen千问(新窗口打开)OpenAIChatGPT(新窗口打开)自动带入当前题目本题目录收录题集相关题目收录题集11 份多模态与计算机视觉阿东玩 AI · AgentGuide · 5 条原题查看题集 →【Vision Encoder Loss】讲一下 vision encoder 的 loss。请说明常见的视觉编码器损失函数(如对比损失、重构损失等)及其设计动机。 「美团」【视觉编码器损失】Vision Encoder的loss怎么设计的? 「美团」【对比学习与掩码预测】在多模态预训练中,跨模态对比学习(Contrastive)与掩码预测(MIM/MLM)各自的优缺点是什么? 「腾讯」展开其余 2 条原题「百度、蚂蚁集团」MLLM 的对齐分别有哪些任务,介绍下(grounding、OCR 这些)?【视频音频预训练】讲一下视频/音频预训练,如何构建网络,如何训练? 「腾讯」02_可控人体生成与角色动画高频考点Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →OmniHuman 的多条件混合训练为什么有效?06_GAN数字人与AIGC前沿高频考点Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →AIGC 数字人为什么越来越强调多条件混合训练?图像创作 · 主流AIGC图像生成编辑大模型汇总系列Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →如何让同一个底座模型学习多种创作任务?图像创作 · AIGC图像生成领域的训练&性能优化技术Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →图像创作大模型的训练为什么需要T2I/I2I联合训练和多粒度编辑数据?展开剩余 6 份题集AI多模态精华版·理论基础Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →多模态预训练阶段的核心目标与训练任务是什么?多模态前沿技术Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →如何设计自监督预训练任务以充分利用无标注文档数据?多模态理论知识Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →多模态大模型中一般使用哪些损失函数?08_训练与微调技术Rocky Ding · AIGC-Interview-Book · 2 条原题查看题集 →如何有效利用文本-视频对数据进行跨模态训练?请说明关键技术点详细分析Video-LLMs中常用的预训练目标函数,对比视频-文本对比学习、掩码建模、生成式预训练的技术差异09_数据集与性能评测Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →Sa2VA的训练策略是什么?01_AI视频基础概念Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →Video-Text Alignment 比 Image-Text Alignment 难在哪里?如何构造有效的对齐信号?相关题目4 题0083如何提升 Agent 的长程任务能力?同一知识专题题目类型:方案设计技术难度:进阶相关面经:2 篇0085当 pass@k 与 pass@1 的差距收敛后,如何继续提升模型能力?同一知识专题题目类型:方案设计技术难度:深入相关面经:1 篇0207基座已有工具调用能力时,Tool-use SFT 的训练目标是什么?同一知识专题题目类型:原理机制技术难度:进阶相关面经:2 篇0495你有哪些大模型后训练经验?同一知识专题题目类型:项目深挖技术难度:进阶相关面经:2 篇♥♥♥♥♥← 上一题已到最后一题← 上一题InternVL 的渐进式缩放如何先训练视觉编码器再迁移到更大语言模型?下一题 →多模态预训练如何设计掩码目标,协调模态内与跨模态学习?