真面经，好答案。面试之前，先来面栈。

多模态核心模型

题集来源：Rocky Ding（WeThinkIn）收录项目：AIGC-Interview-Book查看原题集

题目目录

28 道原题

  1. BLIP的原理?

    原题
    关联题目BLIP、BLIP-2 的主要创新是什么，与 Flamingo 有哪些区别？模型基础与推理 / 多模态与生成模型比较选型深入0篇相关面经

  2. CLIP的原理?

    原题
    关联题目CLIP 如何通过对比学习连接图像与文本？模型基础与推理 / 多模态与生成模型原理机制进阶0篇相关面经

  3. 为什么StableDiffusion使用CLIP而不使用BLIP?

    原题
    关联题目潜扩散图像生成模型由哪些组件构成，如何使用文本条件？模型基础与推理 / 多模态与生成模型原理机制进阶0篇相关面经

  4. BLIP2的工作有哪些创新点?

    原题
    关联题目BLIP、BLIP-2 的主要创新是什么，与 Flamingo 有哪些区别？模型基础与推理 / 多模态与生成模型比较选型深入0篇相关面经

  5. 解释自监督学习中对比学习的原理，并举例说明其在图像特征提取中的应用?

    原题
    关联题目什么是对比学习，InfoNCE 损失如何计算并发挥作用？模型基础与推理 / 机器学习与推荐系统原理机制进阶0篇相关面经

  6. 说明解释BLIP-2的查询Transformer如何解决模态差距问题?

    原题
    关联题目BLIP、BLIP-2 的主要创新是什么，与 Flamingo 有哪些区别？模型基础与推理 / 多模态与生成模型比较选型深入0篇相关面经

  7. LLaMA-AdapterV2如何通过早期融合策略提高视觉指令跟随能力?

    原题
    关联题目不同 VLM 架构如何进行跨模态融合，各有什么优缺点？模型基础与推理 / 多模态与生成模型比较选型进阶0篇相关面经

  8. SAM如何通过可提示的分割任务实现强大的泛化能力?

    原题
    关联题目SAM 如何通过可提示的分割任务实现泛化？模型基础与推理 / 多模态与生成模型原理机制进阶0篇相关面经

  9. PaLM-E如何将连续传感器模态直接融入语言模型中，实现具身智能?

    原题
    关联题目PaLM-E 如何把连续传感器输入接入语言模型并用于具身任务？模型基础与推理 / 多模态与生成模型原理机制进阶0篇相关面经

  10. CLIP的对比学习机制如何实现跨模态对齐?

    原题
    关联题目CLIP 如何通过对比学习连接图像与文本？模型基础与推理 / 多模态与生成模型原理机制进阶0篇相关面经