多模态前沿技术

题集来源:Rocky Ding(WeThinkIn)收录项目:AIGC-Interview-Book查看原题集

题目目录

53 道原题
  1. LLaVA-MORE如何实现视觉主干与语言模型的模块化组合?其动态路由机制如何优化多模态特征融合?

    原题

    来源未说明 LLaVA-MORE“动态路由机制”的具体对象。

  2. MoE-LLaVA的混合专家架构如何实现稀疏计算?其MoE层替换策略对模型效率有何影响?

    原题
  3. LLaVA-Video如何处理长视频时序信息?其帧级特征融合机制存在哪些优化瓶颈?

    原题
  4. LLaVA与扩散模型集成方案如何实现图像生成?其提示词生成机制如何提升生成质量?

    原题
  5. Dynamic-LLaVA的动态注意力机制如何实现计算稀疏化?其掩码生成策略如何平衡效率与精度?

    原题
  6. LLaVA量化部署中通道混合精度方案如何分配位宽?其通道显著性度量标准如何设计?

    原题
  7. LLaVA评估中跨模态一致性度量MIR如何计算?其如何指导训练数据选择?

    原题

    此处 MIR 指 Modality Integration Rate。

  8. LLaVA-Med在医疗影像分析中的微调路径有何特殊设计?其两阶段训练如何适配医学领域?

    原题
  9. 现有视觉剪枝方法主要分为哪两类?各自的具体实现和局限性是什么?

    原题
  10. VScan的两阶段视觉 token 缩减框架具体如何实现?各阶段的核心策略是什么?

    原题