AI系统与训练推理工程

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

581 道原题
  1. 【量化精度损失评估】量化后如何评估精度损失?请说明量化带来的精度问题。 「字节跳动、百度」

    原题
  2. 【量化范围确定】量化范围确定:为什么要按绝对值最大值去决定范围? 「百度」

    原题
  3. 【量化训练】只做了SFT,没做后续训练是吧,最后有对模型做量化吗? 「腾讯混元」

    原题
  4. 【量化部署】量化部署:对模型量化部署有了解吗?是否应用过量化或动态批处理等技术? 「京东、腾讯混元」

    原题
  5. 【AWQ原理】AWQ的核心思想与原理。 「小红书、百度」

    原题
  6. 【INT8量化实现】手写算法:实现INT8 Per-Tensor量化与反量化函数。 「腾讯」

    原题
  7. 【KVCache量化】如何进行KVCache的INT8量化? 「字节跳动」

    原题
  8. 【LoRA与QLoRA对比】讲下lora和qlora的区别,具体差异在哪? 「阿里通义」

    原题
  9. 【PTQ与QAT对比】后量化(Post-Training Quantization)与量化感知训练(Quantization-Aware Training)的区别? 「百度」

    原题
  10. 【QLoRA】QLoRA相比标准LoRA做了哪些改进?QLoRA是怎么降低资源成本的?QLoRA为什么选择NF4和FP16这组组合?QLoRA在内存优化上的具体实现?层到QLoRA量化。 「京东、百度、美团」

    原题