SFT与指令微调

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

182 道原题
    完整原题

    【LoRA微调与其它方法】LoRA微调原理,好处,除了LoRA还知道哪些微调? 「腾讯」

    原题
  1. 【LoRA微调实践】5000条数据进行LoRA微调时,重点关注哪些指标与参数? 「百度」

    原题
  2. 【LoRA推理融合】LoRA的原理,LoRA在推理的时候怎么与原参数融合不带来时间成本? 「阿里巴巴」

    原题
  3. 【LoRA省显存原理】LoRA微调原理解释,为什么省显存? 「字节Seed」

    原题
  4. 【LoRA秩与任务关系】微调逻辑推理任务,秩(r)应该比对话任务大还是小? 「阿里巴巴」

    原题
  5. 【LoRA秩选择】对LoRA的秩设置有什么理解? 「腾讯混元」

    原题
  6. 【LoRA设置与改进】lora怎么设置的,有试过更好的lora吗? 「阿里通义」

    原题
  7. 【LoRA超参数影响】LoRA alpha特别强/特别弱会有什么情况? 「百度」

    原题
    1. LoRA微调中,秩(rank)和Alpha参数如何设置?rank一般选多少?为什么选这个值?rank和Alpha对模型的影响分别是什么?

    完整原题

    【LoRA超参数设置】LoRA微调中,秩(rank)和Alpha参数如何设置?rank一般选多少?为什么选这个值?rank和Alpha对模型的影响分别是什么?LoRA初始化怎么做?训练时LoRA权重是否与原始权重一起训练?LoRA是否会增加训练时间?是否了解其他类似LoRA的方法? 「京东、字节跳动、百度、蚂蚁集团」

    原题
  8. 【LoRA超参数选择】LoRA训练时超参怎么选择,学习率、批次大小依据是什么? 「字节跳动」

    原题