SFT与指令微调
LoRA微调原理,好处,
除了LoRA还知道哪些微调?
原题完整原题
【LoRA微调与其它方法】LoRA微调原理,好处,除了LoRA还知道哪些微调? 「腾讯」
【LoRA微调实践】5000条数据进行LoRA微调时,重点关注哪些指标与参数? 「百度」
原题【LoRA推理融合】LoRA的原理,LoRA在推理的时候怎么与原参数融合不带来时间成本? 「阿里巴巴」
原题【LoRA省显存原理】LoRA微调原理解释,为什么省显存? 「字节Seed」
原题【LoRA秩与任务关系】微调逻辑推理任务,秩(r)应该比对话任务大还是小? 「阿里巴巴」
原题【LoRA秩选择】对LoRA的秩设置有什么理解? 「腾讯混元」
原题【LoRA设置与改进】lora怎么设置的,有试过更好的lora吗? 「阿里通义」
原题【LoRA超参数影响】LoRA alpha特别强/特别弱会有什么情况? 「百度」
原题LoRA微调中,秩(rank)和Alpha参数如何设置?rank一般选多少?为什么选这个值?rank和Alpha对模型的影响分别是什么?
LoRA初始化怎么做?
训练时LoRA权重是否与原始权重一起训练?LoRA是否会增加训练时间?
是否了解其他类似LoRA的方法?
原题完整原题
【LoRA超参数设置】LoRA微调中,秩(rank)和Alpha参数如何设置?rank一般选多少?为什么选这个值?rank和Alpha对模型的影响分别是什么?LoRA初始化怎么做?训练时LoRA权重是否与原始权重一起训练?LoRA是否会增加训练时间?是否了解其他类似LoRA的方法? 「京东、字节跳动、百度、蚂蚁集团」
【LoRA超参数选择】LoRA训练时超参怎么选择,学习率、批次大小依据是什么? 「字节跳动」
原题
暂无题目