深度学习基础汇编
【训练稳定性与性能影响】训练稳定性与性能有何影响?请分析训练稳定性对模型性能的影响。 「腾讯」
原题【评估损失重要性】为什么在训练过程中更关注评估损失(eval loss)而不是训练损失(train loss)?请解释评估损失的重要性。 「京东」
原题【过拟合与欠拟合判断】如何判断大模型过拟合与欠拟合?请解释过拟合与欠拟合的判断方法。 「阿里巴巴」
原题【过拟合与泛化】如果每一步都拟合xx模型的gt,那他的泛化性是不是不咋地?请解释过拟合与泛化的关系。 「百度」
原题【长序列梯度传播】序列太长会不会导致一个非常长的梯度传播链?请解释长序列梯度传播的问题。 「字节跳动」
原题【Loss spike处理】遇到过loss spike吗?如何解决? 「美团、蚂蚁集团」
原题【Loss不下降解决】训练时发现loss不下降应该如何解决? 「阿里巴巴」
原题【Loss拉扯现象】有没有出现loss拉扯现象? 「腾讯混元」
原题【Loss计算范围控制】怎么确保只计算该计算部分的loss? 「阿里巴巴」
原题【Loss震荡原因与解决】训练时loss不稳定(震荡)可能是什么原因,如何排查和优化?特别是在微调Qwen时验证集loss震荡,可能原因有哪些? 「字节跳动、蚂蚁集团、阿里巴巴」
原题
暂无题目