模型训练与对齐

本分类共 9 个专题 · 758 道题

已筛选

共 758 道题

排序:

0206
工具轨迹长度与任务复杂度有什么关系,训练时如何使用不同长度的数据?
模型训练与对齐训练数据构建与治理
原理机制
进阶
0207
基座已有工具调用能力时,Tool-use SFT 的训练目标是什么?
模型训练与对齐预训练、续训与 SFT
原理机制
进阶
0214
长轨迹 SFT 如何选择截断、切分和掩码并保持工具依赖?
模型训练与对齐训练数据构建与治理
方案设计
进阶
0275
如何从 KL 约束的强化学习目标推导 DPO 目标?
模型训练与对齐偏好对齐
原理机制
深入
0347
项目中的模型蒸馏具体如何实现?
模型训练与对齐蒸馏与模型合并
项目深挖
进阶
0517
如何训练模型,使其更精确地提取摘要?
模型训练与对齐预训练、续训与 SFT
方案设计
进阶
0521
轨迹训练数据的规模、字段格式和生成方式是什么?
模型训练与对齐训练数据构建与治理
项目深挖
进阶
0541
LoRA 有哪些缺点和改进方向?
模型训练与对齐参数高效微调
比较选型已有答案
进阶
0630
训练语料量和 Batch Size 如何设置,为什么不设为 1 或 2?
模型训练与对齐训练数据构建与治理
方案设计
进阶
0633
给定 7B 模型,如何计算 LoRA 参数及优化器显存分配?
模型训练与对齐参数高效微调
原理机制已有答案
进阶