预训练与微调
如果想要在某个模型基础上做全参数微调,究竟需要多少显存?
原题为什么SFT之后感觉LLM傻了?
原题SFT 指令微调数据 如何构建?
原题领域模型Continue PreTrain 数据选取?
原题领域数据训练后,通用能力往往会有所下降,如何缓解模型遗忘通用能力?
原题领域模型Continue PreTrain ,如何 让模型在预训练过程中就学习到更多的知识?
原题进行SFT操作的时候,基座模型选用Chat还是Base?
原题领域模型微调 指令 & 数据输入格式 要求?
原题领域模型微调 领域评测集 构建?
原题领域模型词表扩增是不是有必要的?
原题如何训练自己的大模型?
原题指令微调的好处?
原题预训练和微调哪个阶段注入知识的?
原题想让模型学习某个领域或行业的知识,是应该预训练还是应该微调?
原题多轮对话任务如何微调模型?
原题微调后的模型出现能力劣化,灾难性遗忘是怎么回事?
原题预训练和SFT操作有什么不同
原题样本量规模增大,训练出现OOM错
原题大模型LLM进行SFT 如何对样本进行优化?
原题模型参数迭代实验
原题为什么要增量预训练?
原题进行增量预训练需要做哪些准备工作?
原题增量预训练所用训练框架?
原题增量预训练数据选取思路有哪些?
原题增量预训练训练流程是怎么样?
原题
暂无题目