真面经，好答案。面试之前，先来面栈。

偏好对齐

本分类共 9 个专题 · 704 道题

已筛选

共 32 道题

排序：

4997
什么是 AI 对齐，为什么需要使模型行为符合人类意图与价值要求？
模型训练与对齐偏好对齐
概念解释
基础
暂无面经3 份题集
5207
为什么大语言模型的对齐与安全风险难以完全消除？
模型训练与对齐偏好对齐
开放讨论
—
暂无面经1 份题集
5308
如何把停留时长等隐式行为反馈转为可靠的 DPO 偏好数据？
模型训练与对齐偏好对齐
方案设计
深入
暂无面经1 份题集
5430
实现数值稳定的 DPO 偏好损失。
模型训练与对齐偏好对齐
代码题
进阶
暂无面经5 份题集
5826
图像生成模型如何通过数据与偏好后训练改善审美并保持多样性？
模型训练与对齐偏好对齐
方案设计
进阶
暂无面经5 份题集
6084
实现 Bradley–Terry 成对奖励模型损失。
模型训练与对齐偏好对齐
代码题
进阶
暂无面经2 份题集
6238
实现奖励模型的打分与训练。
模型训练与对齐偏好对齐
代码题
进阶
暂无面经2 份题集
6308
DPO 与 GRPO 如何串行训练，并判断阶段衔接是否有效？
模型训练与对齐偏好对齐
方案设计
进阶
暂无面经2 份题集
6347
ORPO 如何将监督微调与偏好优化结合？
模型训练与对齐偏好对齐
原理机制
进阶
暂无面经1 份题集
6348
KTO 如何利用非成对的好坏反馈进行模型对齐？
模型训练与对齐偏好对齐
原理机制
进阶
暂无面经2 份题集