Tokenizer 与位置编码

本分类共 8 个专题 · 1061 道题

4933

BERT 常见的 512 Token 输入限制由哪些配置和训练条件决定？

模型基础与推理Tokenizer 与位置编码

原理机制

进阶

暂无面经 1 份题集

5209

位置内插、NTK-aware、YaRN 与 LongRoPE 如何扩展 RoPE 上下文？

模型基础与推理Tokenizer 与位置编码

比较选型

深入

暂无面经 9 份题集

5664

多模态位置编码如何表达文本、图像和视频的空间与时间位置？

模型基础与推理Tokenizer 与位置编码

原理机制

进阶

暂无面经 15 份题集

5901

RoPE 相邻维配对与半区配对的实现有何差异，如何判断等价？

模型基础与推理Tokenizer 与位置编码

比较选型

深入

暂无面经 1 份题集

6254

用基础操作实现一个简单 Tokenizer。

模型基础与推理Tokenizer 与位置编码

代码题

进阶

暂无面经 2 份题集