基础题库

以下代码实现了旋转位置编码（RoPE），请阅读代码并填写空缺部分。 [1]和[2]处应分别填入：

关于 Transformer 模型中的归一化和激活函数配置，下列说法正确的是：

关于大模型可解释性分析方法，下列描述正确的是：

以下代码实现了 MoE（混合专家模型）的路由机制和稀疏激活，请阅读代码并填写空缺部分。 [1] 和 [2] 处应分别填入：

关于 MoE 模型的显存优化与通信开销，下列描述正确的是：

关于长上下文模型中的位置编码拓展方法，下列说法正确的是：

关于长上下文模型的效率优化和训练方法，下列描述正确的是：

以下代码实现了分组查询注意力（GQA），请阅读代码并填写空缺部分。 [1] 和 [2] 处应分别填入：

关于高效注意力机制的理论基础，下列描述正确的是：

以下哪种模型最适合处理二分类问题，并能够输出一个表示概率的连续值？