关于注意力机制中查询(Query)、键(Key)、值(Value)的作用,下列说法正确的是:
Query用于存储待检索的信息,Key用于生成最终输出
注意力分数通过 Query 与 Key 的点积计算得到,再经 softmax归一化后对 Value 加权求和
softmax函数的作用是将注意力分数映射到 ((-\infty, +\infty)) 的范围
Value 向量决定了哪些位置应该获得更高的注意力权重