首页 > 试题广场 >

缩放点积注意力(Scaled Dot-Product Att

[单选题]
缩放点积注意力(Scaled Dot-Product Attention)与点积注意力(Dot-Product Attention)的区别是什么?假设键向量的维度为d_k。


\sqrt{d_k}
  • 对点积结果进行乘以d_k缩放
  • 对点积结果进行除以d_k缩放
  • 对点积结果进行除以\sqrt{d_k}缩放
  • 对点积结果进行乘以\sqrt{d_k}缩放

这道题你会答吗?花几分钟告诉大家答案吧!