程彦轲

关于transformer模型的MultiHeadAttention函数

2

你好，在transformer的MultiHeadAttention函数中定义了self.wq、self.wk、self.wv但是在forward里仅用了self.wq来对q、k、v进行线性变换。

大佬，可否增加阿里云盘下载链接

1

迅雷云盘每月高速下载流量只有1G，用完额度后下载速度只有100-200kb/s，123云盘每月10G自用流量。目前非充值情况下，阿里云盘的速度和容量还有保证。