快速关注:有效关注模块列表 源码

快速关注 精选的有效关注模块列表(最新更新:2021年1月7日,星期四16:39:26 +0000) 目录 高效注意 纸(引用) 实作 复杂 自回归 大意 (265) :check_mark: 扩大压缩键和值+阻止注意力 (999+) :cross_mark: 扩大将SE注意事项与每个像素(局部)权重相结合 (14) :cross_mark: 扩大使用K个中继节点 (255) :cross_mark: 扩大每个像素同时参与其行和列 (14) :cross_mark: 扩大Softmax(Q)*(Softmax(K ^ T)* V) (37) :cross_mark