-
Scalable Self-Attention: 一种新型的自我注意机制
论文提出了一种可伸缩自我注意(Scalable Self-Attention, SSA)机制,利用两个可伸缩因子来释放查询、键和值矩阵的维度,同时解除它们与输入的绑定。通过交替叠加SSA和基于窗口的交互式自注意(IWSA),Scalable Vision Transformer (ScalableViT)在通用视觉任务上实现了优于SOTA的性能。- 83
- 0
幸运之星正在降临...
点击领取今天的签到奖励!
恭喜!您今天获得了{{mission.data.mission.credit}}积分
我的优惠劵
-
¥优惠劵使用时效:无法使用使用时效:
之前
使用时效:永久有效优惠劵ID:×
没有优惠劵可用!