-
Efficient Transformers: A Survey – Longformer: The Long-Document Transformer
本文总结了 Longformer 这一长文档 transformer 模型,介绍了它如何通过稀疏注意力和局部注意力解决了传统 transformer 模型的内存瓶颈问题,实现了对长序列的线性缩放,为大模型的高效训练提供了新的可能性。- 386
- 0
幸运之星正在降临...
点击领取今天的签到奖励!
恭喜!您今天获得了{{mission.data.mission.credit}}积分
我的优惠劵
-
¥优惠劵使用时效:无法使用使用时效:
之前
使用时效:永久有效优惠劵ID:×
没有优惠劵可用!