flash-linear-attention
github.com原文 ↗
FLA 将线性/稀疏注意力、状态空间和混合架构实现成训练就绪、硬件高效组件,在 NVIDIA、AMD、Intel 上验证。近期提交包括 Gated DeltaNet 2、Mamba3、YOCO、MoBA、FlashQLA 和 Gluon 后端,仓库同时维护 eval、benchmark 与生成接口,方便研究新序列模块的端到端比较。
–浏览
github.com原文 ↗
评论 · Comments