动态

SpargeAttention2实现95%稀疏性和16.2倍加速

SpargeAttention2实现95%稀疏性和16.2倍加速
DailyPapers
SpargeAttention2

在视频扩散模型中实现了95%的注意力稀疏性和16.2倍的加速,同时通过混合Top-k+Top-p掩码和蒸馏微调保持生成质量。
动态DailyPapers2026-02-20原文

相关内容