腾讯发布HiLS-Attention，用于超长上下文的稀疏注意力模型

RT @HuggingPapers: 腾讯刚刚在Hugging Face上发布了HiLS-Attention

一个7B稀疏注意力模型，端到端学习块选择以处理超长上下文。 https://t.co/nq6RasUrya