动态

Qwen3 支持百万级 token 上下文

Qwen3 支持百万级 token 上下文
Chen Cheng
Qwen3 支持 1M tokens!
Qwen
🚀 Qwen3-30B-A3B-2507 和 Qwen3-235B-A22B-2507 现在支持超长上下文——多达一百万个 token!

🔧 核心技术支持:

• 双块注意力(DCA)——一种长度外推方法,将长序列分割成可管理的块,同时保持全局连贯性。

• https://t.co/ACtXybTFQC
动态Chen Cheng2025-08-08原文

相关内容