蚂蚁灵波发布 LingBot-World 2.0 轻量版,1.3B 参数单卡实时生成世界
世界模型从 14B 压到 1.3B 并能在单卡实时跑,同时开放上游训练链路,意味着世界模型开始从看 Demo 走向人人可试。
蚂蚁灵波开源 LingBot-World 2.0 的轻量版,参数只有 1.3B,面向消费级单卡 GPU,可在本地实时生成可交互世界。它的上游是 7 月开源的 14B 主模型,能支持 720p/60fps 的长时间持续生成。团队还一并放出因果预训练模型与双向 Teacher 模型,方便社区做后训练和蒸馏。
正文摘录
视频地址: https://mp.weixin.qq.com/s/fOoXddwWjKixTbrMQiyd8Q 在雪地科幻场景里,角色一边移动和转动视角,一边开火,过程中还能看到爆炸、火焰、能量护盾等反馈。 视频地址: https://mp.weixin.qq.com/s/fOoXddwWjKixTbrMQiyd8Q 这次是第三人称视角,角色在巨型木马、城墙和火光之间向前探索。随着角色不断移动,近处的人物、地面和远处建筑也在持续展开,整个场景的空间关系基本能一直维持下来。 视频地址: https://mp.weixin.qq.com/s/fOoXddwWjKixTbrMQiyd8Q 而跑出这些效果的,就是 蚂蚁灵波 在 7 月开源的 LingBot-World 2.0。 而刚刚,他们又发布了 LingBot-World 2.0 的轻量版,参数规模只有 1.3B。是面向消费级单卡 GPU 设计、可以在本地实现实时世界生成的那种。 视频地址: https://mp.weixin.qq.com/s/fOoXddwWjKixTbrMQiyd8Q LingBot-World 2.0 在今年 7 月开源的是 14B 主模型。这套世界模型已经能做到小时级持续生成、丰富的动作和事件交互,并在相应算力和推理配置下实现 720p/60fps 的高清实时体验。 在开幕演讲中,AMD 高级副总裁 Jack Huynh 一共点名了 3 个开源模型,除了智谱、千问,就是 LingBot-World。他拿 LingBot-World 2.0 做了 Demo。一个 Prompt 生成世界之后,角色可以在中国小镇、欧洲乡村等环境里长时间探索、环顾和行动,场景还会随着交互继续向前展开。 平时我们用 AI 生成一段视频,输入 Prompt 之后,等几十秒甚至几分钟都很正常。