介绍首个现实AI持续学习基准

今天，我们发布 Continual Learning Bench 1.0：首个用于衡量AI系统在线环境中提升能力的现实基准。当前的基准假设模型是无状态的。每个示例都是独立的，一旦系统完成任务，就会像什么都没发生过一样继续前进。但部署的AI系统应该从经验中学习。我们针对新颖、经专家验证的任务测试了10多个前沿系统，发现仍有很大的学习空间。