回顾2016年OpenAI的World of Bits agent项目，对比现在，强调专门化通才

2016年OpenAI的美好时光：一个agent盯着屏幕像素，移动鼠标，在美联航上预订航班。我们称之为World of Bits，在OpenAI Universe内部。10年后，Astra在同一个宇宙中重生。甚至命名在天文学上都是正确的😆\n\nUniverse也许是当时最具雄心的AI基础设施项目，但我们没能完全弄清楚如何解决它。一个对“submit”按钮没有先验知识的策略，必须通过试错重新发现整个互联网的视觉语言。回想起来，在几张Pascal Titan X GPU上，针对手工绘制的、每个任务的“工匠”奖励函数进行从头RL，注定是失败的。\n\n要解决计算机使用agent，正确的方法似乎是先煮海（在你找到的每个通用任务上爬山），然后专门回到屏幕像素和按键。或者简单说，一个“专门化的通才”。\n\n经验教训：领先别人一步，你是先驱；领先三步，你是预言家；领先五步，你是殉道者。\n\n恭喜，GPT-6！那趟美联航航班终于预订成功，这次可靠了。2016年的实习生（指当时的我）脸上露出了灿烂的笑容。