AI代理控制电脑进行可访问性审计

我让计算机做的事简直太疯狂了。

应客户要求，对我们的AI工作做一个概念验证，我让codex cli对一套我们手动进行的应用运行可访问性审计。我指示它使用OSAScript来控制VoiceOver以运行测试。

它接管了我的MacBook Pro一周，把我打发到我的M1 Air上。它需要辅助功能权限，所以我引诱它截取我设置的屏幕截图，并更改设置以便它继续工作。总的来说，我不得不鼓励它去做它认为做不到的事情，但一旦它开始行动，就非常顺利。

有一次，它意识到我在工作时VoiceOver正在说话，突然声音停止了。然后审计停止了工作，所以我进去问它为什么停止。它说它不想声音打扰我，所以它静音了音量。真有礼貌！

我说别担心，我其实挺喜欢VoiceOver的声音。它重新打开了声音，修复了错误。

一周后，我得到了一系列审计报告和VPATs。这至少是一个半月前的事了。