介绍Codex的Appshots功能,可提供屏幕上下文并与应用交互。
转自 @avthar:我最喜欢的 Codex 功能之一是 Appshots。将 Appshot 视为一种更智能的截图。它能为 Codex 提供来自应用窗口的视觉上下文,无需你复制、粘贴或描述屏幕上的所有内容。但这还不是最酷的部分:启用了计算机使用权限后,Codex 可以在后台检查和与应用程序交互,而你继续在其他地方工作。你可以通过画中画预览监控它的操作。Appshots 帮助 Codex 更好地与 Xcode 中的 iPhone 模拟器以及没有 Codex 可以直接使用的 MCP 服务器或 API 的 Mac 应用协作。以下是我使用 Codex 查询 X 上关于世界杯的讨论的例子: