OpenAI
ChatGPT新功能：轻松读取Mac桌面应用代码
OpenAI的ChatGPT现在能够直接读取Mac上一些开发者的桌面应用程序代码。这项名为“Work with Apps”的新功能允许ChatGPT读取并处理来自VS Code、Xcode、TextEdit、Terminal和iTerm2等开发工具中的代码。
这意味着开发人员不再需要手动复制粘贴代码到ChatGPT中。通过启用此功能，OpenAI将自动发送您正在工作的代码部分到ChatGPT，作为上下文信息，帮助您更好地解决问题或获取建议。
然而，与流行的AI编码工具如Cursor或GitHub Copilot不同，ChatGPT目前还不能直接在开发工具中编写代码。尽管如此，OpenAI表示，让ChatGPT理解其他应用程序是一个重要的里程碑，有助于构建更加智能的代理系统。
功能实现
为了实现这一功能，OpenAI主要依赖于macOS的可访问性API来读取文本并将其传输给ChatGPT。macOS的屏幕阅读器（用于支持Apple的VoiceOver功能）已经存在了近二十年，被认为是非常可靠的工具，适用于大多数常见的应用程序。
对于某些应用程序，如Microsoft的VS Code，用户需要安装一个特殊的扩展来查询内容。需要注意的是，macOS的屏幕阅读器只能读取文本，无法理解视觉元素，如照片、对象的方向或视频。
使用示例
在演示过程中，OpenAI的一位员工打开了ChatGPT应用和一个包含简单太阳系项目的Xcode环境，但项目中缺少地球。员工选择了Xcode标签，告诉AI查看该应用，并提示“添加缺失的行星”。ChatGPT成功完成了任务，编写了一行代码来表示地球，格式与其他项目部分一致。不过，员工仍然需要将ChatGPT的回答粘贴回环境中。
未来发展
OpenAI表示，这一功能最初将专注于编码应用程序，未来还将扩展到其他类型的应用程序，特别是用于写作任务的文本基础应用程序。此外，OpenAI正计划推出一个通用的AI代理，代号为“Operator”，预计将于2025年初发布，这将进一步增强ChatGPT的功能。
相关新闻简报
- Apple新安全特性：苹果最近宣布了一项新的安全特性，iPhone将在三天后自动重启，以提高设备的安全性。
- Musk的新政治任命：特斯拉CEO埃隆·马斯克最近任命了一位名为DOGE的加密货币爱好者担任特朗普政府的政治职务，引发了广泛关注。
- Just Eat Takeaway出售Grubhub：Just Eat Takeaway已同意以6.5亿美元的价格将Grubhub出售给Wonder，标志着其在美国市场的退出。
