OpenAI 为其 AI 智能体「Codex」的 macOS 版应用新增了一项名为「Record & Replay(录制与重放)」的功能。该功能以 26.616 版本推出,用户只需在屏幕上实际演示一次操作,Codex 就会把整个流程记成一个可复用的「技能」,下次便能自己完成同样的工作。与以往最大的不同在于,无需用文字逐条说明,就能把工作流程自动化。

演示一遍,它就记住了步骤

以往要把日常重复性工作交给 AI,必须按顺序、逐步地用语言说明该做什么。Record & Replay 把这个前提颠倒了过来。当用户在 Codex 面前把目标操作完整做一遍时,它会观察屏幕内容与操作流程,并以可复现的形式记录下来。

录制结束后,Codex 的语言模型会解读这一连串操作,自动生成一份名为 SKILL.md 的、人能读懂的步骤说明文档。它本身就成为可复用的技能,此后无需重新录制即可调用。重放时,Codex 除了自身能力外,还能结合直接操作屏幕的「Computer Use」、浏览器操作以及插件,把同一项工作执行到底。

填补「会做却说不清楚」的空白

这项功能的核心在于,技能是由 AI 而非用户来编写的。把一项工作的意图和步骤用语言传达给 AI,对不熟练的人来说其实意外地难。Record & Replay 把这个「语言化」的环节整个省去。

也就是说,哪怕是「靠身体记住了做法,却很难用语言准确描述」的人,只要实际演示一遍就能实现自动化。OpenAI 举的例子是:连同元数据、缩略图和字幕一起把视频上传到 YouTube 的整套流程。此外,报销申请、预订停车位、创建配置妥当的工单(Issue)、发布视频、定期下载报告等每次步骤都固定的工作,也都很适合。

支持的方案与使用条件

Codex 应用本身可以免费下载,但要真正用起来需要付费的 ChatGPT 方案。Record & Replay 面向 ChatGPT 的 Plus、Pro、Business、Enterprise 和 Edu 各方案提供。

使用前需要先开启直接操作屏幕的「Computer Use」。另一方面,提供地区存在限制,目前在欧盟(EU)、英国和瑞士尚无法使用。不过作为前提的 Computer Use 本身,已于 6 月 16 日在欧盟开放。

同一次更新中加入的其他改进

本次 26.616 版本中,除了 Record & Replay 还加入了若干改进。一是支持对自动化历史进行批量操作;二是可以在本地设备与远程主机之间交接正在进行的线程,从而在连接的另一台机器上继续工作。Codex 最初是辅助编程的 AI 智能体,但通过这类持续更新,它正逐步把角色扩展为自动化各类案头工作的工具。

总结

Record & Replay 把向 AI「说明」工作的繁琐,替换成更直观的「做给它看」。Codex 从一次演示中起草出步骤说明,并将其变成可复用的技能,从而降低了把日常工作自动化的门槛。虽然有开启 Computer Use 以及提供地区受限等条件,但对于想把编程之外的日常重复性工作交出去的人来说,这看起来是一个值得一试的步骤。