Codex“远程电脑操作”功能：Mac 锁屏后 AI 仍能继续使用应用

OpenAI 最近更新了 Codex 桌面应用，新增一项名为 Remote Computer Use（远程电脑操作） 的能力：AI 代理不仅能操作 macOS 应用程序，还能在 Mac 锁屏或屏幕关闭后继续运行任务。

这一功能属于 OpenAI 推动“持续运行型 AI 代理（persistent agents）”的一部分，让 Codex 不再只是响应提示，而是能够在真实的软件环境中持续执行操作。官方文档确认了该能力和启用方式，但 具体技术实现细节目前尚未公开。

Codex 的“Computer Use”到底是什么

Computer Use（电脑操作） 是 Codex 的核心能力之一，它允许 AI 直接操作 macOS 的图形界面（GUI）。换句话说，AI 可以像人类用户一样使用软件。

具体来说，Codex 可以：

• 观察应用界面
• 移动鼠标指针
• 点击按钮
• 在输入框中键入文字
• 打开菜单或执行界面操作

这种方式不依赖 API 或命令行工具，而是直接操作图形界面，因此可以完成许多传统自动化工具难以处理的任务，例如：

• 自动化桌面软件流程
• 测试 GUI 应用
• 运行浏览器流程
• 修改没有开放 API 的应用设置

一些技术分析指出，系统通过视觉方式“感知”桌面，并在后台执行鼠标移动、点击和键盘输入等动作。

Mac 锁屏后仍能继续操作

2026 年 5 月 21 日的更新中，OpenAI 引入了一个关键变化：

即使 Mac 已经锁屏，Codex 仍然可以继续使用桌面应用。

同时，用户还可以通过手机上的 ChatGPT 应用（Codex Mobile）远程控制任务。

在过去，大多数 AI 自动化系统都有明显限制：

• 电脑必须保持解锁
• 屏幕必须保持开启
• AI 必须看到实时屏幕

新的 Remote Computer Use 移除了这一限制，使 Codex 可以在后台持续运行自动化任务，比如长时间的测试流程或复杂的开发操作。

不过，官方文档并未公开说明具体的技术机制——例如系统如何在屏幕关闭状态下保持输入控制和视觉上下文。

如何在 Codex 中启用 Remote Computer Use

用户需要在 Codex 桌面应用中完成几个设置步骤。

1. 安装 Computer Use 插件

在 Codex 应用中：

• 打开 Settings（Cmd + ,）
• 进入 Computer Use
• 点击 Install 安装插件

安装后，Codex 才能操作桌面应用。

2. 授予 macOS 系统权限

macOS 会要求用户授予两个关键权限：

• Screen Recording（屏幕录制）：允许 Codex 查看应用界面
• Accessibility（辅助功能）：允许 Codex 执行点击和输入操作

由于 AI 是直接控制图形界面，这两个权限是必须的。

3. 配置手机远程访问

如果想用手机远程控制：

• 在 Mac 上打开 Codex
• 选择连接移动设备
• 使用手机上的 ChatGPT 应用扫描二维码完成配对

完成后，用户可以在手机上：

• 启动 Codex 任务
• 审批操作
• 查看执行进度
• 调整任务方向

Codex 的安全保护机制

允许 AI 操作整台电脑显然存在潜在风险，因此 OpenAI 在设计中加入多层安全机制。

沙盒隔离

Codex 在 操作系统级沙盒（sandbox） 中运行，限制其可以访问的文件和资源范围，通常只允许访问当前工作空间。

操作审批机制

系统提供 approval policy（审批策略）：

• 低风险操作可自动执行
• 高风险操作必须等待用户确认

这能在效率与安全之间取得平衡。

默认禁用网络

Codex 默认 不允许访问网络，减少自动化任务产生意外外部连接的风险。

macOS 权限控制

此外，macOS 的隐私权限系统仍然发挥作用，例如：

• 屏幕录制权限
• 辅助功能权限

这些权限必须由用户明确授权。

在一些情况下，每个新的应用程序也需要用户单独批准后，Codex 才能进行操作。

当前地区限制

在发布初期，Computer Use 功能只在 macOS 上提供，并且 部分地区无法使用。

OpenAI 文档指出，该功能目前 不在以下地区开放：

• 欧洲经济区（EEA）
• 英国
• 瑞士

公司没有公开详细原因，但在新功能早期阶段，监管和合规通常是主要考虑因素。

同时发布的两个重要新功能

这次更新不仅带来了 Remote Computer Use，还加入了多个增强 Codex 自动化能力的新功能。

Goal Mode（目标模式）

Goal Mode 允许 Codex 围绕一个长期目标持续运行。

用户可以通过 /goal 命令启动，例如：

• 自动修复代码问题
• 持续运行测试
• 长时间执行开发任务

任务可能持续 数小时甚至数天，直到完成或需要用户批准。

Appshots

Appshots 用于快速向 Codex 提供应用上下文。

在 Mac 上同时按下 两个 Command 键，系统会：

• 截取当前应用窗口
• 提取窗口中的文本

然后将这些信息发送给 Codex，使 AI 能立即理解当前应用状态，而无需手动复制内容。

仍未公开的关键技术细节

虽然功能已经发布，但一些技术问题仍未公开：

• Mac 锁屏或屏幕关闭时仍能控制应用的具体实现方式
• 在锁屏状态下维持视觉输入和操作控制的系统架构
• 第三方安全研究人员的完整风险评估

目前公开资料主要描述功能与配置流程，而非底层技术设计。

为什么这项功能值得关注

Remote Computer Use 代表着 AI 软件形态的一种转变：

AI 不再只是助手，而是可以持续工作的软件代理。

用户不需要不断输入指令，而是可以让 AI：

• 在后台运行软件
• 执行复杂流程
• 自动测试应用
• 长时间完成任务

结合 Goal Mode 等能力，Codex 正在从“代码助手”逐渐演变为 可以长期运行的自主软件代理平台。