Codex「Remote Computer Use」：AI 鎖屏後仍可控制 Mac 應用程式

Mac 鎖屏後仍可繼續操作

2026 年 5 月更新最大的改變之一，就是 即使 Mac 已鎖定，Codex 仍然可以繼續操作應用程式。

同時亦可以透過 **Codex Mobile（ChatGPT 手機 app）**從手機遠端控制。

以前大部分 AI「電腦操作」工具都有幾個限制：

• 電腦必須保持解鎖
• 螢幕必須開啟
• AI 需要看到實時畫面

而 Remote Computer Use 的設計就是為了解決這些限制，讓 AI 任務可以長時間在背景運行。

不過目前公開資料仍未說明：

• 鎖屏後如何維持輸入控制
• 如何在顯示器關閉時取得視覺資訊

官方文件只確認 功能存在，但未公開底層技術架構。

如何在 Codex App 啟用 Remote Computer Use

用戶需要在 Codex 桌面版完成幾個設定步驟。

1. 安裝 Computer Use Plugin

在 Codex app：

• 打開 Settings（Cmd + ,）
• 進入 Computer Use
• 點擊 Install 安裝插件

2. 授權 macOS 系統權限

macOS 會要求兩個重要權限：

• Screen Recording：讓 Codex 能看到應用程式畫面
• Accessibility：讓 Codex 可以模擬滑鼠和鍵盤操作

這兩個權限是 GUI 自動化所必須的。

3. 設定遠端連接

如果想用手機控制 Mac：

• 在 Codex app 啟動 Codex Mobile setup
• 系統會顯示 QR code
• 用 ChatGPT 手機 app 掃描完成配對

之後用戶可以在手機：

• 啟動任務
• 審批操作
• 查看進度

而 Mac 會在背景繼續執行流程。

Codex 內建安全措施

讓 AI 直接控制電腦存在明顯風險，所以 OpenAI 在設計中加入幾層保護。

Sandbox 隔離

Codex 在 作業系統層 sandbox內運行，限制它能接觸的檔案與環境，例如通常只限於當前工作空間。

Approval 機制

系統使用 approval policy：

• 低風險操作自動執行
• 高風險操作需要用戶批准

這可避免 AI 在未授權情況下執行敏感動作。

預設關閉網絡

Codex 預設不開啟網絡存取，減少自動任務意外連接外部服務的可能。

macOS 權限提示

macOS 亦會透過系統權限提示確保：

• 使用者必須主動授權
• 可以隨時在 Privacy & Security 設定撤回權限

另外某些情況下，Codex 需要用戶逐個批准應用程式才可以操作。

地區限制

目前 Computer Use 只在 macOS 推出，而且部分地區暫未提供：

• 歐洲經濟區（EEA）
• 英國
• 瑞士

OpenAI 未詳細說明原因，但早期功能限制通常與監管或合規有關。

同時推出的兩個重要功能

這次更新除了 Remote Computer Use，還帶來幾個新功能。

Goal Mode

Goal Mode 讓 Codex 可以長時間追蹤一個目標。

例如：

• 修復整個程式 bug
• 測試多個 GUI 流程
• 自動完成長時間任務

用戶只需在介面輸入 /goal 指令即可開始。

系統可以持續運行 數小時甚至數日，直到完成或需要用戶批准。

Appshots

Appshots 用來快速把其他應用程式的內容交給 Codex。

在 Mac：

• 同時按 兩個 Command 鍵

系統會把目前視窗發送到 Codex，包括：

• 視窗截圖
• 介面文字資料

這樣 AI 就可以理解另一個應用程式的上下文，而不用手動複製貼上。

安全與企業管理疑慮

一些安全分析指出，讓 AI 控制整台電腦仍然帶來不少企業級風險，例如：

• AI 取得桌面截圖與文件內容
• 自動操作敏感應用程式
• 公司資料可能被外部處理系統讀取

例如 Appshots 甚至可能讀取 畫面以外的文件內容，因此官方建議不要在敏感資料上使用。

對企業 IT 部門來說，還需要考慮：

• MDM 管理策略
• 權限控制
• 日誌與審計

這些問題亦是 AI agent 進入企業桌面環境時最常討論的安全議題。

為何這功能值得關注

Remote Computer Use 代表一個重要轉變：

AI 不再只是回答問題，而是 直接在真實軟件環境中工作。

當功能與 Goal Mode、Appshots 結合後，Codex 開始像一個可以：

• 持續執行任務
• 操作多個應用
• 長時間自動化工作流程

的 自主型 AI agent。

如果這類功能普及，未來「自動化工具」與「AI 代理」之間的界線可能會越來越模糊。