OpenAI Codex có thể điều khiển ứng dụng macOS từ xa — ngay cả khi Mac đã khóa
Bản cập nhật Codex cho macOS bổ sung Remote Computer Use, cho phép AI điều khiển ứng dụng desktop ngay cả khi máy Mac đã khóa sau khi cài plugin Computer Use và cấp quyền Screen Recording cùng Accessibility. Người dùng có thể điều khiển và theo dõi các tác vụ Codex từ điện thoại thông qua Codex Mobile, giúp tự động...
How does OpenAI’s new “Remote Computer Use” feature in the Codex desktop app (released May 21) allow the AI agent to control macOS applicatiOpenAI’s Codex desktop app can automate macOS apps through its Computer Use capability and continue running tasks even after the Mac locks.
Prompt AI
Create a landscape editorial hero image for this Studio Global article: How does OpenAI’s new “Remote Computer Use” feature in the Codex desktop app (released May 21) allow the AI agent to control macOS applicati. Article summary: OpenAI says Codex’s new Computer Use capability lets the agent “see and operate graphical applications,” and the app also supports enabling remote access for a host device through a setup flow in the Codex app, but the e. Topic tags: general, documentation, general web. Reference image context from search candidates: Reference image 1: visual subject "# Codex can now control other desktop devices via Computer Use. OpenAI is developing Computer Use for Codex remote control that could work even when a laptop is locked or asleep; C" source context "Codex can now control other desktop devices via Computer Use" Reference image 2: visual subject "Codex Can Now Contro
openai.com
Codex đang tiến gần hơn đến một “AI agent” thực sự
OpenAI vừa bổ sung một khả năng mới cho ứng dụng Codex desktop trên macOS: Remote Computer Use. Tính năng này cho phép AI không chỉ trả lời câu hỏi hay viết mã, mà còn thao tác trực tiếp trên các ứng dụng macOS — thậm chí tiếp tục hoạt động ngay cả khi máy Mac đã khóa và màn hình tắt.
Đây là bước tiến quan trọng trong chiến lược biến Codex thành một AI agent hoạt động lâu dài trong môi trường phần mềm thật, thay vì chỉ phản hồi theo từng câu lệnh.
Tài liệu của OpenAI xác nhận khả năng này và hướng dẫn cách bật nó, nhưng cơ chế kỹ thuật chính xác giúp Codex tiếp tục điều khiển ứng dụng khi máy đã khóa vẫn chưa được công bố chi tiết. Những gì hiện biết chủ yếu đến từ tài liệu dành cho nhà phát triển và ghi chú cập nhật sản phẩm.
Computer Use là gì?
Tính năng Computer Use cho phép Codex tương tác với giao diện đồ họa của macOS giống như một người dùng thật. AI có thể:
quan sát nội dung trên màn hình
di chuyển con trỏ
nhấp vào nút
nhập văn bản
mở menu hoặc chuyển cửa sổ
Nói cách khác, thay vì chỉ dùng API hoặc dòng lệnh, Codex có thể điều khiển trực tiếp giao diện ứng dụng.
Studio Global AI
Search, cite, and publish your own answer
Use this topic as a starting point for a fresh source-backed answer, then compare citations before you share it.
Câu trả lời ngắn gọn cho "OpenAI Codex có thể điều khiển ứng dụng macOS từ xa — ngay cả khi Mac đã khóa" là gì?
Bản cập nhật Codex cho macOS bổ sung Remote Computer Use, cho phép AI điều khiển ứng dụng desktop ngay cả khi máy Mac đã khóa sau khi cài plugin Computer Use và cấp quyền Screen Recording cùng Accessibility.
Những điểm chính cần xác nhận đầu tiên là gì?
Bản cập nhật Codex cho macOS bổ sung Remote Computer Use, cho phép AI điều khiển ứng dụng desktop ngay cả khi máy Mac đã khóa sau khi cài plugin Computer Use và cấp quyền Screen Recording cùng Accessibility. Người dùng có thể điều khiển và theo dõi các tác vụ Codex từ điện thoại thông qua Codex Mobile, giúp tự động hóa GUI, kiểm thử ứng dụng hoặc chạy workflow dài hạn.
Tôi nên làm gì tiếp theo trong thực tế?
OpenAI triển khai các lớp bảo mật như sandbox hệ điều hành, cơ chế yêu cầu phê duyệt hành động và tắt mạng theo mặc định; tính năng hiện chưa khả dụng tại EEA, Anh và Thụy Sĩ.
Một số phân tích cho biết agent nhận dữ liệu từ màn hình như dòng hình ảnh liên tục, sau đó thực hiện các thao tác như click hoặc gõ phím để hoàn thành nhiệm vụ.
Điều gì thay đổi với Remote Computer Use
Trước đây, các hệ thống AI có khả năng điều khiển máy tính thường yêu cầu:
máy tính phải mở khóa
màn hình phải bật
agent cần nhìn thấy màn hình trực tiếp
Bản cập nhật ngày 21/5 của Codex đã thay đổi điều này. Theo ghi chú phát hành, Codex có thể tiếp tục sử dụng các ứng dụng macOS ngay cả khi Mac đã khóa, và người dùng có thể điều khiển từ xa thông qua Codex Mobile trên điện thoại.
Điều này cho phép chạy các tác vụ tự động kéo dài hàng giờ hoặc lâu hơn mà không cần người dùng giữ máy mở.
Tuy nhiên, OpenAI chưa công bố chi tiết cách kỹ thuật để duy trì quyền truy cập giao diện và điều khiển khi màn hình tắt, nên kiến trúc nội bộ của cơ chế này vẫn chưa được mô tả đầy đủ trong tài liệu công khai.
Cách bật Remote Computer Use trong Codex
Để sử dụng tính năng này, người dùng cần thiết lập trong ứng dụng Codex trên Mac.
1. Cài plugin Computer Use
Trong ứng dụng Codex:
mở Settings (Cmd + ,)
vào mục Computer Use
chọn Install để cài plugin.
2. Cấp quyền hệ thống macOS
Trong quá trình thiết lập, macOS sẽ yêu cầu cấp quyền:
Screen Recording – cho phép Codex nhìn thấy giao diện ứng dụng
Accessibility – cho phép Codex điều khiển chuột và bàn phím
Các quyền này là bắt buộc vì Codex thao tác trực tiếp với giao diện đồ họa của hệ điều hành.
3. Kết nối điều khiển từ xa qua điện thoại
Để điều khiển Mac từ thiết bị khác:
mở Codex trên máy Mac (host)
chọn Set up Codex mobile
quét QR code bằng ứng dụng ChatGPT trên điện thoại
Sau khi ghép nối, người dùng có thể bắt đầu, theo dõi hoặc phê duyệt tác vụ Codex từ xa.
Các lớp bảo mật được tích hợp
Cho phép AI điều khiển máy tính là khả năng mạnh và tiềm ẩn rủi ro, vì vậy OpenAI đã bổ sung một số cơ chế kiểm soát.
Sandbox hệ điều hành
Codex chạy trong sandbox do hệ điều hành áp đặt, giới hạn phạm vi truy cập (thường chỉ trong workspace hoặc môi trường được cho phép).
Chính sách phê duyệt hành động
Một approval policy xác định khi nào agent phải dừng lại để xin phép người dùng trước khi tiếp tục. Điều này giúp:
cho phép hành động rủi ro thấp chạy tự động
yêu cầu xác nhận với các hành động nhạy cảm.
Tắt mạng theo mặc định
Theo cấu hình mặc định, Codex không có quyền truy cập mạng, giúp giảm nguy cơ kết nối ngoài ý muốn khi chạy tự động.
Quyền ứng dụng rõ ràng
Ngoài ra, macOS yêu cầu người dùng cấp quyền trực tiếp cho các khả năng như Screen Recording và Accessibility, đảm bảo việc điều khiển giao diện không diễn ra âm thầm.
Một số triển khai còn yêu cầu phê duyệt từng ứng dụng riêng lẻ trước khi Codex được phép tương tác với chúng.
Giới hạn khu vực khi ra mắt
Ở thời điểm phát hành, tính năng Computer Use trong Codex chỉ hỗ trợ macOS và chưa khả dụng tại một số khu vực:
Khu vực Kinh tế châu Âu (EEA)
Vương quốc Anh
Thụy Sĩ
OpenAI chưa đưa ra giải thích chi tiết, nhưng những hạn chế như vậy thường liên quan đến quy định pháp lý hoặc yêu cầu tuân thủ dữ liệu trong giai đoạn ra mắt.
Các tính năng mới khác trong cùng bản cập nhật
Goal Mode
Goal Mode cho phép Codex theo đuổi một mục tiêu dài hạn. Khi người dùng nhập lệnh /goal, AI có thể:
tiếp tục làm việc trong nhiều giờ hoặc nhiều ngày
tạm dừng khi cần phê duyệt
hoàn thành toàn bộ mục tiêu đã đặt
Điều này biến Codex từ một công cụ phản hồi nhanh thành agent tự động thực hiện dự án dài hạn.
Appshots
Appshots là cách nhanh để cung cấp ngữ cảnh từ ứng dụng khác.
Trên macOS, chỉ cần nhấn đồng thời hai phím Command để:
chụp ảnh cửa sổ ứng dụng hiện tại
trích xuất văn bản từ giao diện
Codex sau đó có thể hiểu nội dung trong ứng dụng đó mà không cần người dùng sao chép dữ liệu thủ công.
Những điểm vẫn chưa rõ
Dù khả năng đã được xác nhận, một số chi tiết quan trọng vẫn chưa được công bố:
cơ chế kỹ thuật giúp Codex tiếp tục điều khiển ứng dụng khi Mac đã khóa
cách hệ thống duy trì quyền truy cập giao diện khi màn hình tắt
đánh giá rủi ro bảo mật chi tiết từ các nhóm nghiên cứu độc lập
Các tài liệu hiện tại chủ yếu mô tả cách thiết lập và các lớp kiểm soát, nhưng chưa giải thích đầy đủ kiến trúc bên dưới.
Vì sao tính năng này đáng chú ý
Remote Computer Use cho thấy xu hướng mới trong AI: agent hoạt động trực tiếp trong môi trường máy tính thật.
Thay vì chỉ trả lời câu hỏi, AI có thể:
chạy phần mềm
thử nghiệm giao diện
thực hiện workflow phức tạp
tiếp tục làm việc trong nền
Khi kết hợp với Goal Mode và điều khiển từ xa, Codex đang tiến gần hơn đến mô hình AI agent tự động hóa công việc số trong thời gian dài.
Comments
0 comments