Codex peut utiliser des apps macOS même quand le Mac est verrouillé
La nouvelle fonction Remote Computer Use de Codex permet à l’agent IA d’utiliser des applications macOS en arrière‑plan, même après le verrouillage de l’ordinateur. Pour l’activer, les utilisateurs doivent installer le plugin Computer Use et autoriser les permissions macOS Screen Recording et Accessibility.
How does OpenAI’s new “Remote Computer Use” feature in the Codex desktop app (released May 21) allow the AI agent to control macOS applicatiOpenAI’s Codex desktop app can automate macOS apps through its Computer Use capability and continue running tasks even after the Mac locks.
Prompt IA
Create a landscape editorial hero image for this Studio Global article: How does OpenAI’s new “Remote Computer Use” feature in the Codex desktop app (released May 21) allow the AI agent to control macOS applicati. Article summary: OpenAI says Codex’s new Computer Use capability lets the agent “see and operate graphical applications,” and the app also supports enabling remote access for a host device through a setup flow in the Codex app, but the e. Topic tags: general, documentation, general web. Reference image context from search candidates: Reference image 1: visual subject "# Codex can now control other desktop devices via Computer Use. OpenAI is developing Computer Use for Codex remote control that could work even when a laptop is locked or asleep; C" source context "Codex can now control other desktop devices via Computer Use" Reference image 2: visual subject "Codex Can Now Contro
openai.com
La dernière mise à jour de l’application Codex d’OpenAI introduit une capacité notable : Remote Computer Use. Cette fonction permet à un agent IA d’interagir avec des applications macOS — cliquer, taper, naviguer dans les menus — même lorsque le Mac est verrouillé et que l’écran est éteint.
L’objectif est de transformer Codex en agent développeur persistant, capable de travailler dans un véritable environnement logiciel plutôt que de simplement répondre à des prompts. La documentation officielle confirme la fonctionnalité et explique comment l’activer, mais OpenAI n’a pas publié les détails techniques précis permettant à l’agent de continuer à contrôler les applications lorsque l’ordinateur est verrouillé.
Ce que permet réellement la fonction « Computer Use »
La fonctionnalité Computer Use permet à Codex d’interagir directement avec les interfaces graphiques macOS. Concrètement, l’agent peut observer l’écran et effectuer des actions similaires à celles d’un utilisateur humain :
cliquer sur des boutons
saisir du texte dans des champs
naviguer dans des menus
lancer ou configurer des applications
Plutôt que de dépendre uniquement d’API ou d’outils en ligne de commande, Codex peut ainsi piloter l’interface graphique elle‑même. Cela ouvre la voie à des tâches comme l’automatisation de flux dans des applications de bureau, les tests d’interface (GUI), ou encore la configuration de logiciels sans intégration spécifique.
Studio Global AI
Search, cite, and publish your own answer
Use this topic as a starting point for a fresh source-backed answer, then compare citations before you share it.
Câu trả lời ngắn gọn cho "Codex peut utiliser des apps macOS même quand le Mac est verrouillé" là gì?
La nouvelle fonction Remote Computer Use de Codex permet à l’agent IA d’utiliser des applications macOS en arrière‑plan, même après le verrouillage de l’ordinateur.
Những điểm chính cần xác nhận đầu tiên là gì?
La nouvelle fonction Remote Computer Use de Codex permet à l’agent IA d’utiliser des applications macOS en arrière‑plan, même après le verrouillage de l’ordinateur. Pour l’activer, les utilisateurs doivent installer le plugin Computer Use et autoriser les permissions macOS Screen Recording et Accessibility.
Tôi nên làm gì tiếp theo trong thực tế?
Le système inclut des protections comme le sandboxing, des approbations utilisateur et un accès réseau désactivé par défaut, et il n’est pas disponible au lancement dans l’EEE, au Royaume‑Uni et en Suisse.
Selon les descriptions techniques disponibles, l’agent perçoit le bureau comme un flux visuel et effectue des actions telles que mouvements du curseur, clics et frappes clavier pendant l’exécution en arrière‑plan.
Une nouveauté clé : fonctionner même quand le Mac est verrouillé
La mise à jour annoncée le 21 mai introduit une évolution majeure : Codex peut continuer à utiliser les applications macOS même après le verrouillage de la machine, et il peut être contrôlé à distance via un smartphone grâce à Codex Mobile.
Dans les versions précédentes des systèmes d’« AI computer use », plusieurs conditions étaient généralement nécessaires :
l’ordinateur devait rester déverrouillé
l’écran devait rester allumé
l’agent devait voir l’affichage actif
La nouvelle fonctionnalité supprime cette contrainte et permet d’exécuter des tâches longues ou des workflows automatisés sans garder la machine active.
Toutefois, la documentation publique ne détaille pas le mécanisme exact permettant à l’agent de maintenir l’accès visuel et le contrôle des entrées lorsque l’écran est éteint.
Comment activer Remote Computer Use dans l’app Codex
L’activation se fait directement depuis l’application Codex sur macOS.
1. Installer le plugin Computer Use
Dans l’application Codex :
ouvrir Settings (Cmd + ,)
aller dans Computer Use
cliquer sur Install pour installer le plugin correspondant.
2. Autoriser les permissions macOS
Lors de la configuration, macOS demandera deux autorisations importantes :
Screen Recording – pour que Codex puisse voir l’interface des applications
Accessibility – pour permettre à l’agent de cliquer, taper et manipuler l’interface.
Ces permissions sont nécessaires car l’agent agit directement sur l’interface graphique.
3. Configurer l’accès à distance
Pour contrôler Codex depuis un smartphone :
lancer la configuration dans l’application Codex sur le Mac hôte
choisir l’option pour connecter un appareil mobile
scanner le QR code affiché avec l’application mobile ChatGPT.
Une fois la connexion établie, il devient possible de démarrer, superviser ou approuver les actions de Codex depuis son téléphone pendant que le Mac exécute les tâches en arrière‑plan.
Les protections de sécurité intégrées
Donner à une IA la capacité de contrôler un ordinateur pose des risques évidents. OpenAI a donc intégré plusieurs mécanismes de sécurité.
Sandbox système
Codex fonctionne dans un sandbox imposé par le système d’exploitation, ce qui limite les ressources locales accessibles (souvent restreintes à l’espace de travail actif).
Politiques d’approbation
Une approval policy détermine quand l’agent doit demander la validation de l’utilisateur avant d’effectuer certaines actions.
Accès réseau désactivé par défaut
Par défaut, Codex fonctionne sans accès Internet, afin de réduire les risques de connexions externes inattendues pendant l’exécution automatisée.
Autorisations explicites pour les applications
macOS demande également des autorisations explicites (Screen Recording et Accessibility) et certains systèmes exigent que chaque nouvelle application soit approuvée avant d’être contrôlée par Codex.
Disponibilité géographique limitée
Au lancement, la fonctionnalité Computer Use est uniquement disponible sur macOS et exclut plusieurs régions.
Elle n’est actuellement pas disponible dans :
l’Espace économique européen (EEE)
le Royaume‑Uni
la Suisse.
OpenAI n’a pas donné d’explication détaillée, mais ces limitations sont souvent liées à des contraintes réglementaires ou de conformité lors du déploiement initial.
Les autres nouveautés annoncées avec la mise à jour
La même version de Codex introduit également d’autres fonctions destinées à renforcer les capacités des agents logiciels.
Goal Mode
Le Goal Mode permet à Codex de poursuivre un objectif sur une longue durée — potentiellement pendant des heures ou plusieurs jours — jusqu’à ce que la tâche soit terminée ou qu’une validation humaine soit nécessaire.
Il peut être lancé avec la commande /goal dans l’interface Codex.
Appshots
La fonction Appshots simplifie le partage de contexte avec l’agent.
En appuyant simultanément sur les deux touches Command, l’utilisateur peut envoyer à Codex :
une capture d’écran de la fenêtre active
le texte extrait de l’interface
Cela permet à l’agent de comprendre l’état d’une application sans copier‑coller d’informations manuellement.
Ce que la documentation ne révèle pas encore
Malgré l’annonce de la fonctionnalité, plusieurs aspects restent flous publiquement :
la méthode technique exacte permettant de contrôler macOS lorsque le Mac est verrouillé
l’architecture interne utilisée pour maintenir la perception visuelle et le contrôle des entrées
les analyses de sécurité détaillées par des chercheurs indépendants
Pour l’instant, la documentation confirme surtout les capacités et la procédure d’activation, sans détailler entièrement l’architecture sous‑jacente.
Pourquoi cette évolution est importante
Avec Remote Computer Use, Codex s’approche d’un nouveau modèle : des agents IA persistants capables d’agir directement dans un environnement informatique réel.
Au lieu de simplement demander une action puis d’attendre un résultat, les utilisateurs peuvent laisser l’agent exécuter des logiciels, tester des interfaces et automatiser des workflows pendant de longues périodes.
Si ces systèmes se généralisent, la frontière entre automatisation traditionnelle et agents logiciels autonomes pourrait rapidement s’estomper.