O recurso Computer Use permite que o Codex interaja com aplicativos gráficos do macOS da mesma forma que um usuário humano faria. Em vez de depender apenas de APIs ou do terminal, o agente pode ver a interface e agir sobre ela.

Isso inclui ações como:

• mover o cursor
• clicar em botões
• digitar em campos
• navegar por menus e janelas

Na prática, o sistema analisa visualmente a tela e executa comandos com mouse e teclado virtuais. Isso permite automatizar tarefas em aplicativos desktop, testar interfaces gráficas ou executar fluxos em navegadores e simuladores.

O que muda com o Remote Computer Use

A atualização anunciada em 21 de maio trouxe uma mudança importante: agora o Codex pode continuar usando aplicativos mesmo depois que o Mac é bloqueado.

Antes disso, sistemas de “computer use” baseados em IA geralmente exigiam três condições:

• o computador precisava permanecer desbloqueado
• a tela precisava ficar ligada
• o agente precisava observar o display ativo

Com o novo recurso, essas limitações deixam de existir. O Codex pode continuar executando tarefas de automação por longos períodos, inclusive quando o computador está bloqueado, e ainda ser controlado remotamente por um celular conectado via Codex Mobile.

Ainda assim, a OpenAI não detalhou publicamente como o acesso visual e os controles de entrada continuam funcionando quando o display está desligado. A documentação confirma a capacidade, mas não explica a arquitetura técnica que a torna possível.

Como ativar o Remote Computer Use no Codex

A ativação acontece dentro do próprio aplicativo Codex para macOS.

1. Instalar o plugin Computer Use

No aplicativo Codex:

• abra Settings (Cmd + ,)
• entre na seção Computer Use
• clique em Install para instalar o plugin.

2. Conceder permissões do macOS

Durante a configuração, o macOS pedirá permissões importantes. É necessário aprovar:

• Screen Recording (Gravação de tela) – permite que o Codex veja as interfaces dos aplicativos
• Accessibility (Acessibilidade) – permite que o agente controle cliques, digitação e outros elementos da interface.

Essas permissões são essenciais porque o agente interage diretamente com a interface gráfica do sistema.

3. Conectar um celular para controle remoto

Para acessar o Mac remotamente:

• abra o fluxo de configuração do Codex no Mac
• selecione a opção para conectar um dispositivo móvel
• escaneie o QR code usando o app do ChatGPT no telefone.

Depois disso, é possível iniciar tarefas, acompanhar execuções e aprovar ações diretamente pelo celular enquanto o Mac executa o trabalho em segundo plano.

Camadas de segurança incluídas no sistema

Permitir que uma IA controle um computador levanta preocupações óbvias de segurança. A OpenAI incluiu alguns mecanismos para reduzir riscos.

Sandbox do sistema

O Codex opera dentro de um sandbox imposto pelo sistema operacional, que limita o acesso a arquivos e recursos locais — normalmente apenas ao workspace atual do projeto.

Política de aprovação

Uma approval policy determina quando o agente precisa parar e pedir confirmação do usuário antes de executar uma ação. Isso permite automação em tarefas de baixo risco e intervenção humana quando necessário.

Rede desativada por padrão

O agente roda sem acesso à internet por padrão, o que reduz a possibilidade de conexões externas inesperadas durante tarefas automatizadas.

Permissões explícitas de aplicativos

O macOS também exige permissões claras do usuário (como Screen Recording e Accessibility), garantindo que o controle da interface seja autorizado manualmente.

Algumas implementações ainda pedem aprovação para cada novo aplicativo antes de permitir que o Codex interaja com ele.

Restrições regionais no lançamento

No lançamento, o recurso Computer Use no Codex está disponível apenas no macOS e ainda não foi liberado em algumas regiões.

Segundo a documentação da OpenAI, ele não está disponível em:

• Espaço Econômico Europeu (EEE)
• Reino Unido
• Suíça.

A empresa não detalhou o motivo, mas restrições regulatórias ou requisitos de conformidade costumam influenciar lançamentos iniciais de funcionalidades desse tipo.

Outras novidades anunciadas junto com a atualização

A mesma atualização do Codex trouxe recursos adicionais que ampliam o papel do agente.

Goal Mode

O Goal Mode permite definir um objetivo persistente para o agente. O Codex pode trabalhar por horas ou até dias tentando concluir uma tarefa até terminar ou precisar de aprovação do usuário.

O modo é iniciado com o comando:

/goal

Appshots

O recurso Appshots facilita fornecer contexto ao Codex a partir de outro aplicativo.

Ao pressionar as duas teclas Command ao mesmo tempo, o sistema envia para o Codex:

• uma captura de tela da janela ativa
• o texto extraído da interface

Isso permite que a IA entenda o que está acontecendo em outro app sem que o usuário precise copiar ou explicar manualmente.

O que ainda não foi explicado

Mesmo com a documentação disponível, alguns pontos importantes ainda não foram detalhados publicamente:

• o método técnico exato que permite controle do macOS com o Mac bloqueado
• como o sistema mantém acesso visual e controle de entrada com a tela desligada
• avaliações completas de segurança feitas por pesquisadores independentes

Até agora, as fontes disponíveis descrevem apenas a funcionalidade e o processo de configuração, mas não a arquitetura interna completa.

Por que esse recurso chama atenção

O Remote Computer Use mostra uma mudança importante na direção das ferramentas de IA: agentes capazes de operar softwares reais continuamente.

Em vez de apenas responder perguntas ou gerar código, sistemas como o Codex podem executar aplicativos, testar interfaces e automatizar fluxos de trabalho inteiros em segundo plano. Com recursos como Goal Mode, esses agentes podem perseguir objetivos por longos períodos, aproximando-se cada vez mais de um modelo de automação autônoma dentro do computador do usuário.

O recurso Computer Use permite que o Codex interaja com aplicativos gráficos do macOS da mesma forma que um usuário humano faria. Em vez de depender apenas de APIs ou do terminal, o agente pode ver a interface e agir sobre ela.

Isso inclui ações como:

• mover o cursor
• clicar em botões
• digitar em campos
• navegar por menus e janelas

Na prática, o sistema analisa visualmente a tela e executa comandos com mouse e teclado virtuais. Isso permite automatizar tarefas em aplicativos desktop, testar interfaces gráficas ou executar fluxos em navegadores e simuladores.

O que muda com o Remote Computer Use

A atualização anunciada em 21 de maio trouxe uma mudança importante: agora o Codex pode continuar usando aplicativos mesmo depois que o Mac é bloqueado.

Antes disso, sistemas de “computer use” baseados em IA geralmente exigiam três condições:

• o computador precisava permanecer desbloqueado
• a tela precisava ficar ligada
• o agente precisava observar o display ativo

Com o novo recurso, essas limitações deixam de existir. O Codex pode continuar executando tarefas de automação por longos períodos, inclusive quando o computador está bloqueado, e ainda ser controlado remotamente por um celular conectado via Codex Mobile.

Ainda assim, a OpenAI não detalhou publicamente como o acesso visual e os controles de entrada continuam funcionando quando o display está desligado. A documentação confirma a capacidade, mas não explica a arquitetura técnica que a torna possível.

Como ativar o Remote Computer Use no Codex

A ativação acontece dentro do próprio aplicativo Codex para macOS.

1. Instalar o plugin Computer Use

No aplicativo Codex:

• abra Settings (Cmd + ,)
• entre na seção Computer Use
• clique em Install para instalar o plugin.

2. Conceder permissões do macOS

Durante a configuração, o macOS pedirá permissões importantes. É necessário aprovar:

• Screen Recording (Gravação de tela) – permite que o Codex veja as interfaces dos aplicativos
• Accessibility (Acessibilidade) – permite que o agente controle cliques, digitação e outros elementos da interface.

Essas permissões são essenciais porque o agente interage diretamente com a interface gráfica do sistema.

3. Conectar um celular para controle remoto

Para acessar o Mac remotamente:

• abra o fluxo de configuração do Codex no Mac
• selecione a opção para conectar um dispositivo móvel
• escaneie o QR code usando o app do ChatGPT no telefone.

Depois disso, é possível iniciar tarefas, acompanhar execuções e aprovar ações diretamente pelo celular enquanto o Mac executa o trabalho em segundo plano.

Camadas de segurança incluídas no sistema

Permitir que uma IA controle um computador levanta preocupações óbvias de segurança. A OpenAI incluiu alguns mecanismos para reduzir riscos.

Sandbox do sistema

O Codex opera dentro de um sandbox imposto pelo sistema operacional, que limita o acesso a arquivos e recursos locais — normalmente apenas ao workspace atual do projeto.

Política de aprovação

Uma approval policy determina quando o agente precisa parar e pedir confirmação do usuário antes de executar uma ação. Isso permite automação em tarefas de baixo risco e intervenção humana quando necessário.

Rede desativada por padrão

O agente roda sem acesso à internet por padrão, o que reduz a possibilidade de conexões externas inesperadas durante tarefas automatizadas.

Permissões explícitas de aplicativos

O macOS também exige permissões claras do usuário (como Screen Recording e Accessibility), garantindo que o controle da interface seja autorizado manualmente.

Algumas implementações ainda pedem aprovação para cada novo aplicativo antes de permitir que o Codex interaja com ele.

Restrições regionais no lançamento

No lançamento, o recurso Computer Use no Codex está disponível apenas no macOS e ainda não foi liberado em algumas regiões.

Segundo a documentação da OpenAI, ele não está disponível em:

• Espaço Econômico Europeu (EEE)
• Reino Unido
• Suíça.

A empresa não detalhou o motivo, mas restrições regulatórias ou requisitos de conformidade costumam influenciar lançamentos iniciais de funcionalidades desse tipo.

Outras novidades anunciadas junto com a atualização

A mesma atualização do Codex trouxe recursos adicionais que ampliam o papel do agente.

Goal Mode

O Goal Mode permite definir um objetivo persistente para o agente. O Codex pode trabalhar por horas ou até dias tentando concluir uma tarefa até terminar ou precisar de aprovação do usuário.

O modo é iniciado com o comando:

/goal

Appshots

O recurso Appshots facilita fornecer contexto ao Codex a partir de outro aplicativo.

Ao pressionar as duas teclas Command ao mesmo tempo, o sistema envia para o Codex:

• uma captura de tela da janela ativa
• o texto extraído da interface

Isso permite que a IA entenda o que está acontecendo em outro app sem que o usuário precise copiar ou explicar manualmente.

O que ainda não foi explicado

Mesmo com a documentação disponível, alguns pontos importantes ainda não foram detalhados publicamente:

• o método técnico exato que permite controle do macOS com o Mac bloqueado
• como o sistema mantém acesso visual e controle de entrada com a tela desligada
• avaliações completas de segurança feitas por pesquisadores independentes

Até agora, as fontes disponíveis descrevem apenas a funcionalidade e o processo de configuração, mas não a arquitetura interna completa.

Por que esse recurso chama atenção

O Remote Computer Use mostra uma mudança importante na direção das ferramentas de IA: agentes capazes de operar softwares reais continuamente.

Em vez de apenas responder perguntas ou gerar código, sistemas como o Codex podem executar aplicativos, testar interfaces e automatizar fluxos de trabalho inteiros em segundo plano. Com recursos como Goal Mode, esses agentes podem perseguir objetivos por longos períodos, aproximando-se cada vez mais de um modelo de automação autônoma dentro do computador do usuário.