RDP / VNC / Android / X11 / Wayland

Controle computadores e Android com seu agente de IA

Conheça as capturas remotas, controle por teclado e mouse, transferência de arquivos, área de transferência, áudio e vários monitores. Veja os recursos de cada protocolo e como assumir a mesma sessão.

Uma área de trabalho remota. Um fluxo completo.

Seu agente de IA opera dispositivos remotos. Você pode participar a qualquer momento.

Controle desktops RDP e VNC, aplicativos X11 e Android sem abrir um visualizador local. Observe ou assuma a mesma sessão pela GUI ou pelo visualizador web do rdp-cli.

Um executável para seu sistema e processador. Confira os recursos do arquivo baixado antes de usar os comandos abaixo.

Veja a área que importa

Peça uma região da tela ou uma imagem menor. Compare com uma observação anterior e omita a imagem se nada mudou; as coordenadas mantêm a relação com a tela remota.

Espere mudanças ou o fim de uma transferência

Aguarde uma região mudar ou estabilizar, ou uma conexão, operação ou transferência atingir o estado indicado. Confira também o resultado real antes de continuar.

Uma sequência curta, com parada para conferir

Agrupe ações escolhidas pelo agente, inclua uma nova observação e pare em um ponto de verificação. Erros ou mudanças de controle interrompem as próximas etapas; ações já enviadas não são desfeitas.

Registre o progresso e continue após conferir

Salve o progresso, pontos de verificação e imagens selecionadas. Exporte um relatório local e, após uma interrupção, confira o que terminou antes de enviar novas etapas sem repetir ações incertas.

Agentes e pessoas com passagem de controle

Agentes registrados passam o controle explicitamente. Uma pessoa pode assumir pela GUI ou pela web e devolver ao agente escolhido, que observa novamente antes de agir.

Conecte o agente e investigue a conexão

Use o MCP integrado ao executável ou a CLI. Salve perfis de conexão nomeados com referências às credenciais e examine as camadas da conexão com doctor.

Escolha a tela principal ou uma tela virtual

Em um Android compatível, crie explicitamente uma tela virtual e abra um app nela. Agente, GUI e web usam essa tela; o comportamento do app e as permissões de áudio do sistema continuam valendo.

Primeiros passos →
01

Deixe seu agente trabalhar

Conecte ao dispositivo, observe a tela e execute uma ação por vez. Verifique o resultado antes de continuar.

RDP / VNC / X11 / Android

Trabalhe por comandos

Capture a tela, clique, arraste, role, digite e envie atalhos. O agente lê JSON e confere a próxima captura. O envio de uma entrada não confirma, sozinho, o resultado no aplicativo.

  • Resultados JSON, códigos de erro, consultas de operações e eventos ajudam o agente a continuar, esperar ou se recuperar. Uma nova captura permite conferir o resultado no aplicativo.

Observe, aja com o token daquela captura e verifique novamente.

Primeiros passos
01 / O trabalho, por comandos
rdp-cli screenshot --session SESSION --out before.png

rdp-cli clipboard set --session SESSION \
  --text "Resultado: relatório concluído e pronto para revisão." \
  --observation OBSERVATION

rdp-cli key --session SESSION \
  --keys CTRL+V --observation OBSERVATION

rdp-cli screenshot --session SESSION --out result.png

RDP / VNC / X11 / Android

RDP / VNC / Android / X11 / Wayland

rdp-cli é uma ferramenta gratuita de acesso remoto para agentes de IA: controle desktops RDP e VNC, celulares Android e aplicativos Linux X11. Acesse o Wayland por um servidor RDP ou VNC existente. Acompanhe a mesma sessão em uma janela ou no navegador e assuma o controle quando precisar.

  • Opere aplicativos, troque arquivos e use áudio ou várias telas quando o servidor remoto oferecer suporte.
  • Veja e controle o desktop por um servidor VNC existente. A área de transferência de texto depende do servidor; VNC não oferece transferência de arquivos, áudio nem alterações na disposição das telas.
  • Veja e controle Android 12 ou posterior via ADB por USB ou Wi-Fi. É necessária autorização de depuração. Testado com Pixel 3 e Android 12; a compatibilidade pode variar em outros aparelhos.

Veja e controle Android 12 ou posterior via ADB por USB ou Wi-Fi. É necessária autorização de depuração. Testado com Pixel 3 e Android 12; a compatibilidade pode variar em outros aparelhos.

Primeiros passos

Conectar do Linux ao Windows RDP com um único executável →

Conectar ao VNC e verificar a entrada pela linha de comando →

RDP / VNC / X11 / Android

Várias sessões persistentes

Mantenha conexões e direcione comandos pelo ID de cada sessão. Fechar uma janela somente de leitura preserva a conexão. Reconectar invalida observações antigas e pausa a entrada; confira a tela e retome explicitamente.

  • A conexão pode continuar aberta após o fim de um comando. IDs de sessão direcionam as próximas ações ao desktop correto; a reconexão pausa a entrada para uma nova observação.

Liste as sessões e desconecte apenas a que não precisa mais.

Primeiros passos

Resolver falhas de conexão RDP, tela preta e entrada bloqueada →

02

Acompanhe e assuma o controle

Veja a mesma sessão em uma janela ou navegador autorizado. Pause, faça um ajuste e devolva o controle.

RDP / VNC / X11 / Android

Acompanhe, pause e assuma

O agente trabalha sem interface por padrão. Para acompanhar ou intervir, abra a mesma sessão na janela do aplicativo ou em um navegador autorizado. Windows e Mac usam controles do sistema; no Linux, a interface leve está incluída no executável. A interface oferece dez idiomas, com temas claro e escuro na janela do visualizador. Ao assumir o controle, a entrada do agente é pausada; ao devolvê-lo, o agente verifica a tela atual antes de continuar.

  • Um novo visualizador compartilha a conexão existente. Várias pessoas podem observar, mas só uma controla por vez. Ao devolver o controle, o agente observa a tela atualizada.

Corrija um detalhe e devolva a mesma sessão ao agente.

Primeiros passos
Veja uma transferência real de controle

Um agente prepara um relatório no LibreOffice Calc em um desktop Windows remoto. Uma pessoa revisa pelo navegador e devolve o controle.

  1. Acompanhe o agente

    O agente confere o relatório e o deixa pronto para revisão.

  2. Pause a tarefa

    Pause a entrada remota sem deixar de ver o relatório.

  3. Assuma o controle e revise

    Assuma o controle pelo navegador e adicione a aprovação à mesma pasta de trabalho.

  4. Devolva o controle e verifique

    Devolva o controle. O agente salva a pasta de trabalho revisada e obtém o arquivo.

A pasta de trabalho salva contém a nota do agente e a aprovação da pessoa. Baixe o arquivo real.

Baixar o resultado real · XLSX (11.9 KB)

Baixar o resultado real · XLSX (11.9 KB)

Capturas de software em execução, feitas separadamente em dez idiomas e dois temas. O relatório usa dados fictícios de exemplo.

RDP / VNC / X11 / Android

Suas sessões ativas em um só lugar

Gerencie sessões pela barra de menus do Mac, bandeja do Windows ou painel do Linux. Veja o destino, a conexão, quem está no controle, ações atuais ou recentes, progresso dos arquivos e erros. Ícones compatíveis indicam a atividade do Agent. Abra um visualizador, pause ou desconecte a sessão selecionada.

  • No Mac, procure por nome ou endereço; no Windows, selecione na bandeja. O menu de status permite pausar todas as sessões de uma vez. No Linux, use o painel de sessões com busca; ambientes de desktop compatíveis também exibem um ícone de status. Sem bandeja, abra o painel com presence show --panel.

Abra a sessão existente sem fazer login novamente no computador remoto. No Linux, o ícone depende do ambiente gráfico; presence show --panel abre o painel diretamente.

Primeiros passos

RDP / VNC / X11 / Android

Entenda cada ação

Nos visualizadores de desktop e Web, acompanhe o ponteiro do Agent, cliques esquerdo, direito e central, cliques duplos, arrastes, rolagem, atalhos e contagem de caracteres digitados. O progresso dos arquivos aparece separadamente, indicando origem humana ou Agent. As indicações não repetem o texto digitado nem aparecem nas capturas; a tela remota em si não é ocultada.

  • Uma tecla ou um botão do mouse mantido pressionado continua visível ao lado de uma linha separada de transferência, mesmo com o painel de arquivos fechado. As transferências identificam a origem humana ou Agent. Entradas sensíveis ocultam o texto e a contagem de caracteres. As indicações seguem o idioma e o tema claro ou escuro do visualizador; ajuste ou oculte sem alterar a tarefa remota.

As indicações mostram a atividade de entrada; confira o resultado remoto antes de considerar a tarefa concluída.

Primeiros passos

RDP / VNC / X11 / Android

Use seus acessos existentes

Conecte com conta local ou de domínio, salve e referencie credenciais no armazenamento compatível e autorize recursos do navegador explicitamente. Certificados RDP e modos VNC têm limites diferentes.

  • Salve credenciais no armazenamento do sistema e use a referência depois. Dê ao navegador apenas as permissões necessárias e revogue o acesso ao terminar.

Separe a permissão de observar das permissões de entrada, arquivos e microfone.

Primeiros passos
03

Conclua a tarefa inteira

Use várias telas, envie pastas de projeto, troque textos e ouça o áudio remoto. Traga os resultados quando estiverem prontos.

RDP

Trabalhe em várias telas

Em uma sessão RDP multimonitor negociada, capture tudo ou uma tela e arraste entre elas. Abra janelas por monitor ou troque de tela no navegador. Redimensionar o visualizador não altera o layout remoto.

  • Capture e controle cada tela, com arraste entre telas.
  • Abra janelas nativas por tela ou alterne as telas no navegador.
  • Veja duas telas remotas mesmo usando um computador com uma única tela.

Examine uma tela sem perder a visão do conjunto.

Primeiros passos

RDP / X11 / Android

Troque arquivos e pastas

Transfira arquivos e pastas preservando a estrutura de diretórios. Acompanhe cada transferência, confira o resultado e cancele quando necessário. Escolha se deseja substituir arquivos; o conteúdo transferido é verificado.

Processe uma pasta de relatórios; isso não significa explorar qualquer disco remoto.

Primeiros passos
  • RDP: troque arquivos pela unidade redirecionada da sessão. A política remota deve permitir o redirecionamento.
  • X11 / SSH: use o serviço SFTP existente no servidor, dentro do diretório escolhido. X11 →
  • Android: transfira arquivos na pasta da sessão do celular. VNC não oferece transferência de arquivos. Android →

RDP

  1. Enviar

    Arquivos e pastas → unidade de troca

  2. Processar remotamente

    Abrir, editar e salvar o resultado

  3. Baixar

    Acompanhar o progresso e verificar os arquivos

Enviar uma planilha preparada → atualizar no Calc remoto → salvar → baixar. A nota, as fórmulas, os totais e o gráfico do arquivo baixado foram verificados.

Ver os fluxos reais de planilha e vídeo →

Enviar e baixar arquivos por RDP pela linha de comando →

RDP / VNC / X11 / Android

Área de transferência remota

Leia ou defina texto explicitamente e cole com um atalho. A área de transferência local não é sincronizada automaticamente. RDP depende das políticas do servidor; VNC, da codificação negociada.

  • Troque endereços, parágrafos ou textos de tabelas pela área de transferência remota. O comando type insere texto compatível diretamente, sem substituir a área de transferência.

Defina o texto, envie CTRL+V e confira o aplicativo.

Primeiros passos

RDP

Escolha separadamente o destino do áudio RDP e a origem do microfone

Escolha separadamente a reprodução de áudio e o microfone RDP: visualizador, computador remoto ou desativado. O áudio do computador remoto exige o serviço de áudio rdp-cli para Windows. A gravação começa explicitamente e depende dos dispositivos e das políticas do servidor.

  • Vários espectadores autorizados podem ouvir ao mesmo tempo.
  • Assuma o controle e ative o microfone quando precisar de entrada de voz.
  • Devolver o controle ou desconectar interrompe a captura; é preciso ativá-la novamente.

Prepare uma tarefa remota com voz sem enviar som ou dados do microfone ao computador errado.

Primeiros passos

Escolher onde funcionam o som e o microfone RDP →

Android · USB / Wi-Fi

Uma tela Android real para seu agente de IA.

Conecte um celular por USB ou Wi-Fi. Seu agente observa, toca, digita e coleta resultados por comandos, enquanto você acompanha a mesma sessão em uma janela ou navegador.

Celular Android · USB / Wi-Fi →

Downloads com suporte a Android: macOS · Apple silicon · macOS · Intel · Windows · x64 · Windows · x86 · Windows · ARM64 · Linux · x86_64 · Linux · ARM64

Observar e agir

Capture a tela real, execute toques, deslizes, arrastos e gestos com dois dedos e confira o resultado com outra captura.

Texto, arquivos e aplicativos

Cole texto Unicode explicitamente, transfira arquivos e pastas e instale, inicie ou pare aplicativos de APK único.

Compartilhar o controle

Agente, janela nativa e navegadores autorizados compartilham uma sessão persistente. Pause ou assuma o controle quando precisar.

A base de suporte é Android 12 ou posterior. O aparelho verificado é o Google Pixel 3 com Android 12; isso não significa que todos os fabricantes ou versões posteriores foram testados.

Conectar um celular Android →

Como funciona

Linux · X11 / SSH · Wayland RDP / VNC

Controle aplicativos Linux com um agente de IA por X11 e SSH

Conecte um desktop Linux existente ou um único aplicativo X11, trabalhe com capturas e comandos, recupere arquivos e permita que uma pessoa assuma a mesma sessão.

Download: macOS · Apple siliconmacOS · IntelWindows · x64Windows · x86Windows · ARM64Linux · x86_64Linux · ARM64

Uma sessão para o agente e para você

O rdp-cli permite que um agente de IA veja e controle um aplicativo Linux por comandos. Ele captura a tela, age sobre o que observou e verifica a próxima imagem. Você pode abrir uma janela nativa ou um visualizador web autorizado para observar, pausar ou assumir a mesma sessão.

Abra um aplicativo

O exemplo abre o Gedit já instalado em uma tela isolada integrada ao rdp-cli. Nenhum visualizador local é aberto automaticamente. Guarde data.session da resposta e use-o como SESSION. Um host cujo desktop habitual usa Wayland também pode encaminhar um aplicativo compatível com X11 dessa forma.

Ou conecte um desktop X11 existente

Informe o display real e o caminho de seu arquivo de autorização existente. A conta SSH precisa ter acesso a esse display; autenticar-se por SSH não concede, por si só, acesso ao desktop. Esse modo usa o desktop existente sem criar outra sessão de login.

Suas sessões ativas em um só lugar
Escolha o protocolo para a tarefa. · X11
RecursosX11
Capturas, teclado e mouseCompatível
Área de transferência de textoDepende da política do servidor
Arquivos e pastasDepende da política do servidor
Áudio e microfoneIndisponível
Layout multimonitor solicitadoIndisponível

X11 nativo não oferece redirecionamento de reprodução de áudio nem de microfone. O desktop Wayland completo exige um destino RDP ou VNC compatível já configurado e usa as capacidades realmente negociadas. O rdp-cli não instala nem ativa serviços remotos. O aplicativo pode sair quando a conexão de exibição for encerrada ou perdida: salve antes e não suponha reinício automático ou um ambiente de trabalho preservado.

Primeiros passos →

Controle aplicativos Linux com um agente de IA por X11 e SSH →

Da tarefa remota a um arquivo pronto para usar

Dois fluxos reais: um Agent usou comandos do rdp-cli em um Mac para operar aplicativos do Windows 11 via RDP e recuperar os arquivos concluídos.

LibreOffice Calc · RDP

Atualize um relatório e recupere a planilha

  1. rdp-cli files upload

    Envie uma planilha preparada com doze meses de dados de exemplo, um gráfico e totais.

  2. rdp-cli screenshot → click / type / key

    Abra no Calc remoto, cole uma nota de conclusão com rdp-cli e salve.

  3. rdp-cli files download

    Salvar e recuperar o XLSX. Conferir o gráfico e os totais: 15.230 solicitações, 14.933 resolvidas e 14.140 dentro da meta.

Shotcut · RDP

Exporte um projeto de vídeo e recupere o MP4

  1. rdp-cli files upload

    Envie a animação original e um projeto Shotcut preparado de quatro segundos.

  2. rdp-cli screenshot → click / type / key

    Abra o projeto no Shotcut remoto e inicie a exportação MP4 pela interface.

  3. rdp-cli files download

    Exportar e recuperar o MP4. Verificar 96 quadros a 24 fps, 960 × 540 e a soma de verificação da transferência.

Capturas de aplicativos em execução feitas em 20 de outubro de 2026, em dez idiomas e nos temas claro e escuro. Os dados são fictícios e a animação é original. São exemplos de tarefas, não testes de desempenho.

Escolha o protocolo para a tarefa.

RDP e VNC compartilham o fluxo de comandos. A tabela compara esses dois protocolos de desktop remoto; os recursos extras dependem do protocolo e do servidor.

RecursosRDPVNC
Capturas, teclado e mouseCompatívelCompatível
Área de transferência de textoDepende da política do servidorDepende da codificação negociada
Arquivos e pastasDepende da política do servidorIndisponível
Áudio e microfoneDepende da política do servidorIndisponível
Layout multimonitor solicitadoDepende da política do servidorIndisponível

A segurança do VNC depende do modo escolhido. O VNC clássico não é criptografado: use uma rede confiável ou VPN. VeNCrypt X509Plain usa TLS e exige verificar o certificado.

Visualização e controle pelo navegador funcionam na rede local ou VPN.