RDP / VNC / Android / X11 / Wayland

Pilotez ordinateurs et Android avec votre agent IA

Découvrez les captures, les commandes clavier et souris, le transfert de fichiers, le presse-papiers, le son et le multi-écran. Consultez les capacités de chaque protocole et reprenez la même session.

Un bureau distant. Un parcours de travail complet.

Votre agent IA pilote les appareils distants. Rejoignez-le à tout moment.

Pilotez des bureaux RDP et VNC, des applications X11 et Android sans ouvrir de fenêtre locale. Observez ou reprenez la même session avec la GUI ou le visualiseur web de rdp-cli.

Un exécutable adapté à votre système et à votre processeur. Vérifiez ses capacités avant d’utiliser les commandes ci-dessous.

Regardez la zone utile

Demandez une zone de l’écran ou une image réduite. Comparez-la à une observation précédente et omettez l’image si rien n’a changé ; les coordonnées restent liées à l’écran distant.

Attendez un changement ou la fin d’un transfert

Attendez qu’une zone change ou se stabilise, ou qu’une connexion, une opération ou un transfert atteigne un état donné. Vérifiez ensuite le résultat réel.

Une courte séquence, avec un point d’arrêt

Regroupez les actions choisies par l’agent, ajoutez une observation et arrêtez-vous à un point de contrôle. Une erreur ou un changement de contrôle stoppe la suite ; les actions envoyées ne sont pas annulées.

Gardez la progression et reprenez après vérification

Enregistrez la progression, les points de contrôle et certaines images. Exportez un rapport local puis, après une interruption, vérifiez le travail accompli avant d’envoyer de nouvelles étapes sans répéter les actions incertaines.

Des relais explicites entre agents et personnes

Les agents enregistrés se passent explicitement le contrôle. Une personne peut le reprendre via la GUI ou le web, puis le rendre à un agent choisi, qui observe à nouveau avant d’agir.

Connectez l’agent et diagnostiquez la connexion

Utilisez MCP intégré à l’exécutable ou la CLI. Enregistrez des profils nommés avec des références aux identifiants et examinez les couches de connexion avec doctor.

Choisissez l’écran principal ou un écran virtuel

Sur un appareil Android compatible, créez explicitement un écran virtuel et lancez-y une application. L’agent, la GUI et le web utilisent cet écran ; le comportement de l’application et les autorisations audio du système restent applicables.

Bien démarrer →
01

Laissez votre agent travailler

Connectez l’appareil, observez son écran et effectuez une action à la fois. Vérifiez le résultat avant de poursuivre.

RDP / VNC / X11 / Android

Piloter par commandes

Capturez l’écran, cliquez, glissez, faites défiler, saisissez du texte et des raccourcis. L’agent lit les réponses JSON et vérifie la capture suivante. Une entrée envoyée ne prouve pas que l’application a terminé la tâche.

  • Les résultats JSON, les codes d’erreur, le suivi des opérations et les événements aident l’agent à poursuivre, attendre ou gérer une erreur. Une nouvelle capture permet de vérifier le résultat dans l’application.

Observez, agissez avec le jeton de cette capture, puis vérifiez.

Bien démarrer
01 / Le travail par commandes
rdp-cli screenshot --session SESSION --out before.png

rdp-cli clipboard set --session SESSION \
  --text "Résultat : rapport terminé, prêt à être vérifié." \
  --observation OBSERVATION

rdp-cli key --session SESSION \
  --keys CTRL+V --observation OBSERVATION

rdp-cli screenshot --session SESSION --out result.png

RDP / VNC / X11 / Android

RDP / VNC / Android / X11 / Wayland

rdp-cli est un outil gratuit d’accès à distance pour les agents IA : pilotez des bureaux RDP et VNC, des téléphones Android et des applications Linux X11. Accédez à Wayland via un serveur RDP ou VNC existant. Suivez la même session dans une fenêtre ou un navigateur et reprenez la main à tout moment.

  • Pilotez les applications, échangez des fichiers et utilisez le son ou plusieurs écrans lorsque le serveur distant le permet.
  • Observez et pilotez un bureau via son serveur VNC existant. Le presse-papiers texte dépend du serveur ; VNC ne propose pas de transfert de fichiers, d’audio ni de modification de la disposition des écrans.
  • Observez et pilotez Android 12 ou ultérieur via ADB par USB ou Wi-Fi. Une autorisation de débogage est nécessaire. Testé avec Pixel 3 et Android 12 ; la compatibilité peut varier sur d’autres appareils.

Observez et pilotez Android 12 ou ultérieur via ADB par USB ou Wi-Fi. Une autorisation de débogage est nécessaire. Testé avec Pixel 3 et Android 12 ; la compatibilité peut varier sur d’autres appareils.

Bien démarrer

Se connecter de Linux à Windows RDP avec un seul exécutable →

Se connecter à VNC et vérifier la saisie en ligne de commande →

RDP / VNC / X11 / Android

Plusieurs sessions persistantes

Gardez plusieurs connexions et ciblez chacune par son identifiant. Fermer une fenêtre en lecture seule conserve la connexion. Une reconnexion invalide les anciennes observations et suspend le contrôle ; vérifiez avant de reprendre explicitement.

  • La connexion peut rester ouverte après la fin d’une commande. Les ID de session dirigent les actions suivantes vers le bon bureau ; une reconnexion met la saisie en pause pour observer à nouveau.

Consultez les sessions et déconnectez uniquement celle devenue inutile.

Bien démarrer

Diagnostiquer une connexion RDP, un écran noir ou une saisie bloquée →

02

Observez et prenez la main

Suivez la même session dans une fenêtre ou un navigateur autorisé. Mettez en pause, apportez une modification et rendez la main.

RDP / VNC / X11 / Android

Observer, suspendre et prendre la main

L’agent travaille sans interface par défaut. Pour observer ou intervenir, ouvrez la même session dans la fenêtre de bureau ou un navigateur autorisé. Windows et Mac utilisent les commandes du système ; Linux intègre son interface légère à l’exécutable. L’interface prend en charge dix langues, avec des fenêtres de visualisation claires ou sombres. Prendre le contrôle suspend les entrées de l’agent ; après restitution, il vérifie l’écran actuel avant de continuer.

  • Un nouveau visualiseur partage la connexion existante. Plusieurs personnes peuvent observer, mais une seule contrôle à la fois. Après restitution de la main, l’agent observe l’écran mis à jour.

Corrigez un détail, puis rendez la même session à l’agent.

Bien démarrer
Voir un passage de relais réel

Un agent prépare un rapport dans LibreOffice Calc sur un bureau Windows distant. Une personne le vérifie dans le navigateur, puis rend le contrôle.

  1. Observer l’agent

    L’agent vérifie le rapport et le laisse prêt à être relu.

  2. Mettre la tâche en pause

    Mettez la saisie à distance en pause tout en gardant le rapport visible.

  3. Prendre la main et vérifier

    Prenez le contrôle dans le navigateur et ajoutez votre approbation au même classeur.

  4. Rendre la main et vérifier

    Rendez le contrôle. L’agent enregistre le classeur relu et récupère le fichier.

Le classeur enregistré contient la note de l’agent et l’approbation humaine. Téléchargez le fichier réel.

Télécharger le résultat réel · XLSX (11.9 KB)

Télécharger le résultat réel · XLSX (11.9 KB)

Captures de logiciels en cours d’exécution, réalisées séparément dans dix langues et deux thèmes. Le rapport utilise des données fictives.

RDP / VNC / X11 / Android

Vos sessions actives, au même endroit

Gérez les sessions depuis la barre des menus du Mac, la zone de notification Windows ou le panneau Linux. Consultez la cible, la connexion, qui contrôle la session, les actions actuelles ou récentes, la progression des fichiers et les erreurs. Les icônes compatibles signalent l’activité de l’Agent. Ouvrez une vue, mettez en pause ou déconnectez la session choisie.

  • Sur Mac, recherchez une session par nom ou adresse ; sur Windows, sélectionnez-la dans la zone de notification. Le menu d’état permet de mettre toutes les sessions en pause. Sous Linux, utilisez le panneau de sessions avec recherche ; les bureaux compatibles affichent aussi une icône d’état. Sans zone de notification, ouvrez le panneau avec presence show --panel.

Ouvrez la session existante sans vous reconnecter à l’ordinateur distant. Sous Linux, l’icône dépend du bureau ; presence show --panel ouvre directement le panneau.

Bien démarrer

RDP / VNC / X11 / Android

Comprendre les actions

Dans les vues de bureau et Web, suivez le pointeur de l’Agent, les clics gauche, droit et central, les doubles clics, les déplacements, le défilement, les raccourcis et le nombre de caractères saisis. La progression des fichiers apparaît séparément avec son origine humaine ou Agent. Les indications ne répètent pas le texte saisi et n’apparaissent pas dans les captures ; l’écran distant lui-même n’est pas masqué.

  • Une touche ou un bouton de souris maintenu reste visible à côté d’une ligne distincte de transfert, même lorsque le panneau des fichiers est fermé. Les transferts indiquent leur origine humaine ou Agent. Les saisies sensibles masquent le texte et le nombre de caractères. Les indications suivent la langue et le thème clair ou sombre du visualiseur ; vous pouvez les régler ou les masquer sans modifier la tâche distante.

Les indications montrent les actions de saisie ; vérifiez le résultat distant avant de considérer la tâche comme terminée.

Bien démarrer

RDP / VNC / X11 / Android

Conserver vos accès

Connectez un compte local ou de domaine, enregistrez et référencez les identifiants via le stockage compatible et accordez explicitement les ressources web. Les certificats RDP et les modes VNC ont des limites différentes.

  • Enregistrez les identifiants dans le gestionnaire du système et réutilisez leur référence. Accordez au navigateur les permissions nécessaires, puis révoquez son accès après la tâche.

Séparez l’observation du contrôle des entrées, fichiers ou microphone.

Bien démarrer
03

Menez la tâche jusqu’au bout

Utilisez plusieurs écrans, envoyez des dossiers, échangez du texte et écoutez le son distant. Récupérez les résultats une fois prêts.

RDP

Travailler sur plusieurs écrans

Dans une session RDP multimoniteur négociée, capturez le bureau complet ou un écran et faites glisser des éléments entre les écrans. Ouvrez des fenêtres par écran ou changez d’écran dans le navigateur. Redimensionner le visualiseur ne modifie pas la disposition distante.

  • Capturer et contrôler chaque écran, avec glisser-déposer entre écrans.
  • Ouvrir une fenêtre native par écran ou changer d’écran dans le navigateur.
  • Consulter deux écrans distants depuis un ordinateur à écran unique.

Examinez un écran en conservant la vue d’ensemble.

Bien démarrer

RDP / X11 / Android

Échanger fichiers et dossiers

Transférer fichiers et dossiers en conservant leur arborescence. Suivre chaque transfert, consulter son résultat et l’annuler si nécessaire. Choisir explicitement l’écrasement ; le contenu transféré est vérifié.

Traitez un dossier de rapports ; cela ne donne pas accès à tous les disques distants.

Bien démarrer
  • RDP : échangez les fichiers via le lecteur redirigé de la session. La politique distante doit autoriser cette redirection.
  • X11 / SSH : utilisez le service SFTP existant du serveur, dans le répertoire choisi. X11 →
  • Android : transférez les fichiers dans le dossier de session du téléphone. VNC ne propose pas de transfert de fichiers. Android →

RDP

  1. Envoyer

    Fichiers et dossiers → lecteur d’échange

  2. Traiter à distance

    Ouvrir, modifier et enregistrer

  3. Récupérer

    Suivre le transfert et vérifier les fichiers

Envoyer un classeur préparé → le modifier dans Calc distant → enregistrer → télécharger. La note, les formules, les totaux et le graphique du fichier récupéré ont été vérifiés.

Voir les exemples réels de tableur et de vidéo →

Transférer des fichiers par RDP en ligne de commande →

RDP / VNC / X11 / Android

Utiliser le presse-papiers distant

Lisez ou définissez explicitement le texte, puis collez avec un raccourci. Aucun partage automatique avec le presse-papiers local. RDP dépend des règles du serveur ; VNC, de l’encodage négocié.

  • Échangez des adresses, des paragraphes ou du texte tabulé via le presse-papiers distant. La commande type saisit directement le texte pris en charge sans remplacer le presse-papiers.

Définissez le texte, envoyez CTRL+V et vérifiez l’application.

Bien démarrer

RDP

Choisir séparément la sortie audio RDP et la source du microphone

Choisissez séparément la sortie audio et le microphone RDP : poste de visualisation, ordinateur distant ou désactivé. L’audio de l’ordinateur distant nécessite le service audio Windows de rdp-cli. L’enregistrement démarre explicitement et dépend des périphériques et des règles du serveur.

  • Plusieurs personnes autorisées peuvent écouter simultanément.
  • Prendre le contrôle puis activer le micro pour une saisie vocale.
  • La restitution du contrôle ou la déconnexion arrête la capture ; la réactivation est explicite.

Préparez une tâche distante avec la voix sans envoyer le son ni les données du microphone au mauvais ordinateur.

Bien démarrer

Choisir où fonctionnent le son et le microphone RDP →

Android · USB / Wi-Fi

Un véritable écran Android pour votre agent IA.

Connectez un téléphone en USB ou en Wi-Fi. Votre agent observe, touche, saisit et récupère les résultats par commandes, pendant que vous suivez la même session dans une fenêtre ou un navigateur.

Téléphone Android · USB / Wi-Fi →

Téléchargements compatibles Android: macOS · Apple silicon · macOS · Intel · Windows · x64 · Windows · x86 · Windows · ARM64 · Linux · x86_64 · Linux · ARM64

Observer puis agir

Capturez l’écran réel, effectuez des appuis, balayages, glissements et gestes à deux doigts, puis vérifiez le résultat avec une nouvelle capture.

Texte, fichiers et applications

Collez explicitement du texte Unicode, transférez des fichiers et dossiers, et installez, lancez ou arrêtez des applications composées d’un seul APK.

Partager une session

Agent, fenêtre native et navigateurs autorisés partagent une session persistante. Mettez en pause ou prenez le contrôle au besoin.

La base de compatibilité est Android 12 ou ultérieur. Le téléphone vérifié est un Google Pixel 3 sous Android 12 ; cela ne signifie pas que tous les fabricants et versions ultérieures ont été testés.

Connecter un téléphone Android →

À savoir

Linux · X11 / SSH · Wayland RDP / VNC

Piloter des applications Linux avec un agent IA via X11 et SSH

Connectez un bureau Linux existant ou une application X11, travaillez par captures et commandes, récupérez les fichiers et laissez une personne reprendre la même session.

Télécharger: macOS · Apple siliconmacOS · IntelWindows · x64Windows · x86Windows · ARM64Linux · x86_64Linux · ARM64

Une session pour votre agent et vous

rdp-cli permet à un agent IA de voir et de piloter une application Linux par commandes. Il capture l’écran, agit sur ce qu’il observe puis vérifie la capture suivante. Vous pouvez ouvrir une fenêtre native ou un navigateur autorisé pour observer, mettre en pause ou reprendre cette même session.

Ouvrir une seule application

Cet exemple ouvre le Gedit déjà installé dans un affichage isolé intégré à rdp-cli. Aucune fenêtre locale de visualisation ne s’ouvre automatiquement. Conservez data.session de la réponse sous SESSION. Un hôte utilisant habituellement Wayland peut aussi transférer une application compatible X11 ainsi.

Ou rejoindre un bureau X11 existant

Indiquez le display réel et le chemin de son fichier d’autorisation existant. Le compte SSH doit pouvoir accéder à ce display : l’authentification SSH seule ne donne pas accès au bureau. Ce mode rejoint le bureau existant sans créer une nouvelle session de connexion.

Vos sessions actives, au même endroit
Le bon protocole pour votre tâche. · X11
FonctionsX11
Captures, clavier et sourisPris en charge
Presse-papiers texteSelon les règles du serveur
Fichiers et dossiersSelon les règles du serveur
Son et microphoneIndisponible
Disposition multimoniteur demandéeIndisponible

X11 natif ne propose aucune redirection de lecture audio ou de microphone. Un bureau Wayland complet nécessite un point de terminaison RDP ou VNC compatible déjà configuré, selon ses capacités réellement négociées. rdp-cli n’installe ni n’active de service distant. Une application peut se fermer si son affichage est déconnecté ou perdu : enregistrez d’abord, sans supposer un redémarrage automatique ou un espace de travail conservé.

Bien démarrer →

Piloter des applications Linux avec un agent IA via X11 et SSH →

D’une tâche à distance à un fichier utilisable

Deux parcours réels : un Agent a utilisé les commandes rdp-cli sur un Mac pour piloter des applications Windows 11 via RDP, puis récupérer les fichiers terminés.

LibreOffice Calc · RDP

Mettre à jour un rapport et récupérer le classeur

  1. rdp-cli files upload

    Envoyer un classeur préparé avec douze mois de données fictives, un graphique et des totaux.

  2. rdp-cli screenshot → click / type / key

    L’ouvrir dans Calc distant, coller une note de fin avec rdp-cli et enregistrer.

  3. rdp-cli files download

    Enregistrer et récupérer le XLSX. Vérifier le graphique et les totaux : 15 230 demandes, 14 933 résolues et 14 140 dans l’objectif.

Shotcut · RDP

Exporter un projet vidéo et récupérer le MP4

  1. rdp-cli files upload

    Envoyer l’animation originale et un projet Shotcut préparé de quatre secondes.

  2. rdp-cli screenshot → click / type / key

    Ouvrir le projet dans Shotcut distant et lancer l’export MP4 depuis son interface.

  3. rdp-cli files download

    Exporter et récupérer le MP4. Vérifier 96 images à 24 i/s, 960 × 540 et la somme de contrôle du transfert.

Captures d’applications en cours d’exécution du 20 octobre 2026, en dix langues et avec les thèmes clair et sombre. Les données sont fictives et l’animation est originale. Ce sont des exemples de tâches, pas des mesures de performance.

Le bon protocole pour votre tâche.

RDP et VNC partagent le parcours par commandes. Le tableau compare ces deux protocoles de bureau distant ; leurs capacités supplémentaires dépendent du protocole et du serveur.

FonctionsRDPVNC
Captures, clavier et sourisPris en chargePris en charge
Presse-papiers texteSelon les règles du serveurSelon l’encodage négocié
Fichiers et dossiersSelon les règles du serveurIndisponible
Son et microphoneSelon les règles du serveurIndisponible
Disposition multimoniteur demandéeSelon les règles du serveurIndisponible

La sécurité VNC dépend du mode choisi. Le VNC classique n’est pas chiffré : utilisez un réseau de confiance ou un VPN. VeNCrypt X509Plain utilise TLS et exige la vérification du certificat.

La consultation et le contrôle web fonctionnent en réseau local ou via VPN.