rdp-cli

Computer Use übernimmt meinen Computer: So lösen Sie das Problem

Zuletzt aktualisiert: 6. November 2026
Geprüft vom rdp-cli-Team

Wenn ein Computer-Use-Agent Ihren lokalen Desktop steuert, benötigt er Maus, Tastatur und das aktive Fenster. Dadurch kann sich der Cursor bewegen, Eingaben können im falschen Programm landen und Fenster können unerwartet wechseln.

Die zuverlässige Lösung ist eine dedizierte Windows-Umgebung, eine virtuelle Maschine oder eine Cloud-Workstation. Verbinden und steuern Sie diese Umgebung über RDP.

Mit rdp-cli kann ein Agent RDP-, VNC-, X11- oder Android-Sitzungen bedienen, während eine Person dieselbe Sitzung beobachtet, pausiert oder übernimmt.

Kurzantwort: Wie verhindert man, dass Computer Use den Computer übernimmt?

Geben Sie dem AI Agent eine eigene Remote-Windows-Umgebung, damit Maus und Tastatur Ihres lokalen Computers frei bleiben. Öffnen Sie die Sitzung bei Bedarf schreibgeschützt, pausieren Sie den Agent, übernehmen Sie die Kontrolle, korrigieren Sie den Zustand und geben Sie die Kontrolle anschließend zurück.

Bleibt die Sitzung pausiert, setzen Sie sie ausdrücklich fort:

rdp-cli resume --session SESSION

Weitere Schritte finden Sie im rdp-cli-Schnellstart.

Warum übernimmt Computer Use den Computer?

Der Agent nimmt den Bildschirm auf, erkennt ein Ziel, bewegt die Maus, klickt oder schreibt und nimmt anschließend einen neuen Bildschirm auf. Auf dem lokalen Alltagscomputer teilen sich Mensch und Agent Mausposition, Tastaturfokus und aktives Fenster.

Mehrere Agenten können dadurch widersprüchliche Eingaben senden.

1. Dedizierte Remote-Umgebung vorbereiten

Bereiten Sie einen Windows-PC, eine virtuelle Maschine oder eine Cloud-Workstation vor. rdp-cli verbindet und steuert diese Umgebung, erstellt aber keine virtuelle Maschine und stellt keinen Cloud-PC bereit.

Ihr Computer: normale Arbeit
        │
        └── RDP / VNC
              │
        Dedizierte Windows-Umgebung
              │
          AI Agent

So werden Eingaben, Fenster, Testdaten, exportierte Dateien und Agent-Aufgaben getrennt. Das eignet sich für ERP, Buchhaltung, Excel, ältere Windows-Anwendungen und QA.

2. Sitzung beobachten, ohne Kontrolle zu übernehmen

rdp-cli watch --session SESSION --viewer window

Für einen autorisierten Browser-Viewer über LAN oder VPN:

rdp-cli watch --session SESSION --viewer web

Der Viewer startet schreibgeschützt. Mehrere Viewer können beobachten, aber nur einer kann gleichzeitig menschliche Kontrolle besitzen.

3. Agent pausieren und Kontrolle übernehmen

Bei einem Fehler, einer Genehmigungsseite oder einer riskanten Aktion:

rdp-cli pause --session SESSION

Geben Sie anschließend einem verbundenen Viewer die menschliche Kontrolle:

rdp-cli control take \
  --session SESSION \
  --viewer-id VIEWER_ID

Währenddessen werden Agent-Eingaben abgelehnt. Nach der Korrektur geben Sie die Kontrolle zurück:

rdp-cli control release \
  --session SESSION \
  --viewer-id VIEWER_ID

Wenn die Sitzung noch pausiert ist:

rdp-cli resume --session SESSION

Siehe die rdp-cli-Befehlsdokumentation.

Warum ist nach der Übernahme ein neuer Screenshot nötig?

Die menschliche Korrektur kann aktives Fenster, Fokus, Dialog, Mausposition, Layout oder Dateiinhalte verändern. Der Agent muss deshalb einen neuen Screenshot und eine neue observation erhalten.

Der Ablauf lautet: pausieren → korrigieren → Kontrolle freigeben → bei Bedarf fortsetzen → neuen Screenshot aufnehmen → weiterarbeiten.

Konflikte zwischen mehreren Agenten vermeiden

Mehrere Agenten sollten nicht gleichzeitig Eingaben senden. Ein Agent gibt die Kontrolle frei, der nächste übernimmt sie und prüft zuerst den aktuellen Bildschirm.

Einschränkungen

rdp-cli verbindet Remote-Sitzungen und verwaltet Kontrolle, macht aber dasselbe lokale Vordergrundfenster nicht für zwei Personen gleichzeitig sicher nutzbar. Prüfen Sie RDP-Sitzungslimits, lokale Hardware und Einzelbenutzer-Anwendungen separat.

FAQ

Kann Computer Use im Hintergrund laufen, während ich den Computer benutze?

Wenn der Agent den lokalen Desktop steuert, kann es zu Konflikten mit Maus, Tastatur und aktiven Fenstern kommen. Eine dedizierte Remote-Umgebung ist sicherer.

Arbeitet der Agent nach der menschlichen Übernahme automatisch weiter?

Nach der Freigabe benötigt er einen neuen Screenshot und eine neue observation. Wenn die Sitzung pausiert bleibt, verwenden Sie resume.

Können mehrere Personen dieselbe Remote-Sitzung beobachten?

Ja. Mehrere Viewer können schreibgeschützt beobachten, aber nur einer kann die menschliche Kontrolle halten.

Enthält rdp-cli ein Computer-Use-Modell?

Nein. rdp-cli stellt Verbindung, Screenshots, Eingaben, Dateiübertragung und Kontrollübergabe bereit. Der AI Agent übernimmt die Planung und Interpretation.

Fazit

Computer Use übernimmt den Computer, weil Mensch und KI denselben Desktop, dieselbe Maus und dieselbe Tastatur verwenden.

Dedizierte Remote-Umgebung → RDP-Verbindung → schreibgeschützte Überwachung → Pause → menschliche Kontrolle → Freigabe oder Fortsetzung → neuer Screenshot → Rückgabe an den Agenten.