rdp-cli

Computer UseでPCを占有される問題を解決する方法

最終更新:2026年11月6日
レビュー:rdp-cli Team

Computer Use Agentがローカルデスクトップを操作すると、マウス、キーボード、アクティブウィンドウを使用します。そのため、カーソルが勝手に動く、入力先が変わる、ウィンドウが切り替わるといった問題が起きます。

最も確実な方法は、人とAIが同じ前面デスクトップを同時に操作することではありません。専用のWindows PC、仮想マシン、クラウドワークステーションを用意し、RDP経由で接続して操作します。

rdp-cliでは、AgentがRDP、VNC、X11、Androidのセッションを操作し、人が同じセッションを監視、一時停止、引き継ぎできます。

クイック回答:Computer UseによるPCの占有を止めるには?

AI Agent専用のリモートWindows環境を用意し、ローカルのマウスとキーボードを普段の作業に残します。介入が必要な場合は、読み取り専用でセッションを開き、Agentを一時停止し、人が操作してから制御を解放します。

セッションが一時停止のままなら、明示的に再開します。

rdp-cli resume --session SESSION

設定方法はクイックスタートを参照してください。

なぜComputer UseはPCを占有するのか?

Computer Useは通常、画面を取得し、対象を識別し、マウスを移動し、クリックや入力を行い、もう一度画面を取得します。

Agentが普段使いのPCに接続していると、マウス位置、キーボードフォーカス、前面ウィンドウが共有されるため、入力が競合します。複数のAgentが同時に入力を送ると、操作が衝突することもあります。

1. 専用のリモート環境を用意する

専用のWindows PC、仮想マシン、クラウドワークステーションを用意します。rdp-cliはこの環境へ接続して操作しますが、仮想マシンやクラウドPCを作成するサービスではありません。

自分のPC:通常作業
        │
        └── RDP / VNC
              │
        専用Windows環境
              │
          AI Agent

この構成では、入力、アプリのウィンドウ、テストデータ、出力ファイル、AIタスクを分離できます。ERP、会計ソフト、Excel、レガシーWindowsアプリ、QA環境に適しています。

2. 制御せずにセッションを見る

監視だけなら、既存セッションのビューアーを開きます。

rdp-cli watch --session SESSION --viewer window

LANまたはVPNの認証済みブラウザビューアーを使う場合:

rdp-cli watch --session SESSION --viewer web

ビューアーは読み取り専用で開始するため、Agentは作業を続けられます。複数のビューアーが監視できますが、人間の制御権を持てるのは同時に1つだけです。

3. Agentを一時停止して操作する

エラー、承認画面、危険な操作が出たら入力を一時停止します。

rdp-cli pause --session SESSION

接続済みビューアーに人間の制御権を渡します。

rdp-cli control take \
  --session SESSION \
  --viewer-id VIEWER_ID

修正が終わったら制御を解放します。

rdp-cli control release \
  --session SESSION \
  --viewer-id VIEWER_ID

セッションがまだ停止中なら再開します。

rdp-cli resume --session SESSION

詳細はコマンドリファレンスを参照してください。

引き継ぎ後に新しいスクリーンショットが必要な理由

人が操作すると、前面ウィンドウ、入力フォーカス、ダイアログ、マウス位置、レイアウト、ファイル内容が変わる可能性があります。Agentは古い観測結果を再利用せず、最新画面を取得してから続行する必要があります。

正しい流れは、一時停止 → 人間が修正 → 制御を解放 → 必要なら再開 → 新しい画面を取得 → 続行です。

複数Agentの衝突を避ける方法

複数Agentが同じセッションを使う場合、同時に入力を送らないでください。1つのAgentが制御を解放し、次のAgentが制御を取得して新しい画面を確認してから続けます。

制限事項

rdp-cliはリモートセッションへの接続と制御権の管理を提供しますが、同じローカルの前面ウィンドウを2人が安全に同時操作できるようにするものではありません。RDPサーバーの同時接続制限、ローカルハードウェア、単一ユーザーアプリの制約は別途確認してください。

FAQ

Computer Useは自分がPCを使っている間もバックグラウンドで動かせますか?

Agentがローカルデスクトップを操作する場合、マウスやキーボードと競合します。専用のリモートPC、仮想マシン、クラウド環境の方が安全です。

人間が引き継いだ後、Agentは自動で続きますか?

制御を解放したら、Agentは新しいスクリーンショットと観測結果を取得する必要があります。セッションが停止中ならresumeを実行します。

複数人で同じセッションを見られますか?

はい。複数のビューアーが読み取り専用で監視できますが、人間の制御権は1つだけです。

rdp-cliにComputer Useモデルは含まれますか?

いいえ。rdp-cliは接続、スクリーンショット、入力、ファイル転送、制御の引き継ぎを提供し、外部AI Agentが推論を担当します。

まとめ

Computer UseがPCを占有するのは、AIと人が同じデスクトップ、マウス、キーボードを共有しているからです。

専用リモート環境 → RDP接続 → 読み取り専用監視 → 一時停止 → 人間が操作 → 解放または再開 → 新しい画面を取得 → Agentに返す。