rdp-cli

AI Agent 스크린샷 토큰 사용량을 줄이는 방법

최종 업데이트: 2026년 11월 6일
검토: rdp-cli Team

AI Agent가 원격 데스크톱을 조작할 때 스크린샷은 다음 작업을 결정하는 데 필요한 시각 정보입니다. 클릭할 때마다 전체 고해상도 화면을 보내면 토큰 사용량, 지연 시간과 비용이 빠르게 늘어날 수 있습니다.

PNG를 단순히 압축하는 것만으로는 충분하지 않습니다. 관련 없는 영역과 변경되지 않은 스크린샷의 반복 전송을 줄여야 합니다.

가장 실용적인 방법은 필요한 영역만 캡처하고, 세부 정보가 필요하지 않을 때 이미지를 축소하며, 상태 변화를 기다린 뒤 필요한 부분만 확인하는 것입니다.

rdp-cli를 사용하면 RDP, VNC, X11 또는 Android 세션에 연결하고 화면 영역을 캡처하거나 이전 관찰 결과와 비교할 수 있습니다.

빠른 답변: AI Agent 스크린샷 토큰을 줄이는 방법

Agent가 필요한 영역만 캡처하고, 전체 세부 정보가 필요하지 않을 때 이미지를 축소하세요. 변경 감지로 중복 이미지를 피하고 전체 화면을 반복해서 조회하는 대신 상태 변화를 기다리세요.

전체 화면 캡처는 초기 컨텍스트를 만들거나 레이아웃이 바뀌었을 때만 사용하세요. 현재 옵션은 rdp-cli 명령어 문서에서 확인할 수 있습니다.

고해상도 스크린샷이 더 많은 토큰을 사용하는 이유

고해상도 화면에는 Agent가 실제로 필요로 하지 않는 정보가 많이 포함될 수 있습니다. 매번 전체 화면을 보내거나, 클릭 전후에 같은 화면을 반복하거나, 대화 상자 하나를 확인하기 위해 전체 데스크톱을 보내는 방식이 대표적인 낭비입니다.

PNG 파일 크기는 주로 전송 속도에 영향을 줍니다. 실제 토큰 사용량은 이미지 크기, 이미지 개수와 사용하는 비전 모델의 처리 방식에 따라 달라집니다.

1. 영역 스크린샷 사용

버튼, 대화 상자, 표 또는 상태 표시만 확인하면 필요한 영역만 캡처합니다.

rdp-cli screenshot \
  --session SESSION \
  --region 800,120,720,560 \
  --out focused.png

SESSION을 실제 세션 ID로 바꾸세요. --region은 원격 화면 좌표로 캡처 영역을 지정합니다. 자세한 내용은 명령어 문서를 참고하세요.

2. 전체 세부 정보가 필요하지 않으면 이미지 축소

rdp-cli screenshot \
  --session SESSION \
  --region 800,120,720,560 \
  --max-width 900 \
  --out focused-small.png

작은 글씨, 복잡한 표와 세부 입력 화면에는 큰 이미지가 필요할 수 있습니다. rdp-cli 기능 안내에 따르면 이미지가 축소되어도 입력 좌표는 원격 화면 기준으로 유지됩니다.

3. 스크린샷 변경 감지 사용

앱이 로딩되는 동안 같은 화면을 계속 보내는 대신 이전 관찰 결과와 비교하세요.

rdp-cli screenshot \
  --session SESSION \
  --since PREVIOUS_REFERENCE \
  --region 800,120,720,560 \
  --out current.png

대상 영역이 변하지 않았다면 같은 이미지를 다시 처리하지 않고 기다릴 수 있습니다.

4. 스크린샷 폴링 대신 상태 대기 사용

영역이 변했는지만 알면 되는 경우에는 wait를 사용하세요.

rdp-cli wait \
  --session SESSION \
  --condition changed \
  --region 800,120,720,560

영역이 안정될 때까지 기다리려면 condition stable을 사용합니다. 이 방식은 불필요한 스크린샷을 줄입니다.

5. 관찰 → 작업 → 검증 루프 유지

현재 화면이나 대상 영역을 캡처하고, 최신 관찰 결과를 기준으로 하나의 작업을 수행한 다음, 화면이 변하거나 안정될 때까지 기다립니다. 이후 필요한 결과 영역만 캡처하고 예상 결과를 검증합니다.

모든 입력에는 최신 observation을 사용해야 합니다. 전체 흐름은 rdp-cli 빠른 시작에서 확인할 수 있습니다.

원격 데스크톱 최적화 전략

처음에는 전체 화면을 한 번 캡처하고, 대상 창을 찾은 뒤 영역 캡처로 전환하세요. 중요한 작업 후에는 상태 변화를 기다리고 결과 영역만 확인합니다. 레이아웃이 바뀌거나 Agent가 컨텍스트를 잃은 경우에만 전체 화면을 다시 캡처하세요.

제한 사항

여러 창 비교, 모니터 간 창 이동, 전체 데스크톱 레이아웃 판단, 활성 창 확인 또는 예상하지 못한 오류 조사에는 전체 화면이 필요할 수 있습니다.

rdp-cli는 연결, 스크린샷, 입력, 파일과 세션 제어를 제공하지만 AI 모델은 포함하지 않습니다. 판단은 외부 AI Agent가 담당합니다.

FAQ

스크린샷 토큰 사용량을 줄이는 가장 좋은 방법은 무엇인가요?

영역 캡처를 사용하고 중복 이미지를 피하며 상태 변화를 기다린 뒤 작은 결과 영역을 검증하세요.

이미지 크기를 줄이면 항상 토큰이 줄어드나요?

항상 그런 것은 아닙니다. 캡처 영역과 중복 전송 횟수를 함께 줄이는 것이 중요합니다.

매번 전체 화면을 보내야 하나요?

아닙니다. 일반 작업에는 영역 스크린샷이면 충분한 경우가 많습니다.

rdp-cli는 화면 일부만 캡처할 수 있나요?

가능합니다. screenshot 명령에서 --region을 사용할 수 있습니다.

rdp-cli에 AI 모델이 포함되어 있나요?

아닙니다. rdp-cli는 원격 제어를 제공하고 AI Agent가 추론과 결정을 담당합니다.

결론

핵심은 시각적 검증을 없애는 것이 아니라 관찰 범위를 좁히는 것입니다.

필요한 영역 캡처 → 하나의 작업 수행 → 변화 대기 → 필요한 결과만 캡처 → 결과 검증.

이 방식은 AI Agent에 필요한 피드백을 유지하면서 고해상도 원격 데스크톱 자동화를 더 효율적으로 만듭니다.