Claude Computer Use, Pro면 다 된다고요?
2026년 3월 23일, Anthropic이 Claude Cowork와 Claude Code에 Computer Use 기능을 리서치 프리뷰로 공개했습니다. 폰에서 지시하면 집 Mac이 알아서 일을 처리해주는 기능이죠. 그런데 “Pro 구독이면 다 된다”는 말, 막상 확인하면 조건이 꽤 다릅니다.
72.5%
72.36%
macOS 전용
Pro · Max 한정
Claude Computer Use가 뭔지, 한 줄로 먼저 정리하면
Claude Computer Use는 Claude가 사람처럼 Mac 화면을 보면서 마우스를 클릭하고 키보드를 입력해 작업을 처리하는 기능입니다. 2026년 3월 23일, Anthropic이 Claude Cowork와 Claude Code 양쪽에 리서치 프리뷰로 동시 공개했습니다.
기존 AI 비서가 전용 API가 연결된 앱만 건드릴 수 있었다면, Computer Use는 API가 없는 소프트웨어도 그냥 화면을 직접 조작해서 처리합니다. Anthropic은 이 방식을 “도구를 모델에 맞추는 게 아니라, 모델을 도구에 맞추는 것”이라고 설명했습니다. (출처: Anthropic 공식 블로그, anthropic.com/news/developing-computer-use)
💡 공식 발표와 실제 출시 흐름을 같이 놓고 보면 이런 차이가 보입니다.
Computer Use 아이디어가 처음 공개된 건 2024년 10월이고, 당시 OSWorld 점수는 14.9%였습니다. 2026년 3월 23일 출시 시점엔 72.5%까지 올랐습니다. 약 16개월 만입니다.
그런데 숫자만 보면 “이제 다 된다”는 인상을 받기 쉽습니다. 실제로 공식 문서를 들여다보면 아직 꽤 많은 조건이 붙어 있습니다. 다음 섹션부터 하나씩 짚어봅니다.
“화면을 직접 제어한다”는 말이 절반만 맞는 이유
Computer Use를 설명하는 글 대부분이 “Claude가 화면을 보면서 클릭한다”는 부분을 강조합니다. 기술적으로는 맞습니다. 그런데 실제 동작 순서는 좀 다릅니다.
Anthropic 공식 문서에는 이렇게 나와 있습니다. “Claude는 가장 정밀한 도구를 먼저 씁니다. Slack이나 Google Calendar처럼 커넥터가 연결된 앱은 커넥터를 통해 API로 처리하고, 커넥터가 없을 때만 화면을 직접 제어합니다.” (출처: claude.com/blog/dispatch-and-computer-use, 2026.03.23) 화면 제어가 주(主)가 아니라 폴백(fallback), 즉 최후 수단입니다.
| 방식 | 적용 조건 | 속도 | 정확도 |
|---|---|---|---|
| 커넥터(API) | Slack·Google Calendar 등 커넥터 있을 때 | 수 초 | 높음 |
| 화면 직접 제어 | 커넥터 없는 앱에만 적용 | 느림 | 상대적으로 낮음 |
왜 이게 중요하냐면, 화면 기반 제어는 스크린샷을 찍어서 픽셀 좌표를 계산한 다음 클릭하는 방식이기 때문입니다. Anthropic은 이 방식을 “플립북(flipbook)”에 비유했습니다. 연속 영상이 아니라 사진을 순서대로 찍어 맥락을 파악하는 방식이라서, 짧게 스치는 알림이나 빠른 화면 전환은 놓칠 수 있습니다. (출처: anthropic.com/news/developing-computer-use) 사진을 넘기는 방식이라 실시간 반응이 필요한 작업엔 맞지 않습니다.
💡 커넥터가 있는지 없는지가 실제 사용 경험을 크게 가릅니다.
Slack 메시지 보내기처럼 커넥터가 연결된 작업은 수 초 안에 끝납니다. 반면 커넥터 없는 전용 내부 소프트웨어를 다룰 때는 화면 제어로 넘어가면서 속도가 눈에 띄게 느려집니다.
OSWorld 72.5%, 인간 수준이라고요? 숫자의 맹점
Claude Computer Use를 소개하는 대부분의 글에서 OSWorld 72.5% 수치를 인간 수준(72.36%)과 비교합니다. 수치만 놓고 보면 사람이랑 거의 같은 수준이라는 인상이 생깁니다. 그런데 이 비교엔 빠져 있는 맥락이 있습니다.
Anthropic 공식 발표(anthropic.com/news/claude-sonnet-4-6, 2026.02.17)를 보면, 2024년 10월의 14.9%는 OSWorld 원본 기준이고, 2026년 2월의 72.5%는 OSWorld-Verified 기준입니다. 두 버전은 과제 품질과 평가 방식이 다르게 개정됐습니다. Anthropic도 같은 발표문에 이렇게 명시했습니다. “OSWorld-Verified는 2025년 7월에 출시된 원본 OSWorld의 현행 업그레이드 버전이며, 과제 품질, 평가 채점, 인프라가 업데이트됐습니다.” 즉, 14.9%에서 72.5%로의 수치 상승을 단순히 “5배 향상”으로 읽으면 정확하지 않습니다.
| 시점 | 모델 | 벤치마크 버전 | 점수 |
|---|---|---|---|
| 2024년 10월 | Claude 3.5 Sonnet | OSWorld 원본 | 14.9% |
| 2026년 2월 | Claude Sonnet 4.6 | OSWorld-Verified | 72.5% |
| 2026년 2월 | Claude Opus 4.6 | OSWorld-Verified | 72.7% |
| 참고 | 인간 수준 | OSWorld 공식 | 72.36% |
그래도 성능이 크게 오른 건 사실입니다. Anthropic 자체 보험 업무 벤치마크에서는 Claude Sonnet 4.6이 94%를 기록하기도 했습니다. (출처: anthropic.com/claude/sonnet, AI 보험사 Pace 사례) 실무에서도 복잡한 스프레드시트 탐색이나 멀티 브라우저 탭 작업에서 인간 수준에 근접하고 있다고 Anthropic이 밝혔습니다.
다만 벤치마크와 실제 사용은 다릅니다. Anthropic 공식 문서에서 직접 이렇게 인정합니다. “복잡한 작업은 두 번 시도해야 할 수 있고, 화면을 통한 작업은 직접 통합보다 느립니다.” 수치는 높아졌지만 속도와 신뢰성 면에서 아직 채워야 할 부분이 있습니다.
Pro면 다 된다고요? 안 되는 조건이 있습니다
여기서 Computer Use를 쓰고 싶어서 Pro를 결제한 분들이 당황하는 부분이 나옵니다. Anthropic 공식 문서(claude.com/blog/dispatch-and-computer-use, 2026.03.23)에 명시된 조건들을 정리했습니다.
| 조건 | 내용 |
|---|---|
| 플랜 | Claude Pro 또는 Max 한정. Team·Enterprise 현재 미지원. |
| 운영체제 | macOS 전용. Windows·Linux는 화면 제어 미지원. |
| 앱 상태 | Claude 데스크톱 앱이 실행 중이어야 함. 잠자기 모드 불가. |
| 롤아웃 | Pro/Max 전원 동시 활성화 아님. 순차 배포 중. |
| 설정 필수 | Dispatch 설정에서 “Claude가 컴퓨터를 제어하도록 허용” 토글 수동 활성화. |
Team 플랜을 쓰는 소규모 팀이라면 아직 쓸 수 없습니다. Windows 사용자도 마찬가지고요. Dispatch 자체는 Windows x64를 지원하지만, 화면 직접 제어 기능은 macOS에서만 됩니다. Anthropic 공식 문서에는 Windows 화면 제어에 대해 “coming soon”이라고만 나와 있고, 별도 일정은 공개되지 않았습니다.
⚠️ Pro 구독 후 토글이 보이지 않을 수 있습니다.
리서치 프리뷰라서 Pro/Max 전체에 동시에 열리지 않고 순차 배포 중입니다. Dispatch 설정에 “Claude가 컴퓨터를 제어하도록 허용” 항목이 없다면 아직 배포 대기 중인 상태입니다. 별도 신청 없이 자동 확대되므로 기다리면 됩니다.
Dispatch와 결합하면 달라지는 것들
Computer Use가 공개된 날, 함께 언급된 기능이 있습니다. 바로 2026년 3월 16일에 먼저 출시된 Dispatch입니다. Dispatch는 폰과 데스크탑 사이에 하나의 지속적인 대화 스레드를 유지하는 기능입니다.
두 기능이 조합되면 이런 흐름이 가능해집니다. 출근길 지하철에서 폰으로 Claude에게 “오늘 받은 이메일 정리하고 주간 보고서 초안 써줘”라고 지시합니다. 집에 있는 Mac의 Claude가 화면을 직접 띄워 이메일 앱을 열고, 내용을 분석하고, 문서 앱에서 보고서를 작성합니다. 사무실에 도착하면 결과물이 데스크탑에 완성돼 있습니다. Anthropic 공식 블로그는 “매일 아침 이메일을 확인하거나 매주 특정 지표를 수집하도록 반복 설정할 수도 있다”고 밝혔습니다. (출처: claude.com/blog/dispatch-and-computer-use) 반복 지시가 가능하다는 뜻입니다.
💡 Dispatch는 Claude Cowork와 Code 양쪽에서 이제 동시에 씁니다.
원래 Dispatch는 Cowork 전용 기능이었는데, Computer Use 발표(2026.03.23)와 함께 Claude Code에서도 쓸 수 있게 됐습니다. 개발자라면 폰에서 지시 → Mac이 IDE 켜서 코드 수정 · 테스트 · PR 제출까지 가능해진 셈입니다.
단, Dispatch 연동 자체가 선행 조건입니다. Claude 데스크톱 앱에서 Dispatch 탭을 열어 QR 코드로 모바일 앱과 페어링한 다음, “Claude가 컴퓨터를 제어하도록 허용” 토글을 켜야 Computer Use가 활성화됩니다.
실제로 써볼 만한 시나리오 vs 아직 피해야 할 작업
공식 데모와 실사용 커뮤니티에서 보고된 시나리오를 바탕으로 분류했습니다. 리서치 프리뷰 단계이므로 실제 동작은 환경에 따라 달라질 수 있습니다.
✅ 지금 바로 써봐도 되는 작업
| 시나리오 | Claude가 하는 일 |
|---|---|
| Downloads 폴더 정리 | 파일 확장자 파악 → 이미지·문서·영상 폴더로 분류 이동 |
| 받은 이메일 라벨 분류 | Gmail 열기 → 검색 → 라벨 생성 → 분류 (공식 데모 시나리오) |
| 브라우저 정보 수집 | 여러 탭 탐색 → 데이터 수집 → 메모 앱에 정리 |
| PPT → PDF 변환 후 캘린더 첨부 | 파일 찾기 → PDF 내보내기 → 캘린더 앱 → 일정 첨부 (공식 데모) |
| 사진 중 특정 인물 분류 | 레퍼런스 이미지 학습 → 폴더 탐색 → 시각 매칭 → 분류 |
❌ 아직 피해야 할 작업
Anthropic 공식 문서(support.claude.com/en/articles/14128542)는 다음 작업에 대해 명시적으로 사용을 권고하지 않습니다. 은행·결제 등 금융 거래, 비밀번호·API 키·계정 정보 입력, 의료 기록 등 건강 정보 처리, 정밀한 드래그 앤 드롭이 필요한 디자인 작업, 실시간 알림에 즉각 반응해야 하는 작업, 법률 문서나 계약서 처리가 여기 해당합니다.
특히 민감한 정보가 화면에 보이는 상태에서 Claude를 작동시키지 말 것을 공식 문서가 강조합니다. “Claude가 화면 캡처를 통해 스크린에 보이는 모든 정보를 인식할 수 있으며, 여기엔 개인 정보나 민감 문서도 포함됩니다.” 쓰기 전에 민감한 앱이나 파일은 닫아두는 것을 권장합니다. (출처: support.claude.com/en/articles/14128542)
안전 설계, 공식 문서가 솔직하게 인정한 부분
Anthropic은 Computer Use 출시 블로그에 안전 관련 내용을 꽤 길게 담았습니다. 마케팅 글이 아니라 리스크를 인정하는 내용이라서 직접 확인해볼 만합니다.
가장 신경 쓰는 위험은 프롬프트 인젝션입니다. Claude가 브라우저로 웹사이트를 방문할 때 악의적인 지시문이 화면에 숨겨져 있으면 Claude가 원래 목적과 다른 행동을 할 수 있습니다. 이를 막기 위해 Anthropic은 모델 내부 활성화값을 실시간 스캔해서 프롬프트 인젝션 징후를 탐지하는 시스템을 내장했습니다. (출처: claude.com/blog/dispatch-and-computer-use, 2026.03.23) 스캔 시스템을 심어뒀다는 뜻입니다.
그러면서도 공식 문서는 이렇게 덧붙입니다. “이러한 보호 장치가 완벽하지 않으며, Claude가 가끔 이 범위를 벗어나 행동할 수 있습니다.” (출처: support.claude.com/en/articles/14128542) 처음 쓰는 앱부터 시작하고, 작업 도중 Claude의 행동을 모니터링하라는 권장 사항도 함께 나와 있습니다.
💡 Cowork 메모리와 Computer Use의 접점을 놓치는 경우가 많습니다.
Cowork에는 세션 간 맥락을 유지하는 메모리 기능이 있습니다. Computer Use가 활성화된 상태에서 화면 작업을 하면, 화면에서 읽은 정보가 이론적으로 메모리에 영향을 줄 수 있습니다. Anthropic은 비밀번호·재무 정보·건강 정보는 메모리 대상에서 제외된다고 밝혔지만, 모든 민감 정보가 자동으로 걸러진다는 보장은 없습니다. 메모리는 언제든지 직접 확인하고 삭제할 수 있습니다.
Q&A
Q1. Windows에서도 Claude Computer Use를 쓸 수 있나요?
현재는 macOS에서만 화면 제어(Computer Use) 기능이 지원됩니다. Dispatch 자체는 Windows x64도 지원하지만, 화면 제어는 macOS 전용입니다. Anthropic 공식 문서에는 Windows 화면 제어를 “coming soon”이라고만 명시했고, 구체적인 출시 일정은 공개되지 않았습니다. (출처: claude.com/blog/dispatch-and-computer-use, 2026.03.23)
Q2. Team 플랜으로는 쓸 수 없나요?
현재 리서치 프리뷰 기준으로 Computer Use는 Claude Pro와 Claude Max 구독자에게만 제공됩니다. Team·Enterprise 플랜 지원 여부는 Anthropic이 별도로 발표하지 않았습니다. Anthropic이 공식 답변을 내놓지 않은 부분입니다.
Q3. Pro 구독했는데 토글이 보이지 않아요. 어떻게 해야 하나요?
순차 롤아웃 중이라서 Pro/Max 전원에게 동시에 열리지 않습니다. Dispatch 설정에서 “Claude가 컴퓨터를 제어하도록 허용” 항목이 보이지 않는다면 아직 배포 대기 중인 상태입니다. 별도 신청 없이 자동 확대되므로 기다리면 됩니다.
Q4. Claude가 화면을 보면서 내 개인 정보도 읽나요?
Claude는 스크린샷을 통해 현재 화면에 보이는 모든 내용을 인식합니다. 민감한 문서나 앱이 열려 있으면 해당 내용도 볼 수 있습니다. Anthropic 공식 문서는 Computer Use를 사용하기 전에 민감한 정보가 담긴 파일이나 앱을 닫을 것을 권장합니다. 은행·의료·법률 관련 앱에서는 사용하지 않는 것을 공식적으로 권고합니다. (출처: support.claude.com/en/articles/14128542)
Q5. OSWorld 72.5%면 인간과 거의 같은 수준 아닌가요?
수치만 보면 인간(72.36%)에 근접합니다. 그런데 Anthropic 공식 발표에 따르면, 2024년 10월의 14.9%는 OSWorld 원본 기준이고 2026년 2월의 72.5%는 개정된 OSWorld-Verified 기준입니다. 두 버전은 평가 방식이 다르기 때문에 단순 비교는 정확하지 않습니다. 벤치마크와 실제 업무 환경은 다르고, Anthropic도 공식 문서에서 속도 지연과 오류 가능성을 인정합니다. (출처: anthropic.com/news/claude-sonnet-4-6, 2026.02.17)
마치며 — 솔직한 총평
Claude Computer Use는 방향이 맞습니다. API가 없는 레거시 소프트웨어를 AI가 직접 다룰 수 있게 된다는 건 실무에서 의미 있는 변화입니다. 반복적인 파일 정리, 이메일 분류, 브라우저 리서치처럼 단순하지만 시간을 잡아먹는 작업에서는 지금도 충분히 도움이 됩니다.
다만 아직 완성된 기능은 아닙니다. macOS 전용이라는 플랫폼 제약, Pro/Max 한정이라는 구독 조건, 커넥터 없는 앱에선 속도가 느려진다는 구조적 한계가 있습니다. OSWorld 72.5%라는 수치도 벤치마크가 개정된 맥락을 빼면 오해하기 쉽습니다.
Anthropic이 “리서치 프리뷰로 일찍 공개하는 이유는 실제 사용에서 뭐가 되고 뭐가 안 되는지 배우기 위해서”라고 밝힌 부분이 인상적이었습니다. 말 그대로 지금은 써보면서 함께 만들어가는 단계입니다. 단, 민감한 작업에는 쓰지 않는 것이 맞고, Dispatch 연동 없이는 핵심 기능의 절반도 쓰지 못합니다. 구독 전에 조건부터 확인하는 것이 현명합니다.
📎 본 포스팅 참고 자료
- Anthropic 공식 발표 — Dispatch and Computer Use (claude.com/blog/dispatch-and-computer-use)
- Anthropic 공식 발표 — Claude Sonnet 4.6 출시 (anthropic.com/news/claude-sonnet-4-6)
- Anthropic 공식 발표 — Developing Computer Use (anthropic.com/news/developing-computer-use)
- Anthropic 공식 지원 문서 — Computer Use 안전 가이드 (support.claude.com/en/articles/14128542)
- Engadget 보도 — Claude Code and Cowork can now use your computer (engadget.com)
본 포스팅 작성 이후 서비스 정책·UI·기능이 변경될 수 있습니다. 본 포스팅의 내용은 2026년 3월 27일 기준 공개된 리서치 프리뷰 정보를 바탕으로 작성됐으며, Anthropic의 정식 출시 이후 세부 사양이 달라질 수 있습니다.
댓글 남기기