리서치 프리뷰
macOS 전용
Claude Computer Use, Mac만 된다고요?
이 조건 먼저 보세요
2026년 3월 23일, Anthropic이 Claude Computer Use를 리서치 프리뷰로 공개했습니다. Claude가 직접 마우스를 클릭하고 키보드를 치며 앱을 조작하는 기능인데, 막상 써보려 하면 “내 계정엔 왜 안 보이지?”라는 반응이 가장 많습니다. 조건이 따로 있기 때문입니다. 그리고 그 조건 너머에 있는 수치 하나가, 이 기능을 단순 데모로 보면 안 되는 이유를 설명해줍니다.
(Claude Sonnet 4.6)
도달 기간
Claude Computer Use란 무엇인가 — 결론부터
Claude Computer Use는 Claude가 사람처럼 화면을 보고, 마우스를 클릭하고, 키보드를 입력하며 앱을 직접 조작하는 기능입니다. 2026년 3월 23일 리서치 프리뷰로 공개됐습니다. Claude Cowork와 Claude Code, 두 제품 모두에서 사용할 수 있습니다.
기존 AI 도구와의 차이는 이렇습니다. 기존에는 Claude가 Slack이나 Google Calendar에 연결하려면 전용 커넥터(API)가 필요했습니다. Computer Use는 그런 커넥터가 없어도 됩니다. 이미 화면에 열려 있는 앱의 UI를 그대로 조작하기 때문입니다. Anthropic은 이를 “도구를 모델에 맞추는 대신, 모델을 도구에 맞추는 것”이라고 표현했습니다. (출처: Anthropic 공식 블로그 claude.com/blog/dispatch-and-computer-use, 2026.03.23)
💡 공식 발표문과 실제 설치 흐름을 같이 놓고 보면 이런 차이가 보입니다 — Claude Cowork의 “파일·문서 다루기”와 Computer Use의 “화면 직접 조작”은 다른 레이어입니다. Cowork가 먼저 설치돼 있어야 Computer Use가 활성화됩니다.
정리하면, Claude Computer Use는 두 가지로 구성됩니다. ① 화면 인식(스크린샷 분석) + ② 마우스·키보드 제어. 커넥터가 있는 앱은 커넥터를 먼저 쓰고, 없으면 화면 제어로 전환합니다. 이 구조가 왜 중요한지는 섹션 4에서 이어집니다.
써보려면 이 조건이 먼저입니다
Claude Computer Use는 Pro 또는 Max 구독자에게만 제공됩니다. Free 플랜은 해당 없고, Team·Enterprise는 현재 미지원입니다. 플랫폼은 macOS 전용입니다. Windows, Linux에서는 아직 화면 제어 기능 자체가 열리지 않습니다. (출처: CNET, 2026.03.24, cnet.com/tech/services-and-software/claude-control-your-computer-to-perform-tasks/)
| 조건 | 상태 | 비고 |
|---|---|---|
| 구독 플랜 | Pro / Max | Free·Team·Enterprise 미지원 |
| OS | macOS | Windows·Linux 미지원(예정) |
| 앱 실행 상태 | Claude Desktop 켜짐 | 절전 모드이면 작업 중단 |
| 롤아웃 | 순차 배포 중 | 토글이 안 보여도 정상, 기다리면 됨 |
| Dispatch 연동 | 선행 필요 | Dispatch 설정에서 토글 활성화 |
중요한 부분이 있습니다. Pro·Max 구독자 전원에게 동시에 열리는 게 아니라 순차적으로 배포되고 있습니다. Dispatch 설정 화면에서 “Claude가 컴퓨터를 제어하도록 허용” 토글이 안 보인다면, 아직 해당 계정에 배포되지 않은 것입니다. 별도 신청 없이 순차 확대되므로 기다리면 됩니다. Dispatch 자체는 Windows x64도 지원하지만, 화면 직접 제어(Computer Use)는 현재 macOS 전용이라는 점을 구분해야 합니다.
AI가 인간 수준을 넘었다는 수치, 진짜일까요
솔직히 말하면, 이 부분이 가장 눈에 띄었습니다. Anthropic이 공식 발표에서 내놓은 수치입니다.
| 시점 | 모델 | OSWorld 점수 |
|---|---|---|
| 2024년 10월 | Claude 3.5 Sonnet | 14.9% |
| 2026년 2월 | Claude Sonnet 4.6 | 72.5% |
| 2026년 2월 | GPT-5.2 (비교) | 47.3% |
| 인간 기준 | OSWorld 공식 측정 | 72.36% |
⚠️ 수치 해석 시 주의할 점
2024년 10월의 14.9%는 OSWorld 원본 기준이고, 2026년 2월의 72.5%는 OSWorld-Verified(개정판) 기준입니다. 두 버전은 평가 방식이 다르므로 “5배 올랐다”는 표현은 추세를 보는 용도로만 써야 합니다. GPT-5.2의 47.3%는 OpenAI가 GPT-5.4 발표 시 공식 비교 수치로 사용한 값입니다. (출처: Anthropic 공식 블로그 anthropic.com/news/acquires-vercept, 2026.02.25 / OpenAI GPT-5.4 발표 페이지)
OSWorld는 AI에게 실제 데스크톱에서 스프레드시트 탐색, 여러 탭에 걸친 웹 폼 작성, 파일 이동 같은 과제를 주고 성공률을 측정합니다. 인간 기준값이 72.36%인 이유는 사람도 실수하고, 낯선 소프트웨어에서 헤매기 때문입니다. Claude Sonnet 4.6의 72.5%는 이 값을 넘어선 수치입니다. 즉, 벤치마크 기준으로는 이미 평균적인 사람보다 데스크톱 작업 성공률이 높습니다.
작동 방식 — 커넥터 먼저, 화면 제어는 폴백
Claude가 작업을 받으면 다음 순서로 실행 방법을 결정합니다. 먼저 커넥터가 있는지 확인합니다. Slack, Google Calendar 등 연동 앱이 있으면 API를 통해 직접 처리합니다. 커넥터가 없을 때만 화면 제어로 전환합니다. 이 설계 이유가 중요합니다. 화면 제어는 스크린샷을 찍고 분석하는 사이클을 반복하기 때문에 API 연동보다 느리고 오류 가능성이 높습니다. 그래서 폴백입니다.
화면 제어의 실제 동작 순서
스크린샷 캡처 → 화면 해석(멀티모달 분석) → 픽셀 계산(클릭 위치까지 가로·세로 몇 픽셀) → 액션 실행(클릭·입력·스크롤) → 다시 스크린샷 찍어 결과 확인 → 다음 단계 진행. Anthropic은 이 방식을 “플립북”에 비유합니다. 연속 비디오가 아닌, 스크린샷을 순서대로 찍어 맥락을 파악하는 방식입니다.
💡 2024년 10월 처음 Computer Use를 훈련시킬 때, Anthropic은 인터넷 없이 계산기와 텍스트 에디터만으로 훈련시켰습니다. 보안 이유 때문이었는데, 이렇게 제한된 환경에서 훈련했는데도 범용 컴퓨터 조작 능력을 획득했습니다. 전용 훈련 데이터 없이 일반화된 것입니다. (출처: Anthropic 공식 블로그 anthropic.com/news/developing-computer-use)
막혔을 때 스스로 다른 방법을 시도합니다
Claude가 클릭이 안 먹히면 어떻게 할까요? 다시 스크린샷을 찍고 다른 위치를 시도합니다. Anthropic은 “장애물에 부딪혔을 때 스스로 수정하고 재시도하는 행동을 관찰했다”고 밝혔습니다. 다만, 이 자기 수정 능력도 극단적인 UI 변화(팝업, 모달, 세션 만료)에는 여전히 취약한 부분이 있습니다.
Dispatch와 붙이면 달라지는 것
Computer Use와 함께 주목해야 할 게 Dispatch입니다. Dispatch는 폰과 데스크톱 사이에 하나의 지속적인 대화 스레드를 유지하는 기능으로, Computer Use 출시 일주일 전에 먼저 공개됐습니다. 이 두 기능이 결합되면 이런 시나리오가 가능해집니다.
실제 가능한 시나리오 (Anthropic 공식 데모 기준)
① 출근길 지하철에서 폰으로 Claude에게 말합니다 → “피치덱 PDF로 변환해서 오늘 오후 3시 캘린더 일정에 첨부해줘”
② 집 Mac의 Claude Desktop이 화면을 직접 띄워 파일을 열고, PDF로 내보내고, 캘린더 앱에서 일정을 찾아 파일을 첨부합니다
③ 사무실에 도착하면 완성된 결과물을 확인합니다
💡 Dispatch는 Computer Use보다 넓은 플랫폼을 지원합니다. 폰에서 지시하는 Dispatch 자체는 Windows x64도 됩니다. 화면 제어(Computer Use)만 현재 macOS 전용입니다. 즉, Windows 사용자라면 Dispatch로 지시하되, 화면 직접 조작은 macOS 기기에서만 됩니다.
반복 작업 스케줄링도 됩니다
Dispatch를 통해 “매일 아침 이메일 확인”, “매주 특정 지표 수집” 같은 반복 작업을 예약할 수 있습니다. 단, 예약된 작업은 컴퓨터가 깨어 있고 Claude Desktop 앱이 열려 있을 때만 실행됩니다. 절전 모드이면 작업이 중단되므로, 야간 자동화 설정 시 맥북이 절전으로 넘어가지 않도록 설정을 확인해야 합니다. (출처: Anthropic 공식 지원 센터 support.claude.com, 2026.03)
아직 쓰면 안 되는 상황이 있습니다
Anthropic은 공식 발표에서 직접 이렇게 경고했습니다. “Computer use is still early compared to Claude’s ability to code or interact with text. Claude can make mistakes, and while we continue to improve our safeguards, threats are constantly evolving.” (출처: SiliconAngle, siliconangle.com/2026/03/23, Anthropic 공식 발표 인용)
| 써도 되는 상황 | 아직 피해야 할 상황 |
|---|---|
| 파일 정리, 이름 변경, 폴더 분류 | 은행·카드 결제 등 금융 거래 |
| 이메일·문서 요약 및 보고서 초안 | 비밀번호, API 키 등 민감 정보 입력 |
| 브라우저에서 정보 수집·리서치 | 정밀 드래그앤드롭이 필요한 디자인 작업 |
| IDE에서 코드 수정·테스트·PR 제출 | 시간에 민감한 주식 거래 |
| 반복적인 데이터 입력·수집 | 법률 문서·의료 정보 처리 |
보안 측면에서 확인할 내용
Anthropic은 프롬프트 인젝션 공격 방어를 위한 자동 스캐닝을 구현했다고 밝혔습니다. 그러나 SiliconAngle은 Claude Computer Use의 기반 기술이 OpenClaw 생태계와 연관될 가능성이 있으며, OpenClaw 시스템은 잘못된 설정으로 보안 취약점이 발생한 사례가 있다고 지적했습니다. Anthropic이 이 연관성에 대해 공식 답변을 내놓지 않은 부분입니다. (출처: SiliconAngle, siliconangle.com/2026/03/23)
사용 시 주의할 실용적인 규칙 두 가지입니다. 첫째, 작업이 실행되는 동안 화면을 지켜볼 수 있는 상황에서 처음 시작하는 게 좋습니다. 둘째, 삭제·이동처럼 되돌리기 어려운 작업은 간단한 파일부터 테스트하는 편이 안전합니다.
Q&A 5가지
Q1. 무료 플랜에서는 정말 아예 사용 불가능한가요?
네, 현재 리서치 프리뷰 단계에서는 Pro와 Max 구독자에게만 제공됩니다. Free 플랜에서는 접근 자체가 없습니다. 이후 정식 출시 시 플랜별 정책이 변경될 수 있지만, 지금 시점에서는 유료 구독이 전제 조건입니다. (출처: CNET, 2026.03.24)
Q2. Pro 구독자인데 Dispatch 설정에 토글이 안 보입니다. 고장인가요?
고장이 아닙니다. 순차 롤아웃 중이라 Pro·Max 구독자 전원에게 동시에 열리지 않습니다. 시간이 지나면 자동으로 배포되며, 별도 신청이나 설정이 필요하지 않습니다. Dispatch 설정 화면에서 “Claude가 컴퓨터를 제어하도록 허용” 토글이 나타나면 그때 켜주면 됩니다.
Q3. 사용량 한도가 빨리 소진되지 않나요?
맞습니다. Anthropic 공식 지원 센터에 딱 이렇게 나옵니다 — “Cowork로 작업을 수행하면 Claude와 채팅하는 것보다 더 많은 사용 할당량을 소비합니다. 복잡한 다단계 작업이 계산 집약적이고 더 많은 토큰이 필요하기 때문입니다.” 자주 한도에 도달한다면 작업을 더 작게 쪼개거나, 덜 빈번하게 실행하는 방법을 권장하고 있습니다. (출처: support.claude.com)
Q4. Claude Cowork와 Claude Computer Use는 다른 건가요?
다른 레이어입니다. Claude Cowork는 2026년 1월 12일에 출시된 비개발자용 에이전트 모드로, 파일·문서 다루기와 리서치 등 지식 작업을 위한 인터페이스입니다. Claude Computer Use는 2026년 3월 23일에 추가된 기능으로, Cowork 안에서 커넥터가 없는 앱도 화면을 직접 제어해 조작할 수 있게 해줍니다. Computer Use는 Claude Code에서도 사용할 수 있습니다.
Q5. OSWorld 72.5%가 인간 수준을 넘었다는 게 실제 사용에서도 그런가요?
벤치마크와 실제 사용 경험은 다를 수 있습니다. OSWorld는 표준화된 과제 집합이고, 실제 작업 환경은 훨씬 다양합니다. 특히 매우 특수한 소프트웨어나 비표준 UI에서는 성공률이 낮아질 수 있습니다. 다만, 파일 정리나 이메일 분류처럼 표준적인 macOS 환경에서의 반복 작업에서는 벤치마크 수치에 가까운 신뢰성을 기대할 수 있습니다. 리서치 프리뷰 단계라 복잡한 작업은 여러 번 시도해야 하는 경우도 있습니다.
마치며
Claude Computer Use를 보면서 가장 인상적이었던 건 수치 자체가 아니라, 그 수치가 나온 배경이었습니다. 인터넷도 없이 계산기와 텍스트 에디터만으로 훈련시켰더니 범용 컴퓨터 조작 능력을 익혔다는 것. 그리고 Vercept라는 9명짜리 팀을 인수한 뒤 몇 주 만에 벤치마크가 인간 수준을 넘어섰다는 것.
지금 당장은 macOS 전용, Pro/Max 한정이라는 제약이 있습니다. 단순 금융 거래나 민감 정보 처리에는 쓰면 안 됩니다. 리서치 프리뷰 단계이므로 복잡한 작업에서 실패하는 경우도 있습니다. 그럼에도 Dispatch와 결합해 “폰에서 지시 → Mac이 혼자 작업”하는 흐름은 지금도 동작합니다.
결론부터 말씀드리면, 파일 정리나 반복적인 브라우저 리서치 같은 표준 작업에서는 지금 바로 써볼 만한 수준이 됐습니다. Windows 사용자라면 macOS 지원이 될 때까지 조금 더 기다리는 게 현실적입니다.
본 포스팅 참고 자료
- Anthropic — Acquires Vercept to Advance Claude’s Computer Use (2026.02.25)
- Anthropic 공식 지원 센터 — Cowork 시작하기 (2026.03)
- CNBC — Anthropic says Claude can now use your computer to finish tasks (2026.03.24)
- SiliconAngle — Anthropic’s Claude gets computer use capabilities in preview (2026.03.23)
- CNET — Claude can now control your computer to perform tasks (2026.03.24)
본 포스팅은 2026년 3월 26일 기준으로 작성됐습니다. Claude Computer Use는 현재 리서치 프리뷰 단계이며, 본 포스팅 작성 이후 서비스 정책·UI·기능·지원 플랫폼이 변경될 수 있습니다. 최신 정보는 Anthropic 공식 지원 센터에서 확인하세요.
댓글 남기기