Research Preview
macOS 전용
Claude Computer Use, 화면 빼앗기기 전에 이것 확인하세요
2026년 3월 23일, Anthropic이 Claude Cowork와 Claude Code에 Computer Use 기능을 탑재했습니다. AI가 내 Mac의 마우스·키보드·화면을 직접 조작해 작업을 완료해 주는 기능인데, 실제 테스트에서 성공률이 약 50%에 그쳤고 작동 중에는 화면 전체를 빼앗깁니다. 쓰기 전에 알아야 할 것들이 꽤 많습니다.
Computer Use란 정확히 무엇인가
Claude Computer Use는 Claude Cowork 또는 Claude Code 안에서, Claude가 사용자의 Mac 화면을 스크린샷으로 보면서 마우스 클릭·키보드 입력·파일 탐색 등을 직접 수행하는 기능입니다. 2026년 3월 23일 Anthropic이 Research Preview로 공개했으며, 현재 macOS 전용·유료 플랜(Pro·Max) 전용으로 제공됩니다. (출처: Anthropic 공식 블로그 claude.com/blog/dispatch-and-computer-use, 2026.03.23)
쉽게 말하면, 내가 자리를 비운 사이 Claude가 내 컴퓨터 앞에 앉아 대신 일하는 구조입니다. 파일을 열고, 브라우저를 탐색하고, 스프레드시트를 채우고, 개발 도구를 실행하는 것 모두가 가능합니다. Anthropic 공식 트위터(@claudeai, 2026.03.23)는 “opens your apps, navigates your browser, fills in spreadsheets — anything you’d do sitting at your desk”라고 설명했습니다.
💡 공식 발표 문구와 실제 작동 방식을 같이 놓고 보면, “뭐든 다 한다”는 표현과 “macOS 전용, 성공률 약 50%”라는 현실 사이에 꽤 큰 간극이 있습니다. 그 간극을 채워드리는 게 이 글의 목적입니다.
3단계 우선순위 — 직접 조작은 마지막 수단
여기서 많은 사람들이 오해하는 부분이 있습니다. “Computer Use를 켜면 Claude가 즉시 화면을 직접 건드린다”고 생각하기 쉬운데, 실제로는 그렇지 않습니다.
Anthropic 공식 헬프센터 문서(support.claude.com/en/articles/14128542, 2026.03.23 기준)에는 Claude가 작업을 수행할 때 다음 3단계 순서를 따른다고 명시되어 있습니다.
커넥터 우선 (가장 빠름)
Gmail, Google Drive, Slack, Google Calendar 등 공식 연동 커넥터가 있으면 먼저 이것을 씁니다. 초 단위로 처리되고 오류가 거의 없습니다.
Chrome 브라우저 자동화 (중간)
커넥터가 없으면 Claude for Chrome 확장 프로그램을 통해 브라우저에서 탭을 열고 작업합니다. 이 단계는 백그라운드에서 실행되어 사용자가 다른 작업을 계속할 수 있습니다.
직접 화면 조작 — 최후 수단 (가장 느림)
앞의 두 가지가 불가능할 때만 화면을 스크린샷으로 분석하며 마우스·키보드를 직접 조작합니다. 이 단계에서는 화면이 Claude에게 넘어가 사용자는 아무것도 할 수 없습니다.
공식 문서는 “Slack 커넥터로 메시지를 불러오면 초 단위지만, 화면을 통해 Slack을 탐색하면 훨씬 오래 걸리고 오류도 많다”고 직접 밝히고 있습니다. Lifehacker 실사용 리뷰(2026.03.24)에서는 직접 화면 조작으로 Finder에서 파일을 옮기려 했을 때 1~2분이 지나도 작업을 완료하지 못하고, Claude가 “폴더 경로를 수동으로 입력”하는 우회책을 쓰는 장면을 포착했습니다. 직접 조작이 느린 이유는 명확합니다. 스크린샷을 찍고 → AI가 분석하고 → 클릭 좌표를 계산하고 → 실행하는 과정을 매 단계마다 반복하기 때문입니다.
Dispatch와 묶으면 어떻게 달라지나
Computer Use 출시 직전인 3월 17일, Anthropic은 Dispatch를 먼저 선보였습니다. Dispatch는 iPhone에서 Claude에게 작업을 지시하면, 집에 있는 Mac이 그 작업을 실행하고 결과를 돌려주는 기능입니다. (출처: support.claude.com/en/articles/13947068, 2026.03 기준)
Computer Use와 Dispatch가 묶이면 시나리오가 훨씬 강력해집니다. 공식 블로그에서 제시한 예시는 이렇습니다. 출근길에 폰으로 “오늘 아침 뉴스 요약해서 마크다운 파일로 저장해줘”라고 입력하면, 사무실에 도착했을 때 Mac에 완성된 파일이 있는 구조입니다. 예약 작업(scheduled tasks)도 지원해 “매주 월요일 오전 9시” 같은 반복 일정을 설정할 수 있습니다.
💡 Mac이 항상 켜져 있어야 Dispatch + Computer Use 조합이 작동합니다. 맥북 덮개를 닫거나 절전 모드에 들어가면 원격 작업이 즉시 중단됩니다. 이 점은 공식 문서(“Your computer just needs to be on”)에도 명시되어 있습니다. Mac mini처럼 항상 켜두는 기기에 최적화된 기능이라는 점을 감안해야 합니다.
소셜미디어 사용자 Gagan Saluja는 “/schedule과 결합하면 crон 잡으로 어떤 앱과도 상호작용할 수 있는 백그라운드 워커가 생긴 것이나 다름없다. 이건 AI 어시스턴트가 아니라 인프라다”라고 평가했습니다. (VentureBeat 인용, 2026.03.24)
성공률 50%의 실제 의미 — 무엇이 되고 무엇이 안 되나
MacStories의 John Voorhees는 Dispatch + Computer Use 출시 당일 12개 작업을 직접 테스트했습니다. 결과는 6개 성공, 6개 실패로 성공률 딱 50%였습니다. (출처: MacStories, 2026.03.24) 단순 평균이지만, “지금 당장 믿고 쓰기엔 부족하다”는 판단의 근거가 됩니다.
| ✅ 성공한 작업 | ❌ 실패한 작업 |
|---|---|
| Mac에서 특정 스크린샷 찾기 | Mac에서 Shortcuts 앱 열기 |
| Notion 최근 노트 요약 | 스크린샷을 iMessage로 전송 |
| Notion URL 추가 | Todoist 미완료 작업 나열 (인증 오류) |
| 가장 최근 수신 이메일 요약 | Terminal 세션 목록 나열 |
| 당일 저장된 노트 목록 나열 | 활성 Safari 탭에서 음식 주문 정보 불러오기 |
| 세션 내 스크린샷 다시 불러오기 | AppleScript로 Safari에서 URL 가져오기 |
Voorhees의 총평은 “자리를 비울 때 믿고 쓰기엔 아직 부족하지만, 올바른 방향의 한 걸음”이었습니다. 성공한 작업들을 보면 패턴이 보입니다. 정보를 조회하거나 요약하는 작업은 잘 됩니다. 반면 기존 앱의 특정 기능을 트리거하거나 여러 앱을 넘나드는 복합 작업은 자주 막힙니다.
Lifehacker 리뷰(2026.03.24)에서는 캘린더 이벤트 1개를 추가하는 데 약 30초, 수정에 또 30초가 걸렸다고 기록했습니다. 같은 작업을 직접 하면 10초도 안 걸립니다. 즉, 지금 단계에서 Computer Use의 실용적인 가치는 반복 작업의 자동화 또는 자리를 비운 상태에서의 대기성 작업에 한정됩니다.
보안 위협과 Anthropic이 솔직히 인정한 것들
Computer Use에서 가장 크게 걱정되는 보안 이슈는 프롬프트 인젝션(Prompt Injection)입니다. Claude가 파일이나 웹페이지를 열어 읽는 과정에서, 그 안에 악의적인 지시문이 숨겨져 있으면 Claude가 의도치 않은 명령을 실행할 수 있습니다. (출처: Lifehacker, 2026.03.24 / Reddit r/ClaudeAI, 2026.03.24)
Anthropic 공식 문서는 이에 대한 방어책을 마련했다고 밝히면서도, 동시에 이렇게 씁니다. “These guardrails are part of how Claude is trained and instructed, but they aren’t absolute.” 즉, 가이드레일이 있지만 완벽하지 않다고 회사 스스로 인정하는 겁니다. (출처: Anthropic 공식 헬프센터, 2026.03.23 기준)
💡 Anthropic 공식 문서와 실제 경고 문구를 나란히 놓고 보니 이런 패턴이 보였습니다. “할 수 있다”고 강조하는 블로그 문구 바로 아래, “하지 말라”는 제한 목록이 더 길게 나열되어 있습니다.
Anthropic이 공식적으로 사용하지 말라고 권고한 케이스
- 금융 계좌·투자 플랫폼·암호화폐 관련 앱
- 의료 기록이나 법률 문서가 포함된 앱
- 타인의 개인정보가 담긴 앱
- HIPAA·FedRAMP·FSI 규정 대상 워크로드
Computer Use는 Cowork가 평소에 쓰는 가상 머신 바깥에서 실행됩니다. 즉, 파일 조작·명령 실행에 쓰이는 샌드박스가 적용되지 않고, 실제 데스크톱과 앱에 직접 접근합니다. 링크 클릭 하나가 Chrome을 열 수 있고, Claude에게 Chrome 권한을 주지 않았더라도 그 탭이 열린다는 점도 공식 문서에 명시되어 있습니다. 예상치 못한 경로로 앱 간 연쇄 반응이 일어날 수 있습니다.
요금제별 실제 한계와 기업 감사 공백 문제
Computer Use와 Dispatch를 쓸 수 있는 플랜은 Claude Pro($20/월)와 Claude Max($100~$200/월)입니다. 그런데 여기서 조심해야 할 게 있습니다. 에이전트 작업은 일반 채팅보다 할당량 소모가 훨씬 빠릅니다.
VentureBeat 보도(2026.03.24)에 따르면, $200/월짜리 Max 20x 플랜 구독자가 Dispatch를 사용했더니 프롬프트 단 한 번에 전체 할당량의 10%가 소진됐다는 불만이 소셜미디어에서 나왔습니다. 10개 작업이면 한 달 치 할당량이 끝나는 셈입니다. Anthropic은 “에이전트 작업은 Claude가 여러 서브 에이전트와 도구 호출을 조율하므로 일반 채팅보다 더 많은 용량을 소모한다”고 공식 안내에 명시하고 있습니다.
💡 Anthropic의 요금제 페이지 문구와 실제 사용자 경험을 교차해 보면, 에이전트 기능이 강화될수록 단가 기준 효율은 오히려 낮아지는 구조임을 알 수 있습니다. 더 비싼 플랜을 써도 작업 복잡도가 올라가면 금세 한계에 부딪힙니다.
기업 감사 로그 공백 — 컴플라이언스 치명타
기업 환경에서 더 심각한 문제가 하나 있습니다. Cowork의 대화 기록은 사용자 기기에만 로컬로 저장됩니다. Anthropic 서버로 올라가지 않기 때문에, 기업 관리자용 감사 로그(audit log)·데이터 내보내기·컴플라이언스 API가 Cowork 활동을 전혀 기록하지 못합니다. (출처: VentureBeat, 2026.03.24)
X 사용자 NomanInnov8은 이 문제를 날카롭게 짚었습니다. “에이전트가 사용자와 동일한 마우스·키보드·화면을 쓴다면, 기존의 포렌식 마커로는 사람이 한 행동과 AI가 한 행동을 구분할 수 없다. 감사 추적을 어떻게 할 건가?” (VentureBeat 인용, 2026.03.24) Anthropic은 이 질문에 아직 공식 답변을 내놓지 않은 부분입니다.
설정 방법과 지금 당장 막아야 할 앱 목록
Computer Use를 켜는 방법은 간단합니다. Claude 데스크톱 앱 → Settings → General → Computer Use를 활성화하면 됩니다. 브라우저 자동화도 쓰고 싶다면 같은 화면에서 Browser Use도 켜면 됩니다. 활성화 후에는 Accessibility 권한과 Screen Recording 권한을 각각 시스템 설정에서 허용해야 합니다. (출처: Anthropic 공식 헬프센터, 2026.03.23)
Denied Apps(차단 앱) 목록에 반드시 추가할 앱들
Settings → Computer Use에서 특정 앱을 차단 목록에 넣으면 Claude가 해당 앱에 절대 접근하지 못합니다. Lifehacker(2026.03.24)는 시작점으로 1Password와 뱅킹 앱을 제안했고, 공식 문서의 권고사항을 종합하면 아래 앱들을 우선 차단하는 게 좋습니다.
- 비밀번호 관리 앱 — 1Password, Keychain, Bitwarden 등
- 인터넷 뱅킹·증권·암호화폐 앱
- 의료·보험 관련 앱
- 이메일 앱 (Gmail 커넥터가 있으면 커넥터로만 쓰는 게 안전)
- 파일 관리자 앱 (대용량 삭제·이동 실수 위험)
Computer Use를 실행하는 동안 화면에 민감한 정보가 열려 있으면 Claude가 볼 수 있습니다. 작업을 시작하기 전에 불필요한 앱·창을 닫는 습관이 필요합니다.
Q&A — 가장 많이 묻는 질문 5개
마치며 — 지금 당장 쓸 사람과, 좀 더 기다려야 할 사람
Claude Computer Use는 분명히 흥미롭습니다. Mac mini 한 대를 항상 켜두고 정해진 시간에 반복 작업을 처리하는 구조라면, 지금 당장 실용적으로 쓸 수 있습니다. 특히 Dispatch와 예약 작업 기능이 결합되면, 특정 반복 업무를 자동화하는 데 실질적인 가치가 있습니다.
막상 써보면 다릅니다. 성공률이 약 50%이고, 화면 직접 조작은 생각보다 느립니다. 보안 가이드레일도 완전하지 않다고 Anthropic 스스로 인정했고, 기업 감사 로그 공백은 컴플라이언스 환경에서 실질적 장벽입니다. 지금은 Research Preview입니다. 중요한 업무 데이터와 함께 쓰기엔 이 부분이 아쉬웠습니다.
한 줄로 정리하면, 폰에서 지시하면 Mac이 알아서 처리하는 구조를 원한다면 지금 써볼 만합니다. 단, 민감한 앱은 먼저 차단하고, 작업 결과는 반드시 직접 확인하는 습관이 필요합니다.
📚 본 포스팅 참고 자료
- Anthropic 공식 블로그 — Dispatch and Computer Use (claude.com/blog/dispatch-and-computer-use, 2026.03.23)
- Anthropic 공식 헬프센터 — Let Claude use your computer in Cowork (support.claude.com/en/articles/14128542, 2026.03.23)
- VentureBeat — Anthropic’s Claude can now control your Mac (venturebeat.com, 2026.03.24)
- MacRumors — Claude AI Can Now Use Your Mac Remotely from iPhone (macrumors.com, 2026.03.24)
- Lifehacker — This New Claude Feature Can Automate Basically Everything on Mac (lifehacker.com, 2026.03.24)
본 포스팅 작성 이후 서비스 정책·UI·기능이 변경될 수 있습니다. 본 포스팅은 2026년 3월 25일 기준으로 작성되었으며, Claude Computer Use는 현재 Research Preview 상태로 Anthropic의 업데이트에 따라 내용이 달라질 수 있습니다. 투자·금융·법률·의료 관련 행동을 AI에게 위임하기 전에 반드시 전문가와 상담하시기 바랍니다.
댓글 남기기