코파일럿 비전 사용법: 화면 공유 AI, 아직 모르면 손해
코파일럿 비전(Copilot Vision)은 2025년 10월 17일,
마이크로소프트가 모든 윈도우 11 PC에 공식 배포한 실시간 화면 인식 AI입니다.
PC 화면을 공유하는 것만으로 AI가 직접 보고 분석하며 답변을 내놓는 이 기능은,
기존 챗봇과는 차원이 다른 맥락 이해 능력을 갖추고 있습니다.
한국어 심층 가이드가 극히 드문 지금, 먼저 익혀두면 그 이득은 고스란히 여러분 몫입니다.
🎙️ 음성·텍스트 동시 지원
👁️ 실시간 화면 분석
🆓 무료 사용 가능
코파일럿 비전이란? — 기존 AI와 무엇이 다른가
코파일럿 비전(Copilot Vision)은 사용자가 PC 화면, 특정 앱 창, 또는 브라우저에서 열람 중인 페이지를 코파일럿과 실시간으로 공유하면, AI가 해당 화면의 내용을 직접 인식하고 분석해 조언·안내·질의응답을 제공하는 기능입니다. 단순히 텍스트를 붙여넣어 분석을 요청하는 기존 방식과 달리, 지금 내 화면에 표시된 맥락 그 자체를 AI가 이해한다는 점이 핵심입니다.
예를 들어 여러분이 포토샵 비슷한 편집 프로그램을 처음 열었을 때, “이 버튼이 뭐지?”라고 물으면 코파일럿은 화면을 보고 해당 도구의 기능과 사용법을 바로 설명해 줍니다. 매뉴얼을 찾아 헤맬 필요가 없는 것입니다. 마이크로소프트는 이를 “사용자가 보는 시각 정보를 AI가 함께 인식하고 도움을 추천하는 것”이라 정의하며 AI PC의 핵심 축으로 자리매김시켰습니다.
2025년 10월 업데이트 핵심 변경사항 총정리
코파일럿 비전은 2025년 1월 처음 모바일 앱과 Edge 브라우저에서 제한적으로 공개됐습니다. 그러나 결정적 전환점은 2025년 10월 17일입니다. 마이크로소프트는 이날 전 세계 모든 윈도우 11 PC에 코파일럿 비전을 정식 배포한다고 발표했습니다. 즉, 별도 하드웨어 업그레이드 없이 기존 윈도우 11이라면 누구나 사용할 수 있게 된 것입니다.
텍스트 입력 모드 추가 (2025년 10월 28일)
초기 버전은 음성(Voice) 전용이었습니다. 헤드폰이 없거나 주변이 소음이 많은 환경에서는 사용하기 불편하다는 피드백이 많았습니다. 마이크로소프트는 이를 반영해 2025년 10월 28일부터 Windows Insider를 통해 텍스트 입력 모드(Vision with text-in, text-out)를 순차 배포하기 시작했습니다. 안경 아이콘 클릭 → ‘음성으로 시작’ 토글 끄기 → 공유할 앱 선택 → 텍스트 질문 입력의 4단계로 완전히 타이핑만으로 사용 가능해졌습니다.
| 항목 | 기존 (2025년 1월~9월) | 업데이트 후 (2025년 10월~) |
|---|---|---|
| 지원 플랫폼 | Edge, 모바일 앱 (한정) | 윈도우 11 전체 + Edge + 모바일 |
| 입력 방식 | 음성 전용 | 음성 + 텍스트 (선택 가능) |
| 화면 공유 대상 | Edge 내 웹페이지·PDF | 앱 창, 데스크톱 전체 포함 |
| 작업 실행 (Actions) | 없음 | 로컬 파일 작업 (프리뷰) |
| 외부 서비스 연동 | 없음 | Gmail, Outlook, OneDrive 연동 |
코파일럿 비전 활성화 및 기본 사용법 (윈도우 11)
윈도우 11에서 코파일럿 비전을 사용하려면 먼저 Microsoft Store에서 코파일럿 앱을 최신 버전(v1.25103.107 이상)으로 업데이트해야 합니다. 그다음 작업 표시줄의 ‘코파일럿 아이콘’ 또는 ‘애스크 코파일럿(Ask Copilot)’ 버튼을 클릭해 코파일럿 패널을 엽니다.
음성 모드로 시작하기
1코파일럿 앱 설정에서 “헤이 코파일럿(Hey, Copilot)” 호출어 기능을 활성화합니다. 2음성으로 “헤이 코파일럿”을 말하면 화면에 마이크 아이콘이 나타나고 신호음이 울립니다. 3Composer 영역의 안경 아이콘을 탭한 후 공유할 앱 창을 선택하면 공유가 시작됩니다. 공유 중인 창 주변에 글로우(빛번짐) 테두리가 나타나므로 어느 화면이 공유 중인지 즉시 확인할 수 있습니다.
텍스트 모드로 시작하기 (신규)
1코파일럿 Composer에서 안경 아이콘을 클릭합니다. 2‘음성으로 시작(Start with voice)’ 토글을 끔 상태로 전환합니다. 3공유할 앱 또는 화면을 선택합니다. 4이제 채팅창에 텍스트로 질문을 입력하면 코파일럿이 화면을 보고 텍스트로 답변합니다. 중간에 마이크 버튼을 누르면 음성 모드로 전환됩니다. 공유를 중단하려면 Composer의 ‘Stop’ 또는 ‘X’ 버튼을 누릅니다.
Edge 브라우저·모바일에서 Copilot Vision 쓰는 법
코파일럿 비전은 윈도우 앱에만 국한되지 않습니다. Microsoft Edge 브라우저와 iOS·Android 코파일럿 모바일 앱에서도 동일한 Vision 기능을 활용할 수 있습니다. 각 환경마다 진입 방법이 조금씩 다르므로 정리해 드립니다.
Edge 브라우저에서 사용하는 법
Edge를 열고 분석하고 싶은 웹페이지, PDF, 영상으로 이동합니다. 이어서 Ctrl + Shift + 마침표(.)를 눌러 사이드바 코파일럿 창을 엽니다. Composer 영역에서 안경 아이콘을 클릭하면 현재 탭이 자동으로 공유됩니다. 단, Entra ID(기업용 Microsoft 계정)로 로그인한 경우 관리자 정책에 따라 Vision 기능이 제한될 수 있습니다.
모바일 앱에서 사용하는 법
iOS 또는 Android 코파일럿 앱에서 Composer 하단의 안경 아이콘을 탭하면 Vision 세션이 시작됩니다. 스마트폰 카메라나 화면을 공유해 실제 사물이나 앱을 AI에게 보여주고 대화할 수 있습니다. 세션 종료는 X 아이콘을 탭합니다. 모바일에서는 특히 여행지 간판 번역, 상품 영양성분 분석 등 카메라 활용 시나리오가 강점입니다.
실전 활용 시나리오 5가지 — 이렇게 쓰면 생산성 2배
코파일럿 비전이 실제로 빛나는 순간은 이론이 아니라 일상의 구체적 장면에서입니다. 아래 5가지 시나리오는 제가 직접 테스트하거나 마이크로소프트가 공식 제시한 활용 사례를 바탕으로 정리한 것입니다.
1 처음 쓰는 소프트웨어 — “이 버튼 뭐야?”
낯선 영상 편집 프로그램이나 스프레드시트 툴을 열어두고 코파일럿 비전을 켜면, “지금 내가 보는 화면에서 이 아이콘은 무슨 기능이야?”라고 물을 수 있습니다. AI가 화면을 보고 해당 UI 요소를 식별해 단계별로 설명해 줍니다. 직접 “쇼 미 하우(Show me how)”라고 말하면 클릭해야 할 위치를 시각적으로 하이라이트해 안내하기도 합니다.
2 이력서·문서 교정 — 화면 공유 즉석 피드백
워드 또는 한글 문서를 열어두고 비전을 켜면, “이 이력서에서 어색한 표현을 고쳐줘” 또는 “문단 흐름이 자연스러운지 확인해줘”라고 텍스트로 요청할 수 있습니다. 전체 내용을 복사해서 붙여넣을 필요 없이 화면을 그대로 보여주면 됩니다. 특히 표나 그래프가 포함된 복잡한 레이아웃에서 효과적입니다.
3 게임 공략 — 막히면 바로 물어보기
게임 화면을 공유한 상태에서 “지금 이 보스를 어떻게 공략하지?”라고 물으면, 코파일럿이 화면을 분석해 전략을 제안합니다. 게임을 멈추거나 공략 사이트를 번갈아 볼 필요가 없습니다. 마이크로소프트가 공식적으로 강조한 시나리오 중 하나로, Xbox ROG Ally 같은 핸드헬드 게임기에도 탑재됩니다.
4 쇼핑 비교 — 여러 탭 동시 분석
Edge에서 여러 쇼핑 탭을 열어두고 코파일럿 비전에 공유하면, “이 두 제품 중 어느 게 성능 대비 가격이 나아?”라고 물을 수 있습니다. 모바일 앱에서는 카메라를 상품 라벨에 비추고 “이 성분표에서 알레르기 유발 성분이 있어?”라고 물으면 즉시 답변을 받을 수 있습니다.
5 일정·이메일 관리 — OneDrive·Outlook 연동
Outlook이나 Gmail을 코파일럿에 연동하면, 화면 공유 없이도 “이번 주 치과 예약이 언제야?”라는 자연어 명령으로 캘린더 정보를 불러올 수 있습니다. OneDrive에 저장된 문서도 “지난달에 작성한 기획서 파일 찾아줘”처럼 명령하면 검색해 줍니다. 결과는 Word·Excel·PowerPoint 형식으로 내보낼 수도 있습니다.
코파일럿 비전 개인정보·보안 이슈 — 무엇을 알아야 하나
화면을 AI와 공유한다는 것이 불안하게 느껴질 수 있습니다. 마이크로소프트의 공식 입장과 실제 설계를 바탕으로 핵심만 정리하겠습니다. 결론부터 말씀드리면, 구조적으로는 꽤 안전하게 설계돼 있지만 사용자 스스로 주의해야 할 부분도 분명히 존재합니다.
기술적 보호 장치
코파일럿 비전은 기본적으로 비활성화 상태로 제공됩니다. 사용자가 명시적으로 켜야만 작동합니다. 화면 공유 세션이 진행 중일 때는 공유 중인 창 주변에 시각적 표시(글로우 효과)가 나타나 공유 여부를 즉시 인지할 수 있습니다. DRM 보호 콘텐츠는 자동으로 차단되며, 코파일럿 액션(자동 작업 실행)은 모든 단계에서 사용자 승인을 요청합니다.
데이터 처리 방침
마이크로소프트는 Vision 세션 중 공유된 화면 데이터를 Microsoft 개인정보처리방침에 따라 처리한다고 명시하고 있습니다. 세션이 종료되면 공유가 즉시 중단됩니다. 다만 기업(Entra ID) 환경에서는 관리자 정책에 따라 데이터 처리 방식이 달라질 수 있으므로 IT 관리자에게 확인하는 것을 권장합니다.
한계와 주의사항 — 솔직하게 짚어드립니다
코파일럿 비전은 분명 인상적인 기능이지만, 아직 성숙 단계에 있습니다. 지금 시점에서 솔직하게 한계를 짚어두는 것이 더 유용하다고 생각합니다.
현재 알려진 한계
첫째, 화면 하이라이트 기능(클릭해야 할 위치를 화면에 직접 표시하는 기능)은 텍스트 입력 모드에서 아직 지원되지 않습니다. 이 기능은 향후 업데이트에서 추가 예정입니다. 둘째, DRM 콘텐츠 분석 불가는 스트리밍 플랫폼 이용자들에게 아쉬운 점입니다. 셋째, 코파일럿 비전은 화면을 보고 조언할 수 있지만, 아직 화면 내 버튼을 직접 클릭하는 자율 실행은 제한적입니다(코파일럿 액션은 별도 기능, 현재 프리뷰 단계).
내 솔직한 평가
개인적으로 코파일럿 비전에서 가장 기대되는 부분은 소프트웨어 학습 도우미로서의 역할입니다. 낯선 툴을 배울 때 “지금 내 화면에서 이걸 어떻게 하지?”를 실시간으로 물을 수 있다는 건 교육 격차를 줄이는 데 실질적인 힘이 됩니다. 반면 보안·개인정보 측면에서는 아직 사용자 스스로 경계를 설정해야 하는 부분이 많습니다. 마이크로소프트가 “투명성”을 강조하는 만큼 실제 데이터 처리 과정을 사용자가 더 구체적으로 확인할 수 있는 인터페이스가 필요하다는 점은 개선 과제로 남아 있습니다.
❓ Q&A — 자주 묻는 질문 5가지
코파일럿 비전은 무료로 사용할 수 있나요?
코파일럿 비전이 내 화면을 항상 모니터링하나요?
윈도우 10에서도 코파일럿 비전을 사용할 수 있나요?
코파일럿 비전과 코파일럿 플러스(Copilot+) PC는 다른 건가요?
한국어로 화면을 공유하고 한국어로 대화할 수 있나요?
✍️ 마치며 — 총평
코파일럿 비전은 AI 어시스턴트가 드디어 “같은 화면을 보며 함께 일하는 동료” 수준으로 진화했음을 보여주는 기능입니다. 화면을 복사해서 붙여넣거나, 설명을 일일이 타이핑하는 수고로움이 사라지고, AI가 맥락을 직접 눈으로 보며 답변한다는 것은 생산성 측면에서 분명한 진보입니다.
개인적으로는 초보자 학습 지원과 문서 작업 보조에서 가장 큰 가치를 발휘할 것으로 봅니다. 반면 보안과 개인정보 측면에서는 아직 사용자 스스로 공유 범위를 신중히 설정해야 하며, 특히 민감 정보가 담긴 화면은 절대 공유하지 않는 습관이 필요합니다.
2025년 10월 업데이트로 텍스트 입력 모드가 추가되면서 실용성이 크게 높아졌습니다. 지금 당장 윈도우 11 코파일럿 앱을 업데이트하고 한 번 켜보세요. 적어도 한 가지 시나리오에서 “이게 이렇게 편했어?”라는 반응이 나올 거라 확신합니다.
본 콘텐츠는 2026년 3월 8일 기준 공개된 마이크로소프트 공식 자료를 바탕으로 작성되었습니다.
기능 사양, 지원 지역, 가격 정책은 마이크로소프트의 정책 변경에 따라 달라질 수 있습니다.
최신 정보는 반드시 마이크로소프트 공식 사이트에서 확인하시기 바랍니다.
댓글 남기기