Gemini 화면 자동화가 뭔지부터

Gemini 화면 자동화(공식 명칭: Screen Automation)는 Gemini가 스마트폰 안의 가상 화면 환경에서 앱을 직접 열고 조작하는 기능입니다. 예를 들어 “집 가는 택시 불러줘”라고 말하면, Gemini가 Uber 앱을 열고 목적지를 입력하고 요금을 확인하는 과정을 백그라운드에서 처리합니다. 사용자는 그 사이에 다른 걸 하고 있으면 됩니다.

구글이 2026년 2월 25일 공식 블로그를 통해 처음 발표했고, 갤럭시 S26 시리즈에는 3월 12일부터 실제 배포가 시작됐습니다. (출처: Google 공식 블로그, 2026.02.25) 픽셀 10 시리즈는 3월 17일부터 순차 배포 중입니다.

기존 AI 어시스턴트와 결정적으로 다른 점은 앱에 직접 로그인하거나 API를 연결하지 않아도 된다는 겁니다. Gemini가 화면을 “읽고” 탭하는 방식으로 동작하기 때문에, 이미 스마트폰에 설치된 앱이라면 별도 설정 없이 쓸 수 있습니다.

▲ 목차로 돌아가기

한국에서 됩니다 — 근데 이 기기만

구글 공식 지원 문서에는 이렇게 나와 있습니다: “지원되는 Android 기기 — Pixel 10, Pixel 10 Pro, Pixel 10 Pro XL 또는 삼성 갤럭시 S26 시리즈. 대한민국이나 미국에 거주하는 만 18세 이상의 사용자.” (출처: Google Support, support.google.com/pixelphone/answer/16940971, 2026.03.26 확인)

여기서 중요한 각주를 놓치기 쉽습니다. 같은 문서의 바로 다음 줄에 이렇게 명시돼 있습니다: “대한민국에서는 Pixel 10 기기가 지원되지 않습니다.”

즉, 한국에서 Gemini 화면 자동화를 쓰려면 갤럭시 S26 시리즈가 있어야 합니다. 픽셀 10을 갖고 있어도 한국에서는 이 기능이 열리지 않습니다. 미국에서는 픽셀 10도 되는데, 한국은 갤럭시 S26이 전부입니다.

▲ 목차로 돌아가기

무료 하루 5회, 요금제별 한도 비교

화면 자동화는 기기 내 가상 화면이 아니라 클라우드에서 처리가 이뤄집니다. 그래서 사용량 한도가 존재합니다. 구글이 공식 문서에서 밝힌 요금제별 한도는 아래와 같습니다. (출처: Google Support, support.google.com/gemini/answer/16275805, 2026.03.26 기준)

무료 사용자 기준으로 하루 5회입니다. 배달 한 번, 택시 한 번, 커피 한 번 시키면 벌써 절반이 줄어드는 수준입니다.

그리고 무료 요금제에서 한도에 가까워지면 Gemini가 해당 월에 남은 요청 수를 알려주는 알림이 표시됩니다. 월 단위 리셋인지, 일 단위 리셋인지는 개인 사용 패턴에 따라 다르니 설정 화면에서 확인하는 게 좋습니다.

▲ 목차로 돌아가기

실제로 어디까지 해주냐 — 장바구니까지만

구글 공식 문서에 이렇게 명시돼 있습니다: “Gemini는 요청받은 작업을 처리하는 동안 특정 작업의 경우 작업을 일시적으로 중지하고 사용자에게 직접 제어하라고 요청합니다.” 그리고 그 예시로 “거래 완료”, “결제 세부정보 입력”이 명시적으로 포함돼 있습니다. (출처: Google Support, 2026.03.26)

9to5Google이 갤럭시 S26 울트라에서 직접 테스트한 결과도 동일했습니다. Uber Eats에서 치킨 샌드위치 주문을 시켰을 때, Gemini가 메뉴 선택과 장바구니 담기를 백그라운드에서 처리한 뒤 최종 주문 확인 화면에서 멈추고 사용자에게 알림을 보냈습니다. 추가 금액 페이지를 건너뛰고 바로 최종 확인 화면까지 이동시켜준 건 편리하지만, 결제 버튼은 직접 눌러야 합니다. (출처: 9to5Google, 2026.03.12)

한 가지 더 — 장바구니에 담았다가 최종 주문을 안 하면 장바구니에 물건이 그대로 남습니다. 공식 문서에도 이 내용이 명시돼 있습니다. 나중에 앱 열었다가 의도치 않은 장바구니를 발견하게 될 수 있습니다.

▲ 목차로 돌아가기

지금 쓸 수 있는 앱 6개, 한국서 실제 활용 가능한 건

현재 Gemini 화면 자동화가 지원하는 앱 목록은 공식적으로 6개입니다. Lyft, Uber, Grubhub, DoorDash, Uber Eats, Starbucks입니다. (출처: 9to5Google, 2026.03.12) 구글은 추가 앱을 계속 확장할 계획이라고 밝혔지만, 2026년 3월 기준 이 6개가 전부입니다.

6개 앱 중 한국에서 실제로 쓸 수 있는 건 Uber(차량)와 Starbucks 정도입니다. Lyft, DoorDash, Grubhub는 한국에서 운영하지 않습니다. 공식 문서에 적힌 예시 중 “구미역 가는 택시 호출해 줘”는 Uber를 통해서는 가능하지만, 카카오T나 티맵 택시는 아직 목록에 없습니다.

지원 앱 목록은 Gemini 앱 설정 화면에서 직접 확인할 수 있고, 기기에 설치된 앱 기준으로 표시됩니다. 앞으로 배달의민족이나 쿠팡이츠 같은 앱이 추가될 가능성은 있지만, 현재 시점에서 공식 확인된 내용은 아닙니다.

▲ 목차로 돌아가기

화면 자동화 vs Gemini Agent — 헷갈리면 안 되는 차이

비슷해 보이지만 구조가 완전히 다릅니다. 화면 자동화는 스마트폰에 설치된 앱을 기기 안의 가상 화면에서 직접 조작합니다. 반면 Gemini Agent는 클라우드에서 실제 웹브라우저 인스턴스를 실행하는 방식입니다.

실질적인 차이는 접근성입니다. 화면 자동화는 무료 사용자도 하루 5회 쓸 수 있습니다. Gemini Agent는 Google AI Ultra 구독자($249.99/월)에게만 제공되며, 하루 200회 요청이 한도입니다. (출처: 9to5Google, 2026.03.13) 월 구독료만 약 36만 원이 넘는 요금제에서만 쓸 수 있는 기능입니다.

그리고 한 가지 더 — 공식 문서에 이런 내용이 있습니다: “연결된 앱으로 제공되는 앱에서는 화면 자동화가 작동하지 않습니다.” 즉 Gemini에 API 방식으로 이미 연결된 앱이 있다면, 그 앱은 화면 자동화가 아니라 연결된 앱 기능을 통해 작동합니다. 같은 명령에 대해 어떤 경로로 처리될지 미리 확인해두는 게 좋습니다.

▲ 목차로 돌아가기

리스크 — 프롬프트 인젝션과 의도치 않은 결제

구글 공식 지원 문서가 직접 경고하는 리스크가 두 가지 있습니다. 첫째는 프롬프트 인젝션입니다. 화면 자동화 중에 앱 화면에 숨겨진 악성 텍스트가 삽입돼 있으면, Gemini가 그것을 사용자의 명령으로 잘못 인식할 수 있습니다. 예를 들어 앱 내 광고나 이벤트 배너에 AI 에이전트를 조종하는 텍스트가 숨겨져 있으면, 의도하지 않은 주문이나 정보 변경이 일어날 수 있습니다. (출처: Google Support, 2026.03.26)

둘째는 의도치 않은 구매입니다. 공식 문서에 명시된 예시 중 하나가 “사용자의 허락 없이 구매 또는 주문 진행”입니다. 최종 결제는 직접 확인하도록 설계돼 있지만, 그 전 단계에서 예상과 다른 수량이나 옵션이 장바구니에 담길 수 있습니다.

9to5Google 실제 테스트에서는 한 번 자동화 과정 중 화면이 전체화면 미리보기 상태에서 잠겨버려 강제 재부팅을 해야 했던 사례도 보고됐습니다. 베타 기능인 만큼 이런 불안정성은 충분히 예상 가능합니다. 처음 쓸 때는 적은 금액의 주문으로 테스트해보는 게 안전합니다.

▲ 목차로 돌아가기

자주 묻는 질문

▲ 목차로 돌아가기

마치며 — 방향은 맞는데, 지금 당장은 제한이 많습니다

그런데 지금 당장 한국에서 쓰기엔 조건이 빡빡합니다. 기기는 갤럭시 S26만, 지원 앱 6개 중 한국서 실질적으로 되는 건 Uber와 스타벅스 정도, 무료 사용자는 하루 5번, 영어 기반 동작. 이 조건들을 모두 알고 나서 써야 기대치와 현실의 간극이 줄어듭니다.

개인적으로는 한국 앱들이 지원 목록에 들어오는 시점이 진짜 전환점이 될 거라고 봅니다. 배달의민족이나 카카오T가 들어오는 순간, 지금과는 체감이 달라질 겁니다. 그 전까지는 스타벅스 주문 자동화 정도로 기능을 익혀두는 게 현실적인 활용법입니다.

▲ 목차로 돌아가기

📚 본 포스팅 참고 자료

1. Google 공식 지원 문서 — Gemini 화면 자동화 (2026.03.26 확인)
2. Google 공식 블로그 — 삼성 갤럭시 S26에서 만나는 더욱 스마트해진 안드로이드 (2026.02.26)
3. Google 공식 블로그 — Gemini 멀티스텝 작업 자동화 발표 (2026.02.25)
4. 9to5Google — Gemini 화면 자동화 갤럭시 S26 배포 확인 (2026.03.12)
5. 9to5Google — Gemini 화면 자동화 요금제별 한도 (2026.03.13)
6. Google 공식 — Gemini 앱 한도 및 업그레이드 (2026.03.26 확인)