GPT-5.4 Computer Use: AI가 내 PC를 직접 조작하는 시대

Published on

in

GPT-5.4 Computer Use: AI가 내 PC를 직접 조작하는 시대

📅 2026년 3월 최신 업데이트 · OpenAI 공식 발표

GPT-5.4 Computer Use: AI가 내 PC를 직접 조작하는 시대, 지금 안 쓰면 손해입니다

2026년 3월 5일, OpenAI는 단순히 “더 똑똑한 AI”가 아닌 “직접 일하는 AI”를 출시했습니다.
AI 에이전트입니다. OSWorld 벤치마크에서 인간 기준선(72.4%)을 처음으로 초과(75.0%)한 이 기능,
지금 당장 실무에 쓸 수 있는 방법을 총정리합니다.

🆕 2026.03.05 출시
OSWorld 75.0% (인간 초과)
할루시네이션 33% 감소
1M 토큰 컨텍스트

① GPT-5.4 Computer Use란 무엇인가 — 핵심 개념 정리

실제 애플리케이션을 조작하는 기능입니다. 기존 ChatGPT가 “어떻게 하세요”라고 설명해줬다면,

OpenAI가 메인라인 범용 모델에 Computer Use를 탑재한 건 이번이 처음입니다. 이전까지는 Claude의
Computer Use나 Operator 같은 별도 서비스를 써야 했죠. GPT-5.4에서는 추가 도구 없이 단일 모델 호출만으로
PC 조작이 가능해졌습니다.

가장 중요한 변화: Stateless → Stateful
이전 모델은 작업마다 새 환경을 새로 구축(Stateless)해야 했습니다. GPT-5.4는 OS 상태와
작업 맥락을 그대로 유지(Persistent)하면서 연속 작업이 가능합니다. “아까 열었던 엑셀에서
계속 작업해줘”가 드디어 현실이 된 겁니다.

개별 사실 오류 33% 감소, 오류 포함 전체 응답 18% 감소라는 수치도 함께 발표됐습니다.
모델 버전 업데이트 피로감이 쌓인 시점에, OpenAI가 “신뢰성 회복”을 핵심 메시지로 내세운 이유이기도 합니다.

▲ 목차로 돌아가기

② OSWorld 75.0% — 수치로 보는 진짜 성능 변화

숫자가 말해주는 게 있습니다. GPT-5.4는 컴퓨터 조작 능력을 측정하는 표준 벤치마크
OSWorld-Verified에서 75.0%를 기록했습니다.
인간이 같은 작업을 수행했을 때의 기준선(72.4%)을 OpenAI 메인라인 모델 최초로 초과한 겁니다.
직전 모델인 GPT-5.2의 47.3%와 비교하면 무려 27.7%p 급등한 수치입니다.

▼ GPT-5.4 핵심 벤치마크 비교 (출처: OpenAI 공식 발표, 2026.03.05)
벤치마크 GPT-5.2 GPT-5.3 Codex GPT-5.4
OSWorld-Verified (PC 조작) 47.3% 74.0% 🏆 75.0%
GDPval (44개 직종 지식업무) 70.9% 70.9% 🏆 83.0%
BrowseComp (웹 멀티소스 리서치) 65.8% 77.3% 🏆 82.7%
SWE-Bench Pro (소프트웨어 엔지니어링) 55.6% 56.8% 🏆 57.7%
Toolathlon (도구 활용) 46.3% 51.9% 🏆 54.6%

GDPval은 실제 직장인의 지식 업무를 44개 직종, 9개 언어로 평가하는 벤치마크입니다.
“실제 사무직 업무 처리 능력”이 크게 올랐다는 의미입니다. 이 수치가 개인 사용자에게 가장 체감될 부분입니다.

인간 기준선 초과의 의미: OSWorld 인간 기준선 72.4%는 사람이 동일한 컴퓨터 조작 작업을
수행했을 때의 성공률입니다. AI가 이를 넘었다는 건 “특정 반복 작업에서는 AI가 사람보다 실수가 적다”는
뜻으로 해석할 수 있습니다.

▲ 목차로 돌아가기

③ 7가지 핵심 신기능 완전 분석

GPT-5.4는 단순 버전업이 아닙니다. 메인라인 모델의 역할 자체를 “대화 도우미”에서
“실행 에이전트”로 전환하는 7가지 기능이 동시에 탑재되었습니다.

1Computer Use (컴퓨터 직접 조작)

마우스 클릭·키보드 입력·앱 실행을 AI가 직접 수행. Playwright 방식으로 브라우저와 데스크톱 앱 모두 조작 가능합니다.

2100만 토큰 컨텍스트

전체 코드베이스·수백 페이지 문서를 단일 요청으로 처리. 단, 기본값은 272K이며 1M 활성화 시 272K 초과분은 2배 요금이 적용됩니다.

3Tool Search (토큰 47% 절감)

모든 도구 정의를 한 번에 로드하지 않고 필요할 때만 검색 로드. MCP Atlas 벤치마크에서 동일 정확도 대비 토큰 사용량 47% 절감 확인.

4Context Compaction (맥락 압축)

긴 멀티턴 에이전트 체인에서도 초기 목표를 잊지 않습니다. 이전 맥락을 암호화 압축 아이템으로 요약해 다음 턴에 전달합니다.

5Codex 코딩 능력 통합

GPT-5.3-Codex의 코딩 능력을 메인라인에 흡수. build-run-verify-fix 루프를 단일 모델로 완결할 수 있습니다.

6Steerability (실시간 방향 전환)

AI가 답변을 생성하는 도중에도 “방향 바꿔줘”라고 개입 가능. 잘못된 방향으로 작업이 흐르기 전에 실시간으로 수정합니다.

7ChatGPT for Excel 플러그인

GPT-5.4 출시와 동시에 공개된 Excel·Sheets 전용 플러그인. AI가 어떤 셀을 수정할지 설명하고 사용자 승인 후 실행합니다.

Computer Use가 실제로 할 수 있는 것들

OpenAI 공식 쇼케이스에서 확인된 실제 사례들입니다. 도시 생성기 앱은 약 1시간 만에 7단계 이상의
계획을 수립하고 자율 실행까지 완료했으며, AI가 직접 화면을 분석해 “하늘 비중이 너무 크다”는 문제를
스스로 파악하고 수정했습니다. 비행 시뮬레이터는 단 하나의 프롬프트로 로컬 개발부터 웹서버 배포까지
약 3시간 안에 완결됐습니다. Gmail 자동화는 특정 이메일을 분석해 지정 주소로 답장을 전송하는 작업을
사용자가 확인하기도 전에 완료될 만큼 빠르게 처리했습니다.

개인적 시각: 가장 인상적인 건 “자기 수정 루프”입니다. 단순히 지시를 받아 실행하는 게 아니라,
결과를 눈으로 확인하고 “이거 아닌데”라며 스스로 고치는 구조입니다. 이게 진짜 에이전트와 단순 자동화의 차이입니다.

▲ 목차로 돌아가기

④ Thinking 5.4 vs Pro 5.4 — 나한테 맞는 티어는?

Instant 5.3(빠른 일상 대화), Thinking 5.4(심층 추론),
Pro 5.4(최대 성능). 두 가지 유료 Thinking 티어의 차이를 정확히 알아야 비용 낭비를 막을 수 있습니다.

▼ Thinking 5.4 vs Pro 5.4 핵심 차이 (출처: OpenAI 공식 문서)
항목 Thinking 5.4 Pro 5.4
추론 깊이 High (캡 있음) xhigh (무제한)
이미지 생성·캔버스·메모리 ✅ 사용 가능 ❌ 비활성
API 입력 비용 (per 1M) $2.50 $30.00 (12배)
API 출력 비용 (per 1M) $15.00 $180.00 (12배)
Thinking 컨텍스트 (유료) 256K (128K 입력) 400K (272K 입력)
API 엔드포인트 Chat Completions + Responses API Responses API 전용
GDPval (지식 업무) 🏆 83.0% 82.0%
ARC-AGI-2 (추상 추론) 73.3% 🏆 83.3%
BrowseComp (웹 리서치) 82.7% 🏆 89.3%

흥미로운 사실이 있습니다. 일반 지식 업무(GDPval)에서는 Thinking 5.4가 Pro보다 오히려 앞섭니다.
Pro가 절대적으로 유리한 건 추상 추론 퍼즐이나 수십 개 출처를 종합하는 심층 웹 리서치처럼
“극한의 추론”이 필요한 작업입니다. 일반 직장인의 사무 업무, 코딩, 문서 작업이라면
Thinking 5.4가 비용 대비 더 합리적인 선택입니다.

생각 시간 토글 (Plus·Business 사용자)

지능 균형), Extended(이전 Plus 기본값)는 Plus·Business 모두 사용 가능합니다.
Pro 사용자는 추가로 Light(가장 빠름)와 Heavy(깊은 추론) 옵션을 선택할 수 있습니다.
상황에 맞게 조절하면 불필요한 추론 비용을 아낄 수 있습니다.

▲ 목차로 돌아가기

⑤ 요금제·플랜별 접근 권한 총정리

GPT-5.4를 쓰려면 어떤 플랜이 필요할까요? 결론부터 말씀드리면,
Thinking 5.4는 Plus($20/월)부터, Pro 5.4는 Pro($200/월) 이상에서만 사용 가능합니다.
무료 플랜은 GPT-5.3 Instant만 사용할 수 있습니다.

▼ ChatGPT 플랜별 GPT-5.4 접근 권한 (출처: OpenAI Help Center)
플랜 Instant 5.3 Thinking 5.4 Pro 5.4 월 한도
Free ✅ (5시간당 10회)
Plus ($20/월) ✅ (3시간당 160회) ✅ (주 3,000회) 주 3,000회 Thinking
Team 관리자 설정
Pro ($200/월) 무제한 (남용 방지)
Enterprise / Edu ✅ (관리자 활성화) ✅ (관리자 활성화) 계약 기준

레거시 모델 종료 일정 — 주의하세요

2026년 2월 13일부터 GPT-4o, GPT-4.1, GPT-5(Instant·Thinking) 등 구형 모델이
ChatGPT에서 이미 종료되었습니다. GPT-5.2 Thinking은 2026년 6월 5일까지만 Legacy Models에서
유지됩니다. API 엔드포인트는 영향 없지만, ChatGPT에서 구형 모델을 쓰고 있었다면 지금 바로

⚠️ API 개발자 필독: gpt-5.4-pro는 Responses API 전용입니다.
기존 /v1/chat/completions 엔드포인트로는 사용할 수 없으니, 에이전트 워크플로우 구축 시
반드시 Responses API로 마이그레이션해야 합니다.

▲ 목차로 돌아가기

⑥ 실전 활용 5가지 — 지금 바로 써먹는 방법

정리했습니다. 복잡한 셋업 없이 ChatGPT Plus 이상 플랜이면 Thinking 5.4로 대부분 시작할 수 있습니다.

1 엑셀·스프레드시트 자동화

미리 설명하고 사용자 승인을 받은 뒤 실행합니다. DCF 모델 구성, 민감도 분석, 피벗 테이블 자동화
같은 투자은행 수준 작업도 자연어 지시 한 줄로 처리됩니다.
이번 달 매출 데이터를 분기별로 정리하고, 전분기 대비 성장률 컬럼을 추가해줘” 같은 요청이 그냥 됩니다.

2 Gmail 자동 응답 및 분류

“VIP 고객에게서 온 메일을 분류하고, 24시간 내 미응답 건만 요약해서 답장 초안을 작성해줘”라는
요청을 GPT-5.4는 Gmail을 직접 열어 처리합니다. OpenAI 공식 쇼케이스에서 공개된 데모에서는
사용자가 확인하기도 전에 작업이 완료될 만큼 빠른 속도를 보여줬습니다.

3 반복적인 웹 리서치 자동화

BrowseComp 벤치마크에서 82.7%를 기록한 GPT-5.4는 여러 웹 출처를 자율 탐색해 정보를 종합합니다.
“경쟁사 5곳의 최신 가격 정책을 조사하고 비교표를 만들어줘”처럼 수동으로 여러 사이트를 오가야 했던
작업이 자동화됩니다. 특히 Steerability 기능을 활용해 리서치 도중 방향을 수정하면 시행착오가
대폭 줄어듭니다.

4 코드 작성·테스트·배포 루프

Codex에서 GPT-5.4를 활용하면 “이 Python 코드의 버그를 찾고 수정해줘”라는 요청 하나로
코드 실행 → 오류 감지 → 수정 → 재실행의 build-run-verify-fix 루프가 완전 자율로 돌아갑니다.
SWE-bench Pro 57.7%를 기록한 GPT-5.4는 실제 오픈소스 GitHub 이슈 해결에서도
이전 세대 대비 뚜렷하게 향상된 성능을 보입니다.

5 Steerability로 AI 작업 실시간 수정

AI가 생각하는 도중에 “방향 바꿔줘”가 가능해진 건 이번 업데이트의 숨은 킬러 기능입니다.
긴 보고서 작성이나 코딩 작업 중간에 요구사항이 바뀌어도, 처음부터 다시 시작할 필요가 없습니다.
ChatGPT UI에서 Thinking 5.4를 선택한 상태에서 추론이 시작되면 입력창이 활성화된 상태가 유지되므로,
바로 추가 지시를 입력하면 됩니다.

▲ 목차로 돌아가기

⑦ 반드시 알아야 할 주의사항과 한계

주의사항들을 솔직하게 정리했습니다.

⚠️ 1M 토큰 = 기본값 아님: 컨텍스트 1M 토큰은 API에서 파라미터를 명시적으로
설정해야 활성화됩니다. 272K 초과 구간부터는 정상 요금의 2배가 부과됩니다.

⚠️ Computer Use = ChatGPT Agents 전용: 일반 ChatGPT 채팅창에서는 Computer Use가
별도 모드로 나타나지 않습니다. ChatGPT Agents를 통해 접근해야 합니다. 단순 채팅으로는
PC 조작이 활성화되지 않습니다.

⚠️ Pro 5.4 = Responses API 전용: gpt-5.4-pro는 Chat Completions API를
지원하지 않습니다. 기존 API 연동 코드를 수정해야 합니다.

⚠️ 모델 드리프트 주의: 5.1 → 5.2 → 5.3 → 5.4가 수 주 간격으로 출시되면서,
프로덕션 환경에서 같은 모델 ID인데 내부가 조용히 바뀌는 “모델 드리프트” 현상이 현실화되고 있습니다.
중요한 워크플로우는 정기적으로 출력을 검증하세요.

⚠️ 컨텍스트 품질이 핵심: OpenAI 공식 Codex 가이드는 “불필요하거나 부정확한 컨텍스트를
채우면 오히려 신뢰도가 낮아진다”고 명시합니다. 1M 토큰을 꽉 채우는 것보다 관련성 높은 정보만
선별하는 것이 성능에 더 유리합니다.

▲ 목차로 돌아가기

❓ 자주 묻는 질문 Q&A

GPT-5.4 Computer Use는 무료로 쓸 수 있나요?
아니요. GPT-5.4 Thinking은 Plus($20/월) 이상, Pro 5.4는 Pro($200/월) 이상에서만 사용할 수 있습니다.
무료 플랜은 GPT-5.3 Instant만 제공됩니다. 다만 Computer Use 기능 자체는 Plus 플랜에서도
ChatGPT Agents를 통해 제한적으로 접근할 수 있습니다.
Computer Use가 활성화되지 않아요. 어디서 찾나요?
일반 ChatGPT 채팅창에서는 Computer Use 전용 모드가 별도로 표시되지 않습니다.
ChatGPT Agents 인터페이스를 통해 접근해야 합니다. 또한 Thinking 5.4 모델을 선택해도
일반 대화 모드에서는 Computer Use가 자동 활성화되지 않으니, OpenAI 공식 Help Center에서
최신 접근 경로를 확인하는 것을 권장합니다.
GPT-5.4 Pro와 Thinking의 차이를 한 문장으로 설명하면?
같은 GPT-5.4 엔진을 쓰되, Thinking은 “스마트하게 빠른 고수”이고 Pro는 “시간을 아끼지 않는
전문가”입니다. 일반 업무는 Thinking이 오히려 GDPval에서 더 높은 점수를 냈고, Pro는 추상 추론·
심층 웹 리서치처럼 극한의 정확도가 필요한 작업에서 빛을 발합니다. 비용은 Pro가 API 기준 12배 비쌉니다.
1M 토큰 컨텍스트는 어떻게 활성화하나요?
API에서 model_context_windowmodel_auto_compact_token_limit 파라미터를
명시적으로 설정해야 합니다. ChatGPT 웹에서는 플랜에 따라 컨텍스트 윈도우가 자동으로 결정됩니다.
Pro 티어의 경우 Thinking 모드에서 최대 400K(입력 272K + 출력 128K)까지 지원됩니다.
그리고 중요한 점은 272K 초과 구간부터는 정상 요금의 2배가 적용되니, 비용 관리에 주의하세요.
GPT-5.2에서 GPT-5.4로 바꾸면 API 비용이 얼마나 달라지나요?
단가만 보면 약 43% 인상이지만, Tool Search 기능 덕분에 실제 사용 토큰이 최대 47% 줄어들 수 있습니다.
에이전트 워크플로우에서 Tool Search를 적극 활용하면 총비용이 오히려 비슷하거나 낮아질 수 있습니다.
하루 50건 태스크 기준 월간 예상 비용은 Thinking 5.4 단독 사용 시 약 $63, 하이브리드 전략 시 약 $134입니다.

▲ 목차로 돌아가기

✍️ 마치며 — 솔직한 총평

분기점이 될 가능성이 높습니다. OSWorld 인간 기준선 초과, 할루시네이션 33% 감소, 1M 토큰 컨텍스트—
수치 하나하나가 이전 세대와 질적으로 다릅니다.

솔직히 말씀드리면, 지금 당장 모든 업무가 자동화되는 건 아닙니다. Computer Use는 아직 ChatGPT Agents를
통해서만 접근 가능하고, 복잡한 환경에서는 여전히 예외 처리가 필요합니다. Pro 5.4는 API 기준
입력 토큰 1M당 $30이라는 가격이 부담스럽고요. 하지만 Thinking 5.4와 Plus 플랜의 조합은
월 $20으로 상당히 현실적입니다.

가장 주목해야 할 포인트는 Steerability와 Context Compaction입니다. AI가 생각하는 도중에 개입하고,
긴 작업에서 맥락을 잃지 않는 이 두 기능이 일상적인 업무 흐름을 바꿀 겁니다.
“AI가 내 지시를 따른다”에서 “AI와 함께 실시간으로 협업한다”로의 전환—
그게 GPT-5.4 Computer Use가 열어놓은 새 방향입니다.

※ 공식 문서:
GPT-5.4 소개 (OpenAI 한국어) /
ChatGPT 플랜별 사용 가이드

▲ 목차로 돌아가기

※ 본 포스팅은 OpenAI 공식 발표 자료(2026년 3월 5일 기준) 및 공식 Help Center를 바탕으로 작성되었습니다.
요금·기능·사용 한도는 OpenAI 정책 변경에 따라 달라질 수 있으므로, 정확한 최신 정보는 반드시 공식 사이트에서 직접 확인하시기 바랍니다.
벤치마크 수치는 OpenAI 공식 발표 기준이며, 실제 사용 환경에 따라 결과가 다를 수 있습니다.

댓글 남기기


최신 글


아이테크 어른경제에서 더 알아보기

지금 구독하여 계속 읽고 전체 아카이브에 액세스하세요.

계속 읽기