GLM-5.1 / Claude Code 2.1.14 기준
IT/AI
GLM-5.1 코딩 성능, $30으로 Opus 4.6의 94.6%가 됩니까?
2026년 3월 27일, 중국 AI 기업 Z.ai가 GLM-5.1을 공개했습니다. 113개 코딩 태스크 기준으로 Claude Opus 4.6의 94.6% 성능을 기록했고, 월 $10(첫 달 프로모션 $3)짜리 Lite 플랜으로 접근할 수 있다는 게 핵심입니다. 숫자는 설득력 있습니다. 그런데 공식 문서를 직접 읽고 나니, 세 가지가 달라 보였습니다.
GLM-5.1이 뭔데 이렇게 화제가 됐나요?
GLM-5.1 코딩 성능이 이슈가 된 건 2026년 3월 27일입니다. Z.ai (구 Zhipu AI)가 GLM Coding Plan 전체 사용자에게 GLM-5.1을 즉시 개방했고, 113개 코딩 태스크 기준 45.3점을 기록하면서 Claude Opus 4.6(47.9점)의 94.6%에 도달했다고 발표했습니다. (출처: Z.ai 공식 구독 페이지, 2026.03.27)
GLM-5.1은 새 아키텍처가 아닙니다. 2026년 2월에 공개된 GLM-5(744B MoE, 활성 파라미터 약 40~44B, 200K 컨텍스트)의 사후 훈련(post-training)을 강화한 버전입니다. 구체적으로는 멀티태스크 SFT → 추론 RL → 에이전틱 RL → 일반 RL → 크로스 스테이지 지식 증류 순서로 정렬을 개선했습니다. (출처: Z.ai 공식 블로그 z.ai/blog/glm-5, 2026.02.12)
GLM-5가 35.4점이었으니, GLM-5에서 GLM-5.1로 오면서 코딩 점수가 28% 상승했습니다. 같은 기반 모델에서 훈련 방식만 바꿔서 이 수치가 나왔다는 점이 흥미롭습니다.
훈련 인프라도 주목할 만합니다. GLM-5와 5.1은 화웨이 어센드(Ascend) 910B 칩 10만 개로만 훈련됐습니다. 미국의 AI 반도체 수출 규제로 엔비디아 GPU를 쓸 수 없는 상황에서 오픈 소스 프론티어급 모델을 만들어낸 사례입니다. (출처: Wavespeed AI 비교 분석, 2026.03.29)
벤치마크 숫자, 어디까지 믿을 수 있나요?
💡 공식 발표문과 테스트 환경 설정을 같이 읽고 나니 이 차이가 보였습니다.
GLM-5.1의 코딩 평가(45.3점)는 Claude Code를 테스트 프레임워크로 사용했습니다. 이게 왜 중요하냐면, Claude Code는 Claude 모델에 최적화된 도구입니다. 다른 모델이 같은 환경에서 평가를 받으면 구조적으로 불리합니다. 그런데 GLM-5.1이 이 “원정 경기”에서 94.6%를 기록했습니다. 실제 중립적 환경이라면 격차가 더 좁아질 가능성이 있습니다.
SWE-bench Verified 기준으로 보면 숫자가 다시 정렬됩니다.
| 모델 | SWE-bench Verified | 코딩 평가 점수 | 오픈 소스 |
|---|---|---|---|
| Claude Opus 4.6 | 80.8% | 47.9 | ❌ |
| GPT-5.2 | 80.0% | — | ❌ |
| GLM-5.1 | 77.8% | 45.3 | 🔜 예정 |
| Claude Opus 4.5 | 80.9% | — | ❌ |
| Qwen 3.5 | 76.4% | — | ✅ |
| DeepSeek V3.2 | 73.1% | — | ✅ |
| Gemini 3 Pro | 76.2% | — | ❌ |
(출처: Hugging Face zai-org/GLM-5 공식 벤치마크, Wavespeed AI 비교 분석 2026.03.29)
SWE-bench 기준으로는 Opus 4.6(80.8%) 대비 3포인트 차이입니다. 113개 태스크 기준 “코딩 점수(45.3 vs 47.9)”보다 격차가 조금 더 크게 보입니다. 어떤 벤치마크를 기준으로 삼느냐에 따라 “94.6% 수준”이라는 문구의 체감 무게가 달라집니다.
Claude Opus보다 앞서는 영역이 실제로 있습니다
💡 공식 벤치마크 전체 항목을 펼쳐보니 코딩 밖에서 예상과 다른 항목들이 나왔습니다.
GLM-5.1 코딩 성능 비교에서 흔히 빠지는 부분이 있습니다. 코딩 외 영역에서 GLM-5가 Claude Opus 4.5를 앞서는 벤치마크가 공식 데이터에 버젓이 나옵니다.
| 벤치마크 | GLM-5 | Claude Opus 4.5 | 승자 |
|---|---|---|---|
| BrowseComp (컨텍스트 관리 포함) | 75.9 | 67.8 | 🏆 GLM-5 |
| BrowseComp-Zh (중국어 웹 탐색) | 72.7 | 62.4 | 🏆 GLM-5 |
| SWE-bench Multilingual | 73.3 | 77.5 | Claude 4.5 |
| HMMT Nov. 2025 (수학) | 96.9 | 91.7 | 🏆 GLM-5 |
| HLE (범용 추론, 텍스트만) | 30.5 | 28.4 | 🏆 GLM-5 |
(출처: Hugging Face zai-org/GLM-5 공식 벤치마크 테이블, 2026.02.17)
BrowseComp(웹 탐색 + 정보 수집)에서는 GLM-5가 75.9 대 67.8로 Opus 4.5를 앞섭니다. 이 점수 차는 단순 수치가 아닙니다. 웹 검색 기반 자료 수집이 포함된 에이전틱 코딩 작업에서 GLM-5 계열이 실질적으로 유리할 수 있다는 뜻입니다.
반면 HLE(Humanity’s Last Exam, 도구 없는 환경)에서는 Claude Opus 4.6이 53.1점인 반면 GLM-5는 30.5점으로 절반 수준입니다. 심층 추론이 필요한 단독 추론 태스크에서는 아직 격차가 뚜렷합니다.
Coding Plan 요금 구조 — 계산해보니 이렇게 나왔습니다
“월 $3짜리 플랜”이라는 표현이 돌아다니는데, Z.ai 공식 구독 페이지(2026.03.27 기준)를 보면 실제 구조가 조금 다릅니다.
| 플랜 | 월 기준가 | 분기 결제 | 5시간 한도 | 주간 한도 |
|---|---|---|---|---|
| Lite | $10/월 | $27/분기 (10% 할인) | 약 80 프롬프트 | 약 400 프롬프트 |
| Pro | $30/월 | $81/분기 (10% 할인) | 약 400 프롬프트 | 약 2,000 프롬프트 |
| Max | $80/월 | $216/분기 (10% 할인) | 약 1,600 프롬프트 | 약 8,000 프롬프트 |
(출처: Z.ai 공식 구독 페이지 z.ai/subscribe, 2026.03.27 기준 / 연간 결제 시 30% 추가 할인)
⚠️ 주의: GLM-5.1은 자동 기본값이 아닙니다
Coding Plan 구독 후 기본값은 GLM-4.7입니다. Claude Code에서 GLM-5.1을 쓰려면 ~/.claude/settings.json 파일에서 모델 이름을 수동으로 glm-5.1로 바꿔야 합니다. (출처: Z.ai 공식 가이드 docs.z.ai/devpack/overview)
Claude Max($100~200/월) 대비 Pro 플랜($30/월)은 약 3~7배 저렴합니다. 하지만 1 프롬프트는 모델 호출 15~20회에 해당합니다. 복잡한 에이전틱 태스크 하나가 20~30 프롬프트를 소모하면 Pro 플랜 기준 하루 실질 작업량이 예상보다 빠르게 줄어듭니다.
API 직접 호출 요금은 별도입니다. GLM-5 API 기준 입력 $1.00/백만 토큰, 출력 $3.20/백만 토큰이며, Claude Sonnet 4.6(입력 $3.00, 출력 $15.00) 대비 상당히 낮은 수준입니다. 단, 2026.03.31 기준 GLM-5.1의 독립 API 엔드포인트는 아직 공개되지 않았습니다.
Z.ai 서버에서 쓸 때 알아야 할 것
💡 모델 품질 자체와 Z.ai 서버 호스팅 품질이 다른 얘기라는 점 — 커뮤니티에서 직접 비교한 사람들이 확인한 내용입니다.
Reddit r/ZaiGLM 커뮤니티(2026.03.25 게시물, 구독자 7,124명)에서 Z.ai Max 플랜 사용자들이 일관된 문제를 보고하고 있습니다. 핵심은 이렇습니다. 같은 GLM-5 모델을 Z.ai 이외의 제공자(NanoGPT 등)에서 실행하면 200K 컨텍스트 내내 품질이 유지되는데, Z.ai 공식 서버에서 실행하면 컨텍스트 40K~60K 수준에서 출력 품질이 저하되고 생성이 멈추는 현상이 나타난다는 것입니다. (출처: Reddit r/ZaiGLM, 2026.03.25)
여러 댓글에서 공통적으로 나온 분석은 “Z.ai가 서버 비용을 줄이려고 모델을 과도하게 양자화했다”는 추측입니다. Z.ai가 공식 답변을 내놓지 않은 부분입니다. 단, 같은 스레드에서 Z.ai 서버를 주간에 가끔만 사용하는 경우에는 문제를 겪지 않았다는 반론도 있었습니다.
실사용 체크리스트
- 컨텍스트 40K 이상 사용 예정이라면 다른 API 제공자를 통한 GLM-5 호출 권장
- Claude Code에서 쓸 때
/compact명령으로 정기적 컨텍스트 압축 권장 - 주말·피크 타임 응답 속도 저하 사례 다수 — 촉박한 마감 작업엔 위험 부담 있음
- GLM-5.1 오픈 소스 웨이트는 아직 미공개 (GLM-5는 MIT 라이선스로 Hugging Face 공개)
긍정적인 부분도 있습니다. Z.ai Coding Plan은 55토큰/초 이상 생성 속도를 보장한다고 공식 명시하고 있습니다. 계정 정지 위험이 없고, 네트워크 제한도 없다는 점은 Claude 공식 플랜에서 간혹 발생하는 사용량 제한 메시지 문제와 비교할 때 실질적인 장점입니다.
GLM-5.1을 쓰면 유리한 조건, 불리한 조건
공식 벤치마크와 커뮤니티 피드백을 교차로 읽고 나면 “어떤 상황에서 쓸지”가 꽤 명확하게 나옵니다.
✅ 유리한 경우
- 일상적인 코드 작성·디버깅이 주업무
- 웹 검색 연동 에이전틱 코딩 태스크
- Claude API 비용이 월 $30 이상인 경우
- 오픈 소스 모델로 자체 배포가 목표
- 컨텍스트 40K 이내 단발성 작업
❌ 불리한 경우
- 1M 컨텍스트가 필요한 장문 코드베이스 (Opus 4.6은 1M, GLM-5.1은 200K)
- 이미지·멀티모달 입력이 포함된 태스크
- HLE 유형의 고난도 추론 (GLM-5 30.5 vs Opus 4.6 53.1)
- 엔터프라이즈 컴플라이언스 요건이 있는 경우
- Z.ai 서버로 60K 이상 장시간 세션 운영
현실적인 접근법으로 커뮤니티에서 자주 언급되는 조합은 이렇습니다. GLM Coding Pro($30/월)를 기본 코딩 도구로 쓰고, 복잡한 추론이 필요한 작업에서만 Claude Opus API를 건당 호출하는 방식입니다. GLM-5 API 기준 출력 1백만 토큰당 $3.20이니, 복잡한 태스크를 Opus($75/백만 토큰 출력)로 가끔 처리해도 전체 비용은 Claude Max($200/월) 대비 훨씬 낮게 유지됩니다.
GLM-5.1의 오픈 소스 웨이트 공개 시점은 아직 공식 일정이 나오지 않았습니다. Z.ai 측 관계자가 “오픈 소스로 공개할 것”이라고 밝혔고, GLM-5는 이미 MIT 라이선스로 Hugging Face에 공개돼 있습니다. (출처: Hugging Face zai-org/GLM-5, 2026.02.17)
자주 나오는 질문 5가지
마치며 — GLM-5.1은 어디에 놓아야 할까요
GLM-5.1 코딩 성능은 숫자만 보면 설득력이 있습니다. Claude Code라는 경쟁사 도구를 테스트 프레임워크로 쓴 “원정 경기”에서 94.6%를 기록했고, SWE-bench Verified에서도 오픈 소스 모델 중 최상위권입니다. 무엇보다 MIT 라이선스로 공개된 744B 파라미터 모델이 엔비디아 GPU 없이 만들어졌다는 사실 자체가 인상적입니다.
단, 솔직히 말하면 Z.ai 공식 서버에서 쓸 때의 컨텍스트 품질 문제는 무시하기 어렵습니다. 모델의 이론적 성능과 호스팅 서비스의 실제 안정성은 다른 이야기입니다. 장시간 에이전틱 세션이 주가 된다면 웨이트가 공개된 후 다른 제공자를 통해 쓰거나, GLM-5 API를 직접 호출하는 방식을 먼저 검토하는 게 맞습니다.
비용 관점에서는 확실한 포지션이 있습니다. 일상 코딩 작업의 90%를 GLM Coding Pro($30/월)로 처리하고, 나머지 10%에서만 Claude Opus API를 건당 호출하는 조합은 Claude Max($200/월) 대비 실질적으로 비용을 낮출 수 있습니다. “Opus급을 $30에 쓴다”는 표현보다는 “Opus의 94%를 $30에, 나머지 6%는 필요할 때만 추가 비용”이 더 정확한 묘사입니다.
본 포스팅 참고 자료
본 포스팅은 2026.03.31 기준으로 작성됐습니다. GLM-5.1 및 Z.ai Coding Plan의 요금, 기능, 벤치마크 수치는 서비스 업데이트로 인해 변경될 수 있습니다. 본 포스팅 작성 이후 서비스 정책·UI·기능이 변경될 수 있으니 최신 정보는 공식 사이트에서 확인하시기 바랍니다.
댓글 남기기