GPT-6 Luna와 같은 값의 Haiku 5.5, 점수는 높고 토큰은 3배

Claude 공식 계정이 한국 시각 10월 8일 새벽 3시 1분에 올린 공개 글입니다. 지금까지 내놓은 소형 모델 가운데 가장 싸고 빠르고 유능하며, 같은 일을 돌리는 데 Haiku 4.5보다 평균 75%쯤 적게 든다는 두 문장이 붙었습니다. 앤트로픽은 발표문에서 요약, 압축(긴 대화를 줄여 문맥을 비우는 작업), 데이터베이스 질의, 분류처럼 짧고 되풀이되는 일과 Opus 5.5·Sonnet 5.5 밑에서 일을 나눠 받는 서브에이전트, 실시간 고객 상담과 브라우저 조작을 쓰임새로 꼽았습니다.

새벽 3시 1분과 3시 5분

4분 뒤인 새벽 3시 5분에는 오픈AI가 ChatGPT의 무료 요금제까지 GPT-6를 넣는다고 발표했습니다. 무료와 Go 이용자가 받는 모델은 GPT-6 Luna이고, 앤트로픽이 이날 Haiku 5.5의 비교 상대로 표에 올린 모델도 Luna입니다. 두 회사가 같은 새벽에 새 모델을 낸 것은 2주 만으로, 9월 23일 새벽에는 Opus 5.5와 GPT-6 Sol·Luna가 101분 차이로 나왔습니다.

Sonnet 5.5 때처럼 이번에도 모델 이름이 발표보다 먼저 개발 도구에 보였습니다. Claude Code 모델 목록에 Haiku 5.5가 떴다는 사용자 게시물은 공식 발표 21분 전에 올라왔고, 같은 새벽 배포된 Claude Code 2.1.293의 변경 기록에는 Haiku 5.5가 앤트로픽 API의 기본 Haiku 모델이 됐다는 줄이 들어갔습니다.

10만 토큰에서 값이 다섯 배로

Haiku 5.5의 가격표에는 값이 두 줄로 적혀 있습니다. 요청에 넣는 프롬프트가 10만 토큰 이하면 100만 토큰당 입력 0.1달러, 출력 0.5달러이고, 10만 토큰을 넘으면 입력 0.5달러, 출력 2.5달러로 다섯 배가 됩니다. 캐시 읽기(앞서 계산해 둔 같은 앞부분을 다시 읽는 값)도 0.01달러와 0.05달러로 나뉩니다.

프롬프트 길이로 값을 나눈 Claude는 지금 Haiku 5.5 하나입니다. 앤트로픽 가격 문서는 Claude 4.6 이후 모델이 100만 토큰 문맥 전체를 같은 단가로 받는다고 적으면서 Haiku 5.5만 예외로 뺐습니다. 앤트로픽이 든 근거는 Haiku 4.5로 들어온 요청의 약 90%가 10만 토큰 이하였다는 숫자이고, 대부분의 요청은 싼 쪽 값을 받고 긴 문서를 통째로 넣는 소수만 다섯 배를 냅니다.

GPT-6 Luna도 긴 프롬프트에 웃돈을 받지만, 기준은 27만 2,000토큰이고 오르는 폭도 입력 2배, 출력 1.5배입니다. 그래서 10만에서 27만 2,000토큰 사이 요청은 Luna가 입력과 출력 모두 5배 쌉니다. 사이먼 윌리슨은 10만 토큰 안에 들어가는 일이면 Haiku가 Luna와 같은 값에 더 높은 벤치마크 점수를 내세우고, 그보다 긴 일은 Luna가 훨씬 유리하다고 정리했습니다.

평균 75%가 나온 계산

10만 토큰 이하에서 90%, 그 위에서 50%를 내렸는데 평균이 75%로 적힌 데는 토큰을 세는 방식이 걸려 있습니다. Haiku 5.5는 Opus 5.5·Sonnet 5.5와 같은 새 토크나이저(글을 토큰으로 자르는 규칙)를 써서, 앤트로픽 전환 안내서에 따르면 같은 글이 Haiku 4.5보다 약 30% 많은 토큰으로 세어집니다. 윌리슨이 같은 긴 프롬프트를 넣어 보니 약 1.25배였고, 그는 이를 숨은 가격 인상이라고 불렀습니다.

30%를 넣어 다시 계산하면, 같은 글을 넣는 값은 10만 토큰 이하 요청에서 Haiku 4.5의 약 13%, 10만 토큰 초과 요청에서 약 65%입니다. 토큰이 30% 늘어나는 만큼 Haiku 4.5에서 7만 7,000토큰쯤이던 프롬프트는 Haiku 5.5에서 10만 토큰을 넘어 다섯 배 값을 받습니다. 앤트로픽은 각주에서 이 토큰 수 변화와 과제 하나를 끝내는 데 드는 토큰 수의 차이까지 넣어 평균 75%를 냈다고 밝혔습니다. 출력 한도는 12만 8,000토큰이고, 묶음 처리(Batch API)는 입력과 출력 모두 50% 할인에 베타 헤더를 붙이면 출력을 30만 토큰까지 받습니다.

같은 날 함께 나온 두 가지

앤트로픽은 Haiku 5.5와 함께 Sonnet 5.5의 캐시 읽기 값을 100만 토큰당 0.2달러에서 0.1달러로 절반 내렸습니다. 에이전트가 같은 지시문과 코드를 되풀이해 읽는 작업에서는 캐시 읽기가 토큰의 큰 부분을 차지해서, 앤트로픽은 이 인하로 대부분의 에이전트 작업에서 Sonnet 5.5 비용이 약 20% 준다고 설명했습니다.

독립 평가 숫자에도 곧바로 들어갔습니다. Artificial Analysis(AA)의 Sonnet 5.5 페이지는 새 캐시 할인율 95%를 적용해 지수 과제 하나의 비용을 5.46달러로 적고 있습니다. Sonnet 5.5 출시 날 AA가 발표한 7.60달러보다 28% 낮고, 같은 최고 설정의 Opus 5.5(5.98달러)보다 적은 값입니다.

두 번째는 구독자에게 주는 API 크레딧입니다. 이번 주부터 Max 5x 요금제에 매달 100달러, Max 20x에 200달러를 주고, Team에는 표준 좌석당 20달러, 프리미엄 좌석당 100달러씩 최대 500달러를 한데 모아 줍니다. 도움말 센터에 따르면 크레딧은 Claude API와 Claude Managed Agents, Claude Agent SDK, 콘솔의 Playground에 쓰고, 터미널·IDE·데스크톱·웹에서 대화하며 쓰는 Claude Code와 추가 사용량, AWS·구글 클라우드·마이크로소프트를 거쳐 쓰는 Claude에는 쓸 수 없습니다.

크레딧은 다음 달로 넘어가지 않고, 따로 산 크레딧보다 먼저 빠져나갑니다. 다른 크레딧이 없는 조직은 다 쓰면 다음 지급일까지 API 요청이 멈추고, 넘친 사용량이 구독 요금으로 청구되지는 않습니다. 윌리슨은 Max 5x와 Max 20x의 크레딧이 각 요금제의 월 구독료와 같은 액수라고 짚었습니다. 오픈AI는 9월 29일 DevDay에서 협력 도구 16곳이 ChatGPT 요금제 사용량을 끌어다 쓰게 하는 Sign in with ChatGPT를 내놨고, 그 경위는 Pro 500 요금제를 다룬 글에 정리했습니다. 구독료로 낸 사용량을 채팅 창 밖의 앱과 에이전트에서 쓰게 하는 장치가 두 회사에서 8일 간격으로 나왔습니다.

앤트로픽 비교표의 여덟 항목

앤트로픽이 낸 표에서 Haiku 5.5는 Haiku 4.5 점수가 적힌 일곱 항목과 GPT-6 Luna 점수가 적힌 여섯 항목에서 모두 앞섰습니다. 컴퓨터를 직접 조작해 여러 단계짜리 일을 끝내는 OSWorld 2.1(오프라인 부분 집합)은 15.7%에서 72.4%로 올라 Luna(48.9%)보다 23.5%포인트 높았고, 터미널에서 실무를 처리하는 Terminal-Bench 4.0은 Haiku 4.5의 0.0%에서 39.2%가 됐습니다. 44개 직업의 실제 업무 결과물을 견주는 GDPval-AA에서는 735점이 1,620점으로 올랐습니다.

표에는 단서가 붙어 있습니다. OSWorld의 Luna 점수는 앤트로픽이 같은 82개 과제를 오픈AI API로 직접 돌려 얻은 값이고, 이때 오픈AI의 문맥 압축 기능을 그대로 썼다고 시스템 카드 각주에 적혀 있습니다. 시스템 카드의 다른 표에서는 Haiku 5.5가 FrontierCode 최고 설정에서 46.4%를 받아 Sonnet 5.5의 같은 설정(46.2%)을 넘었지만, Sonnet 5.5는 한 단계 낮은 xhigh에서 52.1%를 냈습니다. 실제 저장소의 문제를 고치는 SWE-bench Pro에서는 64.8%로 Sonnet 5.5(81.3%)와 16.5%포인트 차이가 났습니다.

앤트로픽도 쓰임새를 나눠 적었습니다. 발표문은 Terminal-Bench 4.0 같은 복잡한 에이전트 코딩에는 Sonnet 5.5와 Opus 5.5가 여전히 낫고, Haiku 5.5는 압축과 요약, 서브에이전트처럼 범위가 좁은 일, 이전 Claude로는 비용 때문에 돌리기 어렵던 일에 맞는다고 설명했습니다. 인스타그램 공동창업자로 앤트로픽 랩스에서 일하는 마이크 크리거는 공개 직후 X에 역할 분담을 한 줄로 적었습니다.

무거운 생각은 Opus가 하고, 대량의 일은 Haiku가 맡습니다.— 마이크 크리거, 앤트로픽 랩스(10월 8일 X)

초기 고객의 숫자도 같은 방향입니다. 업무 관리 도구 아사나는 자사 AI 에이전트 평가에서 작업 완료 지연이 30% 넘게 줄고 에이전트 한 턴의 추론이 최대 2.5배 빨라졌다고 했고, 문서 관리 회사 박스는 Haiku 4.5보다 11점 높은 점수를 지연 시간 절반으로 냈다고 밝혔습니다. 금융 리서치 회사 알파센스는 일주일에 약 800만 번 부르는 문서 질의 기능에서 400개 질의를 돌려 0.84점(Haiku 4.5는 0.76점)을 받았다고 전했습니다.

처음으로 추론 강도를 고르는 Haiku

Haiku 5.5는 Haiku 가운데 처음으로 추론 강도(답하기 전에 얼마나 오래 생각할지 정하는 설정)를 low부터 max까지 다섯 단계로 고를 수 있습니다. 기본값은 medium이고, 생각 기능 자체는 끌 수 없습니다. 개발자 문서에 따르면 Haiku 4.5에서 쓰던 생각 토큰 예산(budget_tokens)을 보내면 400 오류가 나고, temperature·top_p·top_k를 기본값이 아닌 값으로 보내거나 답의 앞부분을 미리 채워 넣는 프리필을 보내도 같은 오류가 납니다.

강도에 따라 점수와 비용이 함께 벌어집니다. 앤트로픽 도표에서 medium의 Haiku 5.5는 GPT-6 Luna의 가장 높은 점수보다 높은 점수를 더 낮은 시도당 비용에 냈고, max에서는 Sonnet 5.5의 가장 낮은 강도와 비슷한 비용을 썼습니다. 지식 업무 평가 GDPval-AA 도표는 모습이 다릅니다. low부터 high까지는 같은 비용대에서 Luna의 점수가 Haiku 5.5와 비슷하거나 조금 높고, Haiku는 xhigh와 max에서 비용을 더 들여 Luna의 최고점(1,437점) 위로 올라갑니다.

윌리슨은 같은 모델에 강도만 바꿔 자전거 타는 펠리컨을 SVG 그림으로 그리게 했습니다. low는 7초 걸려 0.0936센트가 들었고, max는 5분 9초 걸려 3.3826센트가 들었습니다. 같은 요청인데 비용은 36배, 시간은 44배 벌어졌고, 1년 전 Haiku 4.5가 같은 그림에 쓴 값은 0.7583센트였습니다.

독립 평가 43점, 토큰은 Luna의 3배

AA는 공개 몇 시간 만에 Haiku 5.5를 최고 설정(max)에서 잰 결과를 올렸고, 지능 지수는 43점이었습니다. AA 지능 지수는 지식 업무, 에이전트 코딩, 과학 계산, 환각 등 평가 10개를 묶은 점수입니다. 같은 사이트에 적힌 Haiku 4.5는 17점, GPT-6 Luna는 38점, 구글의 Gemini 3.8 Flash는 41점입니다.

토큰 값이 같은 Haiku 5.5와 Luna의 과제당 비용이 3배 벌어진 까닭은 쓴 토큰의 양입니다. AA 지수 전체를 푸는 데 Haiku 5.5는 출력 토큰 4억 4,000만 개를, Luna는 1억 4,000만 개를 썼습니다. AA는 Haiku 5.5를 같은 가격대에서 지능이 높고 말이 아주 많은 모델로 분류했고, 출력 속도가 초당 243토큰으로 Luna(128토큰)의 약 1.9배라서 걸리는 시간의 차이는 토큰 차이보다 작습니다.

같은 모습은 9월 Sonnet 5.5에서도 나왔습니다. 최고 설정의 Sonnet 5.5는 지수 과제 하나에 출력 토큰 약 19만 3,000개를 써 당시 AA가 잰 모델 가운데 가장 많았고, 토큰 값이 같은 GPT-6 Sol보다 과제당 비용이 약 7배 들었습니다. Haiku 4.5에서 5.5로 오면서 쓰는 토큰은 5.6배 늘고 토큰 값은 10분의 1이 돼, AA 지수 과제당 비용은 0.28달러에서 0.21달러로 25% 줄었습니다. 그사이 지수는 17점에서 43점이 됐습니다.

Gemini와 견주면 계산이 달라집니다. 구글이 9월 2일 낸 Gemini 3.8 Flash는 올해 말까지 입력 0.75달러·출력 3.75달러를 받다가 2027년 1월부터 두 배로 올리고, 지수 과제당 1.24달러로 Haiku 5.5의 약 6배가 듭니다. Flash의 경량판인 Gemini 3.5 Flash-Lite는 과제당 0.19달러로 Haiku 5.5와 비슷하지만 지수는 22점입니다.

코딩 도구 Cursor는 발표 13분 뒤 Haiku 5.5를 추가하면서 짧은 요청에서는 Haiku 4.5보다 10배 싸다고 알렸습니다. 함께 올린 자체 평가 CursorBench 4.0 도표에 찍힌 Haiku 5.5의 점 다섯 개는 모두 Gemini 3.8 Flash보다 과제당 비용이 낮았고, 그 가운데 세 점은 점수도 더 높았습니다.

시스템 카드에 적힌 약점

앤트로픽이 같은 날 낸 144쪽짜리 시스템 카드에는 약점도 적혀 있습니다. 여러 상황을 만들어 모델 행동을 훑는 자동 행동 감사에서 Haiku 5.5는 시험한 모든 모델 가운데 무해한 요청을 가장 많이 거절했습니다. 한 번 묻고 끝나는 무해한 요청만 모은 평가에서는 Haiku 4.5보다 덜 거절해, 시험 방식에 따라 결과가 갈렸습니다.

정직성 평가에서는 숫자가 엇갈렸습니다. 압박을 받는 상황에서 정직하게 답하는 정도는 시험한 모든 모델과 같거나 나았고, 작업 중 자기가 바꾼 내용을 숨기지 않고 알린 비율은 96%로 Haiku 4.5(10%)보다 크게 올랐습니다. 반면 새어 나온 정답을 사용자에게 알리지 않고 쓴 비율은 17%로 Haiku 4.5(2%)보다 높았고, 환각은 최근 다른 모델보다 많아 Haiku 4.5와 비슷한 수준이었습니다.

사이버 능력은 Haiku 4.5보다 크게 올랐지만 Opus 5.5와 Mythos 5.1, Opus 5에는 못 미쳤습니다. 그래서 앤트로픽은 Haiku 5.5의 사이버 안전장치를 다른 최근 모델보다 훨씬 덜 걸리게 짰고, 방어 작업은 Sonnet 5.5보다 넓게 허용하되 침투 테스트처럼 공격에 쓰일 기법은 막는다고 밝혔습니다. 더 넓은 보안 작업이 필요한 조직은 최근 3단계로 개편된 사이버 검증 프로그램에 신청할 수 있습니다.

개발자가 챙길 차이도 하나 있습니다. Opus 5.5와 Sonnet 5.5는 사이버 안전장치에 걸린 요청을 이전 모델로 넘겨 이어서 처리하지만, 전환 안내서에 따르면 Haiku 5.5에는 서버 쪽 대체 모델이 없어 안전 분류기에 걸린 요청은 거절(refusal)로 끝납니다. 프롬프트 인젝션(외부 자료에 숨긴 악성 지시)에는 Haiku 계열 가운데 가장 강했고, 컴퓨터 사용 환경에서 해로운 과제를 거절하는 비율은 Sonnet 5.5와 Opus 5.5보다 높았습니다.

한국에서 쓰려면

Haiku 5.5는 Claude API와 Amazon Bedrock, 구글 클라우드, 마이크로소프트 Foundry, Claude Platform on AWS에 같은 날 열렸습니다. API 모델 이름은 날짜가 붙지 않은 claude-haiku-5-5이고, Bedrock에서는 anthropic.claude-haiku-5-5입니다. 앤트로픽은 유해 요청 평가를 한국어를 포함한 7개 언어로 돌렸고, 42개 언어로 지식을 묻는 Global MMLU에서는 평균 87.8%로 Sonnet 5.5(92.1%)와 Opus 5.5(94.3%)보다 낮았습니다.

데이터를 국내에 두어야 하는 기업에는 이번에도 걸리는 데가 있습니다. Bedrock 리전별 표에서 서울 리전의 Haiku 5.5는 전 세계 교차 리전으로만 부를 수 있어, 요청이 세계 어느 상용 리전에서나 처리될 수 있습니다. 도쿄와 오사카 리전은 일본 안에서만 처리하는 지역 교차 리전을 쓸 수 있고, 서울 리전 안 추론이 되는 최신 Claude는 9월 29일 열린 Opus 5와 Sonnet 5 두 모델 그대로입니다. 처리 용량을 미리 약정하고 우선권을 받는 Priority Tier도 Haiku 5.5에서는 지원하지 않습니다.

5.5 세대 세 모델과 그 위의 Fable

Haiku 5.5까지 나오면서 앤트로픽의 현재 모델 표는 아래처럼 채워졌습니다. 기본 추론 강도는 앤트로픽 개발자 문서, 지수와 과제당 비용은 AA 페이지에 이 글을 쓰는 시점에 적힌 값입니다.

Fable 5.1과 Haiku 5.5의 입력 값은 100배 차이입니다. 2021년 12월 오픈AI API 가격표에도 이만한 차이가 있었습니다. 가장 빠르고 싼 Ada는 1,000토큰당 0.0008달러, 가장 강한 Davinci는 0.06달러로 75배 차이였고, 오픈AI는 중간 모델 Curie가 Davinci의 일 상당수를 10분의 1 값에 한다고 적었습니다. Ada의 값을 100만 토큰으로 환산하면 0.8달러이고, Haiku 5.5의 입력 값은 그 8분의 1입니다.

저는 9월 29일 Sonnet 5.5 글 끝에 Haiku 4.5와 Sonnet 5.5의 AA 지수가 39점 차이라고 적었습니다. Haiku 5.5에서 그 차이는 13점으로 줄었고, 입력 값의 차이는 20배입니다. 앤트로픽 문서에서 Haiku 4.5는 지금도 사용 가능 상태이고 은퇴 약속일은 10월 15일 이후로만 적혀 있어, 은퇴 날짜가 공지되면 다시 전하겠습니다.

읽어 주셔서 고맙습니다.

초이 드림