Sonnet 5, 가격은 그대로인데 토큰이 더 많이 들어 청구액이 늘어난다
는 새로운 토크나이저(텍스트를 토큰으로 쪼개는 방식)를 도입했지만 이 변화가 공지 헤드라인에는 드러나지 않았다. Simon Willison이 직접 테스트한 결과, 같은 영어 텍스트가 보다 약 1.4배 더 많은 토큰을 만들어냈고, 스페인어는 약 1.33배, 파이썬 코드는 약 1.27배 늘었다. 토큰당 가격표(입력 100만 토큰당 3달러, 출력 100만 토큰당 15달러)는 이전과 동일하지만, 같은 작업에 필요한 토큰 수 자체가 늘어난 것이다.
현재는 8월 31일까지 적용되는 도입 할인가(입력 2달러, 출력 10달러)가 이 효과를 가려서, 이 무료이거나 오히려 할인처럼 보이게 만든다. 하지만 9월 1일부터 정가가 적용되면, 이미 전보다 20~40% 늘어난 에 정상 요금이 곱해지므로 청구액이 눈에 띄게 커진다. 대부분의 비용 대시보드는 토큰 단가만 추적하기 때문에 이 변화를 이상 징후로 잡아내지 못한다.
글쓴이는 이것이 Anthropic의 의도적인 눈속임이라기보다, 더 큰 와 향상된 도구 사용을 지원하기 위해 더 조밀한 토크나이저가 필요했을 가능성이 높다고 본다. 문제는 타이밍이며, 이번 달에 한 사람이 9월 1일에 다시 수치를 확인하지 않으면 예상보다 훨씬 큰 청구서를 받게 된다.
핵심 포인트
- 는 새 토크나이저를 도입했지만 공식 발표에 명시되지 않았다
- 같은 영어 텍스트 기준 토큰 수가 대비 약 1.4배, 스페인어 1.33배, 파이썬 코드 1.27배 증가(Simon Willison 테스트)
- 토큰당 가격은 동일(입력 $3/output $15, 100만 토큰당)하지만 실제 소모 토큰 수가 늘어 총비용이 상승
- 8월 31일까지의 도입 할인가($2/$10)가 이 비용 증가를 가리고 있어, 9월 1일 정가 전환 시 청구서가 급격히 커질 수 있음
- 대부분의 비용 대시보드는 토큰 단가 변화만 추적해 이 문제를 잡아내지 못함