- 에이전틱 코딩·지식 업무 성능 높여…터미널벤치 4.0서 70.6%, 입력 100만 토큰당 2달러

 

앤트로픽(Anthropic)이 ‘클로드 소넷 5.5(Claude Sonnet 5.5)’를 공개했다. 기존 소넷 5와 같은 API 가격을 유지하면서 출력 생성 속도를 30% 이상 높였고, 같은 작업에 필요한 토큰을 줄여 작업당 비용을 최대 30% 낮췄다. 코딩과 지식 업무에서는 상위 모델인 클로드 오퍼스 5.5(Claude Opus 5.5)에 근접하는 성능을 보였으며, 개발·문서 작업과 반복적인 에이전트 업무를 처리하도록 성능을 높였다.

 

코딩 성능 높여…터미널벤치 4.0서 70.6%

클로드 소넷 5.5는 명령줄 환경에서 복잡한 다단계 작업을 수행하는 에이전틱 코딩 평가 터미널벤치 4.0(Terminal-Bench 4.0)에서 70.6%를 기록했다. 소넷 5의 10.3%를 크게 웃돌았으며, 앤트로픽이 공개한 오퍼스 5.5의 66.4%보다 높은 수치다. 커서벤치 4.0(CursorBench 4.0)에서는 55.5%로 소넷 5의 34.1%를 넘어섰고 오퍼스 5.5의 57.8%에 근접했다.

 

프론티어코드 1.1(FrontierCode 1.1)에서는 설정에 따라 성능 차이가 나타났다. 소넷 5.5는 Max 설정에서 46.2%를 기록했으며, Xhigh에서는 52.1%를 나타냈다. 오퍼스 5.5는 54.4%였다. 앤트로픽은 소넷 5.5가 코드베이스를 빠르게 파악하고 도구 호출을 묶어 처리하면서 작업 단계와 비용을 줄였다고 설명했다.

 

지식 업무에서도 오퍼스 5.5에 근접

실제 직업 환경의 지식 업무를 측정하는 GDP밸-AA v2.1(GDPval-AA v2.1)에서 소넷 5.5는 1844점을 기록했다. 소넷 5의 1449점을 크게 웃돌았으며, 오퍼스 5.5의 1846점과는 2점 차이에 그쳤다. 장시간 지식 업무를 평가하는 AA-브리프케이스 v1.1(AA-Briefcase v1.1)에서도 1811점을 기록해 오퍼스 5.5의 1822점에 근접했다.

 

컴퓨터 사용 평가 OS월드 2.1(OSWorld 2.1)에서는 80.1%를 기록해 소넷 5의 57.0%를 넘어섰다. 시각적 차트 인식 평가 차토그래피(Chartography)에서도 61.6%로 소넷 5의 15.6%보다 높은 결과를 보였다. 앤트로픽은 벤치마크가 모델 능력의 일부만 측정하며, 지속적인 판단이 필요한 복잡하고 개방적인 작업에서는 오퍼스 5.5가 더 높은 성능을 보인다고 설명했다.

 

API 가격 유지하고 작업당 비용 낮춰

소넷 5.5의 API 가격은 입력 토큰 100만 개당 2달러, 출력 토큰 100만 개당 10달러로 소넷 5와 같다. 캐시 읽기는 100만 토큰당 0.20달러, 캐시 쓰기는 2.50달러다. 오퍼스 5.5는 입력과 출력 토큰 가격이 각각 4달러와 20달러다. API 가격은 소넷 5와 동일하지만 실제 작업에 사용하는 토큰 수는 줄였다. 앤트로픽 내부 테스트에서는 동일한 작업을 수행하는 데 드는 비용이 소넷 5보다 최대 30% 감소했다. 출력 생성 속도는 30% 이상 높였다.

 

소넷 5.5는 작업에 따라 추론에 투입하는 연산량을 조절하는 설정도 제공한다. 클로드 코드(Claude Code)와 클로드 앱은 미디엄(Medium)을 기본값으로 사용하고 클로드 플랫폼(Claude Platform)은 하이(High)를 기본으로 설정한다. 낮은 단계는 응답 속도와 토큰 사용량에 초점을 맞추고, 높은 단계는 추론과 결과 검증에 더 많은 연산을 투입한다.

 

문서·슬라이드·스프레드시트까지 업무 범위 넓혀

앤트로픽은 소넷 5.5를 일상적인 지식 업무와 버그 수정, 문서·슬라이드·스프레드시트 제작 등에 활용하도록 성능을 조정했다. 기업 테스트에서는 기존 모델보다 적은 토큰과 도구 호출로 작업을 처리했다. 슬랙(Slack)은 기존 프롬프트를 변경하지 않은 평가에서 소넷 5보다 적은 단계와 약 14% 적은 출력 토큰으로 대부분의 오프라인 슬랙봇 평가에서 성능이 높아졌다고 밝혔다.

 

젠데스크(Zendesk)는 실제 고객 지원 사례 수백 건을 대상으로 한 테스트에서 기존 운영 모델보다 잘못된 판단을 줄였으며 티켓 처리 속도는 20% 높였다고 평가했다. 박스(Box)는 이전 모델과 비교해 처리 속도가 2.4배 빨라지고 전체 토큰 사용량은 12% 감소한 것으로 확인했다.

 

사이버 보안 능력 높아져 안전장치 적용

앤트로픽은 약 1850개 시나리오를 사용한 자동 행동 평가에서 소넷 5.5가 정렬, 오용 방지, 정직성 관련 대부분의 지표에서 소넷 5와 같거나 높은 결과를 보였다고 설명했다. 사이버 보안 관련 성능이 높아진 데 따라 소넷 계열 최초로 상위 모델에 사용하던 사이버 안전장치를 적용했으며, 추론 추출을 막는 분류기도 추가했다.

 

클로드 소넷 5.5는 클로드의 모든 플랫폼과 아마존웹서비스(AWS), 구글 클라우드(Google Cloud), 마이크로소프트 애저(Microsoft Azure)에서 제공한다. 개발자는 클로드 플랫폼에서 모델 ID ‘claude-sonnet-5-5’를 지정해 API로 사용할 수 있다.

 

#앤트로픽 #클로드 #클로드소넷55 #생성형AI #인공지능 #AI에이전트 #클로드코드 #코딩AI