AI 연구자 사이먼 윌리슨이 앤트로픽의 신모델 클로드 페이블 5.1을 자신의 '펠리컨 벤치마크'(자전거 타는 펠리컨 SVG 그리기)로 테스트한 후기를 공개했다. 페이블 5.1은 낮음부터 최대까지 5단계 추론 수준을 지원하며, 추론 수준이 높아질수록 결과물의 디테일과 완성도가 크게 향상됐다. 최고 수준(max)에서는 6만5927개의 출력 토큰과 13분 54초, 3.30달러가 소요됐지만 저자가 앤트로픽 모델 중 본 것 중 가장 완성도 높은 펠리컨 이미지를 얻었다고 평가했다. 그는 지난 7월부터 펠리컨 벤치마크가 다른 작업 성능과의 상관성이 예전만큼 강하지 않다고 밝히면서도, 동일 모델 계열 내 추론 수준별 비교에는 여전히 유용하다고 설명했다.

• •클로드 페이블 5.1, 낮음·중간·높음·xhigh·최대 5단계 추론 수준 지원(완전 비활성화 불가)
• •최대(max) 수준: 6만5927 출력 토큰, 13분54초, 비용 3.30달러 소요
• •추론 수준이 높을수록 SVG 디테일(모자, 바구니, 물고기 등)과 완성도 향상
• •저자: 펄리칸 벤치마크는 모델 간 비교보다 동일 모델 내 추론수준 비교에 더 유용해짐