AAII 평가 대폭 개편에 순위 변동…구글 1위·오픈AI 약진↗ (원문, 새 창)

아티피셜 애널리시스가 AI 모델 종합 평가 '인텔리전스 인덱스'를 v5로 대폭 개편하면서 구글 제미나이 4 카본이 59점으로 1위에 올랐고, 클로드 오퍼스 5.5는 58점으로 2위, 오픈AI GPT-6 아스트라와 GPT-6.1 솔도 각각 3·4위로 상승했다. 비공개 데이터 평가 비중을 45%에서 60%로 늘리고 과학 연구·실제 코딩 능력을 측정하는 벤치마크를 신설해 공개 문제를 미리 학습한 효과를 줄였다. 평가당 비용도 추론 강도에 따라 최대 10배 이상 차이가 나는 등 작업 복잡도와 비용 격차가 커졌으며, 오픈웨이트 1위 모델과 최상위 모델의 점수 차도 3점에서 13점으로 벌어졌다. 평가 방식이 달라져도 장기 성능 추세를 비교할 수 있는 '프로그레스 인덱스'도 함께 출시됐다.

• 제미나이 4 카본 59점으로 1위, 클로드 오퍼스 5.5(58점)를 제치고 종합 1위 등극
• 비공개 데이터 비중을 45%→60%로 높여 공개문제 사전학습 효과 축소
• GPT-6 아스트라, 과학연구 벤치마크 터미널-벤치-사이언스 63%·CritPt v2 72%로 1위
• 오픈웨이트 1위 키미 K3.1 프로(46점)와 1위 모델 격차 3점→13점으로 확대
• 추론 강도 최대 설정 시 평가당 비용 10배 이상 증가(클로드 오퍼스 5.5 $0.98→$10.04)