구글 딥마인드의 신규 플래그십 모델 '제미나이4 아르곤'이 ARC-AGI-3 벤치마크에서 97.5%를 기록해 OpenAI에 이어 두 번째로 95% 벽을 넘은 AI 모델이 됐다. 다만 이는 공급사 전용 기능을 활용한 '프로바이더 어댑터 하니스' 환경에서의 결과이며, 단순 환경인 '스탠다드 하니스'에서는 49.8%로 크게 낮아져 테스트 방식에 따라 성적이 크게 좌우됨을 보여준다. 리서치 기관 Epoch AI의 역량지수(ECI)에서는 165점으로 GPT-6 아스트라(166점)와 오퍼스 5.5(167점)에 근접했으나, 수학과 소프트웨어 엔지니어링 분야에서는 각각 8위, 6위에 머물렀다. 이는 구글이 2026년 2월 제미나이 3.1 프로 이후 가장 프론티어에 근접한 모델을 내놓았다는 의미다.
- •제미나이4 아르곤, ARC-AGI-3서 97.5% 기록…OpenAI 이어 두 번째로 95% 돌파
- •테스트 환경(하니스)에 따라 성적 급변: 스탠다드 하니스에서는 49.8%로 급락
- •Epoch AI ECI 165점으로 GPT-6 아스트라(166)·오퍼스 5.5(167)에 근접
- •수학 ECI 8위, SWE ECI 6위로 특정 분야에서는 여전히 뒤처져
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Google's Gemini 4 Argon is closer to the AI frontier than any Google model in months
- 1.구글 딥마인드 Gemini 4 Argon, ARC-AGI-3서 97.5% 기록해 오픈AI 이어 두 번째로 95% 돌파
- 2.ECI 지수 165점으로 GPT-6 Astra(166)·Opus 5.5(167)에 근접, 올해 2월 Gemini 3.1 Pro 이후 최고치
- 3.표준 하니스 테스트에서는 저추론 기준 49.8%로 급락, 공급사별 API 기능 차이에 따라 점수 크게 변동
- 4.수학 ECI는 8위, 소프트웨어 엔지니어링 ECI는 6위로 특정 분야에서는 여전히 경쟁 모델에 뒤처짐
왜 중요한가?
벤치마크 점수가 테스트 환경과 API 설정에 따라 크게 달라진다는 점이 드러나면서, 모델 간 성능 비교에서 측정 방식의 투명성이 중요한 쟁점으로 부각됐다.
본문 미리보기
Google Deepmind's Gemini 4 Argon scored 97.5 percent on the ARC-AGI-3 benchmark, making Google the second lab after OpenAI to cross the 95 percent mark. But the results swing wildly depending on the test setup: in the standard harness, the score drops to just 49.8 percent. Argon also trails rivals in math and software engineering. The article Google's Gemini 4 Argon is closer to the AI frontier than any Google model in months appeared first on The Decoder.
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:33AI 초안
