CrowdMath는 잘 정의된 문제 풀이가 아니라 여러 참여자가 부분 논증을 제안하고 오류를 찾아 수정하며 점진적으로 증명을 완성해가는 '협력적 미해결 문제 풀이' 과정을 담은 데이터셋이다. MIT PRIMES-AoPS CrowdMath 프로그램(2016~2025)의 포럼 토론에서 전문가가 주석을 단 164개의 진행 체인으로 구성되며, 각 게시물은 부분 진전·증명 완성·오류 추론·오류 식별 등 기능적 역할로 라벨링됐다. 6개 프론티어 모델은 다음 게시물 예측에서 83~88% 정확도를 보였지만, 게시물 역할 분류에서는 최고 모델조차 macro-F1 0.42에 그쳤다. 이는 정형화된 수학 문제를 푸는 능력과 협력적 수학 진전을 실시간으로 이해하는 능력 사이에 큰 격차가 있음을 드러낸다.

• •MIT PRIMES-AoPS CrowdMath(2016~2025) 토론 기반, 전문가 주석 164개 진행 체인으로 구성된 데이터셋
• •각 게시물을 부분 진전·증명 완성·오류 추론·오류 식별 등 기능적 역할로 라벨링
• •6개 프론티어 모델의 다음 게시물 예측 정확도 83~88%로 토론의 국소적 흐름은 따라감
• •게시물 역할 분류는 최고 모델도 macro-F1 0.42에 그쳐 기여의 기능적 의미 파악에 취약
• •정형 문제 풀이와 협력적 수학 진전 이해 사이의 능력 격차를 드러냄