LLM 에이전트가 사회과학 논문의 method description과 원본 데이터만으로 결과를 재현할 수 있는지 평가. agent reproduction 시스템 — 논문에서 구조화된 method 추출 → 코드·결과·논문 본문 비공개 상태로 재구현 → cell-level deterministic 비교 + error attribution. 4개 scaffold·4개 LLM·48개 인간 검증 논문 평가 결과 에이전트가 결과를 대부분 회복 가능하지만 모델·scaffold·논문별 격차 큼. Root cause 분석 결과 실패는 에이전트 오류와 논문 자체 underspecification 모두에서 발생.

• •LLM 에이전트가 social science 논문의 method description+데이터만으로 재현 가능한지 평가.
• •재구현 시 코드·결과·논문 본문 비공개 — 정보 격리 엄격 유지.
• •Cell-level deterministic 비교 + error attribution으로 root cause 추적.
• •4 scaffold·4 LLM·48 논문 — 결과 회복 가능하지만 격차 큼.
• •실패 원인이 에이전트 오류 + 논문 underspecification 양측에 있음을 정량 입증.