저자는 자기 자신의 삶을 소재로 대화형 LLM에게 366일치 '하루 한 쪽' 자서전을 쓰게 한 뒤, 각 날짜를 독립된 검증 자료와 대조해 4단계 루브릭으로 감사한 최초의 정량적 LLM 자서전 확증 감사를 수행했다. 366일 중 354일(96.7%, 95% CI 94.4~98.1%)이 '검증됨' 등급을 받지 못했고, 확증된 장면이 담긴 날은 단 12일에 불과했으며 19일(5.2%)은 기록과 정면으로 배치되는 주장을 담고 있었다. 가장 흔한 실패 유형은 실제 인물·직장·장소가 지어낸 장면 속에 뒤섞이는 '근거 있는 왜곡'이었고, 동일 조건으로 현재 모델들에 재생성을 시켜도 100% 검증 실패가 재현됐다. 다만 당사자의 실제 자료로 생성을 접지시키면 검증 실패율이 유의미하게 낮아지긴 했으나 여전히 83.3%에 달했다.

• •366일치 LLM 자서전을 장면 단위로 감사한 최초의 정량적 확증 감사 사례
• •354/366일(96.7%)이 '검증됨' 등급에 미달, 확증 장면은 12일에 그침
• •가장 흔한 실패 유형은 실제 인물·장소가 가상 장면에 섞이는 '근거 있는 왜곡'
• •당사자 자료로 접지시켜도 검증 실패율이 83.3%로 여전히 높음