오픈웨이트 LLM LLaMA 3.1이 네덜란드어 뇌 MRI 신경영상 보고서에서 구조화된 정보를 얼마나 잘 추출하는지 평가한 연구다. 3차 기억력 클리닉의 947건 보고서를 대상으로 의대생이 30개 변수를 주석하고, LLaMA 3.1의 제로샷·퓨샷 성능을 네덜란드어와 영어 번역본에서 측정했다. 시각적 평가 점수에서 제로샷 성능이 높았는데, 내측측두엽 위축은 우측 96%, Fazekas 척도는 94%, 미세출혈 언급 탐지는 93% 정확도를 보였고 병변 위치 텍스트 유사도는 0.95에 달했다. 다만 미세출혈 개수(80%)·경색 개수(66%) 같은 수치 변수는 낮았으며, 구조 유사도 기반 퓨샷 프롬프팅이 이를 각각 92%·81%로 끌어올렸다. 네덜란드어 임상 보고서 자동 데이터 추출에 LLM이 강한 잠재력을 지님을 보여준다.

• •3차 메모리 클리닉 네덜란드어 뇌 MRI 보고서 947건에서 LLaMA 3.1의 정보 추출 성능 평가
• •시각적 평가 점수 제로숏 높음: 내측측두엽 위축 우측 96%, Fazekas 94%, 병변 위치 유사도 0.95
• •미세출혈·경색 개수 등 수치 변수는 낮았으나 퓨샷 프롬프팅으로 92%·81%까지 향상
• •영어 번역본도 유사한 결과, 네덜란드어 임상 보고서 자동 추출 가능성 입증