ReMMD는 다국어·다중이미지 게시물을 대상으로 하는 현실적인 멀티모달 허위정보 탐지·검증 프레임워크다. 기존 벤치마크가 짧은 캡션·단일 이미지·이진 라벨에 머문 한계를 넘어, 500개 샘플과 2,756장 이미지, 5개 단일언어와 2개 교차언어 설정, 5단계 진위 라벨과 8종 왜곡 라벨, 증거 출처·근거를 담은 벤치마크 ReMMDBench를 제시한다. 검증기 ReMMD-Agent는 게시물을 원자 단위 주장으로 분해하고 재사용 가능한 증거 집합을 구축하는 지속 메모리 방식으로 L1/L2/L3 구조화 출력을 예측한다. GPT-5.2 기반에서 5단계 진위 정확도 41.80%, 매크로 F1 39.12%로 최고 성능을 내면서 비용은 MMD-Agent 대비 17.5%, T2-Agent 대비 79.9% 절감했다.
- •500샘플·2,756이미지·다국어·5단계 진위 라벨의 현실적 벤치마크 ReMMDBench 구축
- •게시물을 원자 주장으로 분해하고 재사용 증거 집합을 구축하는 지속 메모리 검증기 ReMMD-Agent
- •GPT-5.2 기반 5단계 진위 정확도 41.80%, 매크로 F1 39.12%로 최고 성능
- •비용을 MMD-Agent 대비 17.5%, T2-Agent 대비 79.9% 절감
- •다국어·다중이미지·증거 탐색 현실성을 모두 반영한 에이전트형 검증 설계
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
ReMMD: Realistic Multilingual Multi-Image Agentic Verification for Multimodal Misinformation Detection
- 1.ReMMD: 다국어·다중이미지 환경의 멀티모달 허위정보 탐지 에이전트 검증 프레임워크
- 2.ReMMDBench(500샘플·2,756이미지·5개 언어·5단계 진위 라벨) 실세계 벤치마크 공개
- 3.ReMMD-Agent는 게시물을 원자 단위로 분해하고 재사용 증거셋 구축, 구조화 L1/L2/L3 출력 예측
- 4.GPT-5.2 사용 시 5단계 정확도 41.80%·macro-F1 39.12%, T2-Agent 대비 비용 79.9% 절감
왜 중요한가?
기존 벤치마크가 짧은 캡션·단일 이미지·이진 라벨에 머물러 실제 바이럴 게시물과 동떨어졌던 한계를, 다국어·다중이미지 실세계 설정과 비용을 대폭 절감하는 지속 메모리 에이전트로 극복한다.
다국어, 다중 이미지를 포함한 복합적인 가짜 정보 탐지 능력을 향상시키는 'ReMMD' 연구는 시사하는 바가 큽니다. 소셜 미디어와 모바일 메신저를 통한 정보 확산이 빠른 한국에서는 가짜 뉴스가 사회적 문제로 대두되고 있으며, 이를 효과적으로 대응할 수 있는 AI 기술의 필요성이 증대되고 있습니다. 이 기술은 국내 미디어 및 플랫폼 기업에게 중요한 레퍼런스가 될 수 있습니다.
본문 미리보기
arXiv:2606.24112v1 Announce Type: new Abstract: Multimodal misinformation detection is increasingly important because viral posts now combine long multilingual narratives, several images, mixed provenance, and subtle text--image framing errors. Existing benchmarks and methods remain poorly matched to this setting: they usually isolate short captions, single images, binary labels, or one manipulation source, while agentic verification remains costly under realistic evidence search. We present Re
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 13:55AI 초안

