L-MAD는 법률 텍스트 함의(Legal Textual Entailment) 과제에서 멀티 에이전트 토론(MAD) 구조와 집계 방식을 체계적으로 평가한 프레임워크다. 서로 다른 전문가 페르소나를 여러 에이전트에 부여해 강력한 단일 에이전트 베이스라인 대비 최대 8% 성능을 끌어올렸다. 토론 규모 분석에서는 뚜렷한 트레이드오프가 드러났다. 에이전트 수를 늘리면 비일관성이 줄고 정확도가 오르지만, 토론 라운드를 늘리면 에이전트들이 서로의 오류를 강화하는 '과숙의 드리프트(over-deliberation drift)'가 발생해 성능이 오히려 나빠진다. 법률처럼 고위험 영역에서 협업형 멀티 에이전트 시스템을 배치할 때의 실용적 한계와 안전 여유를 제시한 결과다.
- •법률 텍스트 함의 과제에서 토론 구조·집계 방식을 체계적으로 비교한 최초급 연구
- •전문가 페르소나 부여로 단일 에이전트 대비 최대 8% 성능 향상
- •에이전트 수 증가는 정확도 개선, 라운드 연장은 오류를 서로 강화하는 역효과
- •'과숙의 드리프트' 현상을 명명하고 고위험 법률 추론에서의 안전 한계 제시
L-MAD: A Systematic Evaluation of Multi-Agent Debate Structures in Legal Reasoning
본문 미리보기
arXiv:2607.09099v1 Announce Type: new Abstract: While multi-agent debate (MAD) frameworks have shown significant potential in general reasoning, their effectiveness in highly structured, knowledge-heavy legal domains remains under-explored. In this work, we introduce the Legal Multi-Agent Debate (L-MAD) framework to systematically evaluate different debate structures and aggregation methods within Legal Textual Entailment. By assigning distinct expert personas to multiple agents, L-MAD improves
전체 내용이 궁금하다면?
원문을 직접 읽어보세요