마이크로서비스 장애의 근본원인분석(RCA)이 실제 텔레메트리에서 어디까지 가능한지를 OpenRCA 벤치마크로 규명한 연구다. 고전적 인과 발견 기법과 기존 LLM 다중 에이전트 시스템 모두 신뢰할 만한 근본원인 식별에 실패함을 보이고, 도메인 지식 유무 양쪽 모드를 지원하며 기존 베이스라인을 크게 앞서는 구조화된 다중 에이전트 RCA 파이프라인을 제시했다. 정답을 알려주고 어떤 신호가 그것을 뒷받침하는지 역추적하는 '역추론 에이전트'로 실패를 추론 격차(증거는 있으나 미활용)와 데이터 모호성(증거 부재)으로 분류한 결과, 대다수 실패에서 필요한 증거는 이미 존재했다—병목은 데이터 접근이 아니라 추론 능력이었다. 역추론 보고서에서 판별 규칙을 자동 채굴하는 파이프라인도 도입했지만, 증거 추출이 완벽해도 성능은 모델 수준에서 제한돼 스캐폴드 개선만으로는 격차를 못 메운다는 결론이다.
- •OpenRCA에서 고전 인과 발견·기존 LLM 다중 에이전트 모두 신뢰할 만한 근본원인 식별 실패
- •도메인 지식 유무 양쪽 모드를 지원하는 구조화된 다중 에이전트 RCA 파이프라인으로 베이스라인 대폭 개선
- •역추론 에이전트로 실패를 '추론 격차'와 '데이터 모호성'으로 분류 — 대다수 실패에서 증거는 이미 존재
- •역추론 보고서에서 판별 규칙을 자동 추출해 수작업 지식 큐레이션 의존 감소
- •증거 추출이 완벽해도 성능은 모델 추론 능력이 상한 — 스캐폴드 엔지니어링만으로는 해결 불가
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
How Far Can Root Cause Analysis Go on Real-World Telemetry Data?
- 1.OpenRCA 벤치마크에서 기존 인과추론·LLM 멀티에이전트가 모두 실패 — 구조화 멀티에이전트 RCA 파이프라인으로 대폭 개선
- 2.역추론 에이전트로 실패를 '추론 격차'와 '데이터 모호성'으로 분류, 대다수 사례에서 증거는 있으나 추론이 병목임을 확인
- 3.역추론 리포트에서 판별 규칙을 자동 추출하는 룰 마이닝 도입으로 수동 지식 큐레이션 의존 축소
- 4.증거 추출이 완벽해도 성능은 모델 추론 능력에 묶임 — 스캐폴드 개선만으론 한계, 모델 수준 발전 필요
왜 중요한가?
마이크로서비스 장애의 근본원인 분석 병목이 텔레메트리 데이터 접근이 아니라 LLM의 추론 능력임을 실증했다. AIOps 제품이 파이프라인 엔지니어링보다 모델 선택과 도메인 지식 주입에 투자해야 한다는 방향성을 제시한다.
언급 프로젝트
실제 텔레메트리 데이터를 활용한 근본 원인 분석의 한계를 다루는 이 연구는 국내 대규모 IT 서비스 운영 기업들에게 중요한 통찰력을 제공합니다. 마이크로서비스 환경에서 발생하는 복잡한 장애의 원인을 AI로 진단하는 것은 시스템 안정성과 운영 효율성을 크게 좌우하는 요소입니다. 이 분야의 기술 발전은 국내 기업들의 서비스 중단 시간을 최소화하고 고객 신뢰를 확보하는 데 필수적일 것입니다.
본문 미리보기
arXiv:2607.13548v1 Announce Type: new Abstract: Identifying root causes in production microservice failures requires reasoning over large-scale, multimodal telemetry spanning metrics, logs, and traces, a problem that has proved resistant to both classical and LLM-based approaches. The OpenRCA dataset exemplifies these challenges: it is large-scale, multimodal, and lacks detailed domain knowledge, and yields consistently low accuracy across all existing methods. We show that classical causal dis
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 13:08AI 초안

