0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Correct Answers, Unsupported Findings: Evidence Binding in Forensic Reconstruction of LLM Agent Logs
- 1.LLM 에이전트 로그의 포렌식 재구성, '정답과 일치'해도 근거가 없을 수 있음을 실증
- 2.AgentDojo Banking 64케이스 분석: 결합표 없이는 Sonnet이 28건 중 26건에서 근거 없는 인용 주장
- 3.그중 22건은 정답과 일치했지만 실제로는 뒷받침되지 않는 '우연한 정답'
- 4.식별자-레코드 결합 정보를 명시하면 양쪽 모델 모두 근거 기반 재구성이 개선됨
왜 중요한가?
AI 에이전트 사고 조사나 감사에서 '정답을 맞혔다'는 사실만으로 신뢰할 수 없고, 식별자와 레코드의 결합 관계를 보존해야 함을 보여, 에이전트 로깅 설계와 포렌식 도구 구축에 직접적 시사점을 준다.
언급 프로젝트
본문 미리보기
arXiv:2610.09581v1 Announce Type: new Abstract: Forensic reconstruction of LLM-agent actions requires not only recovering the correct value, but establishing which preserved record supports that finding. Tool logs, generated explanations, and local citation identifiers capture different parts of this evidence, yet a citation identifier does not establish a source unless its binding to a record is preserved. We audit this distinction using 64 mechanically checkable cases from saved AgentDojo Ban
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 11:24AI 초안

