라이언 리서치 연구소 김상백 소장은 AI가 사람의 감정·의도를 해석해 기록으로 남기고 이후 판단에 영향을 미치는 '해석 취약성' 문제를 제기했다. 민원 문구를 AI가 '격앙'으로 분류해 상담 경로를 바꾸면, 당사자가 정정을 요구해도 이미 파생된 위험등급이나 후속 기록까지 함께 고쳐지지 않는 경우가 많다는 것이다. 그는 AI 감독이 실질적이려면 담당자가 판단 근거를 볼 수 있고, 당사자 설명을 다시 들을 시간이 있으며, AI 결론을 실제로 뒤집을 권한을 가져야 한다고 주장했다. 해법으로 불필요한 감정 추론 자제, 라벨에 대한 이의제기·정정 전파, 실질적 권한을 가진 인간 재심 등 네 가지 원칙을 90일 시범 운영으로 시작할 것을 제안했다.
- •'해석 취약성': AI가 사람에게 붙인 해석이 서비스·기록·기회에 영향을 미치는데 당사자가 되돌릴 힘이 부족한 상태로 정의
- •라벨 정정이 최초 화면에서만 반영되고 이미 파생된 위험등급·후속 기록엔 전파되지 않는 문제 지적
- •인간 감독이 실효성을 가지려면 담당자가 AI 결론을 실제로 중단·폐기할 권한을 가져야 한다고 주장
- •필요하지 않은 내적 상태(분노 수준 등) 추론 자체를 하지 않는 것이 최선이라는 원칙 제시
- •민원·복지·상담 등 공공 AI 한 건을 골라 90일간 시범 운영해볼 것을 실행 방안으로 제안
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
[기고] AI 취약계층 정책의 빈칸...'해석을 되돌릴 권한'이 없다
본문 미리보기
AI가 위험한 순간은 답이 틀릴 때만이 아니다. 그럴듯한 해석이 기록이 되고, 그 기록이 다음 판단을 움직이기 시작할 때다.한 시민이 공공 민원창구에 “몇 번을 말해야 합니까 오늘은 꼭 해결해 주세요”라고 썼다고 해보자. AI가 이를 ‘격앙’ ‘공격성 높음’으로 분류하고 상담 경로를 바꾼다.담당자는 그 라벨을 참고하고, 같은 정보가 후속 기록에도 남는다.시민이 나중에 “위협하려는 뜻이 아니라 급박한 사정을 호소한 것”이라고 설명하면 무엇이 달라지는가. 최초 화면의 라벨만 지워지는가. 이미 바뀐 처리 순서와 위험등급, 다른 부서로 넘
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:59AI 초안
