애피어 AI 연구팀이 대형언어모델의 '정보 부족 인식'과 '과업별 추론언어 선택' 역량을 분석한 논문 2편을 발표했다. 28종 LLM 실험 결과 정답이 없는 '해당 사항 없음' 문항에서 정확도가 30~50% 하락했으나, 직접 선호 최적화(DPO) 학습을 적용하면 식별 정확도가 약 30%포인트 향상됐다. 또 다른 연구에서는 모델이 다른 언어로 질문받아도 내부적으로 영어 등 고자원 언어로 추론하는 경향이 있었으며, 문화적 이해나 안전성 판단에는 현지어 추론이 더 효과적인 것으로 나타났다.
- •LLM 28종 실험에서 '해당사항없음'이 정답일 때 정확도 30~50% 하락
- •DPO(직접선호최적화) 적용 시 정보부족 식별 정확도 약 30%포인트 향상
- •일부 모델, 다른 언어로 질문받아도 내부추론은 고자원언어(영어) 사용 비율 90% 넘음
- •문화적 이해·안전성 판단은 현지언어 추론이 더 효과적…'추론언어 라우팅' 개념 제시
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
애피어, AI가 ‘한계’를 알고 과업에 맞는 언어로 추론...기업용 에이전틱 AI 신뢰성 강화
- 1.애피어, 정답없는 상황 인식·다국어 추론 논문 2편 발표…에이전틱 AI 신뢰성 평가기준 제시
- 2.LLM 28종 실험서 '해당사항 없음'이 정답일 때 정확도 30~50% 하락, DPO로 약 30%p 개선
- 3.대규모추론모델(LRM), 비영어 질문에도 내부적으로 영어 등 고자원 언어로 추론하는 경향 확인
- 4.일부 모델 추론언어·답변언어 불일치율 90% 초과, 문화·안전성 판단엔 현지어 추론이 더 효과적
왜 중요한가?
AI가 정답을 맞히는지뿐 아니라 정보 부족을 스스로 인식하고 과업에 맞는 언어로 추론하는지까지 평가해야 한다는 점을 실증적으로 보여줘, 글로벌 배포되는 에이전틱 AI의 신뢰성 평가 기준을 구체화했다는 의의가 있다.
언급 프로젝트
본문 미리보기
인공지능 네이티브 AaaS(Agentic AI as a Service) 기업 애피어(Appier)가 AI 혁신과 연구를 지속하며 마케팅 및 광고 기술의 영역을 확장하고 있다.에이전틱 AI가 기업의 핵심 업무에 빠르게 도입되는 가운데, 애피어 AI 연구팀은 대형언어모델(LLM)이 검색된 정보만으로 유효한 답변을 도출할 수 없는 상황을 어떻게 인식하는지, 그리고 적절한 추론 언어 선택을 선택하는 것이 서로 다른 언어적 배경을 가진 사용자를 지원하는 데 어떤 영향을 미치는지를 분석한 두 편의 연구 논문을 발표했다. 이번 연구는 기업용 A
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:11AI 초안

![[10월12일] AI가 암을 치료해도 원리를 알아야 할까…수학자 타오의 질문에 쏟아진 반론](https://cdn.aitimes.com/news/photo/202610/216150_220160_1157.jpg)

