이 논문은 ChatGPT, Claude, Grok, DeepSeek 등 4개 주요 대화형 플랫폼을 대상으로 실제 사용자 상호작용(인비보)과 API를 통한 통제 실험(인비트로)을 결합해 에이전트형 웹 검색의 전체 생애주기를 처음으로 체계적으로 연구했다. 연구 결과 웹 검색 호출 여부에 대한 판단은 플랫폼과 모델마다 크게 달랐으며, 검색을 더 자주 호출한다고 해서 응답 품질이 반드시 좋아지는 것은 아니었다. 각 대화형 에이전트는 서로 다른 복잡한 질의 전략을 사용했고, 플랫폼별 검색엔진은 자사가 선호하는 도메인의 결과를 더 많이 반환하는 경향을 보였다. 마지막으로 응답 대부분은 검색 결과에 근거했지만 일부 주장은 출처가 인용되지 않은 검색 결과에 의존해 귀속과 신뢰성 문제를 드러냈다. 연구진은 이러한 발견이 향후 대화형 검색에 최적화된 AI 에이전트와 웹 검색 도구 설계에 중요한 시사점을 준다고 밝혔다.
- •ChatGPT·Claude·Grok·DeepSeek 4개 플랫폼의 실사용 데이터와 API 통제실험을 결합해 에이전트형 웹 검색 생애주기 첫 체계 분석
- •웹 검색 호출 판단은 플랫폼·모델별로 크게 상이, 검색 빈도 증가가 응답 품질 향상으로 이어지지 않음
- •플랫폼별 검색엔진이 자사 선호 도메인 결과를 더 많이 반환하는 경향 확인
- •응답 대부분은 검색 결과에 근거하나 일부 주장은 미인용 검색 결과에 의존, 귀속·신뢰성 문제 제기
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Characterizing Web Search by Conversational LLM Agents: From Search Decisions and Strategies to Results and Responses
- 1.ChatGPT·Claude·Grok·DeepSeek 4개 대화형AI 웹검색 행태를 실사용+통제실험으로 비교한 첫 연구
- 2.플랫폼·모델별 검색호출 판단 크게 다르고, 자주 검색할수록 응답품질 좋아지는 것도 아님 확인
- 3.각 플랫폼 검색엔진이 자사 선호 도메인 결과 더 많이 반환하는 경향 발견
- 4.응답 대부분 검색결과 근거하나 일부 주장은 출처표시 없는 결과에 의존, 인용 신뢰성 우려
왜 중요한가?
어떤 검색엔진을 쓰느냐에 따라 챗봇이 노출하는 정보원 자체가 달라진다는 점은 AI 검색이 정보접근의 새 게이트키퍼가 되고 있음을 보여주며, 출처표기 없는 인용 관행은 저작권·신뢰성 논쟁과 직결된다.
본문 미리보기
arXiv:2609.19244v1 Announce Type: new Abstract: Conversational LLM agents increasingly rely on Web search, yet the end-to-end lifecycle of agentic search remains poorly understood. We present the first study of Web search across four major conversational platforms (ChatGPT, Claude, Grok, and DeepSeek), combining real-world user interactions (invivo) with controlled experiments using the same platform's models by their APIs (invitro). We investigate the quality of agentic decisions to invoke Web
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:40AI 초안
![[10월12일] AI가 암을 치료해도 원리를 알아야 할까…수학자 타오의 질문에 쏟아진 반론](https://cdn.aitimes.com/news/photo/202610/216150_220160_1157.jpg)
