LLM 에이전트가 대규모 API 라이브러리에서 툴을 선택하고 올바른 순서로 호출하는 문제를 풀기 위해 SkillGraph 제안. 기존 의미 유사성 기반 검색·순서 지정은 워크플로우 순서 의존성을 포착 못해 구조화 도메인에서 Kendall-τ가 음수로 떨어짐. SkillGraph는 49,831개 성공적 LLM 에이전트 궤적에서 마이닝한 방향성 가중 실행-전이 그래프로, 워크플로우 선후 규칙성을 재사용 가능한 그래프 사전지식으로 인코딩. GS-Hybrid 후보 검색 + 학습 pairwise reranker 2단계 구조로 ToolBench(9,965 테스트, 16,000 툴)에서 Set-F1 0.271·Kendall-τ 0.096 달성, API-Bank Kendall-τ를 -0.433에서 +0.613으로 개선.
- •기존 의미 유사성 기반 툴 선택·순서는 워크플로우 선후 의존성을 못 담아 Kendall-τ가 음수로 붕괴하는 문제.
- •49,831개 성공 에이전트 궤적에서 마이닝한 방향성 가중 그래프 SkillGraph를 사전지식으로 사용.
- •2단계 분리 프레임워크: GS-Hybrid 후보 검색 + 학습 pairwise reranker 순서 지정.
- •ToolBench(9,965 테스트·16K 툴)에서 Set-F1 0.271, Kendall-τ 0.096 달성.
- •API-Bank Kendall-τ -0.433 → +0.613 극적 개선, LLaMA-3.1-8B reranker보다 우수.
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
SkillGraph: Graph Foundation Priors for LLM Agent Tool Sequence Recommendation
- 1.LLM 에이전트 툴 순서는 의미 유사도만으로 안 됨.
- 2.49K 성공 궤적 그래프를 사전지식으로 활용한 SkillGraph.
- 3.검색+재정렬 2단계 분리가 구조화 도메인에서 압도적 개선.
- 4.API-Bank Kendall-τ -0.43 → +0.61의 극적 반전.
- 5.Agent tool-use 평가 프로토콜에 새로운 베이스라인.
왜 중요한가?
LLM 에이전트가 수백~수천 개 API를 다루는 엔터프라이즈 환경에서 툴 선택·순서가 실제 성공률의 병목. SkillGraph 접근은 한국 업무 자동화 에이전트(SaaS·ERP 통합)에 즉시 적용 가능.
언급 프로젝트
본문 미리보기
arXiv:2604.19793v1 Announce Type: new Abstract: LLM agents must select tools from large API libraries and order them correctly. Existing methods use semantic similarity for both retrieval and ordering, but ordering depends on inter-tool data dependencies that are absent from tool descriptions. As a result, semantic-only methods can produce negative Kendall-$\tau$ in structured workflow domains. We introduce SkillGraph, a directed weighted execution-transition graph mined from 49,831 successful
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 11:38AI 초안

