앤트로픽이 코딩 에이전트 '클로드 코드'에 플러그인의 실제 작동 여부와 기여도를 검증하는 '플러그인 평가(Plugin Evals)' 기능을 v2.1.269부터 추가했다. 기존 유효성 검사가 설정 파일의 문법만 확인했다면, 새 기능은 'claude plugin eval' 명령으로 플러그인 적용(WITH)과 미적용(W/OUT) 상태의 결과를 비교해 그 차이(Δ)로 실제 기여도를 측정한다. 평가자는 regex, tool_used 등 무료 4종과 별도 모델 호출이 필요한 llm·baseline 등 총 6종으로 구성되며, CI/CD 파이프라인에서는 점수 기준과 비용 한도를 설정해 품질 게이트로도 활용할 수 있다. 앤트로픽은 실제 평가에서 자연스러운 요청에 스킬이 호출되지 않아 Δ가 0에 가까운 경우가 흔한 문제로 발견됐다고 밝혔다.

• •앤트로픽, 클로드 코드 v2.1.269부터 플러그인 실제 성능·기여도 검증하는 '플러그인 평가' 기능 추가
• •플러그인 적용(WITH)과 미적용(W/OUT) 결과 차이(Δ)로 실질 기여도 측정
• •평가자 6종(무료 4종+유료 llm·baseline), CI/CD에서 점수·비용 기준으로 품질 게이트 활용 가능
• •실제 평가에서 자연스러운 요청에 스킬이 호출되지 않아 Δ가 0에 가까운 사례가 흔한 문제로 확인