IBM이 공식 블로그를 통해 'Granite Switch 4.1' 모델의 기술적 세부사항을 설명했다. 디시전 아LoRA와 가디언 아LoRA, 가장 빠른 음성인식 모델인 Granite Speech 5.0 Turbo CTC를 기본 모델에 결합해 하나의 엔드포인트에서 채팅·의사결정·음성 전사를 모두 처리한다. 어댑터들이 기본 모델의 KV 캐시를 공유해 전문 어댑터를 추가해도 비용이 거의 들지 않으며, 30B 모델은 5단계 RAG 작업에서 경쟁 모델 Jev-27B보다 훨씬 빠르게 완료했다. 3B 규모의 커스텀 모델은 둠 게임에서 초당 60~100개의 결정을 내려 Jev의 초당 10개보다 훨씬 빠른 속도를 보였고, 플레이 중 질문에 답하고 상황을 설명할 수도 있다.
- •Granite Switch 4.1은 디시전·가디언 아LoRA와 Granite Speech 5.0 Turbo CTC 음성인식 모델을 하나의 엔드포인트에 결합
- •어댑터들이 기본 모델의 KV 캐시를 공유해 전문 어댑터 추가 비용이 거의 들지 않음
- •30B 모델이 5단계 RAG 워크플로를 Jev-27B보다 훨씬 빠르게 완료
- •3B 커스텀 모델이 둠 게임에서 초당 60~100개 결정, Jev의 초당 10개보다 훨씬 빠르며 동시에 대화 가능
- •Mellea 애플리케이션 레이어와 연동하며 향후 어댑터 SDK와 커스텀 어댑터 학습 기능 추가 예정
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Granite Switch 4.1: Chat, Decisions, and Speech from One Endpoint

- 1.IBM이 'Granite Switch 4.1'(8B·30B) 공개, 하나의 엔드포인트에서 대화·의사결정·음성인식 전환 가능
- 2.안전성 결정에 특화된 'Guardian aLoRA'가 Jev 1.13·GPT-Luna-Decisions 등을 안전 관련 작업에서 능가
- 3.활성화 LoRA(aLoRA) 구조로 어댑터 간 KV 캐시를 공유해 기반 모델 하나 분량의 VRAM만으로 다기능 수행
- 4.30B 모델이 Jev-27B를 RAG 속도에서 앞섰고, 커스텀 3B 모델은 둠 게임에서 Jev보다 6~10배 빠른 판단 속도
왜 중요한가?
여러 전용 모델을 따로 띄우지 않고 어댑터 전환만으로 대화·분류·음성 작업을 하나의 GPU 메모리 안에서 처리할 수 있게 해, 멀티태스크 AI 서비스의 인프라 비용을 구조적으로 낮출 수 있는 접근이다.
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:39AI 초안