0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Watermarking for Byzantine Robust LLM Training
- 1.연방학습(FL)에서 악성 서버가 강건한 집계기(aggregator)를 역이용해 LLM 워터마크를 제거할 수 있음을 실증
- 2.이 문제를 제약 최적화로 formalize하고, 집계기에 구애받지 않는 워터마킹 'CamoMark' 제안
- 3.워터마크 삽입 업데이트를 정상 분포의 인라이어로 만들어 탐지신호는 유지하면서 제거를 방지
- 4.Qwen을 Alpaca로 파인튜닝해 평가, 데이터 3.3%만으로 p=1.82×10⁻², 파인튜닝·가지치기·증류 공격에도 견고
왜 중요한가?
연방학습 환경에서 기존 워터마킹 기법이 강건집계 때문에 무력화될 수 있다는 새 취약점을 밝히고, 이를 막는 구체적 해법을 제시해 분산 LLM 학습의 모델 출처 추적 신뢰성을 높인다.
본문 미리보기
arXiv:2610.14289v1 Announce Type: new Abstract: LLM watermarking has emerged as a promising approach for detecting downstream model misuse in centralized settings, but extending it to federated learning (FL) presents unique challenges. In particular, FL systems often rely on strong robust aggregators to defend against poisoning attacks. We empirically show that a malicious server can exploit these same aggregators as effective watermark-removal mechanisms during training, causing representative
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 11:24AI 초안
![[AI리더의 서가] 바이브 코딩 프로덕션의 원칙](https://cdn.aitimes.com/news/photo/202610/216145_220153_386.jpg)


