0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Exploring The Empirical Privacy Landscape of Synthetic Data
- 1.민감 데이터로 언어모델 학습 시 능력-프라이버시 트레이드오프를 데이터·학습 차원 개입으로 비교 분석
- 2.합성 의료기록에 카나리를 심어 누설 측정, 직접 파인튜닝은 성능 최고지만 누설도 최대, DP-SGD는 누설은 줄이나 성능 손실 큼
- 3.고유성 인지 지시로 민감정보를 치환하며 합성데이터를 생성하는 방식이 성능-프라이버시 균형에서 가장 유리
- 4.단순 패러프레이징보다 프라이버시 인지형 재작성이 여러 모델에서 더 우수, 재작성 모델 성능이 높을수록 누설 위험 대체로 감소
왜 중요한가?
민감 데이터 학습의 표준 해법으로 여겨지던 DP-SGD의 실질적 비용을 드러내고, 합성데이터 생성과 프라이버시 인지형 재작성이 더 나은 대안이 될 수 있음을 통제된 실험으로 보여준다.
본문 미리보기
arXiv:2610.22659v1 Announce Type: new Abstract: Methods for training language models on sensitive data differ in how they balance capability gains against the risk of leaking private information. In this paper, we present a controlled comparison of data-level and training-level interventions for navigating the capability-privacy tradeoff on synthetic medical records with canaries to probe for leakage. Direct finetuning performs best on capability metrics but leads to the most privacy leakage, w
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 11:24AI 초안