구글이 컴퓨터 비전 신경망을 실제 '태스크 보상'으로 미세조정하는 미국 특허(제12731392호)를 확보했다. 기존에는 정답 데이터를 모방하도록 모델을 학습시켰지만, 이번 특허는 재현율(Recall)이나 평균정밀도(mAP) 같은 실제 평가 지표를 보상으로 삼아 강화학습으로 재조정하는 2단계 구조를 제안한다. 객체 탐지뿐 아니라 이미지 분할, 컬러화에도 적용 가능하며, 보상 함수가 미분 불가능해도 되는 점이 특징이다. 자율주행·로봇 등 피지컬 AI 분야에서 실제 작업 성공률에 최적화된 비전 모델을 만드는 데 기여할 전망이다.
- •구글 미국 특허 제12731392호, 컴퓨터 비전 신경망을 '태스크 보상'으로 미세조정하는 2단계 학습 구조 제안
- •기존 정답 데이터 모방 방식과 달리 재현율(Recall)·mAP 등 실제 평가 지표를 보상으로 사용해 강화학습 수행
- •객체 탐지, 이미지 분할, 이미지 컬러화 등 다양한 컴퓨터 비전 작업에 적용 가능
- •보상 함수가 미분 불가능해도 되어 비미분적 평가 지표까지 학습에 활용 가능
- •자율주행·로봇 등 피지컬 AI 분야에서 실제 작업 성공률 최적화에 기여할 전망
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
"AI는 왜 ‘정답 데이터’보다 ‘보상’을 배워야 하는가"...김용덕 변리사, 구글의 컴퓨터 비전 강화학습 특허 분석
본문 미리보기
인공지능(AI) 분야에서 강화학습(RL)이라고 하면 많은 사람들이 챗GPT와 같은 생성형 AI를 먼저 떠올린다. 사람이 생성된 답변을 평가하고, 그 평가를 이용해 AI가 더 좋은 답변을 생성하도록 학습시키는 인간 피드백 기반 강화학습, 즉 RLHF(Reinforcement Learning from Human Feedback)가 생성형 AI의 핵심 기술로 알려져 있기 때문이다.그러나 강화학습의 활용 범위는 언어모델에만 국한되지 않는다. 구글은 최근 컴퓨터 비전 영역에서도 기존의 학습 방식에 강화학습을 결합하는 기술을 특허로 확보했다.
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:11AI 초안


