생물학적·인공 지능의 적응적 의사결정에서 변동성(volatility)과 확률성(stochasticity)은 모두 사후 불확실성을 높이지만, 탐색 행동에는 정반대 방향으로 작용함이 밝혀졌다. 변동성은 탐색을 촉진하고 확률성은 탐색을 억제한다는 비대칭성을 깃틴스 지수 프레임워크를 가우시안 상태공간 밴딧으로 확장해 공식화했다. 연구진은 이 비대칭성을 내재한 폐쇄형 탐색 보너스 CAUSE를 도출했으며, 이질적 노이즈 구조 환경에서 기존 표준 탐색 전략보다 우수한 성능을 보였다. 병적 노이즈 추론이 탐색을 단순 손상이 아닌 역전시킬 수 있다는 점에서 정신건강 질환의 계산 모델에 중요한 시사점을 제공한다.
- •변동성은 탐색을 촉진하고 확률성은 탐색을 억제하는 정반대 효과를 가지며, 이를 깃틴스 지수 프레임워크로 수학적으로 증명
- •가우시안 상태공간 밴딧에서 두 노이즈 유형의 비대칭 탐색 효과를 도출해 CAUSE 탐색 보너스 제안
- •CAUSE는 이질적 노이즈 환경에서 표준 탐색 전략 및 깃틴스-퍼-암 정책보다 우수한 성능 달성
- •병적 노이즈 추론이 탐색을 단순 감소가 아닌 역전시킨다는 발견이 정신건강 계산 모델에 시사점 제공
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Not all uncertainty is alike: volatility, stochasticity, and exploration
- 1.변동성과 확률성은 탐색 방향에 반대 효과를 미침을 Gittins 지수 프레임워크로 공식 증명
- 2.CAUSE 탐색 보너스를 제안해 이질적 노이즈 구조 환경에서 기존 탐색 전략 대비 성능 향상
- 3.노이즈 추론 이상이 탐색 저하가 아닌 역전을 유발하며 정신질환 계산 모델에 시사점 제공
왜 중요한가?
강화학습에서 서로 다른 종류의 불확실성을 동일하게 취급하던 한계를 극복하고 원칙적 탐색 전략 설계를 가능하게 한다.
언급 프로젝트
본문 미리보기
arXiv:2605.19215v1 Announce Type: new Abstract: Adaptive decision-making in biological and artificial intelligence requires balancing the exploitation of known outcomes with the exploration of uncertain alternatives. Although prior work suggests that uncertainty generally promotes exploration, it has typically treated distinct sources of environmental uncertainty as equivalent. We consider environments with latent reward states that drift over time (volatility) and are observed through noisy ou
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 13:10AI 초안
