베이지안 최적화
term_id: bayesian_optimization
Category: training_techniques
Definition
베이지안 최적화는 목적 함수를 모델링하기 위해 일반적으로 가우시안 프로세스인 확률적 대리 모델을 사용합니다. 탐색과 활용을 균형 있게 맞추기 위해 획득 함수(acquisition function)를 employed합니다.
Summary
평가 비용이 높은 블랙박스 함수의 전역 최적화를 위한 순차적 설계 전략입니다.
Key Concepts
- 대리 모델
- 획득 함수
- 탐색 대 활용
- 블랙박스 최적화
Use Cases
- 딥러닝 모델의 하이퍼파라미터 튜닝
- 과학 분야 실험 설계 최적화
- 로봇 공학 제어 파라미터 조정