탐색-활용 딜레마

term_id: explorationexploitation_dilemma

Category: training_techniques

Definition

의사결정 과정에서 에이전트는 현재 지식을 활용하여 즉각적인 최적의 보상을 얻는 것과, 더 나은 장기 전략을 찾기 위해 미지의 옵션을 탐색하는 것 사이의 트레이드오프에 직면합니다.

Summary

탐색-활용 딜레마는 강화학습의 근본적인 문제로, 에이전트가 정보를 수집하기 위해 새로운 행동을 탐색할지, 아니면 알려진 행동을 활용하여 보상을 최대화할지 선택해야 하는 문제를 의미합니다.

Key Concepts

  • 보상 최대화
  • 엡실론-그리디
  • 상한 신뢰 한계
  • 강화학습

Use Cases

  • 인기 항목 추천 vs 신규 항목 추천 결정이 필요한 추천 시스템
  • 마케팅 캠페인의 A/B 테스트
  • 동적 환경에서의 자원 할당