예측 상태 표현(Predictive state representation)

term_id: predictive_state_representation

Category: basic_concepts

Definition

예측 상태 표현(PSR)은 상태를 미래 관측 가능 사건에 대한 예측 벡터로 정의함으로써 전통적인 부분 관측 마르코프 결정 과정(POMDP)을 확장합니다. 이는 과거 관찰과 행동 기록에만 의존하는 대신, 미래에 일어날 일에 대한 예측을 상태의 핵심으로 사용합니다.

Summary

행동 이력을 기반으로 미래 관측치를 예측하는 강화학습의 잠재 상태 공식화 방법입니다.

Key Concepts

  • 부분 관측 가능성
  • 미래 예측
  • 이력 기반 상태
  • 강화학습

Use Cases

  • 혼잡한 환경에서의 로봇 공학
  • 숨겨진 정보가 있는 게임 AI
  • 금융 시장 예측

Related