Reprezentare stării predictive

term_id: predictive_state_representation

Category: basic_concepts

Definition

Reprezentările Stării Predictive (PSR) extind procesele tradiționale de decizie Markov parțial observabile, definind stările ca vectori de predicții despre evenimentele observabile viitoare. În loc să se bazeze pe stări interne invizibile, PSR utilizează istoricul acțiunilor și observațiilor pentru a estima distribuția probabilităților asupra viitorului, oferind o modalitate robustă de gestionare a incertitudinii în medii parțial observabile.

Summary

O formulare a stării latente în învățarea prin reforțare care prezice observațiile viitoare pe baza istoricului acțiunilor.

Key Concepts

  • Observabilitate parțială
  • Predicții viitoare
  • Stări bazate pe istoric
  • Învățare prin reforțare

Use Cases

  • Robotica în medii aglomerate
  • AI pentru jocuri cu informații ascunse
  • Previziunea piețelor financiare