Représentation d'état prédictif
term_id: predictive_state_representation
Category: basic_concepts
Definition
Les Représentations d’État Prédictifs (PSR) étendent les processus décisionnels markoviens partiellement observables traditionnels en définissant les états comme des vecteurs de prédictions concernant les événements observables futurs. Au lieu de s’appuyer sur des états cachés non observables, ils utilisent des croyances basées sur l’historique des actions et des observations.
Summary
Une formulation d’état latent en apprentissage par renforcement qui prédit les observations futures sur la base de l’historique des actions.
Key Concepts
- Observabilité partielle
- Prédictions futures
- États basés sur l’historique
- Apprentissage par renforcement
Use Cases
- Robotique dans des environnements encombrés
- IA de jeu avec informations cachées
- Prévision des marchés financiers