Rappresentazione dello stato predittiva
term_id: predictive_state_representation
Category: basic_concepts
Definition
Le Rappresentazioni Predittive dello Stato (PSR) estendono i tradizionali processi decisionali markoviani parzialmente osservabili definendo gli stati come vettori di previsioni su eventi osservabili futuri. Invece di fare affidamento su stati nascosti non direttamente osservabili, le PSR utilizzano la cronologia di azioni e osservazioni per prevedere il futuro, garantendo una rappresentazione completa e sufficientemente informativa anche in ambienti parzialmente osservabili.
Summary
Una formulazione dello stato latente nell’apprendimento per rinforzo che prevede le osservazioni future basandosi sulla cronologia delle azioni.
Key Concepts
- Osservabilità parziale
- Previsioni future
- Stati basati sulla cronologia
- Apprendimento per rinforzo
Use Cases
- Robotica in ambienti affollati
- AI per giochi con informazioni nascoste
- Previsione dei mercati finanziari