Predictieve staatrepresentatie
term_id: predictive_state_representation
Category: basic_concepts
Definition
Predictieve Staatrepresentaties (PSR’s) breiden traditionele gedeeltelijk waarneembare Markov-decisieprocessen uit door staten te definiëren als vectoren van voorspellingen over toekomstige waarneembare gebeurtenissen. In plaats van te vertrouwen op verborgen interne toestanden die moeilijk te observeren zijn, benadert PSR het probleem door te focussen op voorspelbare relaties tussen geschiedenis, acties en toekomstige observaties, wat robuuster is bij gedeeltelijke waarneembaarheid.
Summary
Een latente staatformulering in versterkend leren die toekomstige waarnemingen voorspelt op basis van actiegeschiedenis.
Key Concepts
- Gedeeltelijke waarneembaarheid
- Toekomstvoorspellingen
- Geschiedenisgebaseerde staten
- Versterkend leren
Use Cases
- Robotica in rommelige omgevingen
- Spel-AI met verborgen informatie
- Voorspelling van financiële markten