Prediktivt tillståndsrepresentation
term_id: predictive_state_representation
Category: basic_concepts
Definition
Prediktiva tillståndsrepresentationer (PSR) utvidgar traditionella partiellt observerbara Markovbeslutprocesser genom att definiera tillstånd som vektorer av förutsägelser om framtida observerbara händelser. Istället för att förlita sig på dolda interna tillstånd, som är svåra att uppskatta direkt, bygger PSR på att modellera sannolikheten för framtiga observationer givet en historik av tidigare observationer och handlingar.
Summary
En latent tillståndsformulering inom förstärkningsinlärning som förutsäger framtida observationer baserat på handlingshistorik.
Key Concepts
- Partiell observerbarhet
- Framtidsförutsägelser
- Historikbaserade tillstånd
- Förstärkningsinlärning
Use Cases
- Robotik i rödda miljöer
- Spel-AI med dold information
- Prognoser på finansmarknader