Forudsigende statrepræsentation
term_id: predictive_state_representation
Category: basic_concepts
Definition
Forudsigende statrepræsentationer (PSR) udvider traditionelle delvist observerbare Markov-decisionsprocesser ved at definere tilstande som vektorer af forudsigelser om fremtidige observerbare begivenheder. I stedet for at stole på skjulte tilstande, der ikke direkte kan observeres, bruger PSR historikken til at forudsige fremtidige observationer.
Summary
En latent tilstandsformulering i forstærkningslæring, der forudsiger fremtidige observationer baseret på handlingshistorik.
Key Concepts
- Delvis observerbarhed
- Fremtidsforudsigelser
- Historiebaserede tilstande
- Forstærkningslæring
Use Cases
- Robotik i rodete miljøer
- Spil-AI med skjult information
- Forudsigelse af finansielle markeder