Prädiktive Zustandsrepräsentation
term_id: predictive_state_representation
Category: basic_concepts
Definition
Prädiktive Zustandsrepräsentationen (PSRs) erweitern traditionelle partiell beobachtbare Markov-Entscheidungsprozesse, indem sie Zustände als Vektoren von Vorhersagen über zukünftige beobachtbare Ereignisse definieren. Anstatt sich auf verborgene interne Zustände zu verlassen, die nicht direkt beobachtbar sind, basieren PSRs ausschließlich auf beobachtbaren Variablen und Aktionen.
Summary
Eine latente Zustandsformulierung im Verstärkungslernen, die zukünftige Beobachtungen basierend auf der Aktionshistorie vorhersagt.
Key Concepts
- Partielle Beobachtbarkeit
- Zukunftsvorhersagen
- Verlaufsbasierte Zustände
- Verstärkungslernen
Use Cases
- Robotik in unübersichtlichen Umgebungen
- Spiel-KI mit verdeckten Informationen
- Prognose von Finanzmärkten