Predykcyjna reprezentacja stanu
term_id: predictive_state_representation
Category: basic_concepts
Definition
Predykcyjne Reprezentacje Stanu (PSR) rozszerzają tradycyjnie częściowo obserwowalne procesy decyzyjne Markowa, definiując stany jako wektory przewidywań dotyczących przyszłych zdarzeń obserwowalnych. Zamiast polegać na ukrytych stanach wewnętrznych, PSR opierają się na zdolności modelu do przewidywania przyszłych obserwacji na podstawie historii interakcji agenta ze środowiskiem.
Summary
Formułowanie ukrytego stanu w uczeniu przez wzmacnianie, które przewiduje przyszłe obserwacje na podstawie historii działań.
Key Concepts
- Częściowa obserwowalność
- Przewidywania przyszłości
- Stany oparte na historii
- Uczenie przez wzmacnianie
Use Cases
- Robotyka w zatłoczonych środowiskach
- AI w grach z ukrytą informacją
- Prognozowanie rynków finansowych