Ennakoiva tilaesitys
term_id: predictive_state_representation
Category: basic_concepts
Definition
Ennakoivat tilaesitykset (PSR) laajentavat perinteisiä osittain havaittavissa olevia Markovin päätöksentekoprosesseja määrittelemällä tilat vektoreina, jotka ennustavat tulevia havaittavia tapahtumia. Sen sijaan, että luotettaisiin piilotettuihin sisäisiin tiloihin, PSR:t käyttävät havaintojen ja toimintojen historiallista dataa tilan esittämiseen.
Summary
Latentti tilamuotoilu vahvistusoppimisessa, joka ennustaa tulevia havaintoja toimintahistorian perusteella.
Key Concepts
- Osittainen havaittavuus
- Tulevaisuuden ennusteet
- Historiaan perustuvat tilat
- Vahvistusoppiminen
Use Cases
- Robotiikka ruuhkaisissa ympäristöissä
- Pelitekoäly, jossa on piilotettua tietoa
- Rahoitusmarkkinoiden ennustaminen