Предиктивное представление состояния
term_id: predictive_state_representation
Category: basic_concepts
Definition
Предиктивные представления состояний (PSR) расширяют традиционные частично наблюдаемые марковские процессы принятия решений, определяя состояния как векторы предсказаний относительно будущих наблюдаемых событий. Вместо того чтобы полагаться на скрытые переменные, которые невозможно напрямую измерить, PSR описывают состояние системы через её способность предсказывать будущие наблюдения на основе последовательности прошлых действий и наблюдений.
Summary
Формулировка скрытого состояния в обучении с подкреплением, которая предсказывает будущие наблюдения на основе истории действий.
Key Concepts
- Частичная наблюдаемость
- Предсказания будущего
- Состояния на основе истории
- Обучение с подкреплением
Use Cases
- Робототехника в загроможденных средах
- Искусственный интеллект для игр со скрытой информацией
- Прогнозирование финансовых рынков