Вероятностное соответствие
term_id: probability_matching
Category: basic_concepts
Definition
Вероятностное соответствие — это поведенческая модель, часто наблюдаемая в обучении с подкреплением и психологии, которая контрастирует с оптимальными стратегиями «максимизации». Вместо того чтобы всегда выбирать действие с наивысшей вероятностью успеха, агент выбирает действия случайным образом, но так, чтобы частота их выбора соответствовала их истинным вероятностям. Это может приводить к субоптимальным результатам в стационарных средах, но помогает исследовать пространство действий.
Summary
Стратегия принятия решений, при которой агент выбирает действия с частотой, пропорциональной их оценочным вероятностям.
Key Concepts
- Исследование против использования (Exploration vs Exploitation)
- Обучение с подкреплением
- Стохастические среды
- Теория принятия решений
Use Cases
- Моделирование поведения человека в психологических экспериментах
- Устойчивое исследование в нестационарных задачах многоорукого бандита
- Анализ субоптимальных алгоритмов обучения