Dopasowanie prawdopodobieństw
term_id: probability_matching
Category: basic_concepts
Definition
Dopasowanie prawdopodobieństw to wzorzec behawioralny często obserwowany w uczeniu przez wzmacnianie i psychologii, kontrastujący z optymalnymi strategiami ‘maksymalizującymi’. Zamiast zawsze wybierać działanie o najwyższym prawdopodobieństwie nagrody, agent imituje rozkład prawdopodobieństw nagród, co może prowadzić do suboptymalnych wyników w stacjonarnych środowiskach, ale jest powszechne w zachowaniach ludzkich i zwierzęcych.
Summary
Strategia podejmowania decyzji, w której agent wybiera działania z częstością proporcjonalną do ich oszacowanych prawdopodobieństw.
Key Concepts
- Eksploracja kontra eksploatacja
- Uczenie przez wzmacnianie
- Środowiska stochastyczne
- Teoria decyzji
Use Cases
- Modelowanie zachowań ludzkich w eksperymentach psychologicznych
- Wykrywanie zmian w niestacjonarnych problemach wielorakich ramion (multi-armed bandit)
- Analiza algorytmów uczących się, które nie dążą do czystego maksymalizacji