Problem Wzgórza Samochodowego

term_id: mountain_car_problem

Category: basic_concepts

Definition

Problem Wzgórza Samochodowego to standardowy benchmark w badaniach nad uczeniem przez wzmacnianie. Celem jest sterowanie niedomocnym samochodem tak, aby dotarł na szczyt stromej góry. Ponieważ samochód nie może wjechać na wzgórze bezpośrednio, agent musi nauczyć się najpierw cofać, aby zebrać wystarczającą prędkość do pokonania wzniesienia.

Summary

Klasyczne zadanie uczenia przez wzmacnianie, w którym agent musi poprowadzić samochód pod strome wzniesienie, dysponując wyłącznie kontrolą przyspieszenia.

Key Concepts

  • Rzadkie Nagrody
  • Opóźnione Skutki
  • Sterowanie Ciągłe
  • Benchmarkowanie

Use Cases

  • Testowanie nowych algorytmów uczenia przez wzmacnianie
  • Demonstrowanie technik przybliżania funkcji wartości
  • Przykłady edukacyjne do nauki koncepcji RL