Problema do Carro na Montanha

term_id: mountain_car_problem

Category: basic_concepts

Definition

O Problema do Carro na Montanha é um benchmark padrão na pesquisa de aprendizado por reforço. O objetivo é controlar um carro subpotente para alcançar o topo de uma colina íngreme. Como o carro não pode subir a colina diretamente devido à falta de potência, o agente deve aprender a oscilar para trás e para frente para ganhar impulso cinético suficiente para vencer a gravidade.

Summary

Uma tarefa clássica de aprendizado por reforço onde um agente deve dirigir um carro até o topo de uma colina íngreme usando apenas controles de aceleração.

Key Concepts

  • Recompensas Esparsas
  • Consequências Atrasadas
  • Controle Contínuo
  • Padronização (Benchmarking)

Use Cases

  • Testando novos algoritmos de aprendizado por reforço
  • Demonstrando técnicas de aproximação de função valor
  • Exemplos educacionais para conceitos de RL