Algoritmo ator-crítico

term_id: actor_critic_algorithm

Category: basic_concepts

Definition

O algoritmo ator-crítico emprega dois componentes: o ator, que atualiza a política para selecionar ações, e o crítico, que avalia a qualidade dessas ações estimando a função de valor.

Summary

Um framework de aprendizado por reforço que combina métodos baseados em valor e baseados em política usando duas redes neurais: um ator e um crítico.

Key Concepts

  • Gradiente de política
  • Função de valor
  • Erro de diferença temporal
  • RL híbrido

Use Cases

  • Manipulação de braços robóticos
  • Agentes de jogos (ex.: AlphaStar)
  • Sistemas de controle contínuo em veículos autônomos