Representação de Estado Preditiva

term_id: predictive_state_representation

Category: basic_concepts

Definition

As Representações de Estado Preditivas (PSRs) estendem os tradicionais processos de decisão de Markov parcialmente observáveis, definindo estados como vetores de previsões sobre eventos observáveis futuros. Em vez de depender de estados internos ocultos, eles se baseiam em previsões de observações.

Summary

Uma formulação de estado latente em aprendizado por reforço que prevê observações futuras com base no histórico de ações.

Key Concepts

  • Observabilidade parcial
  • Previsões futuras
  • Estados baseados em histórico
  • Aprendizado por reforço

Use Cases

  • Robótica em ambientes desordenados
  • IA de jogos com informações ocultas
  • Previsão de mercados financeiros