Representación de estado predictiva
term_id: predictive_state_representation
Category: basic_concepts
Definition
Las Representaciones de Estado Predictivas (PSR) extienden los procesos de decisión de Markov parcialmente observables tradicionales al definir los estados como vectores de predicciones sobre eventos observables futuros. En lugar de depender de estados ocultos no directamente accesibles, las PSR utilizan el historial de acciones y observaciones para predecir qué sucederá después, permitiendo una toma de decisiones robusta incluso cuando la información completa del entorno no está disponible.
Summary
Una formulación de estado latente en el aprendizaje por refuerzo que predice observaciones futuras basándose en el historial de acciones.
Key Concepts
- Observabilidad parcial
- Predicciones futuras
- Estados basados en historial
- Aprendizaje por refuerzo
Use Cases
- Robótica en entornos desordenados
- IA para juegos con información oculta
- Pronóstico de mercados financieros