Representasi keadaan prediktif

term_id: predictive_state_representation

Category: basic_concepts

Definition

Representasi Keadaan Prediktif (PSR) memperluas proses keputusan Markov yang sebagian teramati tradisional dengan mendefinisikan keadaan sebagai vektor prediksi tentang peristiwa yang dapat diamati di masa depan. Alih-alih bergantung pada keadaan tersembunyi yang tidak dapat diamati secara langsung, PSR menggunakan riwayat pengamatan dan tindakan untuk memprediksi distribusi probabilitas dari pengamatan masa depan, memungkinkan pengambilan keputusan yang lebih robust dalam lingkungan yang tidak sepenuhnya teramati.

Summary

Formulasi keadaan laten dalam pembelajaran penguatan yang memprediksi pengamatan masa depan berdasarkan riwayat tindakan.

Key Concepts

  • Observabilitas parsial
  • Prediksi masa depan
  • Keadaan berbasis riwayat
  • Pembelajaran penguatan

Use Cases

  • Robotika di lingkungan berantakan
  • AI permainan dengan informasi tersembunyi
  • Perkiraan pasar keuangan