Prediktivní reprezentace stavu

term_id: predictive_state_representation

Category: basic_concepts

Definition

Prediktivní reprezentace stavu (PSR) rozšiřují tradiční částečně pozorovatelné Markovovy rozhodovací procesy tím, že definují stavy jako vektory predikcí budoucích pozorovatelných událostí. Místo spoléhání na skryté stavy, které nelze přímo pozorovat, PSR používají historii pozorování a akcí k predikci budoucnosti.

Summary

Formulace skrytého stavu ve zposilňovacím učení, která předpovídá budoucí pozorování na základě historie akcí.

Key Concepts

  • Částečná pozorovatelnost
  • Budoucí predikce
  • Stavy založené na historii
  • Zposilňovací učení

Use Cases

  • Robotika v rušném prostředí
  • Herní AI s skrytými informacemi
  • Předpovídání finančních trhů