Algoritmo Attore-Critico
term_id: actor_critic_algorithm
Category: basic_concepts
Definition
L’algoritmo attore-critico impiega due componenti: l’attore, che aggiorna la policy per selezionare le azioni, e il critico, che valuta la qualità di tali azioni stimando la funzione valore. Questa architettura ibrida permette di combinare i vantaggi dell’apprendimento per differenza temporale con l’ottimizzazione diretta della policy.
Summary
Un framework di apprendimento per rinforzo che combina metodi basati sul valore e sul policy utilizzando due reti neurali: un attore e un critico.
Key Concepts
- Gradiente della policy
- Funzione valore
- Errore di differenza temporale
- RL ibrido
Use Cases
- Manipolazione di bracci robotici
- Agenti per giochi (es. AlphaStar)
- Sistemi di controllo continuo nei veicoli autonomi