Thuật toán Actor-Critic

term_id: actor_critic_algorithm

Category: basic_concepts

Definition

Thuật toán Actor-Critic sử dụng hai thành phần: Actor, cập nhật chính sách để chọn hành động, và Critic, đánh giá chất lượng của các hành động đó bằng cách ước lượng hàm giá trị.

Summary

Một khung học tăng cường kết hợp các phương pháp dựa trên giá trị và dựa trên chính sách bằng cách sử dụng hai mạng nơ-ron: một Actor và một Critic.

Key Concepts

  • Gradient chính sách
  • Hàm giá trị
  • Lỗi sai lệch thời gian
  • RL lai

Use Cases

  • Thao tác cánh tay robot
  • Tác nhân chơi game (ví dụ: AlphaStar)
  • Hệ thống điều khiển liên tục trong xe tự hành