Tối ưu hóa Bayes

term_id: bayesian_optimization

Category: training_techniques

Definition

Tối ưu hóa Bayes sử dụng một mô hình xấp xỉ xác suất, thường là Quá trình Gaussian, để mô hình hóa hàm mục tiêu. Nó sử dụng một hàm thu thập để cân bằng giữa khai thác và khám phá, từ đó giảm thiểu số lần đánh giá hàm cần thiết.

Summary

Một chiến lược thiết kế tuần tự để tối ưu hóa toàn cục các hàm hộp đen tốn kém chi phí đánh giá.

Key Concepts

  • Mô hình xấp xỉ
  • Hàm thu thập
  • Khai thác so với Khám phá
  • Tối ưu hóa hộp đen

Use Cases

  • Điều chỉnh siêu tham số cho các mô hình học sâu
  • Tối ưu hóa thiết kế thí nghiệm trong khoa học
  • Điều chỉnh tham số điều khiển robot