Bayesçi Optimizasyon

term_id: bayesian_optimization

Category: training_techniques

Definition

Bayesçi optimizasyon, amaç fonksiyonunu modellemek için genellikle bir Gaus Süreci olan olasılıksal bir yedek model kullanır. Keşif ve sömürü arasındaki dengeyi sağlamak için bir edinim fonksiyonu (acquisition function) kullanır, böylece az sayıda değerlendirme ile optimumu bulmayı hedefler.

Summary

Değerlendirmesi maliyetli olan kara kutu fonksiyonların küresel optimizasyonu için ardışık bir tasarım stratejisi.

Key Concepts

  • Yedek Model
  • Edinim Fonksiyonu
  • Keşif vs Sömürü
  • Kara Kutu Optimizasyonu

Use Cases

  • Derin öğrenme modelleri için hiperparametre ayarı
  • Bilimde deneysel tasarımların optimize edilmesi
  • Robotik kontrol parametrelerinin ayarlanması