Optimasi hipermeter

term_id: hyperparameter_optimization

Category: training_techniques

Definition

Optimasi Hipermeter (HPO) merujuk pada bidang luas otomatisasi pemilihan hipermeter. Meskipun penyetelan adalah tindakan umum, HPO sering menyiratkan penggunaan algoritma canggih seperti optimasi Bayesian atau pencarian arsitektur saraf untuk menavigasi ruang pencarian secara efisien dan menemukan konfigurasi terbaik.

Summary

Pendekatan otomatis untuk menemukan konfigurasi hipermeter optimal, sering kali menggunakan model probabilitas untuk memandu pencarian.

Key Concepts

  • Optimasi Bayesian
  • Model Surrogate
  • ML Otomatis (AutoML)
  • Ruang Pencarian

Use Cases

  • Pipeline AutoML
  • Pelatihan model skala besar
  • Optimasi dengan keterbatasan sumber daya