Gradientní sestup

term_id: gradient_descent

Category: basic_concepts

Definition

Gradientní sestup je iterativní optimalizační algoritmus prvního řádu pro nalezení lokálního minima diferencovatelné funkce. V strojovém učení aktualizuje váhy modelu ve směru opačném ke gradientu funkce ztráty.

Summary

Iterativní optimalizační algoritmus používaný k minimalizaci funkce ztráty úpravou parametrů modelu.

Key Concepts

  • Funkce ztráty
  • Rychlost učení
  • Optimalizace
  • Zpětná propagace

Use Cases

  • Výcvik hlubokých neuronových sítí
  • Ladění parametrů lineární regrese
  • Optimalizace modelů pro rozpoznávání obrazu