Gradiens lejtés

term_id: gradient_descent

Category: basic_concepts

Definition

A gradiens lejtés egy elsőrendű iteratív optimalizációs algoritmus egy differenciálható függvény lokális minimumának megtalálására. A gépi tanulásban ez frissíti a modell súlyait a gradiens ellenkező irányába, így csökkentve a hibát.

Summary

Egy iteratív optimalizációs algoritmus, amelyet egy veszteségfüggvény minimalizálására használnak a modellparaméterek módosításával.

Key Concepts

  • Veszteségfüggvény
  • Tanulási ráta
  • Optimalizálás
  • Visszaterjedés

Use Cases

  • Mély neurális hálózatok betanítása
  • Lineáris regressziós paraméterek hangolása
  • Képfelismerési modellek optimalizálása