Discesa del Gradiente

term_id: gradient_descent

Category: basic_concepts

Definition

La discesa del gradiente è un algoritmo di ottimizzazione iterativo del primo ordine per trovare il minimo locale di una funzione differenziabile. Nell’apprendimento automatico, aggiorna i pesi del modello nella direzione opposta al gradiente della funzione di perdita.

Summary

Un algoritmo di ottimizzazione iterativo utilizzato per minimizzare una funzione di perdita regolando i parametri del modello.

Key Concepts

  • Funzione di Perdita
  • Tasso di Apprendimento
  • Ottimizzazione
  • Retropropagazione

Use Cases

  • Addestramento di reti neurali profonde
  • Regolazione dei parametri della regressione lineare
  • Ottimizzazione dei modelli di riconoscimento delle immagini