Învățare predictivă

term_id: predictive_learning

Category: training_techniques

Definition

Învățarea predictivă implică antrenarea rețelelor neuronale pentru a infere punctele de date neobservate din intrările observate, fără etichete explicite ale omului. Prin rezolvarea sarcinilor precum prezicerea următorului token în limbaj sau mascarea parțială a datelor, modelele pot învăța structuri complexe și dependențe semantice din cantități mari de date netichetate.

Summary

O abordare auto-supervizată în care modelele învață reprezentări prin prezicerea părților lipsă din datele de intrare.

Key Concepts

  • Auto-supervizare
  • Modelare mascată
  • Învățarea reprezentărilor
  • Date netichetate

Use Cases

  • Antrenarea preliminară a modelelor lingvistice mari
  • Sarcini de completat imagini (image inpainting)
  • Detectarea anomaliilor în serii temporale