Prediktiv inlärning

term_id: predictive_learning

Category: training_techniques

Definition

Prediktiv inlärning innebär att träna neurala nätverk för att dra slutsatser om icke observerade datapunkter från observerade indata utan explicita mänskliga etiketter. Genom att lösa uppgifter som nästa token-förutsägelse inom språk eller maskerad modellering i bilder, kan modellen lära sig meningsfulla strukturer och mönster i datan.

Summary

En självövervakad metod där modeller lär sig representationer genom att förutsäga saknade delar av inmatningsdata.

Key Concepts

  • Självövervakning
  • Maskerad modellering
  • Representationsinlärning
  • Oetikerade data

Use Cases

  • Förträning av stora språkmodeller
  • Uppgifter inom bildinpainting
  • Avvikelsedetektering i tidsserier