Förtränad

term_id: pretrained

Category: training_techniques

Definition

Begreppet ‘förtränad’ beskriver en neural nätverksmodell som har genomgått en initial träning på ett massivt, ofta generellt dataset som ImageNet eller Wikipedia. Denna process låter modellen lära sig fullständiga funktioner och grundläggande mönster, vilket sedan kan utnyttjas via transfer learning för att effektivt lösa mer specifika uppgifter med mindre data.

Summary

Refererar till en modell som redan har tränats på ett stort dataset innan den anpassas för en specifik uppgift.

Key Concepts

  • Transfer learning
  • Funktionsextraktion
  • Grundläggande modeller
  • Finjustering

Use Cases

  • Initialisering av BERT- eller GPT-modeller
  • Användning av ResNet för bildklassificering
  • Startpunkt för domänspecifika NLP-uppgifter