Voorgebouwd
term_id: pretrained
Category: training_techniques
Definition
De term ‘voorgebouwd’ beschrijft een neurale netwerkmodel dat een initiële training heeft ondergaan op een massieve, vaak algemene dataset zoals ImageNet of Wikipedia. Dit proces stelt het model in staat fundamentele kenmerken en patronen te leren, die vervolgens kunnen worden hergebruikt of verfijnd (fine-tuned) voor downstream-taken met minder gegevens en rekenkracht.
Summary
Verwijst naar een model dat al is getraind op een grote dataset voordat het wordt aangepast voor een specifieke taak.
Key Concepts
- Transferleren
- Kenmerkextractie
- Fundamentmodellen
- Fine-tuning
Use Cases
- Initialiseren van BERT- of GPT-modellen
- Gebruik van ResNet voor beeldclassificatie
- Startpunt voor domeinspecifieke NLP-taken