Předtrénovaný
term_id: pretrained
Category: training_techniques
Definition
Termín ‘předtrénovaný’ popisuje neuronový síťový model, který prošel počátečním tréninkem na masivní, často obecné sadě dat, jako je ImageNet nebo Wikipedia. Tento proces umožňuje modelu naučit se obecné funkce a reprezentace, které lze následně využít a doladit pro specifické úlohy s menšími datovými sadami.
Summary
Odkazuje na model, který byl již natrénován na velké sadě dat před jeho přizpůsobením pro konkrétní úkol.
Key Concepts
- Přenositelné učení
- Extrakce funkcí
- Základní modely
- Doladění
Use Cases
- Inicializace modelů BERT nebo GPT
- Použití ResNet pro klasifikaci obrázků
- Východiskový bod pro NLP úlohy v konkrétní doméně