Adaptér

term_id: adapter

Category: training_techniques

Definition

Adaptéry jsou technikou efektivního doladění parametrů používanou především u velkých jazykových modelů a transformátorů. Místo aktualizace všech vah modelu, což je výpočetně náročné, adaptéry…

Summary

Lehký modul vložený do předtrénovaných modelů, který umožňuje efektivní doladění pro konkrétní úlohy.

Key Concepts

  • Efektivní doladění parametrů
  • Přenosné učení
  • Modulární architektura
  • Katastrofické zapomenutí

Use Cases

  • Doladění velkých jazykových modelů pro zákaznické chatboty
  • Přizpůsobení vizuálních modelů pro analýzu lékařských snímků
  • Efektivní nasazování více modelů specializovaných na danou doménu