Samořízené učení

term_id: self_supervised_learning

Category: training_techniques

Definition

Samořízené učení je technika, při které algoritmus vytváří supervizní signály přímo z neoznačených dat, obvykle predikcí chybějících částí vstupu. Tím překonává nutnost manuálního označování dat a propojuje principy nesupervizovaného a supervizovaného učení, což je klíčové pro efektivní předtrénování velkých modelů.

Summary

Metoda tréninku, při které model generuje vlastní štítky z vstupních dat k učení reprezentací.

Key Concepts

  • Předtrénování
  • Maskované modelování jazyka
  • Kontrastní učení
  • Učení reprezentací

Use Cases

  • Trénink velkých jazykových modelů
  • Učení reprezentací pro obrázky
  • Systémy rozpoznávání řeči

Code Example

1
null