Doladění podle instrukcí

term_id: instruction_tuning

Category: training_techniques

Definition

Tento proces překonává propast mezi obecným předtrénováním a výkonem konkrétních úkolů. Vystavením modelu různým párům instrukcí a odpovědí se naučí zobecňovat na dosud neviděné úkoly bez dalšího

Summary

Doladění podle instrukcí je technika finálního doladění, při které je předtrénovaný jazykový model trénován na sadě instrukcí a odpovídajících odpovědí, aby se zlepšily schopnosti dodržování úkolů.

Key Concepts

  • Finální doladění
  • Učení s učitelem
  • Zobecnění bez příkladů (zero-shot)
  • Lidská shoda

Use Cases

  • Vývoj chatbotů
  • Zlepšení přesnosti generování kódu
  • Soulad modelů s bezpečnostními směrnicemi