Denetimli İnce Ayar

term_id: supervised_fine_tuning

Category: training_techniques

Definition

Denetimli İnce Ayar (SFT), dil modeli gibi büyük bir önceden eğitilmiş modeli alıp, belirli bir alt görev için etiketlenmiş küçük ve yüksek kaliteli bir veri setinde eğitimine devam etmeyi içerir.

Summary

Bir önceden eğitilmiş modeli belirli bir göreve veya alana uyum sağlamak için özel bir veri setinde daha fazla eğitme süreci.

Key Concepts

  • Önceden Eğitilmiş Modeller
  • Aktarım Öğrenmesi
  • Talimat İnce Ayarı
  • Alan Uyarlaması

Use Cases

  • Özel sohbet botu geliştirme
  • Uzmanlaşmış tıbbi soru-cevap sistemleri
  • Kod üretme asistanları

Code Example

1
2
3
4
5
6
7
model.train()
for batch in dataloader:
    inputs, labels = batch
    outputs = model(inputs, labels=labels)
    loss = outputs.loss
    loss.backward()
    optimizer.step()