Μάθηση στο Πλαίσιο

term_id: in_context_learning

Category: application_paradigms

Definition

Η μάθηση στο πλαίσιο (ICL) επιτρέπει στα μεγάλα μοντέλα γλώσσας να προσαρμόζονται σε νέες εργασίες χωρίς την ενημέρωση των βαρών τους. Παρέχοντας ζεύγη εισόδου-εξόδου μέσα στο πλαίσιο της διέγερσης, το μοντέλο συμπεραίνει το μοτίβο και

Summary

Μια τεχνική όπου τα μοντέλα μαθαίνουν να εκτελούν εργασίες παρατηρώντας παραδείγματα που παρέχονται στην διέγερση.

Key Concepts

  • Μάθηση Λιγοστών Παραδειγμάτων
  • Μηδενική Διέγερση
  • Σχεδιασμός Διέγερσης
  • Προσαρμογή Χωρίς Βάρη

Use Cases

  • Γρήγορη δοκιμή των ικανοτήτων του μοντέλου σε νέα σύνολα δεδομένων
  • Δυναμική εναλλαγή εργασιών σε συνομιλιακούς πράκτορες
  • Δημιουργία πρωτοτύπων εφαρμογών ΤΝ χωρίς επανεκπαίδευση

Code Example

1
2
prompt = "Translate English to French:\nEnglish: Hello\nFrench: Bonjour\nEnglish: Cat\nFrench:"
response = model.generate(prompt)