כוונון הנחיות
term_id: instruction_tuning
Category: training_techniques
Definition
תהליך זה גשר את הפער בין אימון כללי לבין ביצוע משימות ספציפיות. על ידי חשיפת המודל לזוגות מגוונים של הנחיה-תגובה, הוא לומד להכליל משימות שלא ראה בעבר ללא צורך באימון נוסף לכל משימה בנפרד.
Summary
כוונון הנחיות הוא טכניקת דיוק (Fine-tuning) שבה מודל שפה מאומן מראש עובר אימון על ערכת נתונים של הנחיות ותגובות מתאימות כדי לשפר את יכולתו לעקוב אחר משימות.
Key Concepts
- דיוק מודל (Fine-tuning)
- למידה מפוקחת
- הכללה באפס-מפגש (Zero-shot)
- יישור עם בני אדם
Use Cases
- בניית צ’אטבוטים
- שיפור דיוק יצירת קוד
- יישור מודלים עם הנחיות בטיחות