מפענח

term_id: decoder

Category: basic_concepts

Definition

במודלים מסוג מקצה לקצה (sequence-to-sequence), המפענח לוקח את וקטור ההקשר שנוצר על ידי המקודד ומייצר את הפלט המבוקש צעד אחר צעד. הוא משתמש במנגנוני תשומת לב כדי להתמקד בחלקים רלוונטיים

Summary

רכיב ברשת נוירונים האחראי ליצירת רצפי פלט מהייצוגים הסמויים (latent) שעברו קידוד.

Key Concepts

  • יצירת רצפים
  • מנגנון תשומת לב
  • מרחב סמוי
  • חיזוי אוטורגרסיבי

Use Cases

  • תרגום מכונה (מאנגלית לצרפתית)
  • סיכום טקסט
  • תיאור תמונה