ELMo

term_id: elmo

Category: basic_concepts

Definition

ELMo מייצר הטמעות מילים הרגישות להקשר על ידי עיבוד טקסט קלט דרך רשת LSTM דו-כיוונית מאומנת על קורפוס גדול. בניגוד להטמעות סטטיות כמו Word2Vec, ELMo תופס פוליסמיה על ידי ייצור וקטורים שונים לאותה מילה בהתאם להקשרה.

Summary

הטמעות ממודלים שפתיים, שיטה לייצוג מילים הקשרי עמוק המשתמשת ב-LSTMs דו-כיווניים.

Key Concepts

  • הטמעות הקשריות
  • LSTM דו-כיווני
  • הכנה מוקדמת
  • פוליסמיה

Use Cases

  • ניתוח רגשות
  • הכרה של ישויות שם
  • פתרון הפניות ליבתיות