רב-מודאליות
term_id: multi_modality
Category: basic_concepts
Definition
רב-מודאליות מייצגת את המסגרת הארכיטקטונית והתיאורטית המאפשרת למודלי בינה מלאכותית להתמודד עם זרמי נתונים הטרוגניים. היא כוללת עיצוב של רשתות נוירונים שיכולות לקבל קלטים ממקורות מגוונים, ובכך לשפר את יכולת ההכללה וההבנה של המודל.
Summary
הרעיון או תחום המחקר הרחב יותר העוסק בשימוש בסוגי נתונים שונים ומובחנים בתוך ארכיטקטורות של למידת מכונה.
Key Concepts
- נתונים הטרוגניים
- יישור במרחב סמוי
- מפענחים ייעודיים למודאליות
- מנגנוני תשומת לב
Use Cases
- מערכות תפיסה בנהיגה אוטונומית
- תרגום רב-לשוני עם זיהוי דיבור
- מדיניות תוכן הבודקת טקסט ותמונות