שפת-ראייה
term_id: vision_language
Category: application_paradigms
Definition
מודלים של שפת-ראייה, המכונים לעיתים קרובות מודלי שפה גדולים רב-מודאליים (MLLMs), משלבים ראייה ממוחשבת ועיבוד שפה טבעית. הם מאפשרים לבינה מלאכותית להבין תמונות ולייצר תיאורים טקסטואליים או תשובות בהתבסס עליהם.
Summary
מודלים של שפת-ראייה הם מערכות בינה מלאכותית המעבדות ומתאמות נתונים חזותיים עם מידע טקסטואלי כדי להבין הקשרים רב-מודאליים.
Key Concepts
- רב-מודאליות
- יישור חוצה-מודאלי
- תיאור תמונות
- מענה לשאלות ויזואליות
Use Cases
- תיאור אוטומטי של תמונות
- מערכות מענה לשאלות המבוססות על תמונות
- מדיניות תוכן בהתבסס על הקשר חזותי וטקסטואלי