Multimodal
term_id: multimodal
Category: application_paradigms
Definition
Les systèmes d’IA multimodales intègrent des informations provenant de différentes entrées sensorielles pour former une compréhension plus complète du monde. Contrairement aux modèles unimodaux limités à un seul type de données, les modèles multimodaux peuvent croiser ces modalités.
Summary
Désigne les modèles d’IA capables de traiter et de générer du contenu sur plusieurs types de données, tels que le texte, les images, l’audio et la vidéo simultanément.
Key Concepts
- Apprentissage inter-modal
- Fusion de données
- Apprentissage de représentation
- Entrée sensorielle
Use Cases
- Réponse visuelle aux questions
- Légendage vidéo
- Reconnaissance vocale audio-visuelle