Multimodal
term_id: muiltimodal
Category: basic_concepts
Definition
En intelligence artificielle, la multimodalité décrit la capacité d’un modèle à comprendre, générer ou corréler des informations provenant de différentes entrées sensorielles ou formats de données. Contrairement aux modèles unimodaux
Summary
Le terme multimodal désigne les systèmes d’IA qui traitent et intègrent simultanément plusieurs types de modalités de données, telles que le texte, les images et l’audio.
Key Concepts
- Fusion de données
- Alignement inter-modalités
- Représentation unifiée
- Intégration des capteurs
Use Cases
- Légendage d’images et réponse aux questions visuelles
- Compréhension vidéo avec contexte audio
- Diagnostic médical combinant analyses d’imagerie et dossiers patients