cross-modal
term_id: cross_modal
Category: basic_concepts
Definition
Cross-modal AI omvat het verwerken en correleren van gegevens uit verschillende modaliteiten, zoals het combineren van visuele, auditieve en tekstuele invoer. Deze systemen leren gedeelde representaties om relaties tussen verschillende…
Summary
Technieken die informatie integreren en verwerken over verschillende soorten sensorische gegevens, zoals tekst en afbeeldingen.
Key Concepts
- Multimodaal leren
- Datamerging
- Gedeelde embeddings
- Intermodale mapping
Use Cases
- Bijschriftgeneratie voor afbeeldingen
- Visueel vraag-en-antwoord
- Multimodaal zoeken