Multimodal

term_id: multimodal

Category: application_paradigms

Definition

Sistem AI multimodal mengintegrasikan informasi dari berbagai input sensorik untuk membentuk pemahaman dunia yang lebih komprehensif. Berbeda dengan model unimodal yang terbatas pada satu jenis data, model multimodal…

Summary

Merujuk pada model AI yang mampu memproses dan menghasilkan konten di berbagai jenis data, seperti teks, gambar, audio, dan video secara bersamaan.

Key Concepts

  • Pembelajaran lintas-modal
  • Fusi Data
  • Pembelajaran Representasi
  • Input Sensorik

Use Cases

  • Menjawab pertanyaan visual
  • Penulisan keterangan video
  • Pengenalan ucapan audio-visual