Wielomodalność
term_id: multi_modality
Category: basic_concepts
Definition
Wielomodalność reprezentuje ramy architektoniczne i teoretyczne umożliwiające modelom sztucznej inteligencji obsługę heterogenicznych strumieni danych. Obejmuje projektowanie sieci neuronowych, które mogą przyjmować wejścia z różnych…
Summary
Wielomodalność to szersza koncepcja lub dziedzina badań dotycząca wykorzystania wielu różnych typów danych w architekturach uczenia maszynowego.
Key Concepts
- Dane heterogeniczne
- Wyrównanie przestrzeni ukrytych
- Kodery specyficzne dla modalności
- Mechanizmy uwagi
Use Cases
- Systemy percepcji w pojazdach autonomicznych
- Tłumaczenie wielojęzyczne z rozpoznawaniem mowy
- Moderacja treści analizująca tekst i obrazy