Vícemodálnost
term_id: multi_modality
Category: basic_concepts
Definition
Vícemodálnost představuje architektonický a teoretický rámec umožňující modelům AI zpracovávat heterogenní datové proudy. Zahrnuje navrhování neuronových sítí, které mohou přijímat vstupy z různých…
Summary
Vícemodálnost je širší koncept nebo obor studia zabývající se používáním různých typů dat v architekturách strojového učení.
Key Concepts
- Heterogenní data
- Zarovnání latentního prostoru
- Encodéry specifické pro modalitu
- Mechanismy pozornosti
Use Cases
- Systémy vnímání pro autonomní řízení
- Vícejazyčný překlad s rozpoznáváním řeči
- Moderaci obsahu analyzující text i obrázky