멀티모달

term_id: muiltimodal

Category: basic_concepts

Definition

인공지능에서 다중 모달리티는 모델이 서로 다른 감각 입력이나 데이터 형식 간에 정보를 이해, 생성 또는 상관관계 있게 처리하는 능력을 설명합니다. 단일 모달 모델과 달리 멀티모달 시스템은 다양한 소스의 정보를 결합하여 더 풍부한 맥락을 파악합니다.

Summary

멀티모달은 텍스트, 이미지, 오디오 등 여러 유형의 데이터 모달리티를 동시에 처리하고 통합하는 AI 시스템을 지칭합니다.

Key Concepts

데이터 융합
크로스 모달 정렬
통합 표현
센서 통합

Use Cases

이미지 캡셔닝 및 시각 질문 답변
오디오 컨텍스트를 포함한 비디오 이해
영상 검사 및 환자 기록을 결합한 의료 진단