liên phương thức
term_id: cross_modal
Category: basic_concepts
Definition
AI liên phương thức liên quan đến việc xử lý và tương quan dữ liệu từ các phương thức khác nhau, chẳng hạn như kết hợp đầu vào trực quan, thính giác và văn bản. Các hệ thống này học các biểu diễn chung để hiểu mối quan hệ…
Summary
Các kỹ thuật tích hợp và xử lý thông tin từ nhiều loại dữ liệu cảm giác khác nhau như văn bản và hình ảnh.
Key Concepts
- Học Đa phương thức (Multimodal Learning)
- Hợp nhất Dữ liệu (Data Fusion)
- Nhúng Chung (Shared Embeddings)
- Ánh xạ Liên phương thức (Inter-modal Mapping)
Use Cases
- Trích xuất chú thích ảnh (Image Captioning)
- Trả lời câu hỏi dựa trên hình ảnh (Visual Question Answering)
- Tìm kiếm Đa phương thức (Multimodal Search)