Đa phương thức
term_id: muiltimodal
Category: basic_concepts
Definition
Trong trí tuệ nhân tạo, tính đa phương thức mô tả khả năng của một mô hình trong việc hiểu, tạo ra hoặc liên kết thông tin across các đầu vào giác quan hoặc định dạng dữ liệu khác nhau. Không giống như các mô hình đơn phương thức
Summary
Đa phương thức đề cập đến các hệ thống AI xử lý và tích hợp đồng thời nhiều loại phương thức dữ liệu khác nhau, chẳng hạn như văn bản, hình ảnh và âm thanh.
Key Concepts
- Hợp nhất dữ liệu
- Căn chỉnh chéo phương thức
- Biểu diễn thống nhất
- Tích hợp cảm biến
Use Cases
- Tạo chú thích ảnh và trả lời câu hỏi dựa trên hình ảnh
- Hiểu nội dung video với ngữ cảnh âm thanh
- Chẩn đoán y khoa kết hợp hình ảnh quét và hồ sơ bệnh án