Llama 2

term_id: llama_2

Category: basic_concepts

Definition

Được Meta AI phát hành vào tháng 7 năm 2023, Llama 2 đại diện cho một bước tiến đáng kể trong các mô hình ngôn ngữ lớn có trọng số mở (open-weight). Nó cung cấp các biến thể đã được huấn luyện trước (pre-trained) và tinh chỉnh (fine-tuned) với quy mô từ 7 tỷ đến 70 tỷ tham số.

Summary

Llama 2 là một họ các mô hình ngôn ngữ lớn (LLM) được Meta phát hành vào tháng 7 năm 2023, với kiến trúc được tối ưu hóa và cửa sổ ngữ cảnh (context window) lớn hơn so với người tiền nhiệm.

Key Concepts

  • Mô hình trọng số mở
  • Kiến trúc Transformer
  • Cửa sổ ngữ cảnh
  • Tinh chỉnh

Use Cases

  • Phát mẫu nghiên cứu
  • Phát triển bot trò chuyện tùy chỉnh
  • Nhiệm vụ tạo mã nguồn