Điều chỉnh theo Chỉ dẫn

term_id: instruction_tuning

Category: training_techniques

Definition

Quy trình này cầu nối khoảng cách giữa việc huấn luyện tổng quát và hiệu suất nhiệm vụ cụ thể. Bằng cách tiếp xúc với các cặp chỉ dẫn-phản hồi đa dạng, mô hình học cách khái quát hóa sang các nhiệm vụ chưa từng thấy mà không cần thêm

Summary

Điều chỉnh theo chỉ dẫn là một kỹ thuật tinh chỉnh, trong đó mô hình ngôn ngữ đã được huấn luyện trước được huấn luyện trên một tập dữ liệu gồm các chỉ dẫn và phản hồi tương ứng để cải thiện khả năng tuân thủ nhiệm vụ.

Key Concepts

  • Tinh chỉnh
  • Học có giám sát
  • Khái quát hóa Zero-shot
  • Sự phù hợp với Con người

Use Cases

  • Xây dựng chatbot
  • Cải thiện độ chính xác của việc sinh mã
  • Định hướng mô hình tuân thủ các nguyên tắc an toàn