GPT-2
term_id: gpt2
Category: basic_concepts
Definition
النموذج التوليدي المسبق ذو البنية المحوّلة الإصدار الثاني (GPT-2) هو نموذج لغوي ذاتي الانحدار (autoregressive) يستخدم بنية المحوّل لتوليد نص يشبه لغة البشر. تم تدريبه على مجموعة بيانات ضخمة من نصوص الإنترنت.
Summary
GPT-2 هو نموذج لغوي ضخم يعتمد على معمارية المحوّل (Transformer)، طورته شركة OpenAI لتوليد النصوص وفهمها.
Key Concepts
- معمارية المحوّل
- النمذجة الذاتية الانحدار
- معالجة اللغة الطبيعية
- التعلم بأمثلة قليلة
Use Cases
- إكمال وتوليد النصوص
- الترجمة الآلية
- وكلاء المحادثة