דאטה-סט: ויקיפדיה
term_id: datasetwikipedia
Category: basic_concepts
Definition
וויקיפדיה היא אחד האוספים הגדולים והמקיפים ביותר של ידע אנושי הזמינים בפורמט טקסט. בבינה מלאכותית, היא משמשת כמקור ראשוני לאימון ראשוני (Pre-training) של מודלי שפה גדולים, ומספקת מגוון לשוני רחב וידע עובדתי מגוון.
Summary
אוסף טקסט עצום מוויקיפדיה, המשמש כקורפוס בסיסי לאימון ראשוני של מודלי שפה ולמשימות NLP הדורשות ידע אינטנסיבי.
Key Concepts
- קורפוס לאימון ראשוני
- בסיס ידע
- גיוון לשוני
Use Cases
- אימון ראשוני של מודלי שפה בסיסיים
- קישור ישויות ופיצוי משמעויות (Disambiguation)
- בדיקת עובדות ואחזור ידע