Grok 1

term_id: grok_1

Category: basic_concepts

Definition

A Grok-1 az xAI első kiadása, amelyet 2023 novemberében indítottak el. Ez egy csak dekódoló (decoder-only) transzformátor alapú nagy nyelvi modell körülbelül 33 milliárd paraméterrel. Jellegzetessége, hogy Expertise-keverék (Mixture-of-Experts) architektúrát alkalmaz.

Summary

Az xAI által kiadott Grok nyelvi modell első verziója, amely Expertise-keverék (Mixture-of-Experts) architektúrát és 33 milliárd paramétert használ.

Key Concepts

  • Expertise-keverék (Mixture-of-Experts)
  • Transzformátor architektúra
  • Paraméterek száma
  • Csak dekódoló modell

Use Cases

  • Szöveggenerálás és kiegészítés
  • Kód szintézis
  • Komplex érvelési feladatok