MAUVE
term_id: mauve
Category: basic_concepts
Definition
MAUVE je statistická míra navržená k posouzení toho, jak velmi se výstup generativního jazykového modelu podobá lidskému jazykovému užívání. Na rozdíl od jednoduchých skóre perplezity používá MAUVE virtuální embeddingy k porovnání rozložení pravděpodobnosti.
Summary
MAUVE (Measuring Alignment Using Virtual Embeddings) je metrika používaná v zpracování přirozeného jazyka k hodnocení shody mezi generovanými textovými distribucemi a distribucemi textů psaných lidmi.
Key Concepts
- Hodnocení generování textu
- Shoda distribucí
- Virtuální embeddingy
- Jazyková přirozenost
Use Cases
- Hodnocení výstupů modelů typu GPT
- Doladění jazykových modelů pro lidsky působící text
- Benchmarking výkonu generativní AI