Benchmark
term_id: bench
Category: basic_concepts
Definition
Ein Benchmark dient als standardisierter Referenzpunkt zum Vergleich der Fähigkeiten verschiedener KI-Modelle oder Algorithmen. Er umfasst typischerweise einen kuratierten Datensatz und spezifische Bewertungsmetriken wie Genauigkeit oder Latenzzeit.
Summary
Abkürzung für Benchmark, eine standardisierte Testmenge oder Metrik zur Bewertung der Leistung von KI-Modellen.
Key Concepts
- Bewertungsmetriken
- Standardisierte Tests
- Leistungsvergleich
- Datensatzkuratierung
Use Cases
- GLUE-Benchmark für NLP
- ImageNet für Computer Vision
- Modellauswahl in der Produktion