Benchmark
term_id: bench
Category: basic_concepts
Definition
En benchmark fungerar som en standardiserad referenspunkt för att jämföra olika AI-modellers eller algoritmers förmågor. Den involverar vanligtvis en kuraterad datamängd och specifika utvärderingsmetriker såsom noggrannhet eller hastighet.
Summary
Förkortning för benchmark, en standardiserad testuppsättning eller mätvärde som används för att utvärdera AI-modellers prestanda.
Key Concepts
- Utvärderingsmetriker
- Standardiserad testning
- Prestandajämförelse
- Datamängdskuratering
Use Cases
- GLUE-benchmark för NLP
- ImageNet för datorseende
- Modellval i produktion