Benchmark

term_id: bench

Category: basic_concepts

Definition

Et benchmark fungerer som et standardiseret referencepunkt til at sammenligne evnerne hos forskellige AI-modeller eller algoritmer. Det involverer typisk et kurateret datasæt og specifikke evalueringsmetrikker såsom nøjagtighed eller hastighed.

Summary

Kort for benchmark, et standardtestset eller en måling brugt til at evaluere AI-modellers ydeevne.

Key Concepts

  • Evalueringsmetrikker
  • Standardiseret testning
  • Ydelsessammenligning
  • Datasætkuratering

Use Cases

  • GLUE-benchmark til NLP
  • ImageNet til computer vision
  • Modellvalg i produktion