Benchmark
term_id: bench
Category: basic_concepts
Definition
Benchmark toimii standardoituna vertailukohtana eri tekoälymallien tai algoritmien kykyjen vertailuun. Se koostuu yleensä kuratoidusta datajoukosta ja tietyistä arviointimittareista, kuten tarkkuudesta tai nopeudesta.
Summary
Lyhenne sanasta benchmark, standardoitu testijoukko tai mittari, jota käytetään tekoälymallien suorituskyvyn arviointiin.
Key Concepts
- Arviointimittarit
- Standardoitu testaus
- Suorituskyvyn vertailu
- Datajoukon kuratointi
Use Cases
- GLUE-benchmark luonnollisen kielen käsittelyyn
- ImageNet tietokonevisiolle
- Mallin valinta tuotantokäyttöön