A/B-testing

term_id: ab_testing

Category: engineering_practice

Definition

A/B-testing er et randomisert kontrollert eksperiment der to varianter, A og B, sammenlignes for å evaluere hvilken som gir bedre resultater i en spesifikk måleverdi. Inne i AI-ingeniørfaget er det avgjørende for optimalisering.

Summary

En statistisk metode som sammenligner to versjoner av en variabel for å avgjøre hvilken som presterer bedre.

Key Concepts

  • Kontrollgruppe
  • Statistisk signifikans
  • Hypotesetesting
  • Randomisering

Use Cases

  • Optimalisering av klikkfrekvenser i anbefalingssystemer
  • Sammenligning av ulike modellarkitekturer for nøyaktighet
  • Testing av UI-endringer i AI-drevne applikasjoner