A/B-testaus

term_id: ab_testing

Category: engineering_practice

Definition

A/B-testaus on satunnaistettu kontrolloitu koe, jossa verrataan kahta varianttia, A ja B, arvioidaksemme, kumpi tuottaa parempia tuloksia tietyssä mittarissa. Tekoälyinsinööritieteessä se on ratkaisevan tärkeää optimoitaessa.

Summary

Tilastollinen menetelmä, jossa verrataan muuttujan kahta versiota määrittämään, kumpi toimii paremmin.

Key Concepts

  • Ohjausryhmä
  • Tilastollinen merkitsevyys
  • Oletustestaus
  • Satunnaistus

Use Cases

  • Suositusmoottorin klikkausprosenttien optimointi
  • Eri malliarkkitehtuurien vertailu tarkkuuden suhteen
  • Käyttöliittymämuutosten testaus tekoälypohjaisissa sovelluksissa