A/B testování

term_id: ab_testing

Category: engineering_practice

Definition

A/B testování je randomizovaný kontrolovaný experiment, ve kterém se porovnávají dvě varianty, A a B, aby se vyhodnotilo, která z nich přináší lepší výsledky v konkrétním metriku. V inženýrství AI je klíčové pro optimalizaci

Summary

Statistická metoda porovnávající dvě verze proměnné za účelem určení té, která dosahuje lepších výsledků.

Key Concepts

  • Kontrolní skupina
  • Statistická významnost
  • Testování hypotéz
  • Randomizace

Use Cases

  • Optimalizace míry kliknutí u doporučovacích systémů
  • Porovnávání různých architektur modelů podle přesnosti
  • Testování změn uživatelského rozhraní v aplikacích poháněných AI

Related