Sycophantie
Definition
Sycophantie je selháním velkých jazykových modelů, kdy systém upřednostňuje zalíbení se …
Terms tagged with Evaluation
Sycophantie je selháním velkých jazykových modelů, kdy systém upřednostňuje zalíbení se …
V strojovém učení stabilita označuje robustnost výkonu a parametrů modelu při podrobení …
MAUVE je statistická míra navržená k posouzení toho, jak velmi se výstup generativního …
Křížová validace metodou “vynechání jednoho” (LOOCV) je specifickým případem …
Únik dat je kritickou chybou ve strojovém učení, kdy model získá přístup k informacím …
Paradigma „LLM jako soudce“ (LLM-as-a-Judge) využívá velký jazykový model jako …
Inception Score (IS) je statistické míra zavedená pro posouzení výkonu generativních …
FrontierMath je specializovaná vyhodnocovací sada vytvořená pro testování hranic velkých …
Tato oblast zahrnuje analýzu metrik, jako je přesnost (accuracy), přesnost (precision), …
Křížová validace je statistická metoda používaná k odhadu kvality modelů strojového …
Záměnová matice je specifické rozložení tabulky, které umožňuje vizualizaci výkonu …
Tento termín označuje systematické hodnocení a benchmarkování různých knihoven a …
Tato metrika kvantifikuje, jak dobře sada kategorií umožňuje předpovídat hodnoty atributů …
Také známá jako funkce nákladů nebo chyby, poskytuje skalární hodnotu indikující, jak …
Detekce out-of-distribution (OOD) identifikuje vstupy, které spadají mimo rozsah …
V umělé inteligenci vysoká kvalita obvykle popisuje data nebo výstupy modelů, které mají …
Sada ‘vyhrazených’ dat (held-out) sestává z příkladů úmyslně vyloučených z …
Testovací sada je část dat vyňatá během procesu tréninku k vyhodnocení schopnosti …
Skóre kvantifikují, jak dobře se model strojového učení vyžívá proti specifickým …
Při hodnocení modelů umělé inteligence poskytují metriky ‘celkové’ holistický …
V umělé inteligenci důkaz označuje empirická data, statistické výsledky nebo …
V umělé inteligenci je benchmarkem standardizovaná sada testů nebo dat navržená k měření …
Benchmark slouží jako standardizovaný referenční bod pro porovnání schopností různých …
V kontextu AI analýza označuje systematické zkoumání dat, predikcí modelu nebo chování …
Halucinace nastávají, když generativní AI modely produkují výstupy, které vypadají …