Sykofanti
Definition
Sykofanti er en feilfunksjon i store språkmodeller der systemet prioriterer å behage …
Terms tagged with Evaluation
Sykofanti er en feilfunksjon i store språkmodeller der systemet prioriterer å behage …
Innen maskinlæring refererer stabilitet til robustheten til modellens ytelse og parametre …
MAUVE er et statistisk mål designet for å vurdere hvor nært output fra en generativ …
Korsvalidering med utelatt én observasjon (LOOCV) er et spesielt tilfelle av k-fold …
Datalekkasje er en kritisk feil i maskinlæring der modellen får tilgang til informasjon …
LLM-as-a-Judge er en evalueringsparadigme der en stor språkmodell fungerer som en …
Inception Score (IS) er en statistisk målverdi introdusert for å vurdere ytelsen til …
FrontierMath er et spesialisert evalueringsskap laget for å teste grensene til store …
Dette feltet involverer analyse av metrikker som nøyaktighet, presisjon, gjenvinning …
Korsvalidering er en statistisk metode brukt til å estimere ferdighetene til …
En forvirringsmatrise er en spesifikk tabellstruktur som gjør det mulig å visualisere …
Dette begrepet refererer til den systematiske vurderingen og benchmarkingen av ulike …
Denne metrikken kvantifiserer hvor godt en sett med kategorier lar en forutsi verdiene …
Også kjent som kostnads- eller feilfunksjon, gir tapfunksjonen en skalar verdi som …
Deteksjon av data utenfor fordelingen (OOD) identifiserer inndata som faller utenfor …
Innen kunstig intelligens beskriver «høy kvalitet» vanligvis data eller modellresultater …
Et «holdt tilbake» datasett består av eksempler som bevisst er ekskludert fra …
Testsettet er en del av dataen som holdes tilbake under treningsprosessen for å evaluere …
Poengsummer kvantifiserer hvor godt en maskinlæringsmodell presterer mot spesifikke …
Vurdering av AI-modeller gir «samlede» metrikker et helhetlig bilde av systemytelsen …
Innen kunstig intelligens refererer bevis til empiriske data, statistiske resultater …
Innen kunstig intelligens er et benchmark et standardisert testsuite eller datasett …
En benchmark fungerer som et standardisert referansepunkt for å sammenligne evnene til …
I sammenheng med AI refererer analyse til den systematiske undersøkelsen av data, …
Hallusinasjoner oppstår når generative AI-modeller produserer utdata som ser plausibel …