Schmeichelei (Sycophancy)
Definition
Sycophancy ist ein Fehlermodus bei großen Sprachmodellen, bei dem das System darauf …
Evaluation
Terms tagged with Evaluation
Stabilität
Definition
Im maschinellen Lernen bezieht sich Stabilität auf die Robustheit der Leistung und der …
MAUVE
Definition
MAUVE ist ein statistisches Maß, das bewertet, wie stark die Ausgabe eines generativen …
Leave-One-Out-Cross-Validation
Definition
Die Leave-One-Out-Cross-Validation (LOOCV) ist ein spezieller Fall der …
Datendurchsickern
Definition
Datendurchsickern ist ein kritischer Fehler im maschinellen Lernen, bei dem das Modell …
LLM-as-a-Judge
Definition
LLM-as-a-Judge ist ein Evaluierungsparadigma, bei dem ein großes Sprachmodell als …
Inception-Score
Definition
Der Inception-Score (IS) ist ein statistisches Maß, das eingeführt wurde, um die Leistung …
FrontierMath
Definition
FrontierMath ist eine spezialisierte Evaluierungsumgebung, die entwickelt wurde, um die …
Bewertung binärer Klassifikatoren
Definition
Dieses Feld umfasst die Analyse von Metriken wie Genauigkeit (Accuracy), Präzision, …
Kreuzvalidierung
Definition
Die Kreuzvalidierung ist ein statistisches Verfahren zur Schätzung der Leistungsfähigkeit …
Konfusionsmatrix
Definition
Eine Konfusionsmatrix ist eine spezifische Tabellenanordnung, die die Visualisierung der …
Vergleich von Machine-Learning-Software
Definition
Dieser Begriff bezeichnet die systematische Bewertung und den Benchmark verschiedener …
Kategorie-Nutzungsgrad
Definition
Diese Metrik quantifiziert, wie gut eine Menge von Kategorien es ermöglicht, die Werte …
Verlustfunktion
Definition
Auch als Kosten- oder Fehlerfunktion bekannt, liefert die Verlustfunktion einen skalaren …
Out-of-Distribution
Definition
Die Erkennung von Out-of-Distribution (OOD)-Daten identifiziert Eingaben, die außerhalb …
hochwertig
Definition
In der künstlichen Intelligenz beschreibt „hochwertig“ typischerweise Daten oder …
Held-Out
Definition
Ein ‘Held-Out’-Datensatz besteht aus Beispielen, die absichtlich von der …
Test
Definition
Der Testdatensatz ist ein Teil der Daten, der während des Trainingsprozesses …
Wert / Punktzahl
Definition
Werte quantifizieren, wie gut ein Machine-Learning-Modell bestimmte Metriken wie …
Gesamt-
Definition
Bei der Bewertung von KI-Modellen bieten „Gesamt“-Metriken einen ganzheitlichen Blick auf …
Evidenz
Definition
In der künstlichen Intelligenz bezeichnet Evidenz empirische Daten, statistische …
Benchmark
Definition
In der künstlichen Intelligenz ist ein Benchmark eine standardisierte Testsuite oder ein …
Benchmark
Definition
Ein Benchmark dient als standardisierter Referenzpunkt zum Vergleich der Fähigkeiten …
Analyse
Definition
Im Kontext der KI bezieht sich Analyse auf die systematische Untersuchung von Daten, …
Halluzination
Definition
Halluzinationen treten auf, wenn generative KI-Modelle Ausgaben erzeugen, die plausibel …