Siciância
Definition
A siciância é um modo de falha em grandes modelos de linguagem onde o sistema prioriza …
Evaluation
Terms tagged with Evaluation
Estabilidade
Definition
Em aprendizado de máquina, estabilidade refere-se à robustez do desempenho e dos …
MAUVE
Definition
O MAUVE é uma medida estatística projetada para avaliar quão de perto a saída de um …
Validação Cruzada de Deixar Um Fora
Definition
A validação cruzada de deixar um fora (LOOCV) é um caso específico de validação cruzada …
Vazamento de Dados
Definition
O vazamento de dados é um erro crítico em aprendizado de máquina onde o modelo obtém …
LLM-as-a-Judge
Definition
LLM-as-a-Judge é um paradigma de avaliação onde um Grande Modelo de Linguagem atua como …
Inception Score
Definition
O Inception Score (IS) é uma medida estatística introduzida para avaliar o desempenho de …
FrontierMath
Definition
O FrontierMath é um conjunto especializado de avaliação criado para testar os limites dos …
Avaliação de classificadores binários
Definition
Esta área envolve a análise de métricas como precisão, exatidão, revocação, pontuação F1 …
Validação Cruzada
Definition
A validação cruzada é um método estatístico usado para estimar a habilidade de …
Matriz de Confusão
Definition
Uma matriz de confusão é um layout de tabela específico que permite visualizar o …
Comparação de softwares de aprendizado de máquina
Definition
Este termo refere-se à avaliação sistemática e ao benchmarking de várias bibliotecas e …
Utilidade de categoria
Definition
Esta métrica quantifica o quão bem um conjunto de categorias permite prever os valores …
Função de Perda
Definition
Também conhecida como função de custo ou erro, a função de perda fornece um valor escalar …
fora da distribuição
Definition
A detecção de dados fora da distribuição (OOD) identifica entradas que estão fora do …
alta qualidade
Definition
Em inteligência artificial, alta qualidade geralmente descreve dados ou saídas de modelos …
held-out
Definition
Um conjunto de dados ‘held-out’ consiste em exemplos intencionalmente …
Teste
Definition
O conjunto de teste é uma parte dos dados mantida de lado durante o processo de …
Pontuação
Definition
As pontuações quantificam o desempenho de um modelo de aprendizado de máquina contra …
Geral
Definition
Ao avaliar modelos de IA, as métricas ‘gerais’ fornecem uma visão holística …
Evidência
Definition
Na inteligência artificial, evidência refere-se a dados empíricos, resultados …
Benchmark
Definition
Em inteligência artificial, um benchmark é um conjunto de testes ou conjunto de dados …
Teste de Referência
Definition
Um teste de referência serve como um ponto de referência padronizado para comparar as …
Análise
Definition
No contexto da IA, análise refere-se ao exame sistemático de dados, previsões de modelos …
Alucinação
Definition
As alucinações ocorrem quando modelos de IA generativa produzem saídas que parecem …