Компромисс между смещением и дисперсией

term_id: biasvariance_tradeoff

Category: ethics_safety

Definition

Компромисс между смещением и дисперсией описывает напряжение между недообучением (высокое смещение) и переобучением (высокая дисперсия). Модели с высоким смещением делают сильные допущения о данных, потенциально игнорируя важные закономерности, тогда как модели с высокой дисперсией слишком чувствительны к шуму в обучающей выборке.

Summary

Фундаментальная проблема в обучении с учителем, где минимизация ошибки требует баланса между сложностью модели и её способностью к обобщению.

Key Concepts

  • Недообучение
  • Переобучение
  • Обобщающая способность
  • Сложность модели

Use Cases

  • Выбор модели
  • Настройка гиперпараметров
  • Аудит справедливости алгоритмов