Kettős lejtés

term_id: double_descent

Category: basic_concepts

Definition

A kettős lejtés kihívást jelent a hagyományos torzítás-variancia kompromisszummal szemben, megmutatva, hogy a túlméretezett modellek alacsony tesztelési hibát érhetnek el annak ellenére, hogy interpolálják a tanítóadatot. Kezdetben a hiba nő…

Summary

Egy jelenség, ahol a tesztelési hiba először csökken, majd növekszik, végül újra csökken, ahogy a modell komplexitása meghaladja az interpolációs küszöböt.

Key Concepts

  • Interpolációs küszöb
  • Túlméretezés
  • Torzítás-variancia kompromisszum
  • Tesztelési hiba

Use Cases

  • Neurális hálózatok skálázási törvényeinek elemzése
  • Általánosítás megértése a mélytanulásban
  • Modellválasztás nagy léptékű AI rendszerekben