Highway hálózat

term_id: highway_network

Category: basic_concepts

Definition

A Highway Networks a mély tanulásban fellépő eltűnő gradiens problémát kezelik adaptív kapuk beépítésével, amelyek szabályozzák az információáramlást. Hasonlóan az LSTM cellákhoz, ezek a kapuk lehetővé teszik, hogy az információ közvetlenül átáramoljon a rétegeken, vagy átalakuljon, így lehetővé téve a nagyon mély hálózatok hatékony betanítását anélkül, hogy a gradiens értéke nullához közelítene.

Summary

Egy mély neurális hálózati architektúra, amely kapuzási mechanizmusokat vezet be a nagyon mély hálózatokon keresztüli gradienstárolás elősegítésére.

Key Concepts

  • Kapuzási mechanizmus
  • Eltűnő gradiens
  • Mély tanulás
  • Információáramlás

Use Cases

  • Mély neurális hálózatok
  • Beszédfelismerés
  • Számítógépes látás