Dekoder

term_id: decoder

Category: basic_concepts

Definition

W modelach sekwencja-sekwencja dekodator przyjmuje wektor kontekstu wygenerowany przez enkoder i tworzy wynik docelowy krok po kroku. Wykorzystuje mechanizmy uwagi (attention), aby skupić się na odpowiednich częściach wejścia podczas generowania wyjścia.

Summary

Składnik sieci neuronowej odpowiedzialny za generowanie sekwencji wyjściowych na podstawie zakodowanych reprezentacji ukrytych.

Key Concepts

  • Generowanie sekwencji
  • Mechanizm uwagi
  • Przestrzeń ukryta
  • Predykcja autoregresyjna

Use Cases

  • Tłumaczenie maszynowe (np. angielski na francuski)
  • Podsumowywanie tekstu
  • Opisywanie obrazów