Декодер

term_id: decoder

Category: basic_concepts

Definition

В моделях типа «последовательность-в-последовательность» декодер принимает вектор контекста, созданный энкодером, и пошагово генерирует целевой вывод. Он использует механизмы внимания для фокусировки на релевантных частях…

Summary

Компонент нейронной сети, отвечающий за генерацию выходных последовательностей из закодированных латентных представлений.

Key Concepts

  • Генерация последовательностей
  • Механизм внимания
  • Латентное пространство
  • Авторегрессионное предсказание

Use Cases

  • Машинный перевод (с английского на французский)
  • Суммаризация текста
  • Генерация описаний изображений