Многозадачная оптимизация
term_id: multitask_optimization
Category: training_techniques
Definition
Многозадачная оптимизация предполагает обучение одной модели решению нескольких различных, но связанных задач одновременно. За счет разделения промежуточных представлений между задачами модель может изучать более обобщенные закономерности.
Summary
Стратегия обучения, при которой модель оптимизируется для выполнения нескольких связанных задач одновременно.
Key Concepts
- Разделяемое представление
- Специфичные для задачи слои
- Балансировка градиентов
- Перенос обучения
Use Cases
- Совместное обнаружение объектов и сегментация
- Многометочная классификация
- Распознавание речи и языковое моделирование