Adaptador

term_id: adapter

Category: training_techniques

Definition

Os adaptadores são uma técnica de ajuste fino eficiente em parâmetros, usada principalmente em grandes modelos de linguagem e transformadores. Em vez de atualizar todos os pesos do modelo, o que é computacionalmente caro, os adaptadores…

Summary

Um módulo leve inserido em modelos pré-treinados para permitir o ajuste fino eficiente para tarefas específicas de downstream.

Key Concepts

  • Ajuste Fino Eficiente em Parâmetros
  • Aprendizado por Transferência
  • Arquitetura Modular
  • Esquecimento Catastrófico

Use Cases

  • Ajuste fino de LLMs para chatbots de atendimento ao cliente
  • Adaptação de modelos de visão para análise de imagens médicas
  • Implantação eficiente de múltiplos modelos específicos de domínio