XLM-RoBERTa

term_id: xlm_roberta

Category: basic_concepts

Definition

XLM-RoBERTa (Cross-lingual Language Model RoBERTa) es un modelo multilingüe a gran escala desarrollado por Meta AI. Extiende la arquitectura de RoBERTa mediante el preentrenamiento en un conjunto de datos diverso que cubre más de 100

Summary

Un modelo transformador multilingüe basado en RoBERTa, preentrenado con grandes cantidades de texto de más de 100 idiomas.

Key Concepts

  • Procesamiento de Lenguaje Natural Multilingüe
  • Arquitectura Transformadora
  • Transferencia Translingüística
  • Preentrenamiento

Use Cases

  • Análisis de sentimiento multilingüe
  • Respuesta a preguntas translingüística
  • Traducción automática