ELMo

term_id: elmo

Category: basic_concepts

Definition

ELMo luo kontekstiherkkiä sanaembeddingejä prosessoimalla syötekstin kaksisuuntaisen LSTM-verkon läpi, joka on koulutettu suurella korpuksella. Toisin kuin staattiset embeddingit kuten Word2Vec, ELMo vangitseu polysemian tuottamalla…

Summary

Embeddings from Language Models, syvä kontekstuaalinen sanaesitysmenetelmä, joka käyttää kaksisuuntaisia LSTMejä.

Key Concepts

  • Kontekstuaaliset embeddingit
  • Kaksisuuntainen LSTM
  • Esikoulutus
  • Polysemia

Use Cases

  • Tunneanalyysi
  • Erisnimien tunnistus
  • Viittausten ratkaisu