الذاكرة طويلة وقصيرة المدى

term_id: long_short_term_memory

Category: basic_concepts

Definition

تعالج شبكات الذاكرة طويلة وقصيرة المدى مشكلة تلاشي التدرج الشائعة في الشبكات العصبية المتكررة القياسية من خلال استخدام حالة الخلية وثلاث آليات تحكّم: مدخلات، ونسيان، ومخرجات. تنظم هذه الآليات تدفق المعلومات

Summary

بنية متخصصة للشبكات العصبية المتكررة مصممة لتعلم التبعيات طويلة المدى في البيانات التسلسلية.

Key Concepts

  • آليات التحكّم
  • حالة الخلية
  • البيانات التسلسلية
  • تلاشي التدرج

Use Cases

  • التنبؤ بسلاسل الزمن
  • التعرف على الكلام
  • الترجمة الآلية

Code Example

1
2
import torch.nn as nn
lstm = nn.LSTM(input_size=10, hidden_size=20, num_layers=1)