Liniowy

term_id: linear

Category: basic_concepts

Definition

Operacje liniowe obejmują mnożenie i dodawanie bez nieliniowych funkcji aktywacji. W sieciach neuronowych warstwy liniowe (lub gęste) stosują transformację macierzy wagowej do wektorów wejściowych. Mimo że l

Summary

Opisuje operacje lub relacje, w których wyjście jest bezpośrednio proporcjonalne do wejścia, stanowiąc podstawę przekształceń afinicznych w warstwach neuronowych.

Key Concepts

  • Macierz Wag
  • Transformacja Afiniczna
  • Iloczyn Skalarny
  • Nakładanie (Superpozycja)

Use Cases

  • Projekcja Cech
  • Regresja Logistyczna
  • Mechanizmy Uwagi (Attention)

Code Example

1
2
3
import torch.nn as nn
layer = nn.Linear(10, 5)
output = layer(input_tensor)