Tanh

term_id: tanh

Category: basic_concepts

Definition

Funkcja tangensa hiperbolicznego (Tanh) to nieliniowa funkcja aktywacji powszechnie stosowana w sieciach neuronowych. Obcina wartości wejściowe do przedziału (-1, 1), zapewniając wyjścia wycentrowane wokół zera, co sprzyja…

Summary

Tanh, czyli tangens hiperboliczny, to funkcja aktywacji mapująca wartości wejściowe na zakres między -1 a 1.

Key Concepts

  • Funkcja aktywacji
  • Nieliniowość
  • Wyjście wycentrowane wokół zera
  • Backpropagation (propagacja zwrotna)

Use Cases

  • Rekurencyjne sieci neuronowe
  • Bramki komórek LSTM
  • Warstwy ukryte w perceptronach wielowarstwowych (MLP)

Code Example

1
2
3
import numpy as np
def tanh(x):
    return np.tanh(x)