Madde #113Derin Öğrenme/sozluk/long-short-term-memory-lstm

Long Short-Term Memory (LSTM)

Long Short-Term Memory

Türkçe: Uzun Kısa Süreli Hafıza
Ayrıntılı Tanım
Hochreiter ve Schmidhuber (1997) tarafından geliştirilen; bünyesindeki hücre durumu (cell state) ve üç özel kapı (unutma, girdi, çıktı) sayesinde yüzlerce adım önceki bilgileri dahi unutmadan taşıyabilen gelişmiş RNN türüdür.
Ne İşe Yarar / Çözülen Problem
Klasik RNN'lerin 10-15 kelimeden sonra gradyan kaybolması yüzünden cümlenin başını tamamen unutması sorununu kökünden çözmüştür.
Nasıl Çalışır? (Teknik & Mekanizma)
* **Unutma Kapısı (Forget Gate):** Hangi eski bilgilerin silineceğine karar verir (ftf_t). * **Girdi Kapısı (Input Gate):** Hangi yeni bilgilerin hücreye yazılacağını seçer (iti_t). * **Hücre Durumu (Cell State):** Bilgiyi doğrusal olarak taşıyan ana hat (CtC_t). * **Çıktı Kapısı (Output Gate):** Bir sonraki adıma hangi bilginin aktarılacağını belirler (oto_t).
Örnek Senaryo & Pratik Uygulama
Bir öğrencinin ders notu tutması: Defterin kenarındaki gereksiz karalamaları silmesi (Forget), hocanın söylediği önemli formülü deftere yazması (Input), sınavda bu notlara bakıp cevap üretmesi (Output).
Benzer Terimlerden Farkı
Klasik RNN tek bir Tanh katmanından ibaretken, LSTM içinde 4 ayrı sinir ağı katmanı barındıran kompleks bir bellek yönetim santralidir.
İlişkili Terimler (3)
Ait Olduğu Kategori

Derin Öğrenme Temelleri ve Temsil Öğrenmesi

Yapay sinir ağları, aktivasyon fonksiyonları, geri yayılım ve tensör temelleri.

Toplam Terim:52 Madde
Bu Kategorideki Tüm Terimleri Gör →
Önceki Terim (#112)Backpropagation Through Time (BPTT)
Sonraki Terim (#114)Gated Recurrent Unit (GRU)