Transformer Decoder

Transformer Decoder (Kod Çözücü Blok)

Türkçe: Transformer Kod Çözücü

Ayrıntılı Tanım

Kendisine verilen bağlama dayanarak, her adımda nedensel maskeleme (Causal Masking) ile geleceği görmeden bir sonraki tokenı sırayla üreten otoregresif Transformer bileşenidir.

Ne İşe Yarar / Çözülen Problem

Akıcı hikâyeler, kodlar, sohbet yanıtları ve yaratıcı metinler üretir; modern büyük dil modellerinin (GPT-4, Claude, LLaMA) tamamının inşa edildiği temel bloktur.

Nasıl Çalışır? (Teknik & Mekanizma)

Orijinal halinde üç katmandan oluşur: Maskeli Öz-Dikkat (Masked Self-Attention), Çapraz Dikkat (Cross-Attention) ve FFN. Sadece Decoder tabanlı modern LLM'lerde ise çapraz dikkat atılır, sadece Maskeli Öz-Dikkat ve FFN zinciri kullanılır (Decoder-Only).

Örnek Senaryo & Pratik Uygulama

Bir masal anlatıcısının, dinleyicilerin tepkilerine ve kendi anlattığı son cümleye bakarak masalın bir sonraki kelimesini anlık olarak hayal edip ağzından dökmesi.

Benzer Terimlerden Farkı

Encoder tüm metni bir kerede dondurup analiz ederken; Decoder adım adım zaman ekseninde yeni gelecekler inşa eder.

İlişkili Terimler (3)

#185

Transformer Encoder

Transformer Kodlayıcı

#161

Causal Masking

Nedensel Maskeleme / Geleceği Görmezden Gelme Maskesi

#139

GPT

Üretken Ön-Eğitimli Dönüştürücü

Ait Olduğu Kategori

Transformer Mimarisi ve Dikkat Mekanizmaları

Self-attention, Multi-Head Attention, RoPE, KV-Cache ve Transformer anatomisi.

Toplam Terim:37 Madde

Bu Kategorideki Tüm Terimleri Gör →

Önceki Terim (#185)Transformer Encoder

Sonraki Terim (#187)Transformer Feed-Forward Network