Madde #341RAG & Vektör/sozluk/chunk-size
Chunk Size
Türkçe: Parça Boyutu
Ayrıntılı Tanım
Metin parçalama işlemi sırasında oluşturulan her bir metin bloğunun içerdiği maksimum karakter, kelime veya token miktarını belirleyen hiperparametredir.
Ne İşe Yarar / Çözülen Problem
Çok küçük parçalar (örn: 50 token) anlamsal bağlamı kaybeder; çok büyük parçalar (örn: 2000 token) ise arama keskinliğini köreltir ve gürültü taşır. Doğru boyutu bulmak RAG başarısının anahtarıdır.
Nasıl Çalışır? (Teknik & Mekanizma)
Tipik olarak 256, 512 veya 1024 token seçilir. Kısa sorgularda küçük parçalar, derin akademik sentezlerde büyük parçalar tercih edilir.
Örnek Senaryo & Pratik Uygulama
Bir fotoğrafı kırparken kadraj boyutu: Kamerayı sadece bir kişinin burnuna odaklarsanız kim olduğunu anlayamazsınız (çok küçük boyut); tüm şehri kadraja alırsanız aradığınız insanı göremezsiniz (çok büyük boyut).
Benzer Terimlerden Farkı
Parçanın uzunluğunu belirler, çakışma miktarından bağımsızdır.
İlişkili Terimler (3)
Bilgi Erişimi, RAG ve Vektör Veritabanları
Dense/Sparse retrieval, Vektör indeksleme (HNSW), Rerankers ve RAG pipeline.
Toplam Terim:37 Madde
Bu Kategorideki Tüm Terimleri Gör →Önceki Terim (#340)Chunking
Sonraki Terim (#342)Chunk Overlap