Madde #128NLP & Gömme/sozluk/term-frequency-tf

Term Frequency (TF)

Term Frequency

Türkçe: Terim Frekansı
Ayrıntılı Tanım
Belirli bir kelimenin, incelenen tek bir doküman veya metin içerisinde kaç kez geçtiğini gösteren göreli sıklık ölçüsüdür.
Ne İşe Yarar / Çözülen Problem
Bir metnin konusunun ne olduğunu anlamak için o metinde en çok hangi kelimelerin tekrarlandığını tespit eder.
Nasıl Çalışır? (Teknik & Mekanizma)
TF(t,d)=Kelimenin doku¨mandaki gec¸is¸ sayısıDoku¨mandaki toplam kelime sayısı\text{TF}(t, d) = \frac{\text{Kelimenin dokümandaki geçiş sayısı}}{\text{Dokümandaki toplam kelime sayısı}} Uzun dokümanların haksız avantaj elde etmesini önlemek için genellikle toplam kelime sayısına bölünerek normalize edilir.
Örnek Senaryo & Pratik Uygulama
100 kelimelik bir biyoloji makalesinde "hücre" kelimesi 8 kez geçiyorsa, \text{TF}(\text{"h\ddot{u}cre"}) = \frac{8}{100} = 0.08.
Benzer Terimlerden Farkı
Tek başına yetersizdir; çünkü "ve", "bir", "bu" gibi bağlaçlar her dokümanda en yüksek frekansa sahip çıkarak anlamı bozar.
İlişkili Terimler (3)
Ait Olduğu Kategori

Doğal Dil İşleme ve Sözcük Gömmeleri

Metin ön işleme, Word2Vec, GloVe, RNN, LSTM ve n-gram modelleri.

Toplam Terim:30 Madde
Bu Kategorideki Tüm Terimleri Gör →
Önceki Terim (#127)One-Hot Encoding
Sonraki Terim (#129)Inverse Document Frequency (IDF)