ROUGE

Recall-Oriented Understudy for Gisting Evaluation (Lin, 2004)

Türkçe: Özeti Değerlendirme İçin Çağırma-Odaklı Metrik

Ayrıntılı Tanım

Özellikle metin özetleme görevlerinde, insan tarafından yazılmış referans özetteki kritik bilgilerin modelin ürettiği özette **ne kadarının eksiksiz yakalandığını (Recall)** ölçen metriktir.

Ne İşe Yarar / Çözülen Problem

Modelin uzun bir makaleyi özetlerken en hayati noktaları atlayıp atlamadığını sayısal olarak denetler.

Nasıl Çalışır? (Teknik & Mekanizma)

Farklı türevleri vardır: * **ROUGE-1 / ROUGE-2:** 1'li ve 2'li kelime örtüşme oranı (Recall). * **ROUGE-L:** En Uzun Ortak Alt Dizi (Longest Common Subsequence) tabanlı cümle akış uyumu.

Örnek Senaryo & Pratik Uygulama

Bir film özetinde katilin kim olduğunun yazılması şarttır; referans özette geçen "katil bahçıvandır" ifadesini modelin özetinde arayıp yakalama yüzdesi.

Benzer Terimlerden Farkı

BLEU çeviride kesinliğe (Precision) odaklanırken; ROUGE özetlemede kapsayıcılığa (Recall: Önemli bilgileri kaçırmama) odaklanır.

İlişkili Terimler (2)

#428

BLEU (Bilingual Evaluation Understudy)

Çift Dilli Değerlendirme Metriği (BLEU Skoru)

#426

Model Evaluation

Model Değerlendirme

Ait Olduğu Kategori

Değerlendirme, Kıyaslama ve Güvenlik

MMLU, HumanEval, Red Teaming, Halüsinasyon tespiti ve güvenlik testleri.

Toplam Terim:30 Madde

Bu Kategorideki Tüm Terimleri Gör →

Önceki Terim (#428)BLEU (Bilingual Evaluation Understudy)

Sonraki Terim (#430)Benchmarking