Kesinlik ve duyarlılık, bir tespit sisteminin performansını iki farklı açıdan ölçen istatistiksel kavramlardır. Kesinlik (precision), sistemin "sahte" dediği sonuçların ne kadarının gerçekten sahte olduğunu gösterir. Duyarlılık (recall) ise gerçekte sahte olan ürünlerin ne kadarının tespit edilebildiğini ortaya koyar. Marka koruma ve pazaryeri denetiminde bu iki ölçütün dengesi, yanlış alarm ile gözden kaçan tehdit arasındaki kritik farkı belirler.
Bir sistem her şeyi sahte sayarsa duyarlılık yüksek, kesinlik düşük olur. Her şeyi orijinal sayarsa tam tersi. Bu gerilimi, somut örnekler ve karşılaştırmalı açıklamalarla aşağıda bulacaksınız.
Bir sahte ürün tespit sistemini düşünün. Sistem incelediği ilanların bir kısmını "riskli" olarak işaretler. Bu işaretlemeler iki soruyu doğurur: İşaretlenenler gerçekten riskli mi? Riskli olanların hepsi işaretlendi mi?
İlk sorunun cevabı kesinliktir. Sistem 100 ilan işaretledi ve bunların 70'i gerçekten sorunluysa kesinlik %70'dir. İkinci sorunun cevabı ise duyarlılıktır. Pazaryerinde 200 riskli ilan varsa ve sistem bunların yalnızca 70'ini yakaladıysa duyarlılık %35'tir.
Bu iki oran aynı anda maksimum düzeyde tutulması zor olan birbiriyle rekabet eden hedeflerdir. Eşiği düşürdüğünüzde daha fazla ilan işaretlenir: duyarlılık artar, kesinlik düşer. Eşiği yükseltirseniz daha az işaretleme yapılır; kesinlik artar, duyarlılık düşer. Hangi yönde tolere edeceğiniz, kullanım amacınıza göre değişir.
Sahte ürün ve taklit ürün tespitinde bu iki ölçüt, farklı taraflar için farklı riskler üretir. GTIN gibi ürün kimlik numaraları üzerinden yapılan otomatik eşleştirmelerde bile sistem hata yapabilir; bu hatalar kesinlik ve duyarlılık ekseninde değerlendirilir.
Bir marka sahibi için düşük kesinlik şu anlama gelir: meşru satıcılara haksız kaldırma talebi (takedown) gönderirsiniz. Bu hem itibar riski hem de hukuki yük doğurabilir. Düşük duyarlılık ise şunu demektir: sahte ürün listeleyen satıcılar radarınızın dışında kalır, marka değeriniz korunmaz.
Bir tüketici için ise duyarlılık daha kritiktir. Sistemin gözden kaçırdığı her sahte ilan, alıcının yanlış bir ürünle karşılaşma riskini artırır. Amazon Türkiye'da mağaza puanınızı sahte üründen korumak istiyorsanız, kullandığınız aracın hangi ölçüte öncelik verdiğini anlamak önemlidir.
SahteAvcı, her ilan için bir risk skoru üretir; bu skor kesin bir sahtelik kanıtı değildir. Skor, kesinlik ile duyarlılık arasındaki dengeyi kullanıcının kendi önceliğine göre yorumlamasına olanak tanır.
| Kavram | Ne ölçer? | Karıştırılma nedeni | Fark |
|---|---|---|---|
| Kesinlik (precision) | İşaretlenenlerin ne kadarı gerçekten riskli? | "Doğruluk" ile özdeşleştirilir | Yalnızca pozitif tahminleri değerlendirir |
| Duyarlılık (recall) | Risklilerin ne kadarı yakalandı? | Kesinlikle yer değiştirip "doğruluk" sanılır | Yalnızca gerçek pozitif havuzunu değerlendirir |
| Doğruluk (accuracy) | Tüm tahminlerin ne kadarı doğru? | Kesinlik ile aynı şey sanılır | Dengesiz veri setlerinde yanıltıcı olabilir |
| F1 skoru | Kesinlik ve duyarlılığın harmonik ortalaması | İkisinin toplamı gibi değerlendirilir | Dengeyi tek bir sayıya indirger; tercih değil, özet |
| Risk skoru | Belirli bir ilanın sahtelik olasılık tahmini | Kesinlik ile özdeşleştirilir | Ham tahmin; kesinlik bu tahminlerin toplu doğruluğunu ölçer |
Menşe ülke gibi kavramlar ise kesinlik ve duyarlılıkla doğrudan ilişkili değildir; ancak bir tespit sisteminin girdi özelliklerinden biri olarak risk skorunu etkiler.
Bir marka koruma ekibi, orijinal ürün doğrulama amacıyla Trendyol'daki ilanları tarıyor. Sistem bir haftada 500 ilan analiz ediyor ve bunların 80'ini riskli olarak işaretliyor.
Ekip bu 80 ilanı manuel olarak inceliyor. 60 tanesi gerçekten sorunlu, 20 tanesi meşru satıcıya ait. Bu durumda kesinlik %75 – yani her 4 işaretlemeden biri gereksiz yere tetiklenmiş. Peki o haftaki gerçek ihlal sayısı 90 ise? O zaman duyarlılık %67'dir – 30 sahte ilan gözden kaçmış demektir.
Bu sayılar doğrulanmış olgular değil, kavramı açıklamak için kurgusal bir senaryodur. Gerçek bir marka koruma sürecinde eşiği nerede tutacağınız, ekibinizin inceleme kapasitesine ve markanın risk toleransına göre şekillenir.
Kesinlik, duyarlılık ve risk skoru kavramları hakkında yeni içerikler yayımlandığında haberdar olmak ister misiniz? SahteAvcı bültenine kaydolun – sahte ürün terimleri sözlüğündeki güncellemeler doğrudan gelen kutunuza gelsin.
Kesinlik ve duyarlılık istatistiksel ölçüm kavramlarıdır; hukuki nitelik taşımaz. Bir tespit sisteminin ürettiği sonuçların yasal geçerliliği, bu ölçütlere değil sistemin nasıl kullanıldığına ve elde edilen bulguların nasıl belgelendiğine bağlıdır. Aydınlatma metni gibi yasal zorunluluklar ayrı bir çerçevede değerlendirilir.
Hayır. Taklit ürün, marka sahibinin izni olmadan üretilmiş ve tescilli markayı kullanan üründür; bu hukuki bir kavramdır. Kesinlik ve duyarlılık ise bir tespit sisteminin bu tür ürünleri ne kadar doğru sınıflandırdığını ölçen performans ölçütleridir. Biri nesne, diğeri ölçüm aracıdır.
Tespit için bir referans küme gerekir: gerçekte sahte ve orijinal olduğu bilinen ilanlar. Sistem bu küme üzerinde çalıştırılır; sonuçlar referansla karşılaştırılır. Doğrulama süreci örnekleme ve manuel denetim gerektirdiğinden, platformdan platforma ve kategoriye göre farklı kaynak ihtiyacı doğurur.