Toprova en iyi web sitelerini ödüllendirir. Sonucun bir anlam taşıması için her site aynı yöntemden geçer. Kısayol yok, satın alınmış yer yok. İlk testten yayına kadar nasıl işlediği şöyle.
10 üzerinden bir puan, iki parçalı
Bir sitenin nihai puanı şöyle hesaplanır: %80’i jüriden, %20’si otomatik ölçümlerden gelir. Yani jüri makineden dört kat ağırdır. Bu bilinçli. Bir site çok hızlı olup kimseye bir şey söylemeyebilir. Ölçümler bir güvenlik önlemi olarak işler, hakem olarak değil.
10 üzerinden 7,0’ın altında bir site Toprova’da görünmez. Bu eşik herkes için aynıdır.
1. adım: ölçümler
Toprova, Google’ın denetim aracı Lighthouse’u masaüstü profiliyle çalıştırır. Üç kez çalıştırıp ortanca değeri alırız; böylece alışılmadık derecede yavaş ya da hızlı bir geçiş sonucu bozmaz. 100 üzerinden üç puan tutulur:
- hız, yani Lighthouse’un performans puanı;
- erişilebilirlik;
- iyi uygulamalar.
Üçünün ortalaması alınır, sonra 10 üzerine çevrilir. Puanın “ölçümler” payı budur.
2. adım: üç yapay zekâ ajanının ön analizi
Ardından birbirinden bağımsız üç yapay zekâ ajanı siteyi inceler. Sanat Yönetimi Ajanı Claude Opus 5.5 üzerinde, Kullanım Kolaylığı Ajanı Claude Sonnet 5.5 üzerinde, Yaratıcılık Ajanı Claude Fable 5.2 üzerinde çalışır. Hepsi aynı, anonimleştirilmiş ekran görüntülerini görür: sitenin adı S01, S02 diye gider. Hiçbir ajan sitenin adını da diğer ikisinin görüşünü de bilmez.
Bu ön analiz puana dahil değildir. Yalnızca jüri üyelerinin çalışmasını hazırlamaya yarar.
3. ve 4. adımlar: üç jüri üyesi karar verir, sonra yayımlanır
Üç insan jüri üyesi ön analizi okur, sonra gerçek siteyi açar. Gezinir, tıklar, kaydırır ve gözle puanlar. Yalnızca onların puanları sayılır: ön analizin yerini tamamen alırlar. Her jüri üyesi dört ölçütü 1’den 10’a puanlar:
- tasarım: %40;
- kullanım kolaylığı: %30;
- yaratıcılık: %20;
- içerik: %10.
Puanlar ardından Bayesci bir ortalamadan geçer. Somut olarak, 6,5’e 3 “referans” oy ekleriz. Az sayıda jüri üyesi tarafından puanlanan bir site böylece 6,5’e yakın kalır. İki üç coşkulu görüşle, çok sayıda jüri üyesinin puanladığı bir sitenin önüne geçemez. Puan hesaplandığında site, Toprova damgasıyla yayımlanır.
Değişmeyen kurallar
- Kimse yerini satın almaz. Bir site önermek 9,90 CHF inceleme ücretidir. Bu ücret site reddedilirse iade edilmez ve puanı yükseltmez.
- Bir jüri üyesi kendi stüdyosunun ya da bir müşterisinin sitesini asla puanlamaz.
- Toprova’nın yayıncısı sıralamada yer alabilir; siteleri aynı jüri tarafından, istisnasız, körlemesine puanlanır.
- Hesapların 1’den 10’a verdiği kamuoyu puanı ayrı gösterilir. Skora asla dahil edilmez.
Makine ölçer, yapay zekâ hazırlar, insan karar verir.