Toprova’da her site önce üç yapay zekâ ajanının, sonra üç insan jüri üyesinin önünden geçer. Yalnızca jüri üyelerinin puanları sayılır. Bize sık sık ikisini neden birlikte tuttuğumuz soruluyor. İşte yanıtı.

Ajanlar ne yapıyor

Üç ajan her biri kendi başına çalışır. Sanat Yönetimi Ajanı Claude Opus 5.5 üzerinde, Kullanım Kolaylığı Ajanı Claude Sonnet 5.5 üzerinde, Yaratıcılık Ajanı Claude Fable 5.2 üzerinde çalışır. Üç farklı model, üç farklı bakış açısı.

Aynı, anonimleştirilmiş ekran görüntülerini görürler. Site hiçbir zaman adıyla değil, S01 ya da S02 diye anılır. Hiçbir ajan diğerlerinin puanlarını görmez. Sonuç, jüri üyelerine verilen yazılı bir ön analizdir. İşleyeni, dikkat çekeni ve gerçek sitede kontrol edilecek soruları belirtir.

Neyi görmüyorlar

Bir ajan yalnızca durağan görüntüler görür. Bir siteyi oluşturan şeylerin önemli bir kısmı eksik kalır:

  • animasyonlar, geçişler ve ritimleri;
  • gerçek üzerine gelme, tıklama ve kaydırma;
  • bir sayfadan diğerine gezinme, menüler, formlar;
  • siteyi kullanırken hızın ya da yavaşlığın hissi.

İlk oturum bunu açıkça gösterdi. 16 sitenin 8’ini ajanlar ekran görüntülerinden değerlendiremedi. Dördü bir 3D yükleme ekranında takılı kaldı, ikisi bot karşıtı bir sayfa döndürdü, ikisi görüntü almak için fazla yavaştı. Siteyi açan bir insan bekler, tıklar ve gerçekten arkasında ne olduğunu görür.

Yine de neden tutuyoruz

  • Hiçbir şeyi unutmamak. Ön analiz her site için aynı noktaları gözden geçirir. Jüri üyesinin gün sonunda bile gözünün önünde bir liste vardır.
  • Bağımsızlığa yardım etmek. Ajanlar ne sitenin adını ne de yapan stüdyoyu bilir. Okumaları bir itibardan etkilenmez. Jüri üyesi onu kendi izlenimiyle karşılaştırabilir.
  • Bakışları çaprazlamak. Üç ajan hemfikir olmadığında bu bir işarettir. Jüri üyesi nereye daha yakından bakacağını bilir.

İnsan karar verir

Jüri üyeleri ön analizi okur, sonra gerçek siteyi açar ve tasarımı, kullanım kolaylığını, yaratıcılığı ve içeriği gözle puanlar. Puanları ön analizin yerini alır, ona eklenmez. Bir ajan yanılmışsa, hatasının skor üzerinde hiçbir etkisi olmaz.

Yapay zekâ iyi bir okuma asistanıdır. Jüri üyesi değildir.