W Toprova każda strona trafia najpierw do trzech agentów AI, a potem do trzech jurorów. Liczą się tylko oceny jurorów. Często pytają nas, dlaczego zachowujemy oba etapy. Oto odpowiedź.

Co robią agenci

Trzej agenci pracują osobno. Agent dyrekcji artystycznej działa na Claude Opus 5.5, Agent ergonomii na Claude Sonnet 5.5, Agent kreacji na Claude Fable 5.2. Trzy różne modele, trzy różne spojrzenia.

Widzą te same zrzuty ekranu, zanonimizowane. Strona nazywa się S01 lub S02, nigdy swoją nazwą. Żaden agent nie widzi ocen pozostałych. Wynikiem jest pisemna wstępna analiza przekazana jurorom. Wskazuje, co działa, co przyciąga, i pytania do sprawdzenia na prawdziwej stronie.

Czego nie widzą

Agent widzi tylko nieruchome obrazy. Brakuje mu dużej części tego, co tworzy stronę:

  • animacji, przejść i ich rytmu;
  • prawdziwego najechania, kliknięcia i przewijania;
  • nawigacji z jednej strony na drugą, menu, formularzy;
  • poczucia szybkości lub powolności podczas korzystania ze strony.

Pokazała to wyraźnie pierwsza sesja. Spośród 16 stron agenci nie mogli ocenić 8 na podstawie zrzutów. Cztery utknęły na ekranie ładowania 3D, dwie zwracały stronę antybotową, dwie były zbyt wolne do zrobienia zrzutu. Człowiek, który otwiera stronę, czeka, klika i widzi, co naprawdę za nią stoi.

Po co je więc zachowywać

  • Niczego nie pominąć. Wstępna analiza przechodzi przez te same punkty dla każdej strony. Juror ma listę przed oczami, nawet pod koniec dnia.
  • Pomagać w niezależności. Agenci nie znają ani nazwy strony, ani studia, które ją zrobiło. Na ich odczyt nie wpływa żadna reputacja. Juror może skonfrontować go z własnym wrażeniem.
  • Zestawiać spojrzenia. Gdy trzej agenci się nie zgadzają, to sygnał. Juror wie, gdzie przyjrzeć się bliżej.

Decyduje człowiek

Jurorzy czytają wstępną analizę, potem otwierają prawdziwą stronę i oceniają na oko design, ergonomię, kreatywność i treść. Ich oceny zastępują analizę wstępną, nie dodają się do niej. Jeśli agent się pomylił, jego błąd nie ma żadnego wpływu na wynik.

AI jest dobrą asystentką do czytania. Nie jest jurorem.