La Toprova, fiecare site trece mai întâi prin trei agenți IA, apoi prin trei membri umani ai juriului. Contează doar notele juriului. Ne întreabă adesea de ce păstrăm ambele. Iată răspunsul.
Ce fac agenții
Cei trei agenți lucrează fiecare separat. Agentul Direcție artistică rulează pe Claude Opus 5.5, Agentul Ergonomie pe Claude Sonnet 5.5 și Agentul Creație pe Claude Fable 5.2. Trei modele diferite, trei unghiuri diferite.
Văd aceleași capturi, anonimizate. Site-ul se numește S01 sau S02, niciodată pe numele lui. Niciun agent nu vede notele celorlalți. Rezultatul este o pre-analiză scrisă, predată juriului. Ea notează ce funcționează, ce scârțâie și întrebările de verificat pe site-ul real.
Ce nu văd
Un agent vede doar imagini statice. Îi lipsește o bună parte din ce face un site:
- animațiile, tranzițiile și ritmul lor;
- trecerea mouse-ului, clicul și derularea reale;
- navigarea de la o pagină la alta, meniurile, formularele;
- senzația de viteză sau de lentoare la folosirea site-ului.
Prima sesiune a arătat-o limpede. Din 16 site-uri, agenții nu au putut judeca 8 pornind de la capturi. Patru rămâneau blocate pe un ecran de încărcare 3D, două returnau o pagină antibot și două erau prea lente pentru captură. O persoană care deschide site-ul așteaptă, dă clic și vede ce se află cu adevărat în spate.
De ce îi păstrăm totuși
- Să nu uităm nimic. Pre-analiza trece în revistă aceleași puncte pentru fiecare site. Membrul juriului are o listă în față, chiar și la sfârșitul zilei.
- Să ajute independența. Agenții nu cunosc nici numele site-ului, nici studioul care l-a făcut. Citirea lor nu se lasă influențată de o reputație. Membrul juriului o poate confrunta cu propria impresie.
- Să încrucișăm privirile. Când cei trei agenți nu sunt de acord, este un semnal. Membrul juriului știe unde să se uite mai îndeaproape.
Omul decide
Membrii juriului citesc pre-analiza, apoi deschid site-ul real și notează după ochi designul, ergonomia, creativitatea și conținutul. Notele lor înlocuiesc pre-analiza, nu se adaugă la ea. Dacă un agent a greșit, greșeala lui nu are niciun efect asupra scorului.
IA este o bună asistentă de lectură. Nu este un membru al juriului.