Na Toprově každý web prochází nejdřív třemi agenty AI a pak třemi lidskými porotci. Počítají se jen známky poroty. Často se nás ptají, proč ponecháváme obojí. Tady je odpověď.
Co agenti dělají
Tři agenti pracují každý zvlášť. Agent pro art direction běží na Claude Opus 5.5, agent pro použitelnost na Claude Sonnet 5.5 a agent pro tvorbu na Claude Fable 5.2. Tři různé modely, tři různé přístupy.
Vidí stejné snímky, anonymizované. Web se jmenuje S01 nebo S02, nikdy ne svým názvem. Žádný agent nevidí hodnocení ostatních. Výsledkem je písemná předběžná analýza, která se předá porotě. Shrnuje, co funguje, co skřípe, a otázky, které je třeba ověřit na skutečném webu.
Co nevidí
Agent vidí jen nehybné obrazy. Chybí mu velká část toho, co web tvoří:
- animace, přechody a jejich rytmus;
- skutečné přejetí myší, kliknutí a posouvání;
- procházení z jedné stránky na druhou, nabídky, formuláře;
- pocit rychlosti, nebo pomalosti, při používání webu.
První sezení to ukázalo jasně. Ze 16 webů nemohli agenti 8 posoudit ze snímků. Čtyři uvízly na 3D načítací obrazovce, dva vrátily stránku proti robotům a dva byly pro pořízení snímku příliš pomalé. Člověk, který web otevře, počká, klikne a uvidí, co se za tím doopravdy skrývá.
Proč je přesto ponechat
- Na nic nezapomenout. Předběžná analýza prochází u každého webu stejné body. Porotce má před sebou seznam, i na konci dne.
- Pomáhat nezávislosti. Agenti neznají ani název webu, ani studio, které ho vytvořilo. Jejich čtení se nenechá ovlivnit pověstí. Porotce ho může konfrontovat se svým vlastním dojmem.
- Křížit pohledy. Když se tři agenti neshodnou, je to signál. Porotce ví, kam se podívat blíž.
Rozhoduje člověk
Porotci si přečtou předběžnou analýzu, pak otevřou skutečný web a od oka ohodnotí design, použitelnost, kreativitu a obsah. Jejich známky předběžnou analýzu nahrazují, nepřičítají se k ní. Pokud se agent spletl, jeho chyba nemá na skóre žádný vliv.
AI je dobrý pomocník při čtení. Není porotcem.