Në Toprova, çdo uebfaqe kalon fillimisht para tre agjentëve IA, pastaj para tre jurorëve njerëzorë. Llogariten vetëm notat e jurorëve. Shpesh na pyesin pse i mbajmë të dyja. Ja përgjigjja.
Çfarë bëjnë agjentët
Të tre agjentët punojnë secili më vete. Agjenti Drejtim artistik punon me Claude Opus 5.5, Agjenti Përdorshmëri me Claude Sonnet 5.5, Agjenti Krijim me Claude Fable 5.2. Tre modele të ndryshme, tre këndvështrime të ndryshme.
Ata shohin të njëjtat pamje ekrani, të anonimizuara. Uebfaqja quhet S01 ose S02, kurrë me emrin e saj. Asnjë agjent nuk i sheh notat e të tjerëve. Rezultati është një paraanalizë e shkruar, që u jepet jurorëve. Ajo shënon çfarë funksionon, çfarë nuk shkon dhe pyetjet që duhen kontrolluar në uebfaqen e vërtetë.
Çfarë nuk shohin
Një agjent sheh vetëm imazhe statike. I mungon një pjesë e mirë e asaj që e bën një uebfaqe:
- animacionet, tranzicionet dhe ritmi i tyre;
- kalimi me miun, klikimi dhe lëvizja e vërtetë;
- navigimi nga një faqe te tjetra, menytë, formularët;
- ndjesia e shpejtësisë, ose e ngadalësisë, kur e përdor uebfaqen.
Sesioni i parë e tregoi qartë. Nga 16 uebfaqe, agjentët nuk mundën të gjykonin 8 prej tyre nga pamjet e ekranit. Katër mbetën të bllokuara në një ekran ngarkimi 3D, dy kthenin një faqe kundër robotëve, dy ishin shumë të ngadalta për kapjen. Një njeri që e hap uebfaqen pret, klikon dhe sheh çfarë ka vërtet pas saj.
Pse i mbajmë megjithatë
- Të mos harrojmë asgjë. Paraanaliza i kontrollon të njëjtat pika për çdo uebfaqe. Jurori ka një listë para syve, edhe në fund të ditës.
- Të ndihmojmë pavarësinë. Agjentët nuk e dinë as emrin e uebfaqes, as studion që e ka bërë. Leximi i tyre nuk ndikohet nga një reputacion. Jurori mund ta krahasojë me përshtypjen e vet.
- Të kryqëzojmë vështrimet. Kur të tre agjentët nuk pajtohen, ky është një sinjal. Jurori e di ku të shikojë më nga afër.
Njeriu vendos
Jurorët lexojnë paraanalizën, pastaj hapin uebfaqen e vërtetë dhe vlerësojnë me sy dizajnin, përdorshmërinë, kreativitetin dhe përmbajtjen. Notat e tyre e zëvendësojnë paraanalizën, nuk i shtohen asaj. Nëse një agjent ka gabuar, gabimi i tij nuk ka asnjë efekt në pikë.
IA është një ndihmëse e mirë leximi. Ajo nuk është juror.