В Toprova всеки сайт минава първо пред трима ИИ агенти, после пред трима души от журито. Броят се само оценките на журито. Често ни питат защо пазим и двете. Ето отговорът.

Какво правят агентите

Тримата агенти работят всеки за себе си. Агентът Артистична насока работи на Claude Opus 5.5, Агентът Удобство на Claude Sonnet 5.5, Агентът Творчество на Claude Fable 5.2. Три различни модела, три различни ъгъла.

Те виждат едни и същи снимки на екрана, анонимизирани. Сайтът се казва S01 или S02, никога по име. Никой агент не вижда оценките на другите. Резултатът е писмен предварителен анализ, предаден на журито. Той отбелязва кое работи, кое закача и въпросите за проверка в истинския сайт.

Какво не виждат

Един агент вижда само неподвижни изображения. Липсва му голяма част от онова, което прави един сайт:

  • анимациите, преходите и техният ритъм;
  • реалното посочване, кликване и превъртане;
  • навигацията от страница на страница, менютата, формулярите;
  • усещането за скорост или за бавност, когато се ползва сайтът.

Първата сесия го показа ясно. От 16 сайта агентите не успяха да преценят 8 по снимките. Четири оставаха блокирани на екран за зареждане в 3D, два връщаха страница срещу роботи, два бяха твърде бавни за заснемане. Човек, който отвори сайта, чака, кликва и вижда какво има всъщност зад него.

Защо ги пазим въпреки това

  • Да не се забрави нищо. Предварителният анализ преглежда едни и същи точки за всеки сайт. Членът на журито има списък пред очите си, дори в края на деня.
  • Да помага на независимостта. Агентите не знаят нито името на сайта, нито студиото, което го е направило. Прочитът им не се влияе от репутация. Членът на журито може да го съпостави със собственото си впечатление.
  • Да се кръстосат погледите. Когато тримата агенти не са съгласни, това е сигнал. Членът на журито знае къде да погледне по-отблизо.

Човекът решава

Членовете на журито четат предварителния анализ, после отварят истинския сайт и оценяват на око дизайна, удобството, креативността и съдържанието. Техните оценки заместват предварителния анализ, не се добавят към него. Ако агент е сгрешил, грешката му няма никакво влияние върху резултата.

ИИ е добър помощник при четене. Той не е член на журито.