Στην Toprova, κάθε ιστότοπος περνά πρώτα από τρεις πράκτορες ΤΝ και μετά από τρία ανθρώπινα μέλη της επιτροπής. Μετρούν μόνο οι βαθμοί των μελών. Μας ρωτούν συχνά γιατί κρατάμε και τα δύο. Να η απάντηση.

Τι κάνουν οι πράκτορες

Οι τρεις πράκτορες δουλεύουν ο καθένας χωριστά. Ο Πράκτορας Καλλιτεχνικής διεύθυνσης λειτουργεί με Claude Opus 5.5, ο Πράκτορας Χρηστικότητας με Claude Sonnet 5.5, ο Πράκτορας Δημιουργίας με Claude Fable 5.2. Τρία διαφορετικά μοντέλα, τρεις διαφορετικές οπτικές.

Βλέπουν τα ίδια στιγμιότυπα, ανωνυμοποιημένα. Ο ιστότοπος ονομάζεται S01 ή S02, ποτέ με το όνομά του. Κανένας πράκτορας δεν βλέπει τους βαθμούς των άλλων. Το αποτέλεσμα είναι μια γραπτή προανάλυση, που παραδίδεται στα μέλη της επιτροπής. Επισημαίνει τι λειτουργεί, τι τραβά την προσοχή και τα ερωτήματα που πρέπει να ελεγχθούν στον πραγματικό ιστότοπο.

Τι δεν βλέπουν

Ένας πράκτορας βλέπει μόνο στατικές εικόνες. Του λείπει ένα μεγάλο μέρος όσων συνθέτουν έναν ιστότοπο:

  • τα animations, οι μεταβάσεις και ο ρυθμός τους·
  • το πραγματικό hover, το κλικ και η κύλιση·
  • η πλοήγηση από σελίδα σε σελίδα, τα μενού, οι φόρμες·
  • η αίσθηση ταχύτητας, ή βραδύτητας, όταν χρησιμοποιείς τον ιστότοπο.

Η πρώτη συνεδρία το έδειξε καθαρά. Από τους 16 ιστότοπους, οι πράκτορες δεν μπόρεσαν να κρίνουν τους 8 από τα στιγμιότυπα. Τέσσερις έμεναν κολλημένοι σε μια οθόνη φόρτωσης 3D, δύο επέστρεφαν μια σελίδα anti-bot, δύο ήταν πολύ αργοί για τη λήψη. Ένας άνθρωπος που ανοίγει τον ιστότοπο περιμένει, κάνει κλικ και βλέπει τι υπάρχει πραγματικά πίσω.

Γιατί τους κρατάμε παρ’ όλα αυτά

  • Για να μη ξεχνιέται τίποτα. Η προανάλυση περνά από τα ίδια σημεία για κάθε ιστότοπο. Το μέλος της επιτροπής έχει μια λίστα μπροστά του, ακόμη και στο τέλος της ημέρας.
  • Για να βοηθιέται η ανεξαρτησία. Οι πράκτορες δεν γνωρίζουν ούτε το όνομα του ιστότοπου ούτε το στούντιο που τον έφτιαξε. Η ανάγνωσή τους δεν επηρεάζεται από κάποια φήμη. Το μέλος της επιτροπής μπορεί να την αντιπαραβάλει με τη δική του εντύπωση.
  • Για να διασταυρώνονται οι ματιές. Όταν οι τρεις πράκτορες διαφωνούν, είναι ένα σήμα. Το μέλος της επιτροπής ξέρει πού να κοιτάξει πιο προσεκτικά.

Ο άνθρωπος αποφασίζει

Τα μέλη της επιτροπής διαβάζουν την προανάλυση, μετά ανοίγουν τον πραγματικό ιστότοπο και βαθμολογούν με το μάτι το σχεδιασμό, τη χρηστικότητα, τη δημιουργικότητα και το περιεχόμενο. Οι βαθμοί τους αντικαθιστούν την προανάλυση, δεν προστίθενται σε αυτήν. Αν ένας πράκτορας έκανε λάθος, το λάθος του δεν έχει καμία επίδραση στη βαθμολογία.

Η ΤΝ είναι μια καλή βοηθός ανάγνωσης. Δεν είναι μέλος της επιτροπής.