Toprova में हर वेबसाइट पहले तीन AI एजेंटों से और फिर तीन मानव ज्यूरी सदस्यों से गुज़रती है। केवल ज्यूरी के अंक गिने जाते हैं। हमसे अक्सर पूछा जाता है कि दोनों क्यों रखे हैं। यह रहा जवाब।
एजेंट क्या करते हैं
तीनों एजेंट अपनी-अपनी तरफ़ से काम करते हैं। आर्ट डायरेक्शन एजेंट Claude Opus 5.5 पर चलता है, उपयोग में आसानी एजेंट Claude Sonnet 5.5 पर और रचनात्मकता एजेंट Claude Fable 5.2 पर। तीन अलग मॉडल, तीन अलग नज़रिये।
वे एक जैसे, नाम छिपाए गए कैप्चर देखते हैं। वेबसाइट का नाम S01 या S02 होता है, कभी असली नाम नहीं। कोई एजेंट दूसरों के अंक नहीं देखता। नतीजा एक लिखित पूर्व-विश्लेषण होता है जो ज्यूरी को दिया जाता है। उसमें दर्ज होता है कि क्या काम करता है, क्या खटकता है और असली वेबसाइट पर कौन से सवाल जाँचने हैं।
वे क्या नहीं देख पाते
एजेंट केवल स्थिर छवियाँ देखता है। वेबसाइट को वेबसाइट बनाने वाली बहुत सी बातें उससे छूट जाती हैं:
- एनिमेशन, ट्रांज़िशन और उनकी लय;
- माउस का असली गुज़रना, क्लिक और स्क्रॉल;
- एक पेज से दूसरे पर नेविगेशन, मेन्यू, फ़ॉर्म;
- वेबसाइट इस्तेमाल करते समय तेज़ी या सुस्ती का एहसास।
पहले सत्र ने यह साफ़ कर दिया। 16 वेबसाइटों में से 8 को एजेंट कैप्चर से नहीं परख सके। चार 3D लोडिंग स्क्रीन पर अटकी रहीं, दो ने बॉट-रोधी पेज लौटाया और दो कैप्चर के लिए बहुत धीमी थीं। जो इंसान वेबसाइट खोलता है, वह इंतज़ार करता है, क्लिक करता है और देखता है कि असल में पीछे क्या है।
फिर भी उन्हें क्यों रखा जाए
- कुछ न भूलना। पूर्व-विश्लेषण हर वेबसाइट पर वही बिंदु दोहराता है। ज्यूरी सदस्य के सामने एक सूची होती है, दिन के अंत में भी।
- स्वतंत्रता में मदद। एजेंट न वेबसाइट का नाम जानते हैं, न उसे बनाने वाला स्टूडियो। उनकी पढ़ाई किसी प्रतिष्ठा से प्रभावित नहीं होती। ज्यूरी सदस्य उसे अपने खुद के प्रभाव से मिलाकर देख सकता है।
- नज़रों का मेल। जब तीनों एजेंट असहमत हों, तो यह एक संकेत है। ज्यूरी सदस्य जानता है कि कहाँ और नज़दीक से देखना है।
इंसान फ़ैसला करता है
ज्यूरी सदस्य पूर्व-विश्लेषण पढ़ते हैं, फिर असली वेबसाइट खोलते हैं और अपनी नज़र से डिज़ाइन, उपयोग में आसानी, रचनात्मकता और सामग्री को अंक देते हैं। उनके अंक पूर्व-विश्लेषण की जगह लेते हैं, उसमें जुड़ते नहीं। अगर किसी एजेंट से गलती हुई है, तो उसकी गलती का स्कोर पर कोई असर नहीं पड़ता।
AI पढ़ने में एक अच्छा सहायक है। वह ज्यूरी सदस्य नहीं है।