Google Research: New Methodology for Assessing 'Future Skills' Using Generative AI
Google/DeepMind
The Google Research team, in collaboration with New York University, presented the Vantage research experiment, which uses generative AI to assess 'future skills' such as critical thinking and collaboration. The results showed that AI assessor ratings are comparable to those of human experts. Vantage is available on Google Labs.
गूगल रिसर्च ने वैंटेज (Vantage) पेश किया है, जो जनरेटिव AI की मदद से 'भविष्य के कौशल' का आकलन करने के लिए एक शोध प्रयोग है। न्यूयॉर्क विश्वविद्यालय के शिक्षकों और शोधार्थियों के साथ साझेदारी में विकसित, वैंटेज हाईस्कूल और कॉलेज के छात्रों के लिए डिज़ाइन किया गया है। यह प्लेटफॉर्म नियंत्रित वातावरण में AI अवतारों के साथ बातचीत का अनुकरण करता है। उपयोगकर्ता खुले परिदृश्यों में प्रवेश करते हैं, जैसे बहस की तैयारी या किसी रचनात्मक विचार की प्रस्तुति। एक कार्यकारी भाषा मॉडल (Executive LLM) गतिशील रूप से बातचीत का विश्लेषण करता है और मूल्यांकन के लिए पर्याप्त जानकारी प्राप्त करने हेतु कुछ चुनौतियाँ—आपत्तियाँ, संघर्ष—पेश करता है। कार्य पूरा होने पर, एक AI विश्लेषक प्रतिलेख (transcript) की जाँच करता है और शैक्षणिक रूब्रिक्स (rubrics) के अनुसार अंक प्रदान करता है, उपयोगकर्ता को कौशल का दृश्य पैमाना और गुणवत्तापूर्ण प्रतिक्रिया (feedback) देता है। 188 स्वयंसेवकों (18-25 वर्ष, अमेरिका) के साथ एक संयुक्त अध्ययन में, AI विश्लेषक और न्यूयॉर्क विश्वविद्यालय के विशेषज्ञों के मूल्यांकन की तुलना की गई। AI और विशेषज्ञों के बीच सहमति दो मानव विशेषज्ञों के बीच जितनी ही थी। साथ ही, OpenMic कंपनी के साथ एक अध्ययन किया गया: AI विश्लेषक ने 180 छात्रों के रचनात्मक कार्यों (पात्रों के साथ साक्षात्कार, लेख) का मूल्यांकन किया—विशेषज्ञों के मूल्यांकन के साथ उच्च सहसंबंध (correlation) पाया गया। वैंटेज अब Google Labs पर पंजीकरण के लिए उपलब्ध है और वर्तमान में अंग्रेजी में काम करता है। डेवलपर्स सिमुलेशन से वास्तविक बातचीत में कौशल के हस्तांतरणीयता (transferability) के साथ-साथ सिम्युलेटेड वातावरण में अभ्यास की प्रभावशीलता पर आगे शोध करने की योजना बना रहे हैं।
स्रोत: Google Research —
मूल