Google Research:生成AIで「未来対応型」スキルを評価する新手法
Google/DeepMind
Google Researchはニューヨーク大学と協力し、Vantageという研究実験を開発しました。これは生成AIを使用して、批判的思考やコラボレーションなどの「未来対応型」スキルを評価するものです。AIスコアリングシステムは人間の専門家評価と一致し、このプラットフォームは現在、英語を話す高校生と大学生向けにGoogle Labsで利用可能です。
Google Researchはニューヨーク大学との協力のもと、批判的思考、協調性、創造的思考といった「未来対応」スキルを評価するために生成AIを活用した研究実験「Vantage」を発表しました。Vantageは学習者をAIアバターとの動的な多人数対話に参加させてタスクを完了させ、同時にExecutive LLM(大規模言語モデル)が対話を誘導して評価情報を収集します。その後、AI評価者がルーブリックに基づいて対話を分析し、スコアと定性的なフィードバックを含む詳細なスキルマップを提供します。18歳から25歳の188名のテスターを対象とした研究では、AI評価者のスコアは人間の専門家との一致度が評価者間信頼性と同等であることが示されました。スタートアップ企業OpenMicとの創造的タスクに関する別の研究でも、AIと人間によるスコアリングの間に高い相関が確認されました。Vantageは現在、Google Labsで英語によるサインアップが可能です。
出典: Google Research —
原文
