谷歌研究：用生成式AI评估面向未来技能的新方法

谷歌研究部门与纽约大学合作推出了Vantage，这是一项利用生成式人工智能评估“面向未来”技能（如批判性思维、协作能力和创造性思维）的研究实验。Vantage将学习者置于与AI虚拟角色进行的动态多方对话中完成任务，同时由执行型大语言模型（Executive LLM）引导对话以收集评估信息。随后，AI评估器（AI Evaluator）根据评估标准对对话进行分析，并提供包含分数和定性反馈的详细技能图谱。在一项涵盖188名18至25岁测试者的研究中，AI评估器给出的分数与人类专家评分的一致度达到了评分者间信度水平。另一项与初创公司OpenMic合作开展的创意任务研究也显示，AI评分与人类评分高度相关。目前，Vantage已在谷歌实验室（Google Labs）开放英文版注册。