Google Research: New Methodology for Assessing 'Future Skills' Using Generative AI

Google Research đã giới thiệu Vantage - một thí nghiệm nghiên cứu để đánh giá "kỹ năng tương lai" bằng AI sinh tạo. Được phát triển với sự hợp tác của các nhà giáo dục và nhà nghiên cứu tại Đại học New York, Vantage hướng đến đối tượng học sinh trung học và sinh viên đại học. Nền tảng này mô phỏng các cuộc trò chuyện với hình đại diện AI trong môi trường có kiểm soát. Người dùng bước vào các tình huống mở, chẳng hạn như chuẩn bị tranh luận hoặc trình bày ý tưởng sáng tạo. Mô hình ngôn ngữ điều hành (Executive LLM) phân tích động diễn biến cuộc trò chuyện và đưa ra các thử thách nhất định - phản đối, xung đột - để thu thập đủ thông tin cho việc đánh giá. Sau khi hoàn thành nhiệm vụ, bộ phân tích AI xem xét biên bản và chấm điểm theo các tiêu chí sư phạm, cung cấp cho người dùng thang đo kỹ năng trực quan và phản hồi định tính. Trong một nghiên cứu chung với 188 tình nguyện viên (18-25 tuổi, Hoa Kỳ), điểm số từ bộ phân tích AI và các chuyên gia của Đại học New York được so sánh. Mức độ nhất quán giữa AI và chuyên gia tương đương như giữa hai chuyên gia là con người. Một nghiên cứu cũng được thực hiện với công ty OpenMic: bộ phân tích AI đánh giá các tác phẩm sáng tạo của 180 sinh viên (phỏng vấn nhân vật, bài báo) - tương quan với điểm số của chuyên gia là cao. Vantage hiện có sẵn để đăng ký trên Google Labs và hiện hoạt động bằng tiếng Anh. Các nhà phát triển lên kế hoạcho các nghiên cứu sâu hơn về khả năng chuyển giao kỹ năng từ mô phỏng sang tương tác thực tế, cũng như đánh giá hiệu quả của việc luyện tập trong môi trường mô phỏng.