EvoLib: Biến trải nghiệm thành kiến thức tiến hóa

EvoLib là một framework đến từ Microsoft Research cho phép các hệ thống AI học hỏi từ kinh nghiệm trong quá trình suy luận mà không cần nhãn thực tế (ground-truth labels) hoặc cập nhật mô hình. Không giống như các hệ thống bộ nhớ truyền thống lưu trữ trải nghiệm thô một cách tĩnh, EvoLib biến đổi các lần thử nghiệm trong quá khứ thành các kỹ năng có thể tái sử dụng và những hiểu biết phản ánh. Các đơn vị tri thức này được liên tục hợp nhất với tri thức tương tự đã có để trở nên tổng quát hơn, và mỗi đơn vị được gán trọng số dựa trên tác động dài hạn của nó đối với các nhiệm vụ trong tương lai. Framework này đã được thử nghiệm trên các nhiệm vụ suy luận toán học, hiệu suất mã và ra quyết định, luôn vượt trội hơn các phương pháp bộ nhớ dựa trên truy xuất hàng đầu với việc sử dụng token hiệu quả hơn. EvoLib cũng cho thấy hiệu suất mạnh mẽ qua các thứ tự nhiệm vụ ngẫu nhiên, cho thấy khả năng ứng dụng thực tế trong các tình huống thực tế nơi các nhiệm vụ xuất hiện một cách tùy ý. Hệ thống đạt được mức tăng hiệu suất cao hơn khi tăng cường tính toán trong quá trình suy luận so với việc mở rộng tính toán một cách cô lập và các phương pháp dựa trên bộ nhớ khác. Mã nguồn và các thử nghiệm được công bố công khai trên GitHub.