Moonshot AI ra mắt Kimi K3: Đột phá về quy mô, hiệu suất và chi phí cho các mô hình tiên tiến của Trung Quốc

Moonshot AI, công ty khởi nghiệp Trung Quốc đứng sau trợ lý Kimi, vừa công bố mô hình tiên tiến mới nhất của mình, Kimi K3. Mô hình này được xây dựng trên kiến trúc Mixture-of-Experts (MoE) thưa thớt với tổng số 123B tham số, trong đó 44B tham số được kích hoạt cho mỗi token. Kimi K3 đạt kết quả hiện đại trên một số điểm chuẩn suy luận, bao gồm 94,1 trên AIME 2024, 89,2 trên GPQA Diamond và 79,1 trên MMLU-Pro. Nó cũng đạt 98,6 trên MATH-500 và 65,2 trên LiveCodeBench. Theo Moonshot AI, chi phí suy luận của Kimi K3 chỉ 0,7 nhân dân tệ cho mỗi triệu token đầu vào, tương đương khoảng 1 xu Mỹ, khiến nó rẻ hơn đáng kể so với các mô hình tương tự. Công ty tuyên bố mô hình này vượt trội so với o1 của OpenAI và R1 của DeepSeek trên một số chỉ số, đồng thời tiết kiệm chi phí hơn. Kimi K3 hỗ trợ cửa sổ ngữ cảnh 128K và ban đầu có sẵn thông qua API, với kế hoạch triển khai trên ứng dụng Kimi trong tương lai.