Alibaba Qwen ra mắt Qwen3-Coder: mô hình mã hóa có khả năng tác nhân mạnh nhất

Alibaba Qwen vừa ra mắt Qwen3-Coder, mô hình mã nguồn có tính tác tử (agentic) mạnh mẽ nhất của họ. Phiên bản lớn nhất, Qwen3-Coder-480B-A35B-Instruct, là mô hình Mixture-of-Experts với 480 tỷ tham số (480B) và 35 tỷ tham số hoạt động (35B), hỗ trợ nguyên bản 256 nghìn token (256K) và có thể mở rộng lên tới 1 triệu token (1M) bằng phép ngoại suy. Mô hình đạt kết quả tiên tiến nhất (state-of-the-art, SOTA) trong số các mô hình mã nguồn mở trên các tác vụ Lập trình Tác tử (Agentic Coding), Duyệt web Tác tử (Agentic Browser-Use) và Sử dụng Công cụ Tác tử (Agentic Tool-Use), tương đương với Claude Sonnet 4. Quá trình tiền huấn luyện sử dụng 7,5 nghìn tỷ token (7,5T) (với 70% tỷ lệ mã nguồn), hỗ trợ nguyên bản ngữ cảnh 256K (có thể mở rộng lên 1M thông qua YaRN), và tận dụng dữ liệu tổng hợp từ Qwen2.5-Coder. Giai đoạn hậu huấn luyện bao gồm việc mở rộng quy mô Học tăng cường Mã nguồn (Code RL) trên các tác vụ thực tế đa dạng và Học tăng cường đường chân trời dài (Agent RL) sử dụng một hệ thống có khả năng mở rộng, chạy song song 20.000 môi trường trên Alibaba Cloud. Qwen3-Coder đạt SOTA trên SWE-Bench Verified trong số các mô hình mã nguồn mở mà không cần mở rộng quy mô theo thời gian kiểm thử (test-time scaling). Alibaba cũng đã mã nguồn mở Qwen Code, một công cụ dòng lệnh (CLI) dành cho lập trình tác tử (forked từ Gemini Code), và hỗ trợ tích hợp với Claude Code và Cline. Mô hình có thể truy cập thông qua API của Alibaba Cloud Model Studio.