Inkling: Mô hình Mã nguồn Mở từ Thinking Machines Lab
Thinking Machines Lab, do Mira Murati thành lập, đã phát hành mô hình đầu tiên có trọng số mở — Inkling. Đây là mô hình biến áp hỗn hợp chuyên gia đa phương thức với 975 tỷ tham số (41 tỷ tham số hoạt động). Mô hình được phân phối theo giấy phép Apache-2.0.
Thinking Machines Lab, do cựu Giám đốc Công nghệ (CTO) của OpenAI là Mira Murati thành lập, đã công bố mô hình mã nguồn mở đầu tiên của họ — Inkling. Đây là một mô hình transformer đa phương thức sử dụng kiến trúc Mixture-of-Experts, với tổng cộng 975 tỷ tham số, trong đó có 41 tỷ tham số hoạt động. Mô hình được huấn luyện trên 45 nghìn tỷ token, bao gồm văn bản, hình ảnh, âm thanh và video, và được phân phối theo giấy phép Apache-2.0. Công ty cũng công bố một phiên bản nhỏ hơn, Inkling-Small (276 tỷ tham số, 12 tỷ hoạt động), nhưng trọng số của nó sẽ được phát hành sau, khi quá trình kiểm thử hoàn tất. Các nhà phát triển nhấn mạnh rằng Inkling không phải là mô hình tiên tiến hàng đầu (frontier model), mà được thiết kế để tinh chỉnh thông qua nền tảng Tinker của họ. Mô hình này cho thấy khả năng cạnh tranh với các mô hình mã nguồn mở từ Trung Quốc và Hoa Kỳ, chẳng hạn như NVIDIA Nemotron và Gemma 4. Tin tức cũng bao gồm các ví dụ về yêu cầu API tới mô hình để tạo SVG và mô tả hình ảnh.
Nguồn: Simon Willison —
bản gốc
