Maxio Tech

Tin tức, mô hình và bản phát hành AI mới nhất từ Maxio Tech.

Ổ SSD AI: Sự chuyển dịch mô hình lưu trữ trong suy luận mô hình ngôn ngữ lớn (LLM)

Hạ tầng AI đang vượt ra ngoài sức mạnh tính toán thô, với trạng thái suy luận trở thành tài nguyên hạng nhất. Các hệ thống như Mooncake của Moonshot AI và nền tảng CMX của NVIDIA đang tích hợp lưu trữ vào đường dẫn dữ liệu thời gian thực để tạo token. Sự chuyển dịch này thúc đẩy sự xuất hiện của các ổ SSD chuyên dụng cho AI, được thiết kế để có độ trễ thấp, độ bền cao và quản lý dữ liệu thông minh.

Moonshot AIMoonshot AI NVIDIANVIDIA HuaweiHuawei Maxio TechMaxio Tech
QbitAI 量子位07.08 · 07:02

HBM chưa đủ, SSD AI sẵn sàng bùng nổ tăng trưởng

Khi suy luận mô hình ngôn ngữ lớn chạm trần dung lượng và I/O, SSD đang chuyển từ lưu trữ tĩnh sang đường dẫn dữ liệu thời gian thực của suy luận, trở thành tầng lưu trữ chính thức sau HBM, VRAM và DRAM. Ngành đang chứng kiến hai hướng chính: SSD doanh nghiệp tăng cường tải AI và SSD tham gia suy luận trực tiếp lên lịch dữ liệu, với các công ty như Phison, Longsys và liên minh Maxio-Infplane dẫn đầu.

Moonshot AIMoonshot AI NVIDIANVIDIA HuaweiHuawei Maxio TechMaxio Tech
InfoQ 中国07.08 · 06:02
Tin mới