Запускайте ИИ-нагрузки на любом облаке с хранилищем Hugging Face: нулевой исходящий трафик через SkyPilot
Hugging Face
Hugging Face и SkyPilot объединились, чтобы позволить запускать ИИ-нагрузки на любом облаке, храня модели и наборы данных на Hugging Face Hub без платы за исходящий трафик. Пользователи могут смонтировать Bucket Hugging Face или репозиторий Hub в задачу SkyPilot через единый URL hf:// и запустить её на любом GPU-кластере среди более чем 20 облаков, Kubernetes, Slurm или локально. Новый бэкенд store: hf использует FUSE-монтирование для ленивого чтения, дедупликацию на основе Xet для контрольных точек и отсутствие платы за чтение данных.
Hugging Face и SkyPilot совместно объявили о новой интеграции, которая позволяет выполнять рабочие нагрузки ИИ в любом облаке, сохраняя данные на хранилище Hugging Face с нулевой стоимостью исходящего трафика. Пользователи могут подключить корзину Hugging Face Bucket (чтение-запись) или любой репозиторий модели/набора данных/пространства (только чтение) к задаче SkyPilot, используя единый URL
Показать ещё ↓
Источник: Hugging Face blog —
оригинал