Suorita AI-työkuormia millä tahansa pilvellä Hugging Face Storage -palvelulla: nolla egress-maksua SkyPilotin avulla

Hugging Face ja SkyPilot-projekti ovat julkistaneet integraation, jonka avulla malleja ja datasetteja voidaan tallentaa Hugging Face Hubiin, ja laskentatehtävät (koulutus, hienosäätö, päättely) voidaan suorittaa missä tahansa pilvessä tai klusterissa SkyPilotin kautta. Tietojen liittämiseen käytetään hf://-skeemaa, eikä tietojen lukemisesta peritä egress-maksua: Hugging Face Storage ei veloita lähtevästä liikenteestä eikä CDN:stä. Tämä mahdollistaa tietojen päällekkäisyyden välttämisen jokaisella pilvipalveluntarjoajalla ja siihen liittyvien kustannusten vähentämisen. Tallennustilan perustana on Xet-teknologia, jossa on sisällön tason deduplikointi: inkrementaalisissa tarkistuspisteissä siirretään vain muuttuneet osiot. Integraatio tukee sekä liittämistä (MOUNT) FUSE:n kautta että kopiointia (COPY). Autentikointiin käytetään HF_TOKENia. Vertailutestissä, jossa hienosäädettiin Qwen/Qwen3.5-4B-mallia AWS:ssä, GCP:ssä ja Lambdassa, malli ladattiin noin 30 sekunnissa ja tarkistuspisteet kirjoitettiin nopeudella 112–168 megatavua sekunnissa. Ratkaisu on täysin avoin: SkyPilot, hf-mount ja huggingface_hub ovat avoimen lähdekoodin.