Grote modellen keren terug naar de parameterrace: 2 biljoen wordt de standaard, 3 biljoen de volgende? - Sina Finance
Grote AI-modellen richten zich opnieuw op het aantal parameters als belangrijke concurrentiemetriek, waarbij 200 miljard parameters de standaard wordt voor topmodellen en er wordt gespeculeerd dat 300 miljard de volgende mijlpaal zou kunnen zijn. Naar verluidt schalen grote Chinese AI-bedrijven hun trainingsparameters op om concurrerend te blijven.
Het artikel van Sina Finance bespreekt een hernieuwde concurrentie tussen grote taalmodellen, die zich richt op het aantal parameters. Het merkt op dat modellen met ongeveer 200 miljard parameters de industriestandaard zijn geworden voor toonaangevende spelers, en er wordt gespeculeerd dat de volgende stap modellen zou kunnen betreffen die 300 miljard parameters bereiken. Het stuk suggereert dat deze trend wijst op een terugkeer naar schaalvergroting als primaire strategie voor het verbeteren van modelcapaciteiten, met implicaties voor rekenkracht en trainingskosten.
Bron: Moonshot Kimi (GNews) —
origineel