Tencent ведёт двойную ИИ-войну: помимо Hunyuan, WeLM от WeChat за четыре года доказал альтернативный путь
Tencent
Tencent развивает два направления в области ИИ: общеизвестный Hunyuan и менее заметный WeLM от команды WeChat. WeLM, разрабатываемый с 2020 года, представляет собой уникальную архитектуру, основанную на SparTA (Sparse Attention) для эффективного выполнения различных NLP-задач. Несмотря на меньший масштаб, WeLM демонстрирует конкурентоспособность и гибкость.
Tencent, один из китайских технологических гигантов, одновременно ведёт две линии разработки в сфере искусственного интеллекта. Помимо широко известной модели Hunyuan, команда WeChat создала собственную модель WeLM, которая за четыре года своего существования доказала жизнеспособность альтернативного подхода. WeLM основана на архитектуре SparTA (Sparse Attention), что позволяет ей эффективно справляться с широким спектром задач обработки естественного языка (NLP). В отличие от Hunyuan, WeLM не стремится быть универсальной гигантской моделью, а фокусируется на эффективности и специализации. Разработка WeLM велась с 2020 года, и за это время она показала, что даже при меньших ресурсах можно достичь высоких результатов. Этот дуализм стратегии Tencent отражает две философии развития ИИ: путь мощных универсальных моделей и путь более узких, но эффективных решений.
- Сокращения
- NLP = Natural Language Processing — обработка естественного языка
Источник: Tencent Hunyuan (GNews) —
оригинал
