Qwen2.5: حفلة من النماذج الأساسية!
Alibaba/Qwen
Meta
Mistral
OpenAI
Anthropic
DeepSeek
Microsoft
Google/DeepMind
فريق Qwen من شركة Alibaba يعلن عن الإصدار مفتوح المصدر لنماذج Qwen2.5 LLMs، بالإضافة إلى نماذج متخصصة في البرمجة (Qwen2.5-Coder) والرياضيات (Qwen2.5-Math). تتراوح النماذج من 0.5 مليار إلى 72 مليار معامل، وتم تدريبها مسبقًا على ما يصل إلى 18 تريليون رمز، مع تحسينات كبيرة في المعرفة والبرمجة والقدرات الرياضية. يتضمن الإصدار أيضًا نماذج API مثل Qwen-Plus و Qwen-Turbo.
أعلن فريق Qwen التابع لشركة Alibaba عن إصدار Qwen2.5، وهي عائلة من نماذج اللغة مفتوحة المصدر القائمة على وحدة فك الترميز فقط، إلى جانب النماذج المتخصصة Qwen2.5-Coder وQwen2.5-Math. تتوفر النماذج بأحجام تتراوح من 0.5 مليار إلى 72 مليار معلمة، وقد تم تدريبها مسبقًا على ما يصل إلى 18 تريليون رمز. يحقق Qwen2.5 نتائج MMLU تزيد عن 85%، وHumanEval تزيد عن 85%، وMATH تزيد عن 80%، ويدعم سياقًا يصل إلى 128 ألف رمز وتوليد يصل إلى 8 آلاف رمز، ويوفر دعمًا متعدد اللغات لأكثر من 29 لغة. تم تدريب Qwen2.5-Coder على 5.5 تريليون رمز من بيانات الأكواد البرمجية، بينما يدعم Qwen2.5-Math التفكير عبر سلسلة الأفكار (CoT) والتفكير عبر مخطط البرمجة (PoT) والتفكير عبر التنفيذ المتكرر للأدوات (TIR). كما يتم تقديم نماذج واجهة برمجة التطبيقات الرئيسية Qwen-Plus وQwen-Turbo. الإصداران 3 مليارات و72 مليار معلمة لا يخضعان لترخيص Apache 2.0.
المصدر: Alibaba Qwen —
الأصلي