Tencent

来自以下厂商的最新 AI 新闻、模型与发布: Tencent. ['AI Navigator+', 'GR', 'Hunyuan', 'HUNYUAN', 'Hunyuan 3', 'Hunyuan 3D', 'Hunyuan 3 (混元3)', 'Hunyuan Hy3', 'Hunyuan T1I', 'Hunyuan T1P', 'Hunyuan T1R', 'Hunyuan-TurboS', 'HunyuanVideo', 'HunyuanVideo 1.5', 'Hy2', 'Hy3', 'Hy3 (free)', 'Hy-Embodied-0.5-VLA', 'Hy-Embodied-RxBrain-1.0', 'Hy-Embodied-VLM-1.0', 'Hyra', 'Hyra-1.0', 'Marvis', 'Miora', 'not specified', 'Robotic Composition Model', 'T1', 'Tencent Hunyuan', 'WeLM', 'WorkBuddy', 'Yuanbao', '腾讯云 (Tencent Cloud)']

模型 🇺🇸

从GPT-2到gpt-oss:架构改进分析及与Qwen3的对比

OpenAI发布了自2019年以来的首批开源权重模型——gpt-oss-120b和gpt-oss-20b。文章分析了与GPT-2相比的关键架构变化:去除dropout、将绝对位置嵌入替换为旋转位置编码(RoPE)、从GELU激活函数转向SwiGLU、引入混合专家模型(MoE)和分组查询注意力(GQA)。此外,还讨论了在单GPU上运行的MXFP4优化以及与Qwen3和GPT-5的对比。

OpenAIOpenAI Alibaba/QwenAlibaba/Qwen MetaMeta Google/DeepMindGoogle/DeepMind AI21 LabsAI21 Labs TencentTencent
Sebastian Raschka27.07 · 18:03
最新新闻