凤凰体育- 凤凰体育直播- APP阿里开源下一代模型架构Qwen3-Next模型训练及推理性价比创新高

2025-09-15

  凤凰体育,凤凰体育直播,凤凰体育APP

凤凰体育- 凤凰体育直播- 凤凰体育APP阿里开源下一代模型架构Qwen3-Next模型训练及推理性价比创新高

  9月12日,阿里通义发布下一代基础模型架构Qwen3-Next。Qwen3-Next针对大模型在上下文长度和总参数两方面不断扩展(Scaling)的未来趋势而设计,采用全新的高稀疏MoE架构,并对经典Transformer核心组件进行了重构,创新线性注意力和自研的门控注意力结合的混合注意力机制,实现了模型训练和推理的双重性价比突破。

  基于这一新架构,阿里通义“打样”了Qwen3-Next-80B-A3B系列模型,开源指令(Instruct)和推理(Thinking)两大模型版本。新模型总参数 80B 仅激活 3B,性能可媲美千问3旗舰版235B模型,模型计算效率大幅提升。Qwen3-Next训练成本较密集模型Qwen3-32B大降超90%,长文本推理吞吐量提升10倍以上,并可支持百万Tokens超长上下文。

地址:广东省广州市天河区88号 客服热线:400-123-4567 传真:+86-123-4567 QQ:1234567890

Copyright © 2012-2025 凤凰体育- 凤凰体育直播- 凤凰体育APP 版权所有 非商用版本