AI芯片

NVIDIA开源Nemotron 3系列模型，融合Mamba-Transformer混合架构

发布时间：2026年07月22日 16:00:00

NVIDIA开源Nemotron 3 Super和Nemotron 3 Ultra模型，采用混合Mamba-Transformer架构，专为Agentic Reasoning智能体推理设计。

模型发布

NVIDIA发布两款开源模型，进一步巩固其在AI开源生态中的地位：

采用混合架构设计，融合状态空间模型（SSM）与传统Transformer：

引入稀疏MoE（专家混合）架构，在保持模型规模的同时提升推理效率。不同专家处理不同类型的任务，实现高效的计算资源分配。

Nemotron 3系列专为Agentic Reasoning设计，支持：

模型优化了低延迟响应能力，适合实时对话场景，如智能助手、客服机器人等。

支持文本、图像、语音等多种模态的处理和理解，为多模态应用提供强大支持。

通过混合架构和MoE设计，Nemotron 3在保持高性能的同时，显著降低推理成本。相比传统Transformer模型，推理效率提升40%以上。

支持超长上下文窗口，能够处理百万级token的输入，适合文档理解、代码分析等场景。

在代码生成和理解方面表现优异，支持多种编程语言，能够完成复杂的编程任务。

NVIDIA通过开源模型进一步巩固其在AI生态中的核心地位，为开发者提供更多选择。开源社区可以基于Nemotron 3进行二次开发和定制。

Nemotron 3系列与NVIDIA GPU硬件深度优化，能够充分发挥GPU的计算能力。同时支持NVIDIA的CUDA生态和优化库。

NVIDIA提供企业级支持和服务，帮助企业部署和优化Nemotron 3系列模型。

NVIDIA的开源策略加剧了AI模型的开源竞争，推动整个行业向更开放、更透明的方向发展。

混合架构和MoE设计可能成为未来AI模型的主流技术方向，影响行业技术标准的制定。

通过开源模型，NVIDIA能够吸引更多开发者和企业加入其生态，构建更完善的AI生态系统。

NVIDIA表示将继续投入AI模型的研发和开源，计划在未来推出更多优化版本和专用模型，满足不同场景的需求。