AI资讯

腾讯开源Hy4预览版:770B总参数49B激活,超长上下文居开源第一梯队

发布时间:2026年10月07日 10:00:00

10月7日,腾讯开源混元Hy4预览版:770B总参数、49B激活的MoE架构,采用超长上下文设计,官方称其在编程、办公、科研等多项能力上位居国内开源模型第一梯队。这是腾讯混元系列首次推出Hy4代号模型,权重在开源社区开放,开发者可通过HuggingFace等渠道下载。预览版聚焦核心骨架能力验证,正式版将随后发布。在开源大模型竞争白热化的当下,腾讯以「超长上下文」+「通用能力均衡」切入,试图在DeepSeek、Qwen等强势模型之外建立差异化生态位;同时Hy4的推理效率优化也受到关注,49B激活参数意味着部署成本显著低于同规模满参模型。


腾讯的「超长上下文」打法

10月7日,腾讯开源混元旗舰模型 Hy4预览版。这只模型采用Mixture-of-Experts(MoE)架构,总参数770B、激活参数49B,主打超长上下文与编程、办公、科研三大场景的均衡能力,官方口径将其列入「国内开源模型第一梯队」。

与满参模型动辄千亿激活不同,Hy4的49B激活参数意味着推理时只用到固定规模的计算量——部署一张或几张高端GPU即可运行,这在训练无缝接入企业私有化部署的场景中具备明显成本优势。

维度Hy4 参数
架构MoE(专家混合)
总参数770B
激活参数49B
上下文超长上下文(专项优化)
主攻场景编程 / 办公 / 科研
发布形态预览版,随后发布正式版

三个主攻场景拆解

  • 编程:Hy4在代码生成、补全、推理上做了针对性训练,配合MCP生态可接入主流IDE与代码仓库,实现仓库级Agent编程。
  • 办公:面向文档理解、表格处理、知识库问答,强调在长文档中的精确引用与结构化输出。
  • 科研:针对论文阅读、实验设计、数学推导优化,支持处理大篇幅的公式与文献。

为什么强调「超长上下文」

2026年开源大模型的竞争,已经从「谁能写得更漂亮」转向「谁能把一整本书、一整份代码库装进模型大脑」。Hy4把超长上下文作为核心卖点,意图覆盖法律文书、科研文献、企业知识库这类动辄几十万Token的重量级场景。相比同等能力的模型,端到端部署Hy4有望在保持长文本理解的同时,把单位Token的推理算力降到更优。

预览版的意义:先验证骨架

腾讯选择先发「预览版」,意在让社区先用起来、反馈问题,再据此打磨正式版。这种「边开源边迭代」的做法,在近期国产大模型圈越来越常见——既积累生态,也避免一次性发布带来的口碑风险。

结语

Hy4的发布,让2026年国产开源大模型的竞争再添一员重量级玩家。在DeepSeek以极致性价比、Qwen以全尺寸矩阵各自圈地的背景下,腾讯用「超长上下文 + 均衡通用能力」切入差异化生态位。对开发者而言,多一个770B级别的开源选择,就意味着更多自主可控与成本优化的空间。