开源
腾讯发布 Hy3 非预览版:295B 参数 MoE 开源模型
腾讯推出 295B 参数 MoE 开源模型 Hy3 非预览版,基准得分超越 GLM-5.1。
2026.07.06 · 周一约 2 分钟阅读
腾讯正式推出 Hy3 非预览版(non-preview)开源模型。该模型采用 MoE 架构,总参数达 295B,每次推理激活参数为 21B,并额外附带 3.8B 的 MTP(Multi-Token Prediction)层参数。这是继今年 4 月底 Hy3 Preview 之后的正式版本迭代。
模型规格
根据多方信息披露,Hy3 是一款面向代码场景的大规模 MoE 开源模型,关键参数如下:
- 总参数规模:295B
- 激活参数:21B
- MTP 层参数:3.8B
- 架构:MoE(混合专家)
值得注意的是,21B 的激活参数在大体量 MoE 中属于相对克制的设计,旨在平衡推理成本与模型能力。MTP 层的引入则表明该模型在训练阶段采用了多 token 预测策略,有助于提升推理效率与生成质量。
基准表现
在综合基准测试中,Hy3 取得了 2.67/4 的得分,超过了 GLM-5.1 的 2.51/4。具体优势体现在以下几个方向:
- 前端开发(frontend development)
- 持续集成与持续部署(CI/CD)
- 数据与存储(data & storage)
这表明 Hy3 在工程化代码任务上的综合能力具备一定竞争力,尤其在与开发者日常协作密切相关的场景中表现突出。
行业意义
Hy3 非预览版的发布,意味着腾讯 Hunyuan 系列在开源路线上的进一步推进。295B 级别 MoE 模型的开放权重,对于中文开源生态、开发者社区以及下游应用厂商而言,是一个可用的新基座选项。随着更多厂商持续推出大体量开源权重模型,开源大模型赛道的竞争密度正在进一步上升。
