腾讯/Hy3
tencent/Hy3
摘要
腾讯Hy团队发布Hy3模型,采用Apache 2.0许可,参数规模295B(混合专家架构,21B活跃参数,3.8B MTP层参数)。基于Hy3 Preview反馈,团队扩大后训练数据规模。Hy3在性能上超越同等规模模型,可匹敌参数大2-5倍的开源模型,在多个产品与生产力任务中实用性提升。完整版模型598GB,FP8量化版300GB,上下文长度256K,已在Hugging Face发布,OpenRouter上免费提供至7月21日。
tencent/Hy3 来自中国腾讯的新 Apache 2.0 许可模型:Hy3 是一个 295B 参数的混合专家(MoE)模型,拥有 21B 活跃参数和 3.8B MTP 层参数,由腾讯 Hy 团队开发。继 4 月底 Hy3 Preview 发布后,我们收集了 50 多个产品的反馈,并使用更高质量的数据扩大了后训练规模。今天,我们正式推出 Hy3,它在性能上超越了同等规模的模型,并能与参数规模大 2-5 倍的旗舰开源模型相匹敌。此外,它在多个产品和生产力任务中展现出显著的实用性提升。完整版模型在 Hugging Face 上大小为 598GB,FP8 量化版为 300GB。上下文长度为 256K。该模型在 OpenRouter 上免费提供至 7 月 21 日。我让它在 OpenRouter 上“生成一个骑自行车的鹈鹕的 SVG”,得到了如下结果:标签:ai,生成式 ai,llms,骑自行车的鹈鹕,llm 发布,中国 ai
译自 Simon Willison · 博客 · 录于 二〇二六年七月三十一日