混元系统历经三月革新，Hy3 Preview版本震撼登场姚顺雨团队主导
混元大模型重建的第一步是Hy3 preview。作者｜连冉姚顺雨在加入腾讯后，推出了首个重要的语言模型项目。4月23日，腾讯正式发布了混元 Hy3 preview 语言模型，并将其开源。这款模型采用快慢思考融合的MoE架构设计，总参数量达295B，激活参数为21B，支持的最大上下文长度达到256K，官方宣称其整体性能处于同尺寸模型中的领先水平。按照研发进度来看，Hy3 preview 从今年年初启
科技1 阅读
搜索: "上下文长度"
共找到 3 篇相关文章
腾讯推出并开放源代码：Hy3 Preview——迄今为止最先进的语言模型
4月23日，腾讯发布了混元 Hy3 preview 语言模型，并宣布将其开源。该模型结合了快慢思考的特点，拥有总计2950亿参数和激活参数210亿，能够处理长达256K的上下文长度。腾讯官方透露，在今年二月，腾讯对预训练及强化学习的基础架构进行了重建，并确立了三个追求实用性的准则：能力系统化、评估真实性以及性价比。Hy3 preview 是在此次基础建设改进之后生成的第一个模型，也是迄今为止混元系
科技1 阅读
姚顺雨初试锋芒，腾讯AI迎来全新基石
腾讯近日发布并开源了新一代大语言模型混元Hy3 preview，填补了4月在AI领域的关键空白。作为混元3.0的早期版本，这款混合专家模型结合了快慢思考模式，拥有总计295B个参数和21B个激活参数，并能支持长达256K的上下文长度。据腾讯介绍，这是迄今为止最智能的混元模型，在复杂推理、指令遵循、代码处理及智能体功能等方面实现了显著提升。上月，腾讯在其2025年度业绩公告中首次提及“混元3.0”，
科技2 阅读