精选模型82

腾讯混元 Hy4 正式开源,混元 LLM 系列实现全量开放

原标题:腾讯 Hy4 正式开源,混元 LLM 系列实现全量开放

IT之家发布时间 (北京时间)

AI 速览

根据原文整理

腾讯开源 Hy4 大模型权重,混元 LLM 系列全部开放,采用 Apache 2.0 协议可商用。

总参数
770B
激活参数
49B
上下文窗口
100 万 Token
开源协议
Apache 2.0
发布
Hy4 权重在 GitHub、Hugging Face、ModelScope、GitCode 四平台同步上线。
架构
Hy4 采用 MoE 架构,总参数 770B,激活 49B,上下文窗口超 100 万 Token。
价格
Hy4 flash 总参数约 2200 亿,每 Token 仅激活约 120 亿参数,主打性价比。
可用范围
Hy4 及 Hy4 preview 采用 Apache 2.0 协议,允许商业使用与修改。
安全
安全评估卡片披露网络安全与生物安全结果,训练数据剔除攻击性内容。

为什么值得看开发者可下载权重自行部署,并依据 Apache 2.0 协议评估商用条件。

在 IT之家 阅读原文 全文约 2 分钟

由 AI 阅读原文后整理,可能有疏漏,细节以原文为准。

开源生态数据与训练模型发布#模型发布#开源生态#数据/训练