精选模型82
腾讯混元 Hy4 正式开源,混元 LLM 系列实现全量开放
原标题:腾讯 Hy4 正式开源,混元 LLM 系列实现全量开放
AI 速览
根据原文整理
腾讯开源 Hy4 大模型权重,混元 LLM 系列全部开放,采用 Apache 2.0 协议可商用。
- 总参数
- 770B
- 激活参数
- 49B
- 上下文窗口
- 100 万 Token
- 开源协议
- Apache 2.0
- 发布
- Hy4 权重在 GitHub、Hugging Face、ModelScope、GitCode 四平台同步上线。
- 架构
- Hy4 采用 MoE 架构,总参数 770B,激活 49B,上下文窗口超 100 万 Token。
- 价格
- Hy4 flash 总参数约 2200 亿,每 Token 仅激活约 120 亿参数,主打性价比。
- 可用范围
- Hy4 及 Hy4 preview 采用 Apache 2.0 协议,允许商业使用与修改。
- 安全
- 安全评估卡片披露网络安全与生物安全结果,训练数据剔除攻击性内容。
为什么值得看开发者可下载权重自行部署,并依据 Apache 2.0 协议评估商用条件。
由 AI 阅读原文后整理,可能有疏漏,细节以原文为准。
