精选模型74
Arena 评测:Meta Muse Ember 在速度、得分与成本上领先 GPT-6 Luna 和 Claude Haiku 5.5
原标题:The race among efficient models built for real work has a new leader: Muse Ember by @AIatMeta.
AI 速览
根据原文整理 · 原文约 1 分钟
Arena.ai 的 Agent Arena 测试显示,Meta Muse Ember 在速度、得分和单任务成本三项上均优于 GPT-6 Luna 和 Claude Haiku 5.5。
- 单任务耗时
- 27 秒
- 净提升
- +2.3%
- 单任务成本
- 1.9 美分
- 速度
- Ember 每任务 27 秒,Luna 为 5.8 分钟,Haiku 5.5 为 1.9 分钟。
- 得分
- Agent Arena 净提升 Ember +2.3%,Luna +1.4%,Haiku 5.5 +0.4%。
- 成本
- Ember 每任务 1.9 美分,Luna 7.0 美分,Haiku 5.5 6.9 美分。
- 对比
- Arena 称 Ember 比 Luna 快约 13 倍,成本不到另两款的三分之一。
- 下一步
- 原文还分析了 Ember 在 Work 场景的可操控性得分及用户实际任务。
为什么值得看为在真实任务中选高效模型的开发者提供速度、得分与成本的同条件对比参考。
由 AI 阅读原文后整理,可能有疏漏,细节以原文为准。
The race among efficient models built for real work has a new leader: Muse Ember by @AIatMeta.
Ember (Max) leads on every dimension against GPT-6 Luna (Max) from @OpenAI and Claude Haiku 5.5 (High) by @AnthropicAI:
- Speed: 27s per task vs 5.8 min and 1.9 min
- Performance: +2.3% Net Improvement (Agent Arena score) vs +1.4% and +0.4%
- Cost: 1.9¢ per task vs 7.0¢ and 6.9¢
That’s ~13x faster than Luna and less than a third of the cost of either. Below find more analysis on Ember’s steerability score across Work, and a look at what real-world tasks users are shipping with Muse Ember in the Agent Arena.
