精选模型74

Arena 评测:Meta Muse Ember 在速度、得分与成本上领先 GPT-6 Luna 和 Claude Haiku 5.5

原标题:The race among efficient models built for real work has a new leader: Muse Ember by @AIatMeta.

Arena.ai@arena发布时间 (北京时间)

AI 速览

根据原文整理 · 原文约 1 分钟

Arena.ai 的 Agent Arena 测试显示,Meta Muse Ember 在速度、得分和单任务成本三项上均优于 GPT-6 Luna 和 Claude Haiku 5.5。

单任务耗时
27 秒
净提升
+2.3%
单任务成本
1.9 美分
速度
Ember 每任务 27 秒,Luna 为 5.8 分钟,Haiku 5.5 为 1.9 分钟。
得分
Agent Arena 净提升 Ember +2.3%,Luna +1.4%,Haiku 5.5 +0.4%。
成本
Ember 每任务 1.9 美分,Luna 7.0 美分,Haiku 5.5 6.9 美分。
对比
Arena 称 Ember 比 Luna 快约 13 倍,成本不到另两款的三分之一。
下一步
原文还分析了 Ember 在 Work 场景的可操控性得分及用户实际任务。

为什么值得看为在真实任务中选高效模型的开发者提供速度、得分与成本的同条件对比参考。

由 AI 阅读原文后整理,可能有疏漏,细节以原文为准。

The race among efficient models built for real work has a new leader: Muse Ember by @AIatMeta.

Ember (Max) leads on every dimension against GPT-6 Luna (Max) from @OpenAI and Claude Haiku 5.5 (High) by @AnthropicAI:

  • Speed: 27s per task vs 5.8 min and 1.9 min
  • Performance: +2.3% Net Improvement (Agent Arena score) vs +1.4% and +0.4%
  • Cost: 1.9¢ per task vs 7.0¢ and 6.9¢

That’s ~13x faster than Luna and less than a third of the cost of either. Below find more analysis on Ember’s steerability score across Work, and a look at what real-world tasks users are shipping with Muse Ember in the Agent Arena.