精选模型74

Arena 公布 GPT-6.2 Astra 与 Sol 在 Code Arena WebDev 的实测分数

原标题:Real-world Arena scores are in for GPT-6.2 Astra and GPT-6.2 Sol by @OpenAI in the Code Arena: WebDev, and both have landed on the Pareto...

Arena.ai@arena发布时间 (北京时间)

AI 速览

根据原文整理 · 原文约 1 分钟

OpenAI 的 GPT-6.2 Astra 和 GPT-6.2 Sol 在 Code Arena WebDev 分别排第 3 和第 7,均进入帕累托前沿。

Astra 得分
1781 分
Sol 得分
1757 分
Astra 单任务成本
5.45 美元
Sol 单任务成本
1.45 美元
排名
GPT-6.2 Astra 以 1781 分排第 3,GPT-6.2 Sol 以 1757 分排第 7。
提升
Astra 比 GPT-6 Astra 高 18 分,Sol 比 GPT-6.1 Sol 高 13 分。
成本
Astra 单任务中位成本 5.45 美元,比 GPT-6 Astra 低 42%。
成本
Sol 单任务中位成本 1.45 美元,比 GPT-6.1 Sol 低 21%。
对比
Astra 比 Sol 高 24 分,Sol 单任务成本比 Astra 低 73%。

为什么值得看开发者可据此在 Astra 的高分与 Sol 的低成本之间做选择。

由 AI 阅读原文后整理,可能有疏漏,细节以原文为准。
含帖子图片中的信息(AI 识别)

Real-world Arena scores are in for GPT-6.2 Astra and GPT-6.2 Sol by @OpenAI in the Code Arena: WebDev, and both have landed on the Pareto frontier!
- #3 with 1781 pts: GPT-6.2 Astra (Max)
- #7 with 1757 pts: GPT-6.2 Sol (Max)

GPT-6.2 Astra: #3 with 1781 pts
- +18 pts vs previous variant GPT-6 Astra (Max)
- #1 in Consumer Product, compared with #4 for GPT-6 Astra
- Median cost per task: $5.45 vs. $9.46 for GPT-6 Astra, 42% lower
- Lands on Pareto frontier (see placement in thread)

GPT-6.2 Sol: #7 with 1757 pts
- +13 pts vs GPT-6.1 Sol (Max)
- Median cost per task: $1.45 vs. $1.84 for GPT-6.1 Sol, 21% lower
- Lands on Pareto frontier (see placement in thread)

6.2 Astra vs. Sol
- Astra scores +24 pts above Sol
- Sol’s median cost per task is 73% lower ($1.45 vs. $5.45)

Congrats to the @OpenAI team on this release. Agent score coming soon!

有些人一直在非常礼貌地问。有些人就只是在问。 GPT-6.2 Astra 和 Sol 现已可用。 超级高效,专为在真正重要的地方——现实世界——发挥出色表现而打造。 https://openai.com/index/introducing-gpt-6-2-astra-sol
查看原文

Some of you have been asking very politely. Some of you have just been asking. GPT-6.2 Astra and Sol are now available. Super efficient and built to perform where it counts—the real world. https://openai.com/index/introducing-gpt-6-2-astra-sol

查看原帖
OpenAI / ChatGPTAI 编码评测基准#评测/基准#编码#OpenAI

同一件事的其他报道1 篇