模型
58AI 评分(两次独立评分的平均)

Inkling 2 Mini 在 ARC-AGI 上得分 49.3%,单任务成本 0.14 美元

原标题:Inkling 2 Mini from @thinkymachines on ARC-AGI (Verified):

ARC Prize@arcprize发布时间 (北京时间)

ARC Prize 公布 thinkymachines 的 Inkling 2 Mini 在 ARC-AGI 验证集上的成绩:ARC-AGI-2 得分 49.3%、每任务 0.14 美元,ARC-AGI-1 得分 84.5%、每任务 0.06 美元。在 ARC-AGI-2 上,它的单任务成本比 Inkling 2 Small 低 47%,但得分也低 32 个百分点。

中文译文尚未完成,先为你展示原文。

Inkling 2 Mini from @thinkymachines on ARC-AGI (Verified):

  • ARC-AGI-2: 49.3%, $0.14/task
  • ARC-AGI-1: 84.5%, $0.06/task

Inkling 2 Mini costs 47% less per task than Inkling 2 Small on ARC-AGI-2, but scored 32 percentage points lower.

推理能力评测基准#评测/基准#推理