进行中

Synthetic Sciences 发布 FrontierML 基准

报道
1
信源
1
首次报道
11/19 13:34
最近更新
11/19 13:34

Y Combinator 初创公司 Synthetic Sciences 发布 FrontierML 基准,用 25 个开放式机器学习研究问题测试 AI 智能体,5 个前沿模型在所有问题上均未达到强结果线。 测试中,每个智能体获得 12 小时和真实 H100 GPU,需自行设计进度代理指标并校准其可信度;目标函数全程不可见,最终提交的模型或方法在留出评测上打分。

最新进展YC 初创推出 FrontierML:5 个前沿模型无一达标

热度48 小时内每个独立信源只算一次,24 小时减半

48 小时参与信源
1
6 小时新加入
0
24 小时新报道
1
热点排名
—

热度曲线会在事件持续一段时间后出现。

事件进展1 个阶段

全部报道1 篇

  • YC 初创推出 FrontierML:5 个前沿模型无一达标

    Y Combinator 初创公司 Synthetic Sciences 发布 FrontierML 基准,用 25 个开放式 ML 研究问题测试 AI 智能体,5 个前沿模型在所有问题上均未达到强结果线。每个智能体获得 12 小时和真实 H100 GPU,需自行设计进度代理指标并校准其可信度,目标函数全程不可见,最终提交的模型或方法在留出评测上打分。

    Rohan Paul

#Agent 智能体#数据与训练#论文研究#评测基准