进行中
Synthetic Sciences 发布 FrontierML 基准
- 报道
- 1
- 信源
- 1
- 首次报道
- 11/19 13:34
- 最近更新
- 11/19 13:34
Y Combinator 初创公司 Synthetic Sciences 发布 FrontierML 基准,用 25 个开放式机器学习研究问题测试 AI 智能体,5 个前沿模型在所有问题上均未达到强结果线。 测试中,每个智能体获得 12 小时和真实 H100 GPU,需自行设计进度代理指标并校准其可信度;目标函数全程不可见,最终提交的模型或方法在留出评测上打分。
热度48 小时内每个独立信源只算一次,24 小时减半
- 48 小时参与信源
- 1
- 6 小时新加入
- 0
- 24 小时新报道
- 1
- 热点排名
- —
热度曲线会在事件持续一段时间后出现。
事件进展1 个阶段
Synthetic Sciences 发布 FrontierML 基准
Rohan Paul 等 1 篇报道
全部报道1 篇
YC 初创推出 FrontierML:5 个前沿模型无一达标
Y Combinator 初创公司 Synthetic Sciences 发布 FrontierML 基准,用 25 个开放式 ML 研究问题测试 AI 智能体,5 个前沿模型在所有问题上均未达到强结果线。每个智能体获得 12 小时和真实 H100 GPU,需自行设计进度代理指标并校准其可信度,目标函数全程不可见,最终提交的模型或方法在留出评测上打分。
Rohan Paul
相关
#Agent 智能体#数据与训练#论文研究#评测基准
