模型
75AI 评分(两次独立评分的平均)

Thinking Machines 发布 Inkling 2 Mini 开源模型

原标题:Thinking Machines has released Inkling 2 Mini at 20 on the Artificial Analysis Intelligence Index, an open weights looped transformer on ...

Artificial Analysis@ArtificialAnlys发布时间 (北京时间)

Thinking Machines 发布开源模型 Inkling 2 Mini,在 Artificial Analysis Intelligence Index 上得分 20,采用循环层 Transformer 架构,处于智能与激活参数权衡的前沿。

同一件事,精选收录的是《Thinking Machines Lab 发布 Inkling 2 Mini 本地多模态模型》

Thinking Machines 已在 Artificial Analysis Intelligence Index 上以 20 分发布 Inkling 2 Mini,这是一款开放权重的循环式 transformer,位于智能与活跃参数对比的帕累托前沿上

Inkling 2 Mini 是一个总参数 26B、活跃参数 5.4B 的混合专家模型。5.4B 活跃参数计数包含对其循环层的三次遍历;每个文本 token 使用 3.1B 唯一权重,且其规模小到足以在 MacBook 或 DGX Spark 上运行。

它以 Apache 2.0 许可证发布,支持文本和图像输入,并具有 1M token 的上下文窗口。

祝贺 @thinkymachines 发布!🧵

多模态开源生态模型发布#模型发布#开源生态#多模态

同一件事的其他报道2 篇