跳到正文
事件追踪已归档

ARC Prize公布DeepSeek V4.1 Flash三项ARC-AGI成绩

首次报道 最新进展 4 篇报道,2 个来源

事件综述根据 4 篇报道整理,11月3日更新

ARC Prize 公布了 DeepSeek V4.1 Flash 1017 在 ARC-AGI 三项基准上的已核验成绩:ARC-AGI-2 得分 78.1%,每任务成本 0.16 美元;ARC-AGI-1 得分 94.5%,每任务成本 0.06 美元。 新增的 ARC-AGI-3 成绩因测试框架不同而差异明显:使用 provider adapter harness 时为 5.8%,成本 1.2K 美元;使用 standard harness 时为 0.2%,成本 1.0K 美元。ARC Prize 称,该模型在 ARC-AGI-3 和 ARC-AGI-2 上领先开放权重模型,在 ARC-AGI-1 上与开放权重模型的最佳成绩并列。 ARC Prize 称,DeepSeek Flash 系列的最佳 ARC-AGI-2 成绩此前为 61.4%(V4 Flash 0731),随后升至 72.9%(V4.1 Flash),本次再升至 78.1%(V4.1 Flash 1017)。

综述由模型根据报道生成,细节以各篇原文为准。

进展时间线

北京时间,最早在上
  1. ARC PrizeARC Prize公布DeepSeek V4.1 Flash在ARC-AGI上的成绩

    阅读这篇报道
  2. ARC PrizeARC Prize公布DeepSeek V4.1 Flash在ARC-AGI上的成绩

    阅读这篇报道

全部报道

4 篇,点开看摘要
DeepSeek V4.1 Flash 1017 的 ARC-AGI 成绩ARC Prize未入选

@deepseek_ai @baseten DeepSeek V4.1 Flash 1017 在 ARC-AGI-1 和 ARC-AGI-2 上的表现: https://x.com/arcprize/status/2113318031954764273

阅读这篇报道
DeepSeek V4.1 Flash 的 ARC-AGI 成绩ARC Prize未入选

来自 @deepseek_ai 的 DeepSeek V4.1 Flash 1017 在 ARC-AGI 上的成绩(已核验): - ARC-AGI-3:5.8%,$1.2K(provider adapter harness),0.2%,$1.0K(standard harness) 它在 ARC-AGI-3(5.81%)和 ARC-AGI-2(78.1%)上领先开放权重模型,并在 ARC-AGI-1(94.5%)上并列开放权重模型最佳成绩。

阅读这篇报道
DeepSeek V4.1 Flash 1017 的 ARC-AGI 成绩ARC Prize未入选

来自 @deepseek_ai 的 DeepSeek V4.1 Flash 1017 在 ARC-AGI 上(已核验): - ARC-AGI-2:78.1%,$0.16/任务 - ARC-AGI-1:94.5%,$0.06/任务 DeepSeek Flash 系列模型的最佳 ARC-AGI-2 成绩从 61.4%(V4 Flash 0731)升至 72.9%(V4.1 Flash),再升至 78.1%(V4.1 Flash 1017)。

阅读这篇报道
DeepSeek V4.1 Flash 1017 等三款新模型发布,AINews 盘点本周 AI 动态Latent Space厂商自述未入选

DeepSeek V4.1 Flash 1017 以 552B 总参数、16B 激活的 MoE 架构和 MIT 许可发布,在 AA Intelligence Index 上得分 45,位列开源权重模型第二。

阅读这篇报道