跳到正文
北京时间
原文
ARC Prize· @arcprize · X·· 4 小时前精选AI 评分66
AI 导读

ARC Prize 公布 Gemini 4 Argon 在 ARC-AGI (Verified) 的评测成绩。ARC-AGI-3 上,provider adapter harness 得分 97.5%、成本 $4.8K,标准 harness 得分 49.8%、成本 $5.8K;ARC-AGI-2 得分 91.3%、$0.32/task;ARC-AGI-1 得分 98.5%、$0.16/task。Google DeepMind 是第二家在 ARC-AGI-3 上得分超过 95% 的前沿 AI 实验室。

推荐理由

ARC Prize 公布了 Gemini 4 Argon 在 ARC-AGI 三个版本上的得分与成本,读者可据此比较不同 harness 设置的差异。

正文 · 原文

Gemini 4 Argon from @Google on ARC-AGI (Verified):

  • ARC-AGI-3: 97.5%, $4.8K (provider adapter harness), 49.8%, $5.8K (standard harness)
  • ARC-AGI-2: 91.3%, $0.32/task
  • ARC-AGI-1: 98.5%, $0.16/task

Google DeepMind is the second frontier AI lab to score above 95% on ARC-AGI-3.

来源:ARC Prize · x.com