跳到正文
北京时间
原文
AI as Normal Technology(RSS)· Sayash Kapoor·· 2026-04-17精选AI 评分70

CRUX 项目提出“开放世界评估”测试前沿AI能力

Open-world evaluations for measuring frontier AI capabilities

AI 导读

CRUX项目由17位研究者组成,通过“开放世界评估”在真实场景中测试AI能力。首次实验中,一个AI智能体成功开发并发布了一款iOS应用至App Store,仅出现两次错误,成本约1000美元,但也暴露了AI驱动的应用商店垃圾信息风险。

推荐理由

这篇提出「开放世界评估」概念,用发布 iOS 应用的实验证明 agent 已接近自主完成端到端真实任务,这给评估方法论和 App Store 反垃圾都敲了警钟。

来源:AI as Normal Technology(RSS) · normaltech.ai