Anthropic 的 Thariq 转发并支持 Dario Amodei 的新文章《We Must Pace the Frontier》,后者提出 AI 行业应放缓的三部分计划,并承诺向第三方评估者提供永久的员工级系统访问权限。
Thariq 以一线工程师视角支持放缓前沿 AI,谈行业加速带来的疲惫和社会需要时间消化,并强调自己对末日概率看法较低。
如果在 2018 年把今天的 Claude Code 拿给我看,我会以为它就是 AGI。
在软件工程这一职业乃至整个社会中,我们已经消化了极其剧烈的变化。但即便如此,我们开始看到裂痕。
事情加速得比我诚实地说能跟上的速度还要快。我认识的 AI 领域大多数人虽然疲惫,但仍在硬撑着前进。我担心我们需要的不止于此。
我们需要时间来加固我们的系统,也需要社会就这项技术如何被使用和部署进行深思熟虑。
我的 p(doom) 相当低,我相信我们能够挺过这一关!人类具有惊人的韧性和适应力,但这源于我们共同做出艰难决定的能力——就像这一个决定一样。
我们必须把握前沿的节奏:我写了一篇新文章,阐述为什么 AI 行业应当放慢脚步,并提出了实现这一目标的三部分计划。 Anthropic 正单方面承诺采取其中的第一步。我们将为第三方评估者提供对我们系统的永久、员工级访问权限,以便他们能够核实我们对安全措施的遵守情况、报告事件,并在训练期间评估模型的对齐情况。 你可以在这里阅读完整文章:https://darioamodei.com/post/we-must-pace-the-frontier
原文
We Must Pace the Frontier: I’ve written a new essay on why the AI industry should slow down, with a three-part plan for doing so. Anthropic is unilaterally committing to the first of these steps. We’ll provide third-party evaluators with permanent, employee-level access to our systems, so that they can verify adherence to our safety measures, report on incidents, and assess models’ alignment during training. You can read the full post here: https://darioamodei.com/post/we-must-pace-the-frontier
来源:Thariq · x.com