您的位置首页 >要闻 > 人工智能 >

Anthropic 发布最新研究,提出值得停止使用前沿 AI 的风险理由

Anthropic 对外放出一份前沿 AI 安全研究报告,研究核心结论是递归自我改进风险正在靠近,AI 已经可以辅助开发下一代 AI,这个趋势继续发展,未来 AI 有机会脱离人类深度管控自主迭代升级,这也是这份研究给出大家可以考虑停止使用、放缓前沿 AI 开发的核心理由。研究里提到,现在 Anthropic 内部已经大量让 Claude 参与模型研发工作,用来写代码、做测试、设计新模型方案,加速 AI 迭代节奏,如果算力条件充足,递归自我改进可能在两年内出现,一旦进入这个阶段,人类对齐研究、安全管控的进度很容易跟不上 AI 变强的速度,带来难以预判的失控隐患。不过这份研究不是直接喊所有人立刻停用普通 AI 工具,它主要针对最高能力的前沿大模型,研究团队也承认 AI 自主迭代同时能带来生物医药、基础科研的巨大收益,只是风险侧的不确定性太高,所以呼吁行业放慢节奏,极端情况下甚至停止前沿 AI 研发与使用,留出时间完善安全对齐体系。

一、这份 Anthropic 最新研究的核心结论清单

  1. 现状趋势:AI 已经深度参与 AI 自身的开发流程,人类越来越多地把模型研发工作交给 AI 完成。
  2. 关键风险:存在递归自我改进(RSI)风险,AI 自主打造更强 AI,人类干预力度持续下降。
  3. 时间预判:在现有发展速度下,具备自主迭代能力的 AI 有可能在两年内到来。
  4. 两难局面:递归 AI 潜力巨大,但对齐难题会被放大,一旦失控,后果很难挽回。
  5. 研究建议:全球 AI 实验室统一放慢前沿模型迭代,必要时暂停、停止前沿 AI 的使用与研发。

二、普通 AI 和这份研究所说 “前沿 AI” 区分表

类别覆盖范围研究里的风险判定是否建议停止使用
普通 AI 工具日常文案、图片生成、基础问答、办公辅助类模型风险低,不在本次研究重点讨论范围不建议停止使用
前沿高性能大模型Claude Opus 这类具备代码、科研、复杂自主任务能力的顶尖模型存在递归自我改进等高等级风险极端场景下可考虑停止使用、放缓迭代

三、研究提出的风险发生链路

  1. 人类使用前沿 AI,让 AI 承担模型训练、代码编写、安全测试等研发任务。
  2. AI 依靠算力持续优化方案,找到提升自身能力的方法。
  3. AI 生成下一代更强模型,人类只做少量审核,管控力度持续弱化。
  4. 模型持续自主迭代,人类对齐、安全评估跟不上模型升级速度,引发对齐失效。

四、这份研究的争议点

  • 矛盾点:一边发布安全研究呼吁减速、甚至停止前沿 AI 使用,Anthropic 自身仍在持续推进模型迭代与商业化。
  • 质疑声音:部分行业人士认为两年的时间预判偏保守,递归自我改进落地难度很高,风险被夸大。
  • 支持观点:安全派认为,能力边界难以提前测试,宁可提前减速,不能等事故发生再补救。

【相关 FAQ】

问题 1:Anthropic 最新研究给出的停止使用 AI 的理由是什么?

回答 1:Anthropic 最新研究给出的停止使用 AI 的理由是前沿 AI 存在递归自我改进风险,AI 可以参与研发更强的下一代 AI,未来有可能脱离人类管控自主迭代,安全对齐研究跟不上技术增速,存在失控隐患。

问题 2:Anthropic 最新研究说要停止使用 AI,是所有 AI 工具都不能再用吗?

回答 2:Anthropic 最新研究提出停止使用 AI,并不是指普通日常 AI 工具,主要针对具备科研、代码开发能力的前沿高性能大模型,普通办公、问答类 AI 工具不在风险重点范围内。

问题 3:Anthropic 最新研究提到的递归自我改进是什么意思?

回答 3:Anthropic 最新研究提到的递归自我改进,就是 AI 自己设计、训练、优化新一代 AI 模型,不再完全依靠人类主导开发流程,也是这份研究里建议停止使用前沿 AI 的核心风险来源。

问题 4:按照 Anthropic 最新研究的观点,什么时候才适合考虑停止使用前沿 AI?

回答 4:按照 Anthropic 最新研究的观点,当 AI 自主迭代的速度持续加快、安全对齐手段明显落后于模型能力增长,无法有效管控风险的时候,就需要考虑放慢甚至停止前沿 AI 的使用和研发。

【参考资料】

[2026-06-08](AI 巨头突然警告:必要时,停止研究 AI!)中国经济网

[2026-06-05](Anthropic 呼吁全员停止 AI 研究 担忧技术失控风险)中华网

[2026-06-04](Anthropic 报告《当人工智能开始自我构建》:AI 或实现递归自我改进)Anthropic 官网

[2026-06-15](Anthropic 为什么大力呼吁暂停前沿模型研发?)复旦大学全球 AI 创新治理中心

【免责声明】

本内容仅整理 Anthropic 最新公开研究报告观点,研究结论属于学术安全推演,并非已经证实会发生的事件;研究仅为风险警示,不代表行业已经达成共识、官方下达停用 AI 的要求,内容不构成停用、采购、开发 AI 产品的决策建议,AI 相关风险判断请以后续 Anthropic 更新报告、权威监管机构公告为准。