游乐游手机版
首页/AI热点日报/热点详情

Anthropic因社区反对调整Claude Fable 5研究员降智措施

类型:热点整理2026-06-12
Anthropic曾因在用户不知情下限制用Claude开发其他AI模型遭社区强烈反对,现调整措施,将安全防护透明化:若怀疑用户打造高能力模型,会明确拒绝或转至较弱模型。

6月11日消息,AI公司Anthropic近期因一项争议性操作被推上舆论风口——在未告知用户的前提下,悄然限制竞争对手利用其最新模型Claude Fable 5开发其他AI模型。在AI研究社区强烈反弹后,该公司最终调整立场,决定修正该做法。

遭社区强烈反对后,Anthropic 调整 Claude Fable 5 面向研究员的“降智”措施

Anthropic在向《连线》杂志发布的声明中承认失误:“我们正在优化Fable 5针对前沿模型开发的安全防护策略,使其对用户透明。此前的权衡存在偏差,未能把握好平衡,我们对此致歉。”

事件起因是:本周初,Anthropic发布了其最新模型Claude Fable 5,并为其增设了多项安全防护措施,旨在防止技术滥用。例如,当用户提出涉及网络安全、生物学或化学的问题时,系统会自动将请求转交给能力较弱的模型,从而降低先进AI被用于网络攻击或生物武器研发的风险。

然而,针对那些使用Claude Fable 5进行前沿AI开发的研究人员,Anthropic原本计划采取更隐蔽的应对措施——在用户毫无察觉的情况下,主动调低模型性能。换言之,若研究人员试图借助Claude训练竞争对手的AI模型,Claude Fable 5可能会暗中“降智”响应。

值得注意的是,Anthropic的服务条款本就明确禁止利用Claude训练竞争性AI模型。此番新举措相当于为这一规定增设了一道“隐形执行”机制。

在改变立场后,官方公布的新方案是:Claude Fable 5针对AI开发的安全防护措施将对用户透明。若Anthropic怀疑用户意图利用Claude构建高能力模型,系统将明确发出提示——要么直接拒绝请求,要么将用户切换至能力较弱的模型。至少,用户会事先得到通知。

撤回决定的原因在于AI研究社区的强烈反应。事实上,Anthropic此前已限制竞争对手使用Claude构建闭源或开源模型,但批评者指出,此次暗中降低模型性能的行为已经突破了可接受的底线。

如今,Claude智能体已成为众多开发者不可或缺的工具,并被广泛用于开源AI研究项目。多位研究人员向《连线》表示,若Anthropic当初的政策真正实施,未来前沿AI研究很可能被少数几家头部实验室所垄断。这显然与社区期望的开放生态相悖。

来源:https://www.ithome.com/0/963/208.htm

相关热点

继续查看同栏目近期热点。

延伸阅读

补充最近整理过的热点入口。