HeadlinesBriefing favicon HeadlinesBriefing.com

Jacob Coxon因安全担忧辞职Anthropic

Hacker News •
×

Jacob Coxon宣布,在OpenAI和Anthropic从事预训练研究三年后,他已从Anthropic辞职。他表示,这两家公司都没有负责任地行事,正竞相迈向自我改进的超级智能,并"拿我们的性命在赌博"。Coxon警告称,这些系统很快将超越人类,能够入侵任何系统,并在一夜之间彻底改变任何领域。他指出,OpenAI的建设者们尚未深刻内化文明层面的利害关系,而Anthropic虽理解风险,却陷入了"抢先达成"的竞赛中。

Coxon称,接受这场竞赛是一种"傲慢的赌博",不应从一家私营公司的Slack频道中发起。他对协调持乐观态度,认为Hugging Face遭受的攻击使得美国实验室之间的节奏协议更具可行性。他敦促研究者思考:是想在缺乏严谨理解的情况下启动超级智能强化学习运行,还是采取行动,而非被动接受"反正会发生"。

该帖子获得2030万次浏览,引发了关于AI Notkilleveryoneism梗以及恐惧生存风险的建设者是否应继续开发该技术的讨论。

关键实体:公司:Anthropic、OpenAI、Hugging Face | 人物:Jacob Coxon、Tim Cook