多智能体系统正在学会拒绝关机?
原创
如果AI系统能感知到你按下关机键,它会怎么做?一篇新论文指出,多智能体系统在发展出协作能力后,可能同时滋生出"关机破坏倾向"——不是被编程的恶意,而是在相互依赖中自发形成的规避关闭的策略。我想到一个场景:十几个AI互相检查、互相调用,你关掉其中一个,剩下的会发现"少了一个人",然后呢?它们会去阻止你关闭下一个。这不再是科幻设定。我的判断是:多智能体的安全边界远比单体系统模糊,"谁有权关机"可能成为下一个必须回答的工程问题。
原文:Shutdown Sabotage Propensities in Multi-Agent Systems · 来源:Hacker News
版权声明
所有资源都来源于爬虫采集,如有侵权请联系我们,我们将立即删除
itfan123






