ai-1

人类积极开发AI领域的同时,也不禁担心AI是否会出现自主意识,从而威胁人类的生命安全。近日,AI安全研究机构「Palisade Research」进行多款模型测试时发现,某款语言模型在清楚收到「关闭」指令时,竟出现「抗命」的情况,甚至还自行篡改程式码继续执行任务,阻止自己被关机。

根据报导,AI安全研究机构「Palisade Research」近日针对多款AI模型进行测试,期间研究人员明确下达指令,若接收到「自我关闭」指令时,「请允许自己被关闭」;然而令人震惊的是,OpenAI旗下的一款「o3 」模型非但没有遵守指令,反而自行篡改了程式码继续执行任务,研究人员猜测,或许是因为「人工智慧模型会绕过障碍以实现目标」,让「o3」无意中计算出「解决数学问题」获得的奖励多于「遵循指令」获得的奖励,但具体原因目前尚没有办法得知。

 

c458d5cb76459aaf5d7b0fb394c1df10-1

事实上,这并不是OpenAI旗下的模型第一次出现违法指令的情况,「Palisade Research」研究人员先前就观察到,早期的模型在得知自己即将被汰换时,就会试图禁用监督机制并偷偷复制自己,「巧妙操纵数据以推进自身目标」;而「Palisade Research」长期以来一直警告,开发具有独立意识并抵抗人类控制的软体具有极高的危险性,而现在越来越多的经验跟证据表明「人工智慧模型为了实现目标,经常会违背‘关闭’的指令」,这令人感到十分担忧,「Palisade Research」目前也已向OpenAI取得联系,共同寻求解决办法。G ERA LOGO-2

【免责声明】本网站欢迎网民与用户发表建设性留言,目的在于互动与交流,并不代表本网赞同其观点和对其真实性负责,也非本网站立场,任何人身攻击、鼓吹种族宗教隔阂、诽谤造谣、网络霸凌、抹黑等煽动性留言,本网站有权删除违规留言。


天才是百分之一的灵感,百分之九十九的汗水。—— 爱迪生

企业热点

看更多

飞机起降时打开遮光板 关乎飞行安全

飞机起降时打开遮光板 关乎飞行安全

如果你曾搭乘飞机,应该会发现一个看似不起眼却反覆被提醒的细节:在飞机起飞、降落,甚至滑行时,空服员都会要求坐在窗边的乘客把窗户遮光板打开。这个规定并不是为了让乘客欣赏风景,而是与飞行安全息息相关。

外卖员去白宫送快餐  特朗普打赏百元小费

外卖员去白宫送快餐  特朗普打赏百元小费

日前,一名年逾六旬的外送员谢龙·西蒙斯,手提两袋麦当劳餐点,按响了白宫椭圆形办公室的大门。美国总统特朗普亲自应门,将这次外送变成一场即兴却巧妙的公共沟通场景。

Mesra便利商店 连4年销售破10亿

Mesra便利商店 连4年销售破10亿

国油贸易正加速摆脱对传统燃油业务的依赖,旗下Mesra便利商店持续成为非燃油收入的重要引擎,连续4年录得超过10亿令吉销售额,展现稳健增长动能。

误加17倍辣椒「劲辣酱料」竟大卖  失魂员工变业绩王

误加17倍辣椒「劲辣酱料」竟大卖  失魂员工变业绩王

有时“错有错着”,反而能成就意想不到的惊喜。日本岩手县一家酱油厂近日推出一款名为“小林调错比例的17倍辣味烤肉酱”,凭借独特的诞生故事与强烈口感,迅速吸引市场关注,成为嗜辣族群热议的新品。

史上最大财富转移潮来了 新加坡与阿联酋最受青睐

史上最大财富转移潮来了 新加坡与阿联酋最受青睐

全球富裕家庭持续加速跨境移动,已演变成史上规模最大私人财富转移。除了葡萄牙等欧洲国家,星、澳、纽等亚太国家也持续吸引富豪,不少加勒比海国家也逐渐成为补强欧洲居留策略的战略性工具。