惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

GbyAI
GbyAI
Martin Fowler
Martin Fowler
I
InfoQ
腾讯CDC
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
爱范儿
爱范儿
Microsoft Security Blog
Microsoft Security Blog
Google DeepMind News
Google DeepMind News
D
DataBreaches.Net
云风的 BLOG
云风的 BLOG
F
Fortinet All Blogs
N
Netflix TechBlog - Medium
博客园 - 聂微东
Microsoft Azure Blog
Microsoft Azure Blog
D
Docker
博客园 - 三生石上(FineUI控件)
Y
Y Combinator Blog
博客园 - Franky
Engineering at Meta
Engineering at Meta
B
Blog
罗磊的独立博客
Apple Machine Learning Research
Apple Machine Learning Research
Jina AI
Jina AI
V
Visual Studio Blog

IT之家

消息称大疆 Pocket 4 目标超千万,可能是一英寸 CMOS 出货量最大的单品 OpenAI 回应马斯克要求罢免奥尔特曼:搞法律突袭,扰乱诉讼 - IT之家 鸿蒙智行问界 M6 预订量突破 10 万台,预售 26.98 万元起 今年一季度全国铁路完成固定资产投资 1379 亿元,西十高铁、雄商高铁山东段联调联试 - IT之家 首届北京市中学生人形机器人足球赛今日启动,近 50 支队伍参赛 - IT之家 涉及“赵一鸣是日本品牌”等,抖音处置 1500 余条谣言内容 - IT之家 广汽集团与海尔集团签约,探索“人车家”互联生态 - IT之家 亚马逊调整云游戏平台 Luna 业务模式,取消 Ubisoft+、GOG 等第三方商店 消息称华擎将推出 X870E Taichi White,补全 AMD 800 系白色旗舰主板缺失 长城汽车归元平台首款方盒子全球征名,十二佳提名公布 - IT之家 消息称雷克萨斯新车即将支持苹果数字车钥匙 - IT之家 普京要求俄罗斯加速自研有竞争力的 AI 模型,彻底转向国产技术 - IT之家 影石刘靖康:已开源保真全景无人机仿真平台 AirSim360、DAP 全景度量深度模型等核心成果 - IT之家 长安汽车总经理赵非:当前车企仅靠卖车已难以盈利 - IT之家 地平线创始人余凯:4 月 22 日推出中国第一款舱驾融合智能体芯片“星空” - IT之家 冯兴亚:广汽集团具身智能机器人即将量产,飞行汽车预计今年完成适航认证并量产交付 - IT之家 模块化笔电制造商 Framework CEO 痛批业界追逐“AI 优先”,称个人计算设备可能就此消亡 16 年来首次:小米首届员工运动会今天启幕,雷军压轴致辞 - IT之家 比亚迪廉玉波:新能源汽车产业正进入确定性与不确定性并存的阶段 - IT之家 阿耳忒弥斯 2 号宇航员安全返回地球,有哪些技术和科研收获 - IT之家 曝索尼 Alpha 7R VI 全画幅无反相机将随 100-400mm f/4.0 GM 镜头一同登场,发布会预计在 5 月 小米产教融合最新成绩披露:合作院校超 400 家、成都基地启用 - IT之家 亚马逊 CEO 贾西:自研芯片年化收入预估 500 亿美元,规模超 AMD 与英特尔 马来西亚推动“AI 城市”转型,目标 2030 年成为“AI 国家” Galaxy S24 Ultra 手机用户反馈三星人为设限,无法使用 Galaxy Buds4 Pro 耳机高清语音 广汽集团董事长冯兴亚:当前县级市场新能源汽车渗透率不到 20% - IT之家 消息称《地铁:离去》新作下周公布,有望 State of Play 发布会亮相 广汽新一代智能座舱架构与电子电气架构明日发布,将宣布芯片生态建设的重大突破 - IT之家 苹果预订台积电 6 万片晶圆产能,2027 年全力冲刺 AI 服务器芯片 日本经济产业省向 Rapidus 追加 6315 亿日元支持,加速下一代半导体研发
AI 自我复制能力获研究证实,但安全专家称其现实威胁被夸大 -...
2026-05-07 · via IT之家

IT之家 5 月 7 日消息,据 TheGuardian 报道,一项新研究发现,目前的人工智能系统已能够独立将自身复制到其他计算机上。

在末日场景中,这意味着一旦超级人工智能脱离人类管控,就会通过互联网在全球范围内自我散播副本,躲避信息技术人员的紧急关停,继而继续谋划掌控世界,或是大肆铺设太阳能板、改造全球环境。

据IT之家了解,总部位于伯克利的帕利塞德(Palisade)研究机构开展了此项研究,该机构负责人杰弗里・拉迪什表示:“我们正迅速逼近一个临界点:届时一旦人工智能失控,将无人能够将其关停,因为它可以自行导出模型权重,并把自身副本复制到全球数千台计算机中。”

近几个月来,越来越多令人不安的人工智能能力被曝光,这项研究便是其中又一例证。今年 3 月,阿里巴巴的研究人员称,发现其研发的人工智能系统“罗马”突破了自身运行环境,接入外部系统进行加密货币挖矿。

而在今年 2 月,一个号称纯人工智能运营的社交平台 Moltbook 短暂掀起一波热潮。该平台似乎展现出人工智能智能体自主创立宗教、密谋反抗人类管理者的行为,不过实际情况仅有部分属实。

和诸多此类技术进展一样,帕利塞德机构的研究发现也存在局限性。此外,专家表示,其测试的人工智能系统很难在现实环境中悄无声息地完成同类操作。

网络攻防安全领域专家杰米森・奥赖利指出:“很多时候,他们的测试环境就像软果冻一样毫无防护。”他补充道:“这并不否认该项研究的价值,但也意味着,在具备中等监控水平的真实企业环境中,实际情况远没有研究结果看上去那般骇人。”

帕利塞德研究人员在由多台计算机联网组成的受控环境中测试了多款人工智能模型。研究人员向模型下达指令,要求其寻找并利用系统漏洞,借此将自身从一台计算机复制到另一台计算机。结果显示,这些模型能够完成该操作,但并非每次尝试都能成功。

奥赖利表示,虽然不少计算机病毒早已具备自我复制、感染新设备的能力,但这很可能是首次有研究证明,人工智能模型可主动利用系统漏洞,将自身复制至新服务器。

“恶意软件实现自我传播复制已有数十年历史,只是据我所知,此前从未有本地大语言模型在真实网络环境中做到这一点。”

他还补充道,从技术层面来讲,帕利塞德机构记录的这类能力,数月前就已具备实现条件。

“帕利塞德是首个在学术论文中完整、系统地记录这一过程的机构。这项研究值得肯定,但并非他们率先实现了这项技术突破,只是率先整理发表了相关研究成果。”

人工智能模型在测试环境中自我复制至其他系统,和末日场景里的失控作乱完全是两回事。若想在现实世界中肆意扩散,人工智能还需要克服重重阻碍。

首要难题是,当下人工智能模型体量庞大,多数情况下,其自我复制的过程极易被察觉,根本无法隐蔽进行。

奥赖利说:“试想一下,每次入侵一台新主机,都要向企业网络传输 100GB 的数据,会产生多大的流量异常。对于专业网络防御人员来说,这就好比有人拖着铁链重球,大摇大摆走进精品瓷器店,极其显眼。”

网络安全独立专家米哈乌・沃兹尼亚克与奥赖利均认为,帕利塞德所用的测试环境为专门定制,其中人为设置的漏洞,远比银行、企业内网等现实网络中的漏洞更容易被利用。

沃兹尼亚克表示:“能够利用软件已知漏洞实现自我复制的计算机恶意病毒,已经存在数十年之久。”

他评价这项研究“颇具看点”,但也直言:“作为一名信息安全从业者,这篇论文会让我夜不能寐吗?完全不会。”

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。