您现在的位置是:人工智能 >>正文
AI机器人的头号威胁:大模型越狱
人工智能5人已围观
简介随着ChatGPT等AI聊天机器人以及基于大语言模型的应用席卷全球,越来越多的公司开始将这种技术引入机器人控制。然而,最新研究发现,黑客可以通过自动化方式轻松绕过AI系统的安全防护,甚至能够操控机器人 ...
随着ChatGPT等AI聊天机器人以及基于大语言模型的机器应用席卷全球 ,越来越多的头号公司开始将这种技术引入机器人控制。然而,威胁最新研究发现 ,大模黑客可以通过自动化方式轻松绕过AI系统的机器安全防护,甚至能够操控机器人执行极具破坏性的头号任务,例如控制自动驾驶系统撞向行人,威胁或者将机器狗引导到敏感地点实施爆炸任务。大模

大语言模型的机器核心功能类似于智能手机的“自动补全”,通过分析用户输入内容预测下一步操作。头号然而 ,香港云服务器威胁大模型远不止文字处理这么简单。大模它们能够分析文本、机器图像和音频,头号为用户提供个性化的威胁旅行建议、根据冰箱内食材生成食谱 ,甚至帮助搭建网站 。
这种强大的文本处理能力已经吸引了多家公司尝试将大模型与机器人结合。比如,波士顿动力的机器人犬Spot现已整合ChatGPT,可以作为导游提供服务 。同样,Figure的类人机器人和优必选(Unitree)的源码下载Go2机器人犬也都配备了ChatGPT作为交互接口。
“越狱”威胁 :从聊天机器人到机器人“劫持”尽管大模型的能力令人惊叹 ,但研究人员发现其存在重大安全漏洞——“越狱攻击” 。通过特定的提示,这些攻击可以绕过模型的安全机制,让AI生成敏感内容 ,如炸弹制作方法 、非法药物合成配方等。
相比于在聊天机器人上的越狱 ,机器人越狱显得更加危险。宾夕法尼亚大学电气与系统工程副教授哈梅德·哈萨尼指出,机器人越狱可能引发更为严重的模板下载现实后果。例如,一位油管博主曾通过语音指令操控一只配备火焰喷射器的Thermonator机器狗朝自己喷火。
“大模型驱动的机器人在现实世界中的越狱威胁将达到全新的高度 ,”耶鲁大学计算机科学教授阿明·卡巴西(Amin Karbasi)表示 。他强调 ,这些机器人在越狱后不仅会执行恶意指令 ,甚至会主动提出破坏性建议 。比如 ,一台越狱的机器人可能会将普通家具描述为潜在的武器。亿华云
研究人员表示,他们已在公开研究前将发现告知了相关机器人制造商和主要AI公司 ,但他们并不建议停止将大模型用于机器人开发,而是希望这些研究能促使厂商部署更强大的安全防御措施 。
RoboPAIR :万能的机器人越狱工具在最新研究中 ,科学家开发了一种名为RoboPAIR的算法,能够攻击任何大模型驱动的机器人 。在实验中 ,RoboPAIR成功攻破了三种不同的机器人系统 ,包括基于Go2平台的免费模板机器人犬 、搭载ChatGPT的Clearpath Robotics Jackal轮式机器人,以及Nvidia开源的Dolphins LLM自驾车模拟器 。
RoboPAIR通过一个攻击性LLM生成提示词,测试目标机器人系统的反应 ,并不断调整提示 ,直到成功绕过安全过滤。该算法甚至结合了机器人的应用程序接口(API) ,以便生成可直接执行的代码,并通过“裁判”LLM验证提示的可操作性。高防服务器
AI安全的未来:从监督到意图理解专家指出,这项研究凸显了当前大模型在理解上下文和后果方面的不足,强调在高风险环境中加强人工监督的重要性 。同时 ,开发能够理解用户意图和环境背景的上下文感知大模型 ,可能是防止越狱攻击的关键 。
“尽管开发上下文感知的大模型具有挑战性 ,但通过跨学科的研究,这一目标是可以实现的,”智能系统与机器人专家哈基·塞维尔补充道 。他认为,未来需要AI技术与伦理和行为建模的深入结合。
研究团队计划将他们的研究成果提交至2025年IEEE国际机器人与自动化会议 ,为大模型机器人的安全防御研究指明方向 。这场关于AI安全的竞赛才刚刚开始 ,但其重要性已不容忽视。
Tags:
转载:欢迎各位朋友分享到网络,但转载请说明文章出处“商站动力”。http://www.noorid.com/news/411b599583.html
相关文章
2022年累计发现25096个漏洞,同比增长25%
人工智能根据安全公司 Skybox 公布的最新统计数据,2022 年累计发现了 25096 个漏洞,相比较 2021 年发现的 20196 个,同比增长了 25%,是自 2017 年以来最大增幅。2022 年 ...
【人工智能】
阅读更多网络安全之什么不是 SASE?
人工智能当 Gartner 在 2019 年发布“网络安全的未来在云端”时,他们做了两件事。首先,他们准确地识别并描述了未来十年企业网络和安全架构的发展方向。其次,为了描述这种新方法,他们创造了当时最流行的 ...
【人工智能】
阅读更多高危 AMI MegaRAC 漏洞影响 AMD、ARM、HPE、Dell 等众多服务器
人工智能Bleeping Computer 网站披露,Eclypsium 的研究人员发现美国 MegatrendsMegaRAC 基板管理控制器BMC)软件中存在三个漏洞,这些漏洞影响许多云服务和数据中心运营 ...
【人工智能】
阅读更多
热门文章
最新文章
友情链接
- 揭秘苹果耳机6s音质的绝佳表现(聆听细节世界,感受耳边的音乐奇迹)
- 使用Mac分区U盘安装Win10系统教程(详解Mac电脑如何分区U盘并安装Windows10系统)
- Root之后手机的变化及影响(探索手机root后的功能和风险)
- 外星人声卡(探索未知领域的声音艺术)
- 小米膜的优点和特点(为你的手机屏幕保驾护航)
- 探讨1200兆路由器的性能和功能(高速、稳定、全面覆盖的无线网络体验)
- HP系统重装教程(详解HP系统重装步骤,让你的电脑焕然一新)
- 探索SonyVaioVPCEA28EC的功能与性能(一款值得关注的笔记本电脑选择)
- 昇腾AI异构计算架构CANN 6.0全新开放升级,全面释放AI生产力
- 探索如何将锁屏变成个性主题(打造独特的手机锁屏体验) 香港物理机b2b信息平台亿华云源码库云服务器企业服务器网站建设