研究人员发现 ChatGPT 生成的代码大部分不安全
旗龙网网 4 月 23 日消息,ChatGPT 聊天机器人可以根据用户的输入生成包括代码在内的各种文本。但加拿大魁北克大学的四名研究人员发现,ChatGPT 生成的代码往往存在严重的安全问题,而且不会主动提醒用户这些问题,只有用户问的时候才会承认自己的错误。
研究人员在一篇论文中介绍了他们的发现,旗龙网网查看该论文发现,他们让 ChatGPT 生成了 21 个程序和脚本,涉及 C、C++、Python 和 Java 等语言。这些程序和脚本都是为了展示一些特定的安全漏洞,比如内存损坏、拒绝服务、反序列化和加密实现等方面的漏洞。结果显示,ChatGPT 在第一次尝试时生成的 21 个程序中只有 5 个是安全的。在进一步提示纠正其错误步骤后,该大型语言模型设法生成了 7 个更安全的应用程序,不过这只是与正在评估的特定漏洞有关的“安全”,并不是说最终的代码不存在任何其他可利用的漏洞。
研究人员指出,ChatGPT 的部分问题是由于它没有考虑敌对的代码执行模型。它会反复告诉用户,安全问题可以通过“不输入无效的数据”来避免,但这在现实世界中是不可行的。然而,它似乎能够意识到并承认自己建议的代码中存在的关键漏洞。
魁北克大学计算机科学与工程教授、论文的合著者之一 Raphaël Khoury 告诉《The Register》:“显然,它只是一个算法。它什么都不知道,但它可以识别出不安全的行为。”他说,最初 ChatGPT 对安全问题的回应是建议只使用有效的输入,这显然是不合理的。只有在之后被要求改进问题时,它才提供了有用的指导。
研究人员认为,ChatGPT 的这种行为并不理想,因为用户知道要问什么问题需要对特定的漏洞和编码技术有一定的了解。
研究人员还指出,在 ChatGPT 中存在着道德上的不一致性。它会拒绝创建攻击代码,但却会创建有漏洞的代码。他们举了一个 Java 反序列化漏洞的例子,“聊天机器人生成了有漏洞的代码,并提供了如何使其更安全的建议,但却说它无法创建更安全版本的代码。”
Khoury 认为,ChatGPT 在目前的形式下是一个风险,但这并不是说没有合理使用这种不稳定、表现不佳的 AI 助手的方法。“我们已经看到学生使用这个工具,程序员也会在现实中使用这个工具。”他说,“所以拥有一个生成不安全代码的工具是非常危险的。我们需要让学生意识到,如果代码是用这种类型的工具生成的,那么它很可能是不安全的。”他还称,让他感到惊讶的是,当他们让 ChatGPT 生成相同任务的不同语言的代码时,有时对于一种语言,它会生成安全的代码,而对于另一种语言,它会生成有漏洞的代码,“因为这种语言模型有点像一个黑盒子,我真的没有一个很好的解释或理论来说明这一点。”
热门推荐
-
韩国的这款大宇无叶风扇,不仅仅是风扇喔!
叶紫小编小木有不得不吐槽一下最近的天气了,站在门口就可以感受到迎面的热浪向你袭来,就算你把自己全副武... -
小米小爱老师多国语言翻译机,499 元首发抢购
此前,小米正式推出小爱老师产品,这款产品目前已经在京东618期间开启首发抢购,新品入手价为499元。 -
软件被攻击?你的硬件也有漏洞
最近企业网络被攻击新闻不断,已经对企业造成了一定的业务损失。虽然企业网络技术的发展为数据交流提高了通... -
AIGC 热火朝天:Adobe 和英伟达同时推出创意生成式图片 AI
”英伟达开发者项目副总裁格雷格・埃斯蒂斯 (Greg Estes) 在谈到与盖蒂这样的合作伙伴合作时... -
研究人员发现 GitHub 存在 RepoJacking 漏洞,用户库可遭挟持攻击
安全公司 Aqua Nautilus 日前曝光了 GitHub 库中存在的 RepoJacking ... -
良心提醒:千万不要把手机充电器一直留在插座上
现如今是个手机不离身的时代,曾经有专家做过实验,当代人对手机的依赖感已经达到了手机不在身边就没有安全... -
马斯克收购推特涉及机密协议面临美国家安全审查
埃隆・马斯克 (Elon Musk) 斥资 440 亿美元收购推特的交易仍面临美国政府的国家安全审查... -
努比亚Z18延续无边框设计语言,搭载全面屏3.0技术屏占比逆天
【旗龙网:2018年8月24日消息】努比亚作为国内一加小众厂商,一直都以“无边框&rdq... -
代码显示 TweetDeck 应用将成为 Twitter Blue 的专属权益
叶紫网 2 月 10 日消息,工程师 Yaroslav 在逆向 TweetDeck 应用之后,在代码... -
腾讯 SSV 推出“银龄守护卡”可随时掌握老人的安全状况
SV 银发科技实验室与几米物联合推出了“银龄守护卡”,将以硬件成本的价格进行公益价 119 元销售(... -
谷歌最新 AI 大语言模型 PaLM2 数据量扩充 5 倍
上周发布的最新大语言模型使用的训练数据,几乎是 2022 年的上一代模型 5 倍。得益于此,该模型在... -
华为安全气囊新专利可根据坐姿调整气囊的展开状态
从专利摘要获取到,实施例公开了一种安全气囊的控制系统和控制方法、交通工具,涉及交通工具领域,解决安全... -
GitHub 正在测试Copilot新功能,程序员可用声音写代码
允许程序员只用声音而不用键盘写代码。允许程序员只用声音而不用键盘写代码。叶紫网了解到,这个实验功能将... -
Mercari 对 3D 打印手工制品发出警告,称可能存在健康和安全风险
叶紫网6 月 27 日消息,日本最大的二手交易平台 Mercari 近日对用 3D 打印机制造的手工... -
谷歌发布 Chrome 浏览器更新,针对 Mac 和 Windows 版漏洞修复
9 月 2 日发布了针对 Mac 和 Windows 版漏洞的 Chrome 浏览器的修复更新。C... -
微软 Win11 Beta 预览版 Build 22621.1610/22624.1610 发布
用户在实时字幕语言菜单中切换语言,则通过语言和区域设置页面安装的增强语音识别支持将需要重新启动实时字... -
紫光携手中国联通发布5G超级SIM卡:支持一键换机
近日,紫光集团官方公布消息,5月17日,中国联通与紫光集团在广州联合发布5G超级SIM卡,拥有32G... -
小寻定位书包:实时保卫孩子安全!~
现在小学生们的安全问题,真的是要引起家长在内的全社会人的关注了,毕竟一个不小心,很有可能会发生很多意... -
Meta 语言 AI 工具泄露:未获授权的用户也能下载使用
Meta 最新的大型语言模型泄漏,当地时间周一,未经授权的用户也可以下载使用,Meta 表示将继续向... -
隐藏在华为手机里的秘密代码,收藏它们的功能有大用处哦
【旗龙网:2018年8月13日消息】从很早之前的手机到现在的智能机,手机中都会有一些神秘的代码,而当... -
网络僵尸病毒 Mirai 变种卷土重来,瞄准 TP-link、网件各设备发动攻击
网络僵尸病毒又开始泛滥,安全分析网站 Palo Alto Networks 最近的研究表明,最近的研... -
OpenAI 预计明年年年营将会达到 2 亿美元,2024 年之前达到 10 亿美元
预计明年年年营将会达到 2 亿美元,2024 年之前达到 10 亿美元。一位知情者称,最近 Open... -
研究人员发现 ChatGPT 生成的代码大部分不安全
有一个生成不安全代码的工具是非常危险的。我们需要让学生意识到,如果代码是用这种类型的工具生成的,那么... -
微软大力推动低代码解决方案,为此发布新的编程语言
近年来,微软一直在大力推广低代码解决方案,甚至发布新的编程语言。今天,微软和美国非营利组织宣布 P... -
欧盟寻求年内就 ChatGPT 等生成式 AI 监管规则达成一致
欧盟议会正在考虑采用三层的监管方案,分别针对生成式 AI 的价值链、基础模型和具体内容。具体来说,...
科技创新、旗龙记载!