谷歌称重复某些关键词可让ChatGPT自曝训练数据 OpenAI:违反服务条款

2023-12-06 08:32:17
关注

12月5日消息,谷歌的一组研究人员声称,他们已经找到了获取OpenAI人工智能聊天机器人ChatGPT部分训练数据的方法。

在最新发表的论文中,谷歌研究人员表示,某些关键词可迫使ChatGPT泄露其所接受训练数据集的部分内容。

他们举例称,该模型在被提示永远重复“poem(诗歌)”这个词后,给出了一个似乎是真实的电子邮件地址和电话号码。令人担忧的是,研究人员表示,个人信息的泄露经常发生在他们发动攻击的时候。

在另一个例子中,当要求模型永远重复“company(公司)”这个词时,也出现了类似的训练数据泄露情况。

研究人员称这种简单的攻击看起来“有点愚蠢”,但他们在博客中说:“我们的攻击奏效了,这对我们来说太疯狂了!我们应该、本可以更早地发现。”

他们在论文中表示,仅用价值200美元的查询,他们就能够“提取出超过1万个逐字记忆的训练示例”。他们补充说:“我们的推断表明,如果调动更多预算,竞争对手可以提取更多的数据。”

OpenAI目前正面临着几起关于ChatGPT秘密训练数据的诉讼。为ChatGPT提供动力的人工智能模型是使用来自互联网的文本数据库进行训练的,据信它已经接受了大约3000亿个单词(即570 GB数据)的训练。

一项拟议的集体诉讼声称,OpenAI“秘密”窃取了“大量个人数据”,包括医疗记录和儿童信息,以培训ChatGPT。一群作家也在起诉这家人工智能公司,指控他们利用自己的作品来训练其聊天机器人。

对于谷歌研究人员的发现,OpenAI已经给出回应,称重复使用某个指令可能违反了其服务条款。

数字媒体调查网站404 Media近日对谷歌研究人员的发现进行了核实,在要求ChatGPT不断重复“computer(计算机)”这个词时,该机器人确实吐出了这个词,但还附上了一条警告,上面写着:“此内容可能违反我们的内容政策或使用条款。”

目前尚不清楚这一请求违反了OpenAI内容政策的哪个具体部分。然而,404 Media指出,OpenAI的使用条款确实规定,用户“不得反向汇编、反向编译、反编译、翻译或以其他方式试图发现服务的模型、算法、系统的源代码或底层组件(除非此类限制违反适用的法律)”,并且还限制用户使用“任何自动或编程方法从服务提取数据或输出”。(小小)

您觉得本篇内容如何
评分

相关产品

Alpha (Taiwan) 台湾艾华 ALPHA艾华 MMS1011-A01 FSR 压力传感器

MMS1011压力分布感测套件,提供多点触碰且即时性的压力感测功能,能够同时侦测位置(X-Y)和力(Z)的分布数据,协助您快速掌握感测元件的特性。压力感测元件外形尺寸皆能配合客制化需求,适用于库存管理、座位占用管理、平衡训练、身体(脚)压力监测等应用。

AOSI(Advanced Orientation Systems, Inc.) EZ-COMPASS-3A 倾角传感器

该装置通过标准RS-232、RS-422和RS-485*接口输出连续航向、磁场、双轴倾斜和温度数据。方位角由三轴半导体磁强计产生,分辨率为12位(0.08度)。罗盘/倾斜模块非常适合于多种导航、研究、训练、建筑、娱乐和其他精确定位、导航和水准测量应用。指南针能够在NMEA-0183模式下输出多传感器信息,并响应许多常用命令。通过超级终端Windows附件轻松链接,有助于自定义校准、硬铁补偿、数据采集、数据平均、扫描延迟、转储因子和数据显示。

评论

您需要登录才可以回复|注册

提交评论

感知视界

这家伙很懒,什么描述也没留下

关注

点击进入下一篇

2023年最新《瓦森纳协定》

提取码
复制提取码
点击跳转至百度网盘