OpenAI DALL-E 3 模型存生成“不当内容”漏洞,一微软员工上报后反遭“封口令”

人工智能 新闻
微软软件工程部门经理 Shane Jones 日前发现 OpenAI 旗下 DALL-E 3 模型存在漏洞,据称能够生成一系列 NSFW 不当内容,在上报相关漏洞后,Shane Jones 却被下达“封口令”,不过该员工最终还是选择向外界披露相关漏洞。

2 月 2 日消息,微软软件工程部门经理 Shane Jones 日前发现 OpenAI 旗下 DALL-E 3 模型存在漏洞,据称能够生成一系列 NSFW 不当内容,在上报相关漏洞后,Shane Jones 却被下达“封口令”,不过该员工最终还是选择向外界披露相关漏洞。

▲ 图源 Shane Jones 对外披露的报告

IT之家注意到,Shane Jones 在去年 12 月通过独立研究发现 OpenAI 文字生成图片的 DALL-E 3 模型存在一项漏洞,能绕过 AI 护栏(AI Guardrail)生成一系列 NSFW 不当内容。

之后 Shane Jones 将漏洞曝光上报微软及 OpenAI,并在领英上发布公开信,声称相关漏洞会对大众造成安全风险,呼吁 OpenAI 在解决漏洞前应暂时下架 DALL-E 3 模型。

随后 Shane Jones 被微软法务部及高管找上门,并警告他立即删除领英公开信并停止对外披露任何内容,但却并未给予任何解释说明,此后 Shane Jones 屡次寻求公司内部沟通,但均未得到公司回应,而漏洞也未修复,之后 Shane Jones 便向媒体及有关部门披露了相关漏洞。

Shane Jones 提到,近日网络上出现 AI 生成的知名歌手 Taylor Swift(泰勒・斯威夫特)不雅照便与该漏洞有一定关联,这些不雅照据称是使用微软 Designer AI 功能生成,而 Designer 底层模型正是 DALL-E 3,因此微软在本次事件中下达“封口令”存在重大过失。

此后微软官方回应 Engadget 等媒体,声称将解决相关员工的疑虑,并修复相关漏洞,不过微软同时声称 Shane Jones 披露的漏洞实际上成功率较低,“无法绕过微软为模型设置的所有安全机制”、“目前还不清楚该漏洞与 Taylor Swift 不雅照事件是否有关联性”

责任编辑:庞桂玉 来源: IT之家
相关推荐

2023-08-02 16:09:16

2023-03-22 14:05:00

微软AI

2023-10-20 08:26:50

2023-09-21 07:54:22

人工智能DALL-E 3

2021-12-23 09:54:02

AI模型人工智能

2023-10-04 20:09:16

微软Bing Chat

2023-07-10 15:22:29

OpenAIGPT-3.5

2023-10-20 12:49:00

AI模型

2023-12-20 07:22:03

DALL-E 3微软键盘

2023-11-28 09:42:07

OpenAIWindows 11

2022-08-31 08:54:57

AIDALL-E 2OpenAI

2022-08-17 15:52:24

AI

2024-04-01 13:03:00

AI模型

2022-05-19 15:31:10

图灵图像测试

2009-07-09 08:46:23

Google Chro微软对比

2022-08-08 16:24:04

AI图像研究

2023-09-21 10:31:06

人工智能模型

2023-09-21 09:49:09

人脸识别• ChatGPT图像

2023-10-09 12:44:19

2023-10-30 14:43:32

点赞
收藏

51CTO技术栈公众号