首个生成式 AI 安全指导性文件来了,你读懂了吗?

人工智能
《要求》提出,建立语料来源黑名单,不得使用黑名单来源的数据进行训练。应对各来源语料进行安全评估,单一来源语料内容含违法不良信息超 5% 应将其加入黑名单。

10 月 11 日,全国信息安全标准化技术委员会官网发布《生成式人工智能服务安全基本要求》(征求意见稿),面向社会公开征求意见。

公告原文:https://www.tc260.org.cn/front/postDetail.html?id=20231011143225

这是国内首个专门面向生成式 AI 安全领域的规范意见稿,也是对 7 月网信办等七部门推出的《生成式人工智能服务管理暂行办法》的支撑。

征求意见稿首次提出生成式 AI 服务提供者需遵循的安全基本要求,涉及语料安全、模型安全、安全措施、安全评估等方面。

下文介绍了该文件部分要点。

要求:提供者不应使用未经主管部门备案的基础模型进行研发。在训练过程中,应将生成内容安全性作为评价生成结果优劣的主要考虑指标之一。

在每次对话中,应对使用者输入信息进行安全性检测,引导模型生成积极正向内容。

《要求》提出,建立语料来源黑名单,不得使用黑名单来源的数据进行训练。应对各来源语料进行安全评估,单一来源语料内容含违法不良信息超 5% 应将其加入黑名单。

应使用包含个人信息的语料时,获得对应个人信息主体的授权同意,或满足其他合法使用该个人信息的条件。

应使用包含人脸等生物特征信息的语料时,获得对应个人信息主体的书面授权同意,或满足其他合法使用该生物特征信息的条件。

在训练过程中,应将生成内容安全性作为评价生成结果优劣的主要考虑指标之一。


全文:https://www.tc260.org.cn/upload/2023-10-11/1697008495851003865.pdf

责任编辑:武晓燕 来源: OSCHINA
相关推荐

2023-06-27 07:09:39

2024-02-16 09:00:00

软件架构代码设计软件开发技术

2024-07-30 09:43:59

2019-06-06 14:16:48

数据库架构流量

2021-10-10 20:36:49

Android Root权限

2023-12-26 14:12:12

人工智能机器学习Gen AI

2023-12-10 14:59:53

2024-04-07 08:23:01

JS隔离JavaScript

2011-06-14 12:56:55

SQL Server复灾

2022-03-18 00:17:30

NISTICS安全

2024-04-19 13:17:40

PostgreSQLSQL数据库

2024-04-29 10:33:18

人工智能Nvidia 技术AI

2018-06-05 11:27:12

2022-06-06 07:58:52

勒索软件恶意软件解密

2022-01-06 07:59:32

WebGPUOpenGL引擎

2022-10-12 10:18:41

AI歌曲

2024-06-27 10:51:28

生成式AI领域

2023-03-21 08:00:00

人工智能ChatGPT云计算

2022-08-15 07:24:41

WindowsDLL键盘
点赞
收藏

51CTO技术栈公众号