AIoT领域的安全风险,你不能不知道!

安全 移动安全 人工智能
当前,AI医疗、智慧家庭、自动驾驶、智能交易等人工智能的发展不断颠覆企业的商业模式,也在改变我们的生活方式。但不可否认的是,人工智能在服务和赋能人类生产生活同时,也带来了难以忽视的安全风险。

当前,AI医疗、智慧家庭、自动驾驶、智能交易等人工智能的发展不断颠覆企业的商业模式,也在改变我们的生活方式。中国科学院院士、上海交通大学副校长毛军发表示,人工智能作为“加速器”已涉及医疗、金融、交通、新闻等各行各业,可以有效解决传统行业面临的问题,发挥大量数据的价值,赋能传统产业发展。

“人工智能发展的本质是通过算法、算力和数据去解决完全信息和结构化环境下的确定性问题。”毛军发认为,随着算法、算力和数据的进一步发展,势必加速万物智能时代到来,为人工智能赋能各种场景打通重要通道,实现万物互联。

但不可否认的是,人工智能在服务和赋能人类生产生活同时,也带来了难以忽视的安全风险。

[[338325]]

【人工智能安全问题分类】

一、数据风险

1. “数据投毒”

所谓的“数据投毒”指人工智能训练数据污染导致人工智能决策错误。通过在训练数据里加入伪装数据、恶意样本等,破坏数据的完整性,进而导致训练的算法模型决策出现偏差。

“数据投毒”主要有两种攻击方式:

  • 一种是采用模型偏斜方式,攻击目标是训练数据样本,通过污染训练数据达到改变分类器分类边界的目的;
  • 另一种则是采用反馈误导方式,攻击目标是人工智能的学习模型本身,利用模型的用户反馈机制发起攻击,直接向模型“注入”伪装的数据或信息,误导人工智能做出错误判断。

“数据投毒”危害性十分巨大,特别是在自动驾驶领域,可导致车辆违反交通规则甚至造成交通事故。

2. 数据泄露

一方面逆向攻击可导致算法模型内部的数据泄露;

另一方面,人工智能技术可加强数据挖掘分析能力,加大隐私泄露风险。比如各类智能设备(如智能手环、智能音箱)和智能系统(如生物特征识别系统、智能医疗系统),人工智能设备和系统对个人信息采集更加直接与全面。人工智能应用采集的信息包括了人脸、指纹、声纹、虹膜、心跳、基因等,具有很强的个人属性。这些信息具有唯一性和不变性,一旦泄露或者滥用将产生严重后果。

3. 数据异常

运行阶段的数据异常可导致智能系统运行错误,同时模型窃取攻击可对算法模型的数据进行逆向还原。此外,开源学习框架存在安全风险,也可导致人工智能系统数据泄露。

二、算法风险

  • 图像识别、图像欺骗等会导致算法出问题,比如自动驾驶,谷歌也做了一些研究,如果模型文件被黑客控制恶意修改,并且给它学习,会产生完全不一样的结果;
  • 算法设计或实施有误可产生与预期不符甚至伤害性结果;
  • 算法潜藏偏见和歧视,导致决策结果可能存在不公;
  • 算法黑箱导致人工智能决策不可解释,引发监督审查困境;
  • 含有噪声或偏差的训练数据可影响算法模型准确性。

三、网络风险

  • 人工智能不可避免的会引入网络连接,网络本身的安全风险也会将AI带入风险的深坑;
  • 人工智能技术本身也能够提升网络攻击的智能化水平,进而进行数据智能窃取;
  • 人工智能可用来自动锁定目标,进行数据勒索攻击。人工智能技术通过对特征库学习自动查找系统漏洞和识别关键目标,提高攻击效率;
  • 人工智能可自动生成大量虚假威胁情报,对分析系统实施攻击。人工智能通过使用机器学习、数据挖掘和自然语言处理等技术处理安全大数据,能自动生产威胁性情报,攻击者也可利用相关技术生成大量错误情报以混淆判断;
  • 人工智能可自动识别图像验证码,窃取系统数据。图像验证码是一种防止机器人账户滥用网站或服务的常用验证措施,但人工智能通过学习可以让这一验证措施失效。

四、其他风险

第三方组件问题也会存在问题,包括对文件、网络协议、各种外部输入协议的处理都会出问题。被黑客利用,带来的是灾难性的毁灭。

[[338326]]

【通俗来讲就是:再牛逼的安全验证,最终也不过是一串数据!】

我们要清楚的认识到,人工智能的时代数据安全也面临了很多新的挑战。保护数据安全保护算法安全,对于企业来说变为了重中之重。

 

责任编辑:赵宁宁 来源: FreeBuf
相关推荐

2017-12-25 13:26:36

CNN深度学习网络

2019-07-08 10:40:03

线程池策略CPU

2016-12-15 17:15:44

2024-06-03 00:00:05

2017-01-19 14:44:14

2017-01-16 15:01:27

中安威士

2009-08-03 09:29:26

2018-04-16 10:54:00

数据中心UPS电池

2009-06-22 14:17:00

2022-01-05 08:01:48

前端技术编程

2012-09-17 09:59:46

创业创业教训创业家

2019-11-13 08:37:34

数据库筒仓基础架构

2012-11-23 10:57:44

Shell

2017-05-04 11:05:43

互联网

2021-05-27 05:25:11

SpringLifecycleSmartLifecy

2023-02-27 09:20:24

绝对定位CSS

2023-01-29 09:46:47

Dialog弹窗模态

2021-01-05 11:22:58

Python字符串代码

2020-01-29 19:40:36

Python美好,一直在身边Line

2015-08-13 09:03:14

调试技巧
点赞
收藏

51CTO技术栈公众号