本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。
Lecun一句话,恐怕又要引来一场唇枪舌战了。
这个标题错得太荒谬了,太搞笑了。
他所说的这篇文章不是别的,正是最近在圈内引起了一波讨论热潮的《深度学习要碰壁了》。
从文章发布以来,几天内它在推特上引起了几百人的转发点赞。
有人认同也有人反对,但真正让作气到跳脚的,还是Lecun在Facebook上的这条评论。
导致Gary Marcus本人直接在推特上“下战书”:欢迎你发表观点,我洗耳恭听。
并且就在几个小时前,他还挂出Lecun在2018年发表的观点。
强调Lecun当时认为这10个问题中有很多都是错的,在目前看来这些问题都还没有被解决。
不过目前Lecun还没有做出回应。
文章具体说了什么?
首先,我们来看一下Gary Marcus这篇文章中,具体讲了哪些内容。
大体来看,全文可分为两个部分:
- 当下的深度学习充满了炒作,实际上只有在粗略计算时的效果表现好;
- 深度学习应该调整发展方向,和符号处理结合在一起。
作者开篇即提到了Hinton在2016年提出的论点:
AI将在5年内取代放射科医生。
目前来看,这一豪言的确没有实现。
实际上,AI在应用中遇到的“滑铁卢”不是少数:
比如代表着医疗AI的IBM Watson被拆分出售、GPT-3等语言模型三观不正、无人驾驶事故频发……
对此作者认为,深度学习在完成输出对精密度要求高的结果时,表现往往不够好,以上列举的3个场景就是最好的论证。
而且深度学习已经遇到了扩展限制(scaling limits),也就是再继续扩大模型所带来的的收益,已经不够明显。
相反,在图像识别这种只需要粗略结果的情况下,深度学习的效果是好的。
对此,作者提出了自己的观点:
深度学习应该与符号处理 (symbol manipulation)相结合。
符号处理,可以看做是计算机内部编码,比如用二进制位串来代表一些复杂的想法。
为什么得出这样的观点?在这里作者举了一个例子。
在Meta发起的一场NetHack挑战比赛上,AI以1:3的成绩败给了游戏系统。
要知道,这其实是一款在1987年就发布的单人地下城探索游戏,它的地图由ASCII 字符编码。
作者认为,AI之所以会输掉比赛,主要是因为每场游戏都会重新生成新的地图,这意味着玩家不能通过死记硬背地图来取胜,而是要理解游戏中的各种标志,并且搞清楚它们之间的联系。
他还列举了麦卡锡、明斯基等行业先驱的观点,认为符号处理可以被用来构建精确的人工智能程序,用符号来表示独立实体和抽象思想。
不过纯符号系统在图像识别、语音识别任务上的表现不够好。
而这部分,正是神经网络所擅长的。
作者提到,谷歌搜索中的自动拼写纠错,正是神经网络和符号处理结合使用的最好案例。
实际上,在这方面的探索也从来没有停止过。
比如最负盛名的AI——AlphaGo,就是使用符号树搜索和神经网络混合的系统。
还有包括IBM、英特尔、谷歌等科技巨头,这些年也从未停止过在这一领域的积极探索。
网友:Lecun可能只是开玩笑
如此一篇万字长文,一经发表就在网络上激起千层浪。
在不少学界大佬转发的另一面,也有不少人对Gary Marcus的观点存疑。
有人就提出,深度学习并不存在碰壁,而是正在经历一个阶段转型期。
也有人用漫画来生动地表达自己的看法。
另一边,支持Gary Marcuns的人则表示:
他只是提出来一种混合模型,这有什么坏处吗?
而在Gary Marcus向Lecun“下战书”的推特下面,有人也劝他消消气。
可能Lecun只是说着玩的。
最后,我们再来了解一下Gary Marcus。
他是Robust.AI的创始人,这是一家智能机器人公司,自称拥有世界上第一个工业级AI认知引擎。
他还是纽约大学名誉教授,在神经科学、遗传学、进化心理学、AI等领域发表过大量文章,其文章很多刊登在Nature、Science上。
与此同时,他还是一位作家,作品包括《The Algebraic Mind》、《Kluge》、《The Birth of the Mind》等。
那么对于这篇长文,你怎么看呢?