神经网络如何告别黑箱,可解释?数据派THU共 1024字,需浏览 3分钟 ·2022-12-17 21:38来源:pythonic生物人本文约1000字,建议阅读9分钟本文带你用光学系统类比深度学习。神经网络黑箱的意思是我们知其然,不知其所以然,相关理论比较缺乏。别看神经网络相关论文汗牛充栋,但是大部分类似于technical report,告诉你我这么做效果不错,具体原因不知道,只能“guess”,所以很容易被打脸。如何看待神经网络的黑箱?这一篇文章(www.argmin.net/2018/01/25/optics/)讲得挺好的,他用光学系统类比深度学习,非常形象。「从结构来看」,无论是深度学习还是镜头,都是一层一层叠起来的,如下图所示。「从设计流程来看」,当要设计一个镜头的时候,往往以一个已知的镜头组合作为基础,这个已知的镜头组合一般都以发明这个镜头组合的人命名,类似于深度学习的里面的LeNet、AlexNet。然后你跑个仿真,看看这个基础镜头组合的表现和你需要达到的要求存在哪些差距,在合适的地方插入合适的组件来磨平差距。接着,你用一个[数值优化器]来调上述镜头组合的参数,以发挥上述镜头组合最大的功效。这个类似于深度学习里面的优化和调超参过程。「从系统组成部件来看」,光学组件有的起到反射作用,有的起到衍射作用,有的起到[折射作用],有的起到散射作用,有的起到相位校正作用等等。深度学习组件(conv、pool、relu等等)有的起到学习空间相关作用,有的起到防止过拟合作用,有的起到增加非线性作用等等。「从发展历史来看」,伽利略时代虽然没有光学理论,类似于现在的深度学习,但是同样造出来了人类历史上第一架天文望远镜,推动了天文学的发展。现在深度学习也理论不足,但是极大地推动了人工智能的发展。「从结果看」,在几百年里,经过科学家的不懈努力,光学终于形成了一整套比较完备的体系,使得现在的光学工程师在设计镜头的时候有迹可循,而不是像几百年前的伽利略一样靠经验设计。这一套完备的体系将光学分层了,如下图所示,这样的分层使得光学分工明确,每个人研究各自层的东西,一起推动光学发展。上面的层是下面层的抽象,越往上能解释越复杂的现象,见下图所示,而相比而言深度学习里面的很多现象还得不到较好的解释。光学也经历过黑箱时代,深度学习现在就是黑箱时代,理论的前进一般会晚于实践,但是假以时日,理论肯定会完备起来,形成类似于当前光学那样的层层抽象的学术体系,只不过这个过程需要所有从业者一起的努力,和一定时间的积淀,也许几十年,也许上百年。编辑:黄继彦浏览 42点赞 评论 收藏 分享 手机扫一扫分享分享 举报 评论图片表情视频评价全部评论推荐 如何看待神经网络的黑箱?算法进阶0如何看待神经网络的黑箱?小白学视觉0黑箱社会《黑箱社会》内容简介:你是否想到,当你在上网娱乐、学习、浏览新闻或从事商业活动时,你就会无形中陷入一黑箱社会0黑箱社会黑箱社会0黑箱 (2009)黑箱 (2009)0神经网络如何模拟任意函数?机器学习与生成对抗网络0“黑箱”简史:如何从专业名词变成大众隐喻?腾云0神经网络如何模拟任意函数?机器学习算法与Python实战0如何停止胡思乱想 : 告别精神内如何停止胡思乱想 : 告别精神内0如何停止胡思乱想 : 告别精神内心理学研究表明,生活中的许多问题与烦恼,都是“反刍”造成的。反刍是一种持久的、循环的抑郁思维,表现是如何停止胡思乱想 : 告别精神内0点赞 评论 收藏 分享 手机扫一扫分享分享 举报