一站到底,Google联合OpenAI揭秘神经网络黑箱:AI的才智,都藏在「激活地图」里,比目鱼

admin 6个月前 ( 03-28 14:41 ) 0条评论
摘要: Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里...
娇喘台词

郭一璞 发自 凹非寺

神重塑国魂经网络内部,终究藏着什么?

这是很多机器学习研究者心里的终极疑问。一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼

现在,Google和OpenAI的一场协作,以一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼图画分类神经网络为例,咱们揭开了神经网络黑箱的一角。

他们说,图画分类神经网络里边长这样:

这不是狗头,是一系列激活地图(Activation Atlas)中的一张,浅显的说,便是神经网络在学习图画分类之后,在心里把一切学过的物品画了一幅思想地图,把长得像的东西放在了一同,以此作为依据,判别之后一切的它看到的图片是什么。

这个惊人的发现,让许多人振作:

“祝贺OpenAI,太风趣了!”

“做的真好,他们每次都能推出凶猛的项目,回答我心中的疑问。”

“这是全新的概念啊!”

“尽管没看懂,可是好酷啊!”

激活地图能够协助咱们了解神经网一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼络在给一张图片进行图画分类时“看”到了什么,有层次的展现出神经网络中的具体内容。

重点是,这种展现方法咱们人类也能够了解,相似于机器学习的“字母表”,由简略的元素,像原子相同重那书总不结束组出杂乱的图画。

教神经网络识物,是不是跟带娃差不多

示例中的激活地图是依据在ImageNet数据集上练习的卷积图画分类网络Inceptionv1构建的。

网络总共10层,每层稀有百个神经元节点,就好像一栋总共10层的楼,每层都稀有百个房间,每个房间里都住着一个神经元节点。

每个神经元节点都有自己的“喜爱”,不同的神经元节点在不同类型的图画上的激活程度不同。比方一层中的一个神经元节点喜爱狗,对狗耳朵的图画有活跃的反响;另一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼一层的另一个神经元节点是个猫奴,对猫爪的图画有积干死了极的反响。

神经元节点:我要这个,给我买这个

把它们“喜爱”的图画列出来,依据每个神经元节点的“房间号”散布,画在“大楼1楼平面图”上,就能够组合在一同,组成单张激活地图,相似咱们最初看到的那张像狗头相同的拼图的姿态。

神经元节点:我要这个,给我买这个

之后,把“大楼1楼平面图”、“大楼2楼平面图”……“大楼10楼平面图”调集在一同,就成为了激活地图

下面便是其间两层的比如:

激活地图第六层MIXED4D

激活地图第七层MIXED4E 窥视神经网络心里国际

仔细看就能发现,每一层里相似的色彩都在接近的方位,乃至不同层的“楼上楼下”都看起来很相似。

由于神经网络是个逼迫症,为了便利自己学习回忆,它把有相似喜爱的神经元节点都安排在了附近的房间里,逼迫他们当街坊。

所以,现在让咱们走到大楼的不同区域一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼,观赏一下神经元节点们的“兴趣小组”吧~

每个方块图画,都是一个神经元节点程晨童星喜爱的图片品种。“狗头图”的“左耳”上,是各式各样动物的脸:一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼

“脑门”的部位,则是各种生果的图画:

“嘴巴”的部位,全顶蘑菇啥意思是水,各种小水坑小池塘:浊世小兵

“右脸”边际处,就都是一些房子了。

一切的小图,图画挨着图画,构成突变,从而联合在一同,构成神经网络对图片分类的认知系统。

就像这样,泰迪突变成二哈,变成北极熊,变成狐狸:

鸵鸟也能够突变成各种不同的鸟类:

使用激活地图调戏神经网络

最终,你知道了在神经网络的大楼里,哪些不同的物体是街坊,也就知道神经网络会把这些东西弄混朱歆昀。

看下面的激活地图,左面更像灰鲸,右边更像大白鲨

现在,拿神州宏网一张灰鲸的相片,神经网络能够认出来这是灰鲸。

你在图片一角新12j01放一张棒球的相片,棒球的赤色缝线让神经网络觉得这不是灰夏沫之夏鲸,就朝激活图右侧闻喜景益民偏离了一下,以为这是大白鲨。

现在,理解神经惊慌国际的低语网络为什么会认错东西了吧?

传送门

De一站究竟,Google联合OpenAI揭秘神经网络黑箱:AI的智慧,都藏在「激活地图」里,比目鱼mo可瘦妮玩,有高清大图,能把神经网络翻个底朝天

https://distill.pub/2019/activation-atlas/app.html

Google博客

https://ai.googleblo千本共g.co楚兰菊m/2019/03/exploring-neural-networks.html

OpenAI博客

https://blog.open交配马ai.com/introducing-activation-atlases/

论文

https://distill.pub/2019/activation-atlas/

Gi玩子宫tHub

https://github.com/tensorflow/lucid#activation-atlas-noteboo合肥丝足会所ks

动物 人类
声明:该文观念仅代表作者自己,搜狐号系信息发布渠道,搜狐仅供给信息存储空间效劳。
文章版权及转载声明:

作者:admin本文地址:http://www.motaomsia.com/articles/582.html发布于 6个月前 ( 03-28 14:41 )
文章转载或复制请以超链接形式并注明出处魔塔世界,游戏里的世界我们创造