告别深度学习炼丹术!谷歌大脑提出“权重无关”神经网络

初商 2019-08-26

数据派

来源:新智元

作者:新智元

文章来源:微信公众号 数据派THU

本文约5600字,建议阅读10+分钟。

无需权重训练!谷歌再向深度学习炼丹术发起“攻击”。


image.png

[ 导读 ]神经网络训练中“权重”有多重要不言而喻。但现在,可以把权重抛诸脑后了。谷歌大脑最新研究提出“权重无关神经网络”,通过不再强调权重来搜索网络结构,所搜索的网络无需权重训练即可执行任务!

还在为 “调参炼丹” 感到痛苦吗?是时候重视下神经网络结构了!

前不久,我们报道了谷歌给出首个神经网络训练理论的证明。这一研究在训练深度神经网络被戏谑为 “调参炼丹” 的当下,犹如一道希望的强光,射进还被排除在 “科学” 之外的深度学习领域,激动人心。

而今天,谷歌再向炼丹术发起 “攻击”:提出一种神经网络结构的搜索方法,该方法无需任何显式的权值训练即可执行任务!

image.png

arXiv 地址:

https://ar

登录 后评论
下一篇
corcosa
15043人浏览
2019-10-08
相关推荐
和 Geoffery Hinton 面对面聊聊
476人浏览
2019-05-15 22:11:58
0
0
0
352