人脑如何防止梯度消失和梯度爆炸?
机器学习实验室
共 4138字,需浏览 9分钟
· 2021-02-18
导读
梯度消失和梯度爆炸一直是深度学习的难点,而人脑有接近900亿个神经元,可以说是一个非常规模庞大的网络。那么人脑是如何防止梯度消失和梯度爆炸的?极市小编在知乎上发现了这个有意思的问题,分享给大家思考。
作者丨冒蓝火的加特林
作者丨哈佛孙一峰
作者丨googol
你对这个问题有什么看法?可以在留言去发表你的见解~
往期精彩:
点个在看
评论
共 4138字,需浏览 9分钟
· 2021-02-18
导读
梯度消失和梯度爆炸一直是深度学习的难点,而人脑有接近900亿个神经元,可以说是一个非常规模庞大的网络。那么人脑是如何防止梯度消失和梯度爆炸的?极市小编在知乎上发现了这个有意思的问题,分享给大家思考。
作者丨冒蓝火的加特林
作者丨哈佛孙一峰
作者丨googol
你对这个问题有什么看法?可以在留言去发表你的见解~
往期精彩: