首页 > 试题广场 >

训练神经网络时，以下哪种激活函数最容易造成梯度消失: （&n

[单选题]
训练神经网络时，以下哪种激活函数最容易造成梯度消失: （       ） 
  • tanh
  • sigmoid
  • ReLU
  • leaky ReLU
查看正确选项
添加回答
牛客685342718号头像 牛客685342718号

Sigmoid的导数是,导数值范围是，连续乘上几次就容易梯度消失了。
tanh的导数是, 当接近1或者-1的时候，导数值也会变成0。

发表于 2021-02-25 08:55:05 回复(0)
提交观点

问题信息

乐鑫 算法工程师 2020
上传者：小小
难度：
1条回答 1746浏览

热门推荐

相关试题

扫一扫，把题目装进口袋

求职之前，先上牛客

扫描二维码，进入QQ群

扫描二维码，关注牛客公众号