首页 > 试题广场 >

神经网络中为什么用激活函数?请推导sigmoid函数在0处的

[问答题]

神经网络中为什么用激活函数?请推导sigmoid函数在0处的导数是多少?

刘溜溜1107头像

刘溜溜1107

让输出归一化到0到1之间，并且激活函数必须是非线性的

发表于 2020-02-23 15:59:04 回复(0)

ANMC头像

ANMC

$f(x) = \frac{1}{1 + e^{-x}}$

; $f'(x) = \{ \left( 1 + e^{-x} \right)^{-1} \}'$

$= -\left( 1 + e^{-x} \right)^{-2} (- e^{-x})$

$= \frac{e^{-x}}{\left( 1 + e^{-x} \right)^{2}}$

$= f(x) \frac{e^{-x}}{ 1 + e^{-x} }$

$= f(x) \left( 1 - \frac{1}{ 1 + e^{-x} } \right)$

$= f(x) (1 - f(x))$

$f'(0) = f(0) (1 - f(0)) = \frac{1}{4}$

发表于 2020-02-21 11:56:22 回复(0)

牛客Cver头像

牛客Cver

1.神经网络使用激活函数能够增加模型的非线性映射，提高网络的拟合和表达能力；

2. $f(x) = \frac{1}{1+e^{-x}}\\ 求导过程： =(-1) \times (1+e^{-x})^{-2} \times e^{-x} \times (-1)\\ = \frac{e^{-x}}{(1+e^{-x})^{-2}}\\ = \frac{1+e^{-x}-1}{(1+e^{-x})^{-2}}\\ = (1+e^{-x})(1-\frac{1}{1+e^{-x}})$

发表于 2020-02-12 14:28:00 回复(0)

提交观点

问题信息

运维工程师算法工程师金山WPS 2020

来自：金山办公2020校招自...

上传者：小小

难度：

3条回答 19收藏 1368浏览

热门推荐

相关试题

扫描二维码，关注牛客网
意见反馈
下载牛客APP，随时随地刷题

扫一扫，把题目装进口袋

求职之前，先上牛客: 扫描二维码，进入QQ群



扫描二维码，关注牛客公众号

公司地址：北京市朝阳区北苑路北美国际商务中心K2座一层-北京牛客科技有限公司
联系方式：010-60728802 投诉举报电话：010-57596212（朝阳人力社保局）
牛客科技© All rights reserved admin@nowcoder.com
京ICP备14055008号-4 增值电信业务经营许可证营业执照人力资源服务许可证
京公网安备 11010502036488号