深度学习:Sigmoid函数与损失函数求导
·
转载自:
在神经网络里经常使用sigmoid做激活函数,它的导数是怎么样求解呢?因为要使用它的导数来计算梯度下降。
这个过程如下:
1. sigmoid
函数:f(z) = 1 / (1 + exp( − z))
导数:f(z)' = f(z)(1 − f(z))
求导过程如下:
关于sigmoid函数在神经网络中的应用:
http://blog.csdn.net/zhishengqianjun/article/details/75303820
DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐


所有评论(0)