理解神经网络的激活函数

激活函数在神经网络中具有重要的地位，对于常用的函数如sigmoid，tanh，ReLU，不少读者都已经非常熟悉。但是你是否曾想过这几个问题： 为什么需要激活函数？ 什么样的函数可以做激活函数？ 什么样的函数是好的激活函数？ 在这篇文章中，SIGAI将和大家一起讨论这几个问题，以加深对激活函数的理解，如果对本文的观点持有不同的意见，欢迎向我们的公众号发消息一起讨论。