深度学习中的优化问题及解决方法 上传者:wet10 2023-03-17 16:06:32上传 MD文件 6.42KB 热度 19次 深度学习中的优化问题是寻找神经网络上一组能降低代价函数的参数,解决该问题的方法。其中重要的点有梯度的负方向是函数减小最快的方向;使用一阶泰勒展开式近似当前点的函数值等。对于选择优化算法,建议对于稀疏数据使用自适应的学习率的优化方法,SGD更加可靠;同时需要训练较深较复杂的网络时,建议使用学习率自适应的优化方法,Adagrad,RMSprop和Adam为常用算法中性能较好的。 下载地址 用户评论 更多下载 下载地址 立即下载 用户评论 发表评论 wet10 资源:19 粉丝:0 +关注 上传资源 免责说明 本站只是提供一个交换下载平台,下载的内容为本站的会员网络搜集上传分享交流使用,有完整的也有可能只有一分部,相关内容的使用请自行研究,主要是提供下载学习交流使用,一般不免费提供其它各种相关服务! 本站内容泄及的知识面非常广,请自行学习掌握,尽量自已动脑动手解决问题,实践是提高本领的途径,下载内容不代表本站的观点或立场!如本站不慎侵犯你的权益请联系我们,我们将马上处理撤下所有相关内容!联系邮箱:server@dude6.com