开发者社区> 问答> 正文

什么是 神经网络的权重初始化?

什么是 神经网络的权重初始化?

展开
收起
因为相信,所以看见。 2020-05-20 16:06:50 616 0
1 条回答
写回答
取消 提交回答
  • 阿里,我所有的向往

    image.png image.png image.png 希望你现在对梯度消失或爆炸问题以及如何为权重初始化合理值已经有了一个直观认识,希望你设置的权重矩阵既不会增长过快,也不会太快下降到0,从而训练出一个权重或梯度不会增长或消失过快的深度网络。我们在训练深度网络时,这也是一个加快训练速度的技巧。

    2020-05-20 16:07:37
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
可编程网络视角的网络创新研究 立即下载
可编程网络和SDN3.0 立即下载
开放促进创新:构建开放网络生态 立即下载