首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

神经网络权重梯度的推导

--------------------------------------------------------------------------------------------------------

BP神经网络是一种多层的前馈神经网络,其主要的特点是:信号是前向传播的,而误差是反向传播的。下面以4层网络为例进行相关推导。

--------------------------------------------------------------------------------------------------------

神经网络的相关图解

4层神经网络为例

权重矩阵

前向传播生成神经网络

均方误差损失函数权重梯度

对数损失函数权重梯度

权重梯度推导出来后,就可以应用梯度下降法求解神经网络的权重或参数了。

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20180512G14W5D00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券