首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

Gradient Descent

Gradient Descent 相关概念 1.步长或学习效率(learning rare):步长决定在梯度下降过程中,每一步沿梯度负方向前进的距离。...梯度下降的形式BGD、SGD、以及MBGD 三种算法中文名分别为 批量梯度下降(Batch gradient descent) 批量梯度下降法(Batch Gradient Descent,简称BGD)...随机梯度下降(Stochastic gradient descent) 随机梯度下降是通过每个样本来迭代更新一次, 如果样本量很大的情况(例如几十万),那么可能只用其中几万条或者几千条的样本,就已经将theta...小批量梯度下降(Mini-batch gradient descent) 有上述的两种梯度下降法可以看出,其各自均有优缺点,那么能不能在两种方法的性能之间取得一个折衷呢?...即,算法的训练过程比较快,而且也要保证最终参数训练的准确率,而这正是小批量梯度下降法(Mini-batch Gradient Descent,简称MBGD)的初衷。

53610
领券