机器学习笔记 1 权重的矫正

这几天研究这篇文章 How to build a simple neural network in 9 lines of Python code ,其中一个矫正权重的公式如下

这个公式是在一万次的循环中,不断执行,以迭代的方式一点点矫正权重的取值。

上边提到的公式适用于上述这种简单的神经网络,对于复杂的 BP 算法(误差逆传播算法),则每次循环要进行四次的矫正,不同的权重,不同连接权,以目标方向的负梯度方向对参数进行调整。

Comments
Write a Comment