活向量组成时，这些公式会涉及到数学公式，以确定权重的变化。设计基于联结主义的教学方法是近年来研究的热点。借由这种方式正规化学习，联结主义者能够使用许多工具。在联结主义的学习方法中，有一种很常见的策略是在以权重矩阵所定义的空间中，于该空间的误差表面与梯度下降合并。在联结主义者模型中，所有梯度下降学习都涉及透过误差表面对应于权重的偏导数来更改每个权重。反向传播（BP）最早流行于1980年代，它可能是当今最普遍的联结主义梯度下降算法。
历史.联结主义的思想可以追溯到一个世纪以前，在2