小平方法会发生问题；在这种情况下，须另外考虑变量-误差-拟合模型所需的方法，而不是最小平方法。最小平方问题分为两种：线性或普通的最小平方法，和非线性的最小平方法，取决于在所有未知数中的残差是否为线性。线性的最小平方问题发生在统计回归分析中；它有一个封闭形式的解决方案。非线性的问题通常经由迭代细致化来解决；在每次迭代中，系统由线性近似，因此在这两种情况下核心演算是相同的。最小平方法所得出的多项式，即以拟合曲线的函数来描述自变量与预计应变量的变异数关系。当观测值来自指数族且满足轻度条件时，最小平方估