Maximum likelihood
若formula_1是离散分布，formula_9即是在参数为formula_3时观测到这一采样的概率。若其是连续分布，formula_9则为formula_5联合分布的概率密度函数在观测值处的取值。一旦我们获得formula_5，我们就能求得一个关于formula_3的估计。最大似然估计会寻找关于formula_3的最可能的值（即，在所有可能的formula_3取值中，寻找一个值使这个采样的“可能性”最大化）。从数学上来说，我们可以在formula_3的所有可能取值中寻找一个值使得似然函数取到最大值。这个使可能性最大的formula_18值即称为formula_3的最大似然估计。由定义，最大似然估计是样本的函数。