En una cadena de Márkov con espacio de estados E, si "x"∈E se define formula_18 y diremos que: