Cuando el espacio de estados E es finito, si P denota la matriz de transición de la cadena se tiene que: