La cadena de Márkov formula_25 con espacio de estados formula_26 y matriz de transición formula_27 dada por: