Para una cadena de Márkov continua con un número finito de estados puede definirse una matriz estocástica dada por: