Podemos hablar de diferentes definiciones referentes a los procesos de Márkov de primer orden: