马尔可夫链
如果马尔可夫链的状态空间的概率分布是离散的，查普曼-科尔莫戈罗夫等式可表示为（可到无穷维的）矩阵相乘：