马尔可夫链是概率论和数理统计中具有马尔可夫性质且存在于离散的指数集）和状态空间内的随机过程 。适用于连续指数集的马尔可夫链被称为马尔可夫过程，但有时也被视为马尔可夫链的子集，即连续时间马尔可夫链，与离散时间马尔可夫链相对应，因此马尔可夫链是一个较为宽泛的概念