one order Markovian process 一阶Markov过程

non-homogenous markovian process 非齐次马尔科夫过程

generalized semi-markovian process 广义半马尔可夫过程

Markovian renewal process 马尔可夫更新过程

Markovian decision process 马尔可夫决策过程 ; Markov决策过程 ; 马可夫决策程序

Markovian arrival process 马尔可夫到达过程 ; 马氏到达过程

Markovian stochastic process 马尔可夫随机过程

semi-Markovian decision process 半马尔可夫决策过程