林夕一叶的博客

马尔科夫过程一个马尔科夫过程就是指过程中的每个状态的转移只依赖于之前的 n个状态，这个过程被称为1个 n阶的模型，其中 n是影响转移状态的数目。最简单的马尔科夫过程就是一阶过程，每一个状态的转移只依赖于其之前的那一个状态。一阶马尔科夫过程定义了以下三个部分：状态：晴天、阴天和下雨初始向量：定义系统在时间为0的时候的状态的概率状态转移矩阵：每种天气转换的概率所有的能被这样描述的系统都是一个马尔科夫过程。马尔科夫链时间和状态都是离散的马尔可夫过程称为马尔可夫链,简记为Xn=X(n),n=0,1,