随机过程第4章马尔可夫链

第4章 马尔可夫链内容提要 马尔可夫链的概念及转移概率  马尔可夫链的状态分类  状态空间的分解 (n)pij 的渐近性质与平稳分布马尔可夫过程的四种类型马尔可夫链 时间、状态都离散马尔