随机过程作业和答案第三章

马尔科夫过程1、将一颗筛子扔多次。记Xn 为第n次扔正面出现的点数，问{X(n) , n=1,2,3,···}是马尔科夫链吗？如果是，试写出一步转移概率矩阵。又记Yn为前n次扔出正面出现点数的总和，问