随机过程及应用习题课四

1. 设为马氏链，证明即马氏链的逆序也构成一个马氏链.2. 如果马氏链的转移概率矩阵为证明：此马氏链不是遍历的马氏链，但具有平稳分布.3. 一个开关有两种状态：开或关，设它现在开着时，经过单位时间(s