马尔科夫性质的离散事件随机作业可以辅导嘛？

　　马尔可夫链是机器学习中无人不知的，任何算法几乎都要用到的种马尔可夫链。

马尔可夫链是什么？

       马尔科夫链是数学中具备了马尔科夫性质的离散事件的随机过程，每一步系统都可以根据概率从一个状态变化到另外一种状态，与不同的状态改变相关的概率叫做转移概率。

　　下图中有两种状态：A和B。如果我们在A，接下来可以过渡到B或留在A。如果我们在B，可以过渡到A或者留在B。在这张图中，从任意状态到任意状态的转移概率是0.5。

马尔可夫链细致平稳条件

1、有限的状态个数

2、状态之间的转移概率需要固定

3、从任意状态能转变到任意状态。