Markov链马可夫链（MarkovChains）是随机变量数列，其中每个变量取有限或可数个值。通常以非负整数集合{0，1，2，...}作为状态集，表示在时间n的状态为i。关键性质是未来状态仅取决于当前状态，与过去状态无关。转移概率P{Xn...