第十七章马氏链模型,随机过程的概念是描述随机现象变化过程的概率规律性。随机过程理论研究随机变量随时间变化的规律,马尔可夫链是一类特殊的随机序列,参数集合T可以看作时间。本章介绍了马尔可夫链的定义及其在实际系统中的应用。