本书全面总结了离散时间、一般状态空间的马尔可夫过程理论,特别给出了通常的遍历性和几何遍历性的判别准则,以及马尔可夫过程理论在通讯网络等工程技术领域中的大量应用实例。本书起点不高，论述详尽，条理清楚，曾获得1994年度ORSA/TIMS“应用概率优秀出版物奖”。第2版保留了第一版的内容和风格，并新增“第2版结束语”一章。该章内容包括几何遍历性和谱理论，仿真和MCMC，连续时间模型。