本书介绍近些年来关于马尔可夫链的统计推断的一些研究新结果:可逆马尔可夫链和不可逆平稳D-马尔可夫链统计计算理论，使用的方法是我们建立的马尔可夫链反演法。第1章介绍本书需要的一些预备知识。第2章介绍马尔可夫链的击中分布和禁忌速率，主要是击中分布的微分性质、矩性质及对称函数性质有关的约束方程，以及马尔可夫链反演法。第3章和第4章分别研究连续时间和离散时间有限状态可逆马尔可夫链的统计计算理论，总结性地给出了关于充分性、必要性和充分必要性的主要结论。第5章以连续时间有限状态空间为例研究不可逆平稳D-马尔可夫链的统计计算理论。第6章讲述各种类型马尔可夫链的统计计算算法、数值例子，以及在计算神经科学、经济领域等的实际应用。第7章从统计的角度介绍基本的模型选择方法。