本书介绍了马尔科夫决策过程及其它相关方法在公共安全领域的应用，主要面向安全科学与工程专业的高年级本科生，作为其安全决策方法类课程的教材，同时也可作为其它学科运筹学马尔科夫过程部分的参考资料。 在广与深的关系上，本书从处理大多数实际问题使用的马尔科夫假设开始，围绕着马氏决策过程和动态规划贝尔曼方程，依次介绍有限状态问题、无限状态问题和折扣成本问题，之后分别针对马氏过程的各个要素，从状态集、动作集等方面向外扩展出Q学习、近似线性规划、隐马尔科夫模型和部分可观测马尔科夫模型，并用一章简略介绍其它常用决策算法，这使得本书在重点突出的同时具有一定的广度； 在难与易的关系上，本书力求避免复杂艰深的数学概念，书中的定理证明和公式推导只需要最基本的高等数学知识，同时对于有关数学内容以附录形式做出了说明，此外，书中每一个部分都有紧贴内容的例子辅助理解，同时设有一章专门讨论相关方法用于安全领域决策的典型案例，使得读者能清楚地理解本书意图阐述的内容。