随机过程是对随时间和空间变化的随机现象进行建模和分析的学科，在物理、生物、工程、心理学、计算机科学、经济和管理等方面都得到广泛的应用。本课程介绍随机过程的基本理论和几类重要随机过程模型与应用背景，主要包括泊松过程、更新过程、离散时间与连续时间的马尔可夫链、最优停时、可逆马尔可夫链。