《马尔可夫决策过程》电子书

马尔可夫是彼得堡数学学派的代表人物,以数论和概率论方面的工作著称.在数论方面,他研究了连分数和二次不等式理论,解决了许多难题.在概率论中,他发展了“矩法”扩大了大数律和中心极限定理的应用范围.马尔可夫最重要的工作是在1606～1912年间提出并研究了一种能用数学分析方法研究自然过程的一般图式—马尔可夫链,同时开创了一种无后效性的随机过程(马尔可夫过程)的研究.马尔可夫过程在自然科学、工程技术和公共事业中有广泛的应用.他的主要著作有《概率演算》等.