什么是马尔科夫过程?

来源:学生作业帮助网 编辑:作业帮 时间:2024/05/15 13:50:43
什么是马尔科夫过程?

什么是马尔科夫过程?
什么是马尔科夫过程?

什么是马尔科夫过程?
马尔科夫过程(MarKov Process)是一个典型的随机过程.设X(t)是一随机过程,当过程在时刻t0所处的状态为已知时,时刻t(t>t0)所处的状态与过程在t0时刻之前的状态无关,这个特性成为无后效性.无后效的随机过程称为马尔科夫过程.马尔科夫过程中的时同和状态既可以是连续的,又可以是离散的.我们称时间离散、状态离散的马尔科夫过程为马尔科夫链.马尔科夫链中,各个时刻的状态的转变由一个状态转移的概率矩阵控制.

一类随机过程。它的原始模型马尔可夫链,由俄国数学家A.A.马尔可夫于1907年提出。该过程具有如下特性:在已知目前状态 (现在)的条件下,它未来的演变 (将来)不依赖于它以往的演变 ( 过去 ) 。 例如森林中动物头数的变化构成——马尔可夫过程 。在现实世界中,有很多过程都是马尔可夫过程,如液体中微粒所作的布朗运动、传染病受感染的人数、车站的候车人数等,都可视为马尔可夫过程。关于该过程的研究,19...

全部展开

一类随机过程。它的原始模型马尔可夫链,由俄国数学家A.A.马尔可夫于1907年提出。该过程具有如下特性:在已知目前状态 (现在)的条件下,它未来的演变 (将来)不依赖于它以往的演变 ( 过去 ) 。 例如森林中动物头数的变化构成——马尔可夫过程 。在现实世界中,有很多过程都是马尔可夫过程,如液体中微粒所作的布朗运动、传染病受感染的人数、车站的候车人数等,都可视为马尔可夫过程。关于该过程的研究,1931年A.H.柯尔莫哥洛夫在《概率论的解析方法》一文中首先将微分方程等分析的方法用于这类过程,奠定了马尔可夫过程的理论基础。

收起