马尔科夫预测与决策法(PDF 41页）

马尔科夫预测与决策法——是应用随机过程中马尔科夫链的理
论和方法研究分析有关经济现象变化规律并借此对未来进行预
测和决策的一种方法。
􀂊 池塘里有三张荷叶，编号为1，2，3，假设有一只青蛙随机地
在荷叶上跳来跳去。在初始时刻t0，它在第二张荷叶上。在时
刻t1，它有可能跳到第一张或者第三张荷叶上，也有可能在原
地不动。我们把青蛙某个时刻所在的荷叶称为青蛙所处的状
态。这样，青蛙在未来处于什么状态
..............................