Ein Zustand j heißt von i erreichbar, in Zeichen i ⇝ j, falls ein n ≥ 0 mit \({p}_{i,j}^{(n)}\gt 0\) existiert. Gilt sowohl i ⇝ j als auch j ⇝ i, so bezeichnet man i und j als ...

Markow-Kette mit einer Unabhängigkeitseigenschaft. <?PageNum _432Gegeben sei eine Markow-Kette X 0, X 1, … von Zufallsvariablen. Zu den Zufallsvariablen X n gehört ein Ereignisraum E, der endlich oder ...