Absorbierende Zustände sind ein Begriff aus der Theorie der Markow-Ketten, welche wiederum spezielle stochastische Prozesse in der Wahrscheinlichkeitstheorie sind. Absorbierend werden diejenigen Zustände genannt, welche nach dem Betreten nie wieder verlassen werden können.
Definition Bearbeiten
Gegeben sei eine homogene Markowkette in diskreter Zeit mit höchstens abzählbarem Zustandsraum . Dann heißt eine Teilmenge absorbierend, genau dann wenn
gilt. Ist einelementig, also
dann wird der Zustand absorbierender Zustand genannt. Weiter heißen
Ersteintrittszeitpunkt in die absorbierende Menge und
die Absorptionswahrscheinlichkeit.
Berechnung der Absorptionswahrscheinlichkeiten Bearbeiten
Sei eine homogene Markow-Kette mit Zustandsraum und mehreren absorbierenden Mengen gegeben. Zur Berechnung der Absorptionswahrscheinlichkeiten in einer absorbierenden Menge bietet sich folgender Ansatz an: vereinige alle absorbierenden Mengen außer in der Menge und betrachte für alle
Dies entspricht im Falle eines endlichen Zustandsraumes genau einer Lösung des Rechtseigenvektorproblems zum Eigenwert 1 der Übergangsmatrix. Im Allgemeinen ist die Lösung nicht eindeutig. Dies wird erreicht durch Hinzunahme der Randbedingungen falls (bei Start im absorbierenden Zustand wurde bereits absorbiert) und falls (bei Start in einem anderen absorbierenden Zustand kann nie erreicht werden).
Will man nun wissen, in welchem Zustand absorbiert wird, so führen analoge Überlegungen wie oben zu der zusätzlichen Nebenbedingung falls und falls .
Beispiele Bearbeiten
Betrachte die folgende Übergangsmatrix, welche eine homogene Markow-Kette auf dem Zustandsraum darstellt. Es gibt zwei absorbierende Mengen: der Zustand und die Menge . Zustand 1 wird nur von Zustand 2 mit Wahrscheinlichkeit 0.1 erreicht, Zustände 4 und 5 nur von den Zuständen 2 (mit Wahrscheinlichkeit 0.1) oder von 3 (mit Wahrscheinlichkeit 0.5).
Der Eigenraum ist dann Wir interessieren uns nun für die Absorptionswahrscheinlichkeit in dem Zustand 1. Daher suchen wir nun einen Vektor, der erfüllt und . Der zweite Vektor im Spann erfüllt die zweite Bedingung, die erste wird durch Normierung des Vektors erhalten. Damit ist der Vektor, welcher als i-te Komponente die Absorptionswahrscheinlichkeit bei Start in i im Zustand 1 enthält. Will man nun die Absorptionswahrscheinlichkeit in berechnen, so muss man und fordern. Daraus folgt dann . Schön zu sehen ist hier, dass sich die Absorptionswahrscheinlichkeiten zu eins aufsummieren, heißt das egal wo man startet, man immer entweder im Zustand 1 oder in den Zuständen 4 und 5 absorbiert wird.
Ist man nun an der Absorptionswahrscheinlichkeit im Zustand 4 interessiert, so liefert das direkte Ansetzen des Gleichungssystems und der Nebenbedingungen und
Daraus ergibt sich die Lösung .
Verwendung Bearbeiten
Absorbierende Zustände sind insbesondere in der Populationsdynamik und in der Modellierung von Spielen interessant. In der Populationsdynamik lassen sich die Zeitschritte einer Markow-Kette als Generationen auffassen, der Zustandsraum sind dann die lebenden Individuen. Hier wäre ein absorbierender Zustand die 0, also die Tatsache, dass die Spezies ausgestorben ist. Damit sind in diesem Fall Aussterbewahrscheinlichkeit und Absorptionswahrscheinlichkeit in der 0 äquivalent. Typisches Beispiel ist hier der Galton-Watson-Prozess. Einige Glücksspiele lassen sich auch gut mithilfe von Markow-Ketten untersuchen. Dabei entspricht der Zeitpunkt der Spielrunde und der Zustandsraum dem Geld eines Spielers. Ein absorbierender Zustand wäre hier wieder die 0 (Pleite des Spielers) oder der Gesamteinsatz (Pleite des anderen Spielers). Damit ist die Absorptionswahrscheinlichkeit die Gewinn/Verlustwahrscheinlichkeit (vgl. Ruin des Spielers).
Literatur Bearbeiten
- Ulrich Krengel: Einführung in die Wahrscheinlichkeitstheorie und Statistik. 8. Auflage, Vieweg, 2005. ISBN 978-3-834-80063-3
- Hans-Otto Georgii: Stochastik: Einführung in die Wahrscheinlichkeitstheorie und Statistik, 4. Auflage, de Gruyter, 2009. ISBN 978-3-110-21526-7
- Christian Hesse: Angewandte Wahrscheinlichkeitstheorie: eine fundierte Einführung mit über 500 realitätsnahen Beispielen und Aufgaben, Vieweg, Braunschweig/Wiesbaden 2003, ISBN 978-3-528-03183-1.