Procesos Estocásticos

Unidad 2. Cadenas de Markov a tiempo discreto

Actividad 3. Estados de cadena de Markov

Instrucciones: Realiza lo que se te pide en cada uno de los siguientes problemas

1. En la siguiente cadena determina las clases de comunicación, el periodo de cada

una de ellas y si se trata de clases recurrentes o transitorias. Reescribe la matriz
de transición en la forma canónica: S = {1, 2, 3, 4, 5} y

 0.1 0.3 0.2 0.2 0.2 

 0
 0.1 0.3 0.3 0.3 
P 0 0 0.4 0.6 0 
 
 0 0.5 0 0.5 0 
 0 0.8 0 0.2 0 


2. En cada uno de los siguientes casos, escribe el espacio de estados, la matriz de

transición y dibuja la gráfica dirigida de una cadena de Markov que tenga las
características indicadas.
a) Una cadena con espacio de estados infinitos, irreducibles y aperiódicos.
b) Una cadena con espacio de estados finito, con una clase de periodo 2 y otra de
periodo 3.
c) Una cadena en la que todos los estados sean transitorios y tengan periodo 0.

3. Sea j un estado transitorio en algún espacio de estados S: Define el conjunto

C j   k pm  j , k   0 para algun entero positivo m

a) Escribe un párrafo describiendo cómo son los elementos del conjunto Cj.
b) ¿Cj es un conjunto irreducible y cerrado? Justifica claramente tu respuesta.