UNIVERSIDAD DE ANTIOQUIA

FACULTAD DE CIENCIAS EXACTAS Y NATURALES

INSTITUTO DE MATEMÁTICAS
Procesos Estocásticos, 2018-II Taller # 2
Profesor: José Domingo Restrepo Álvarez

1. Demuestre que la comunicación es una relación de equivalencia, es decir, es

simétrica, reflexiva y transitiva, sobre el espacio de estados S.

2. Sea {Xn }n≥0 una cadena de Markov con un conjunto de estados E = {0, 1, 2} y
P la matriz de transición  
1 1
2 2
0
 
P= 1 1 1 .
 2 4 4 
1 2
0 3 3

a. Determine si los estados se comunican.

b. Determine la o las clases de equivalencia.

c. De los numerales (a) y (b) concluya si la cadena de Markov es o no irreducible.

3. Sea {Xn }n≥0 una cadena de Markov con un conjunto de estados S = {1, 2, 3, 4}
y Q la matriz de transición
 
1 1
0 2 2
0
 1
 3 0 0 23


Q=
 1 0 0 0
.

 
0 0 1 0

Determine si la cadena de Markov es irreducible encontrando su clase de equivalen-

cia.

4. Sea {Xn }n≥0 una cadena de Markov con un conjunto de estados S = {0, 1, 2} y
Q la matriz de transición  
0 0 1
 
Q=
 1 0 0 .

1 1
2 2
0

a. Determine si la cadena de Markov es irreducible.

1
b. Determine si la cadena de Markov es periódica o aperiodica, en caso de serlo
encuentre cual es su periodo.

c. Encuentre su distribución estacionaria.