Universidad Abierta y a Distancia de México

Licenciatura en Matemáticas
PROCESOS ESTOCASTICOS
Unidad II
Actividad III
24-11-2021
Por: Daniel Villalobos Cazares

1. En la siguiente cadena determina las clases de comunicación, el

periodo de cada una de ellas y si se trata de clases recurrentes o
transitorias. Reescribe la matriz de transición en la forma
canónica: S = {1, 2, 3, 4, 5} y

 0.1 0.3 0.2 0.2 0.2 

 
 0 0.1 0.3 0.3 0.3 
P 0 0 0.4 0.6 0 
 
 0 0.5 0 0.5 0 
 0 0.8 0 0.2 0 


2. En cada uno de los siguientes casos, escribe el espacio de estados,

la matriz de transición y dibuja la gráfica dirigida de una cadena
de Markov que tenga las características indicadas.

Para que sea irreductible, todos los estados deben estar comunicados
entre sí, al tener un espacio de estados infinitos, cada estado se puede
comunicar con el siguiente y con el anterior.

Es la variante del jugador cuando el jugador no se le agota el dinero

Probabilidad p de ganar 1 y 1 – p de perder1 , el jugador con recursos
ilimitados y listo para la próxima tirada

S={0,1,2 , … }

1−p ⋯ p ⋯
( ⋮ ⋱
1−p ⋯
⋮
p ⋯ )
a) Una cadena con espacio de estados finito, con una clase de
periodo 2 y otra de periodo 3. 77

Dado que la cadena tiene periodo 2, la matriz de

transición es:

1 →2 →1 ; período2 y clase {1,2 }

P= 0 1
( )
1 0
3→4→5→3

4→5→3→4

5→3→4→5

Tiene período 3 y clase {3,4,5}

0 1 0 0 0

( 1
0
0
0
0
0
0
0
0
1
0
0
0
0
1
0
0
0
0
1
)
c) Una cadena en la que todos los estados sean transitorios y
tengan periodo 0.
 1 ⋯ 0 ⋯

( ⋮
0
⋮
⋱ ⋮
⋯ 1
⋯ ⋯
⋮
⋯
1
)
Esta cadena, saliendo de un estado inicial o de los posteriores no hay
forma de regresar al estado anterior, tampoco a los anteriores, ni al
estado inicial.

3. Sea j un estado transitorio en algún espacio de estados S: Define

el conjunto

C j   k pm  j , k   0 para algun entero positivo m

a) Escribe un párrafo describiendo cómo son los elementos del conjunto

Cj.

b) ¿Cj es un conjunto irreducible y cerrado? Justifica claramente tu

respuesta.