Cadenas de Markov

1.        Una computadora se inspecciona cada hora. Se encuentra que está

trabajando o descompuesta. Si está trabajando la probabilidad de que siga
trabajando la siguiente hora es 0.9 Si está descompuesta, se toman las
medidas para repararla lo que puede llevar más de una hora. Siempre que la
computadora esté descompuesta, Independientemente de cuanto tiempo haya
pasado, la probabilidad de que siga descompuesta  la siguiente hora es 0.35.

A.      Modele el sistema como una cadena de Markov.

Solución:

Debemos definir los estados

Eo = La maquina está trabajando

E1 = La maquina está descompuesta

  Eo E1
Eo 0.9 0.1
E1 0.65 0.35

B.       Hoy está trabajando, ¿Cuál es la probabilidad de que en 4 hrs sigatrabajando

Solución:

Buscamos T4  = P(4) 

T4  =

  Eo E1
Eo 0.85 0.15
E1 0.84 0.16

2.        Un fabricante de grabadoras está tan seguro de su calidad que está

ofreciendo garantía de reposición total si el aparato falla en dos años.
Basándose en datos compilados la compañía ha notado que solo el 1 % de las
grabadoras falla durante el primer año y 5 % durante el segundo. La garantía
no cubre grabadoras ya reemplazadas.

A.      Modele el sistema como una cadena de Markov.

 Solución:
Debemos definir los estados

Eo = Está funcionando en su primer año.

E1 = Está funcionando en su segundo año.

E2 = Se reemplaza por garantía.

E3 = Finaliza la garantía.

  Eo E1 E2 E3
Eo 0 0.99 0.01 0
E1 0 0 0.05 0.95
E2 0 0 1 0
E3 0 0 0 1

  

3.        Cada familia norteamericana se puede clasificar como habitante de una

zona urbana, rural ó suburbana, durante un año determinado el 15% de las
familias urbanas se cambian a la zona suburbana y el 5 % a la zona rural. El
6% de la familias suburbanas pasan a la zona urbana y el 4% a la rural, el 4%
de las familias rurales pasan a la zona urbana y el 6% a la suburbana .   

A.      Construya la matriz de transición

Solución:

Debemos definir los estados 

        Eo = Zona urbana

        E1 = Zona Rural

        E2 = Zona Suburbana

  Eo E1 E2
Eo 0.8 0.05 0.15
E1 0.04 0.90 0.06
E2 0.06 0.04 0.90

B.       Si una familia vive actualmente en lazona urbana ¿ Cual es la probabilidad

que después de dos años viva en la zona urbana?

Solución: 
 Buscamos T2                       

  Eo E1 E2
Eo 0.651 0.091 0.258
E1 0.0716 0.8144 0.114
E2 0.1036 0.075 0.8214

El valor que buscamos se encuentra en azul y este nos indica que la

probabilidad que buscamos es del 65.1 %.

  

C.       Suponga que en la actualidad  el 40% de las familias viven en la zona

urbana, el 35% en la zona suburbana y el 25 en la zona rural . Después de dos
años ¿Qué porcentaje de familias vivira en la zona urbana?

Solución:

Debemos identificar el vector P =

0.4 0.2 0.35                

5
              

Que lo tomamos de los porcentajes que nos da el problema.  

                Buscamos P*T2 

  Eo E1 E2
Eo 0.651 0.091 0.258
               
E1 0.0716 0.8144 0.114
E2 0.1036 0.075 0.8214
0.4 0.2 0.35                                                                     *
5
                                                                                  

Lo que nos da este resultado:

0.31456 0.26625 0.41919

La respuesta se encuentra marcada en azul, lo que nos da un

porcentaje de 31.45% de familias que después de dos años vivira el la
zona urbana

4.        El departamento de mantenimiento de una empresa da servicio a tres departamentos de ella (A,
B, C), sujeto a ciertas restricciones. Nunca se da servicio al mismo departamento en días
seguidos. Si se atiende al departamento A, entonces al día siguiente se atiende al B. Sin
 embargo, si se atiende a uno de los departamentos B ó C, entonces el día siguiente se tiene
doble probabilidad de atender a A, que atender a otro departamento.

A. Construya la matriz de transición:  

Solución:  

  A B C
A 0 1 0
B 2/3 0 1/3
C 2/3 1/3 0