Practica dirigida

Problemas:

1. Para la siguiente matriz de transicin, calcule la probabilidad de encontrarse en

el estado A despus de tres periodos para un estado inicial de 0.5,0.5 .

A B
A 0.3 0.7
B 0.5 0.5

Para la matriz de transicin del problema 1, calcule las probabilidades del estado
estacionario para los estados A y B

2. Para la siguiente matriz de transicin, calcule:

las probabilidades de encontrarse en los estados X, Y o Z, despus de

dos periodos, si el estado inicial fue (0.3 0.4 0.3).
Si actualmente la variable esta en el valor X cual ser la probabilidad
que tres periodos despus la variable tome el valor de Y.
Si el valor de la variable es Y cuantos periodos tienen que pasar en
promedio para volver estar en el estado Y por primera vez.
Si actualmente la variable se encuentra en el estado X cuantos periodos
tienen que pasar en promedio para pasar al estado Y por primera vez.

X Y Z
X 0.2 0.2 0.6
Y 0.8 0.1 0.1
Z 0.7 0 0.3

3. La Avertz Company renta su flotilla de 500 automviles. Se inspecciona cada

automvil una vez a la semana. Durante este tiempo, pudo haber estado
rentado, puede habrsele dado mantenimiento, o pueden haber sucedido ambas
cosas. En la primera semana de junio, se determino que 400 automviles
estaban en condiciones de ser rentados, 80 necesitaban reparaciones menores y
20 necesitaban reparaciones mayores. En la segunda semana de junio 350 de los
automviles que estaban en buenas condiciones se encontraban en la misma
circunstancia, 40 necesitaban reparaciones menores y 10 necesitaban
reparaciones mayores. De los 80 automviles que necesitaban reparaciones
menores, 50 se encontraban en buenas condiciones, 25 seguan requiriendo
reparaciones menores y otros 5 requeran ahora reparaciones mayores. Por
ltimo, de los 20 automviles que requeran reparaciones mayores, 15 estaban
en buenas condiciones, 3 requeran reparaciones menores y 2 seguan
necesitando reparaciones mayores. Elabore una matriz de transicin para este
problema
4. Hace mucho tiempo, en una galaxia lejana existi un planeta en el que el clima
de cualquier da dependa solo del clima del da anterior. Por ejemplo, la
probabilidad de que lloviera hoy dependera solo de lo sucedido ayer. Existen
solo tres tipos de clima en este planeta; despejado, lluvia y nieve. En seguida se
presenta la matriz de transicin diaria para estos tipos de clima:

Despejado Lluvia Nieve

Despejado 0.5 0.3 0.2
Lluvia 0.4 0.4 0.2
Nieve 0.3 0.3 0.4

las probabilidades de encontrarse en cada uno de los estados, despus

de dos periodos, si el estado inicial fue (despejado: 0.2 lluvioso: 0.4 con
nieve: 0.4).
Si actualmente el clima es despejado. cul ser la probabilidad que tres
das despus el clima se torne con nieve.
Si el da de hoy es lluvioso cuantos das tienen que pasar en promedio
para volver estar en un da lluvioso por primera vez.
Si actualmente el clima es despejado cuantos das tienen que pasar en
promedio para pasar a un da lluvioso por primera vez.

5. En la industria de la cerveza ligera tres marcas comparten aproximadamente el

75% de todas las ventas, la Sudco, la Millis y la Schotz. Estas tres marcas
compiten en forma intensa por los clientes de la cerveza ligera. En tiempos
 recientes, la Sudco hizo que una agencia externa llevara a cabo un estudio sobre
la forma en que los clientes estaban reaccionando a los anuncios. Los resultados
del estudio mostraron que despus de tres meses, 50% de los clientes de Sudco
seguan prefiriendo la Suds Lite, 30% preferan la Millis, Light Beer y 20%
preferan la Schotz Easy Beer. De los clientes de Millis, 60% seguan
prefiriendo la Millis Light, 30% preferan la Suds Lite y 10% preferan la Schotz
Easy. De los clientes de la Schotz, 40% seguan prefiriendo su marca, 30%
preferan la Sudco y 30% preferan la Millis.

a. Elabore la matriz de transicin para este problema de cambio de marca.

b. Determine el porcentaje de estado estacionario de los clientes que
prefieren cada tipo de cerveza.

6. La Carheel Computers es una nueva empresa que se especializa en la fabricacin

de minicomputadoras. Sin embargo, las condiciones de flujo de efectivo de la
empresa no le permite fabricar ms de dos maquinas por mes. La demanda
durante cada mes ser una o dos maquinas. Existe una probabilidad de 0.3 para
la demanda de una maquina y 0.7 para la demanda de dos maquinas. La T arheel
Computers considera que debe satisfacer el nivel de demanda, cualquiera que
 sea. Esto exige que determine una poltica de produccin para satisfacer la
demanda. En seguida se muestra una posible poltica:

Inventario inicial Produccin

0 2
1 2
2 1

7. En Smalltown, al 90% de los das soleados siguen das soleados, y al 80% de los
das nublados siguen das nublados. Con esta informacin modelar el clima de
Smalltown como cadena de Markov.

8. Se tiene un sistema de inventario en el que la secuencia de eventos durante cada

periodo es como sigue: (1) se observa el nivel de inventario (llamemosle i) al
principio de del periodo. (2) Si i 1, se piden 4-i unidades. Si i 2 , no se hace
ningn pedido. (3) no se piden unidades durante el periodo, con probabilidad
1 3 ; se pide una unidad durante el periodo, con probabilidad 1 3 , y se piden 2
unidades durante el periodo, con probabilidad 1 3 ; se observa el nivel de
inventario al principio del siguiente periodo.
Defina un estado de periodo como el nivel de inventario al principio del periodo.
Determine la matriz de transicin que pudiera usarse para modelar este sistema
de inventario como cadena de Markov.

9. Una fabrica tiene dos maquinas. Durante cualquier da, cada mquina que
trabaja al principio del da tiene probabilidad x de descomponerse. Si se
descompone una maquina durante el da, se manda a un taller de reparacin y
estar trabajando despus que se descompuso. Por ejemplo, si una mquina se
descompone durante el da 3, estar trabajando al principio del da 5. Si se hace
que el estado del sistema sea el numero de maquinas que trabajan al principio
del da, formule una matriz de probabilidad de transicin para este caso.

10. En relacin con el problema 8, suponga que el tiempo de maana en Smalltown

depende del tiempo que haya prevalecido los ltimos dos das; como sigue:(1)si
los ltimos dos das han sido soleados, entonces el 95% de las veces maana
ser soleado. (2) Si ayer estuvo nublado y hoy soleado, entonces el 70% de las
veces maana estar soleado. (3) si ayer estuvo soleado y hoy esta nublado,
entonces el 60% de las veces maana estar nublado. (4) Si los ltimos dos das
fueron nublados, entonces el 80% de las veces maana ser nublado.

11. En el prob. 10, suponga que una maquina que se descompone regresa al servicio
tres das despus. Por ejemplo, la maquina que se descompone hoy, el da 3
estar trabajando al principio del da. Determine una matriz de transicin de
probabilidad para este caso.
12. Al principio de cada ao, mi automvil est en buen, regular o mal estado. Un
buen automvil ser bueno al principio del ao siguiente, con probabilidad 85%,
regular con probabilidad 10%, y mal con probabilidad 0.5. Un automvil regular
estar regular al principio del ao siguiente con probabilidad 70% y mal con
probabilidad 30%. Cuesta 6000 dlares comprar un buen automvil, uno regular
se puede conseguir por 2000 dlares; uno malo no tiene valor de venta, y se debe
reemplazar de inmediato por uno bueno. Cuesta 1000 dlares al ao el
funcionamiento de un buen automvil, y 1500 dlares el de uno regular. Debo
reemplazar mi automvil tan pronto como se vuelva regular, o debo esperar
hasta que descomponga? Suponga a que el costo de funcionamiento de un
automvil durante un ao depende del tipo de vehiculo que se tiene a la mano al
principio del ao (despus de llegar cualquier auto nuevo, si es el caso).

13. Se tiene dos acciones. Las acciones 1, siempre se venden a 10 dlares o 20

dlares. Si hoy las acciones 1 se venden a 10 dlares, hay una probabilidad, 80%
de que maana se venda a 10 dlares. Si las acciones 1 se venden hoy a 20
dlares, hay una probabilidad. 90% a que maana se vendan a 20 dlares. Las
acciones 2 siempre se venden a 10 dlares o a 25 dlares. Si se venden hoy a 10
dlares, hay una probabilidad. 90% a que se vendan maana a 10 dlares. Si se
venden hoy a 25 dlares, hay una probabilidad. 85% de que maana se vendan a
25 dlares. En promedio. Modele un proceso de Markov Qu acciones se
venden a mayor precio?.

14. La compaa de seguros Payoff cobra a sus clientes de acuerdo a su historia de

accidentes. Un cliente que no haya tenido accidentes durante los ltimos dos
aos paga 100 dlares de prima anual. Quien haya tenido un accidente en cada
uno de los dos ltimos aos paga una prima anual de 400 dlares. A los que haya
tenido un accidente durante solo uno de los ltimos dos aos se les cobra una
prima anual de 300 dlares. Un cliente que tuvo un accidente durante el ltimo
ao tiene una probabilidad de 10% de accidentarse durante este ao. Si un
cliente no ha tenido un accidente durante el ltimo ao tiene una probabilidad
de 3% de sufrir un accidente durante este ao. Durante un ao dado Cual es la
prima que paga en promedio un cliente de Payoff?
15. El departamento de admisin del colegio estatal ha modelado la trayectoria de
un estudiante en esa institucin como cadena de Markov:
Si ahora existen 1000 estudiantes de 1 ao y 800 de 2 ao
(a)Cuntos estudiantes de 1 ao se espera que no se graden?
(b)Cuntos aos en promedio se espera que pase en la escuela un alumno de
primer ao?los aos que necesita para graduarse un alumno de 2ao?

1ao 2ao Sale Termina

1 ao 0.10 0.70 0.2 0

2 ao 0 0.20 0.20 0.60
Sale 0 0 1 0
Termina 0 0 0 1
16. El departamento de admisin del colegio estatal ha modelado la trayectoria de
un estudiante en esa institucin como cadena de Markov:

2ao 3ao 4ao Sale Termina

1 ao 0.10 0.80 0 0 0.10 0
2 ao 0 0.10 0.85 0 0.05 0
3 ao 0 0 0.15 0.80 0.05 0
4 ao 0 0 0 0.10 0.05 0.85
Sale 0 0 0 0 1 0
Termina 0 0 0 0 0 1

Se observa el estado de cada estudiante al principio de cada semestre de otoo.

Por ejemplo, si un estudiante es de 3 ao al principio de este semestre de otoo,
habr 80% de probabilidad de que al principio del siguiente semestre de otoo
sea de cuarto ao, 15% de probabilidad de que aun sea 3 ao y 5% de que salga.
Suponemos que una vez que sale un estudiante ya nunca vuelve ha inscribirse.
(a)Si un estudiante entra al colegio a primer ao, Cuntos aos se espera que
pasen siendo estudiante?
(b)Cul es la probabilidad de que se gradu un estudiante de nuevo ingreso?

17. El Herald Tibble obtuvo la siguiente informacin acerca de sus suscriptores:

durante el primer ao como suscriptores, el 20% cancelan sus suscripciones. De
los que se han suscrito por un ao, el 10% cancelan durante el segundo ao. De
los que se han suscrito por ms de dos aos, el 4% cancelan durante cualquier
ao dado. En promedio Cunto tiempo se suscribe una persona al Herald
Tribble?

18. Un bosque consta de dos tipos de rboles: los cuales tienen de 0 a 1.50 metros de
alto, y los que son ms altos. Cada ao, mueren el 40% de los rboles que tienen
menos de 1.50 metros, el 10% se venden a 20 dlares cada uno, 30%
permanecen entre 0 y 1.50m, y el 20% crecen mas de 1.50m. Cada ao, el 50%
de los rboles de ms de 1.50m se venden a 50 dlares, el 20% lo venden a 20
dlares, y el 30% permanece en el bosque.
(a)Cul es la probabilidad de que muera un rbol de 0 a 1.50 metros antes de
venderse?
(b)Si se planta un rbol de menos de 1.50m, Cul es el ingreso esperado que se
va ha tener con ese rbol?

19. Las cadenas absorbentes de Markov se usan en ventas para modelar la

probabilidad de que un cliente que se localiza por telfono compre finalmente un
producto. Considere un cliente posible a quien nunca se ha llamado acerca de
comprar un producto. Despus de una llamada, hay una probabilidad de 60% de
que tenga poco inters en el producto, de 30% que muestre un gran inters en el
producto, y 10% de que sea borrado de la lista de los posibles clientes de la
compaa. Se tiene un cliente que actualmente tiene poco inters en el producto.
Despus de otra llamada, hay 30% de probabilidad de que compre el producto,
20% de probabilidad de que sea borrado de la lista, 30% de que el cliente aun
tenga poco inters y 20% de que exprese un inters alto. Para un cliente que
actualmente exprese alto inters, despus de otra llamada hay 50% de
probabilidad de que compre el producto, 40% de probabilidad de que siga
teniendo gran inters y 10% de probabilidad que tenga poco inters.
 (a)Cul es la probabilidad de que un nuevo posible cliente al final compre el
producto?
(b)Cul es la probabilidad de que un posible cliente con poco inters sea
borrado de la lista final?
(c) En promedio, Cuntas veces habr que llamar por telfono a un nuevo
posible cliente para que compre el producto, o para que sea borrado de la lista?

20. En el problema de la ruina del jugador, suponga que p=.60.

(a)Que probabilidad hay de que alcance a ganar 4 dlares?
(b)Cul es la probabilidad de que salga sin dinero?
(c)Cul es la duracin esperada del juego?

21. En el cuidado de pacientes ancianos en un hospital psiquitrico, una meta

principal es la colocacin correcta de los pacientes en pensiones u hospitales
para ancianos. El movimiento de pacientes entre el hospital, los hogares externos
y el estado absorbente (la muerte) se puede describir mediante la siguiente
cadena de Markov. La unidad de tiempo es un mes:
Hospital Hogares Muerte
Hospital 0.991 0.003 0.006
Hogares 0.025 0.969 0.006
Muerte 0 0 1

Cada mes que pasa un paciente en el hospital cuesta 655 dlares al estado, y
cada mes que pasa en una pensin le cuesta 226 dlares, tambin al estado. Para
mejorar la frecuencia de xitos de colocacin de pacientes, el estado
recientemente comenz un programa de resocializacin geritrica (GRP) para
preparar a los pacientes a desempear en las pensiones. Algunos pacientes se
colocan en el GRP y a continuacin pasan a pensionases menos probable que
estos pacientes no la puedan ajustar a sus pensiones. Otros pacientes continan
pasando en forma directa del hospital a las pensiones sin haber tomado parte en
el (GRP). El estado paga 680 dlares cada mes lo que cuesta el paciente en el
GRP. El movimiento de los pacientes esta gobernado por la siguiente cadena de
Markov
GRP Hosp. Pension Pension Muerte
(GRP) (directo)
GRP 0.854 0.028 0.112 0 0.006
Hospital 0.013 0.978 0 0.003 0.006
Pensiones (GRP) 0.025 0 0.969 0 0.006
Pensiones (direct) 0 0.025 0 0.969 0.006
Muerte 0 0 0 0 1

22. Fresco, Inc.; vende refrigeradores. La fbrica otorga una garanta en todos los
refrigeradores que especifica cambio gratis de cualquier unidad que se
descomponga antes de tres aos. Se nos da la siguiente informacin: (1) el 3%
de todos los refrigeradores nuevos falla durante su primer ao de
funcionamiento; (2) el 5% de todos los refrigeradores con un ao de
funcionamiento falla durante el segundo ao de trabajo, y (3) el 7% de todos los
refrigeradores con dos aos de funcionamiento falla durante su tercer ao. La
garanta no vale para el refrigerador de repuesto.
(a) Use la categora de cadenas de Markov para predecir la fraccin de todos
los refrigeradores que deber cambiar Freezco
 (b) Suponga que Freezco le cuesto 500 dlares cambiar un refrigerador y que
vende 10,000 refrigeradores al ao. Si la fabrica redujera el plazo de garanta
a dos aos, Cunto dinero se ahorrara en costos de reemplazo?

23. Se usa una mquina para producir herramientas de precisin. Si la maquina esta
hoy en buenas condiciones, entonces estar bien maana con 90% de
probabilidad. Si la maquina esta en mal estado hoy, entonces estar en mal
estado maana con 80% de probabilidad. Si la maquina esta en buen estado,
produce 100 herramientas por da, y si esta en mal estado, 60 herramientas por
da. En promedio, Cuntas herramientas por da se producen?

24. La clientela compra automviles en tres agencias. Dada la compaa a la que

compro un cliente la ultima vez, la probabilidad que compre la prxima vez es
Compr en Comprara en
Agenc 1 Agenc 2 Agenc 3
Agencia 1 0.80 0.10 0.10
Agencia 2 0.05 0.85 0.10
Agencia 3 0.10 0.20 0.70

(a)Si alguien posee actualmente un automvil de agencia 1, Cul es la

probabilidad, de que al menos 1 de los dos siguientes coches que compre sea
agencia 1?
(b)En la actualidad, a la agencia 1 le cuesta dlares en promedio cada
automvil, y el precio medio que paga al cliente es 8 000 dlares. La agencia 1
piensa instruir una garanta de 5 aos. Estima que con ello se aumentar el costo
en 300 dlares por automvil, pero una investigacin de mercado indica que las
probabilidades cambiaran como sigue
Compr en Comprara en
Agenc 1 Agenc 2 Agenc 3
Agencia 1 0.85 0.10 0.05
Agencia 2 0.10 0.80 0.10
Agencia 3 0.15 0.10 0.75

Debe instituir la garanta de 5 aos la agencia 1?

25. Un equipo de bisbol consta de 2 estrellas, 13 novatos y 10 sustitutos. Para fines

de impuestos, el propietario debe evaluar a los jugadores. Se define el valor de
cada jugador como el valor total del sueldo que gana hasta su retiro. Al inicio de
cada temporada, se clasifican los jugadores en cuatro categoras:
Categora 1: Estrella (una estrella gana 1 milln de dlares al ao).
Categora 2: Novato (un novato gana 400 000 dlares al ao).
Categora 3: Reserva (un reserva gana 100 000 dlares al ao).
Categora 4: Retirado (no gana salario).
Si un jugador es estrella, novato o reserva al principio de esta temporada, las
probabilidades de que pase a ser estrella, novato, reserva o retirado al principio
de la siguiente temporada.

Esta Proxima temporada

Temporada Estrella Novato Reserva Retirado

Estrella 0.50 0.30 0.15 0.05

Novato 0.20 0.50 0.20 0.10
Reserva 0.05 0.15 0.50 0.30
 Retirado 0 0 0 1
Determine el valor de los jugadores del equipo.

26. The Thrill of Statistics, el mejor libro de estadstica para preparatoria, tiene una
demanda de 5 millones de ejemplares cada otoo. Algunos de los compran el
libro lo conservan, otros lo venden de nuevo a la librera. Suponga que el 90%
de los estudiantes que compra un libro nuevo lo venden, 80% de los que
compran un libro usado una vez lo vuelven a vender y que el 60% de los
estudiantes que compran un libro usado dos veces lo vuelven a vender. Si un
libro se ha usado cuatro veces o ms. La pasta se le cae y ya no se puede vender.
(a). En el estado estable, Cuntos ejemplares nuevos debe vender el editor cada
ao?
(b). Suponga que la ganancia de una librera, en cada tipo de libro, se la
siguiente:
Libro nuevo = 6.00 dlares
Libro usado una vez = 3.00 dlares
Libro usado dos veces =2.00 dlares
Libro usado tres veces =1.00 dlar
Si el censo de estado estable representa las ventanas de la librera, Cuales son
las ganancias promedio de esta, por libro?

27. Hearts Dog Food y Corporal Dog Food son dos compaas que compiten
fieramente en el Mercado nacional de croquetas para perro. El propietario de un
perro compra una caja de croquetas por mes. Si el propietario compro Hearts la
ultima vez, hay una probabilidad de 0.8 de que su siguiente compra tambin sea
de Hearts. Si la ultima compra del dueo fue de Corporal hay una probabilidad
de 0.9 de que su siguiente compra tambin sea de Corporal. El costo de
produccin de croquetas Hearts es 80 centavos por caja, que vende a $1.00 dlar
(a)Si hay 40millones de propietarios de perros en los Estados Unidos, Cules
son las ventas anuales esperadas de Hearts?.

28. Al principio de un periodo, una empresa observa su nivel de inventario.

Entonces puede hacer un pedido, que se recibe en forma instantnea. Por ultimo
se observa la demanda del periodo. Se nos da la siguiente informacin: (1) Se
define que hay un costo de dos dlares por cada unidad de inventario disponible
al final de un periodo. (2) Se define una multa de tres dlares por cada unidad
pedida que no se tiene a tiempo. Suponga que todas las unidades faltantes son
ventas perdidas.(3) hacer un pedido cuesta $0.50 por unidad mas un costo fijo de
5 dlares por pedido. (4) durante cada periodo, la demanda ser igual a 1, 2 y 3
unidades, con igual probabilidad.
La compaa esta pensando implantar la siguiente poltica de pedido: al final de
cada periodo, si el inventario disponible es una unidad o menos, pedir la
cantidad suficiente para elevar el inventario disponible a cuatro unidades al
inicio del siguiente periodo.Que fraccin de las veces estar el inventario
disponible al final de cada periodo en 0 unidades? En 1 unidad? En 2 unidad?
En 3 unidad? En 4 unidad? Determine el costo promedio por periodo
incurrido por esa poltica de pedidos.?