TEORIA DE LAS DECISIONES

TAREA 4

CADENAS DE MARKOV

PARTICIPANTES

JHON JAIRO AMAYA MENDIVELSO

DAYANA KATHERINE MELO ARIAS
MARÍA CAMILA CAICEDO LEON

TUTORA
ANDREA DEL PILAR LOPEZ

FECHA
11/17/2021
 ESTADOS

E0

E1

E2

E3

E4

ESTADOS E0 E1 E2 E3 E4 TOTAL
E0 5236 4324 6523 4859 5698 26640
E1 7859 6789 9852 7841 7541 39882
E2 6541 5489 8974 5692 8512 35208
E3 5214 6325 6985 4125 8954 31603
E4 8951 7852 8456 6541 6517 38317

ESTADOS E0 E1 E2 E3 E4 TOTAL
E0 0.19654655 0.162312312 0.24485736 0.18239489 0.21388889 1.00000000
E1 0.19705632 0.17022717 0.24702873 0.19660498 0.18908279 1.00000000
E2 0.18578164 0.155902068 0.25488525 0.1616678 0.24176324 1.00000000
E3 0.16498434 0.200139227 0.22102332 0.13052558 0.28332753 1.00000000
E4 0.23360388 0.204922097 0.22068534 0.17070752 0.17008117 1.00000000

Determinar Matriz de probailidad

0.19654655 0.162312312 0.24485736 0.18239489 0.21388889 1

0.19705632 0.17022717 0.24702873 0.19660498 0.18908279 1
P= 0.18578164 0.155902068 0.25488525 0.1616678 0.24176324 1
0.16498434 0.200139227 0.22102332 0.13052558 0.28332753 1
0.23360388 0.204922097 0.22068534 0.17070752 0.17008117 1
W X
-0.80345345 0.197056316133
0.16231231 -0.829772829848
0.24485736 0.247028734768
0.18239489 0.196604984705
0.21388889 0.189082794243
1 1

the average policy that is paid in the compan

w 0.19683611298
x 0.177873562713
y 0.238337180607
z 0.168682020473
m 0.218271123227

STATES

Si no ha tenido
accidentes los
ultimos dos años
se le cobrara por
la nueva poliza
E0 $1530000

Si ha tenido un
accidente cada
uno de los
ultimos dos años
se le cobrara
E1 $4950000

Si tuvo
accidentes el
primero de los
ultimos dos años
se le cobrara
E2 $2917000

Si tuvo un
accidente el
segundo de los
E3 ultimos dos años
 El
comportamiento
historico de cada
estado esta dado
por los
sigiuientes casos
de accidente,
tomados en
cuatro eventos
E4 diferentes.
Si no ha tenido accidentes los ultimos dos
años se le cobrara por la nueva poliza
$1530000

Si ha tenido un accidente cada uno de los

ultimos dos años se le cobrara $4950000

Si tuvo accidentes el primero de los

ultimos dos años se le cobrara $2917000
Si tuvo un accidente el segundo de los
ultimos dos años

El comportamiento historico de cada

estado esta dado por los sigiuientes casos
de accidente, tomados en cuatro eventos
diferentes.
 Q=Q*P

W X Y Z M =

Q=

W X Y Z M
E0 E1 E2 E3 E4
0.19683611297973 0.17787356 0.23833718 0.16868202 0.21827112

Y Z M INDEPE
0.185781640536242 0.16498434 0.23360388 0 -1.4572E-16
0.155902067711884 0.20013923 0.2049221 0 -1.7347E-16
-0.745114746648489 0.22102332 0.22068534 0 2.35922E-16
0.161667802772097 -0.86947442 0.17070752 0 -2.0123E-16
0.241763235628266 0.28332753 -0.82991883 0 3.88578E-16
1 1 1 -1 0

hat is paid in the company

1530000 301159.253
4950000 880474.135
2917000 695229.556
3870000 652799.419
1289000 281351.478
2811013.84
W X Y Z M * 0.19654655 0.16231231
0.19705632 0.17022717
0.18578164 0.15590207
0.16498434 0.20013923
0.23360388 0.2049221

W X Y Z M P=
0.19654655 0.16231231
0.19705632 0.17022717
P= 0.18578164 0.15590207
1X5 5X5 0.16498434 0.20013923
0.23360388 0.2049221

EC1 0.19654655 W+
EC2 0.16231231 W+
EC3 0.24485736 W+
EC4 0.18239489 W+
EC5 0.21388889 W+
EC6 W+

aw+bx+cy+dz+em+f=o
EC1 0.19654655 W+
EC2 0.16231231 W+
EC3 0.24485736 W+
EC4 0.18239489 W+
EC5 0.21388889 W+
EC6 W+

EC1 -0.80345345 W+
EC2 0.16231231 W+
EC3 0.24485736 W+
EC4 0.18239489 W+
EC5 0.21388889 W+
EC6 1 W+
w 0.19683611

x 0.17787356

y 0.23833718

z 0.16868202
m 0.21827112
0.24485736 0.18239489 0.21388889
0.24702873 0.19660498 0.18908279
0.25488525 0.1616678 0.24176324
0.22102332 0.13052558 0.28332753
0.22068534 0.17070752 0.17008117

0.24485736 0.18239489 0.21388889

0.24702873 0.19660498 0.18908279
0.25488525 0.1616678 0.24176324
0.22102332 0.13052558 0.28332753
0.22068534 0.17070752 0.17008117

0.19705632 X+ 0.18578164 Y+ 0.16498434 Z+ 0.23360388 M+

0.17022717 X+ 0.15590207 Y+ 0.20013923 Z+ 0.2049221 M+
0.24702873 X+ 0.25488525 Y+ 0.22102332 Z+ 0.22068534 M+
0.19660498 X+ 0.1616678 Y+ 0.13052558 Z+ 0.17070752 M+
0.18908279 X+ 0.24176324 Y+ 0.28332753 Z+ 0.17008117 M+
X+ Y+ Z+ M+

0.19705632 X+ 0.18578164 Y+ 0.16498434 Z+ 0.23360388 M+

0.17022717 X+ 0.15590207 Y+ 0.20013923 Z+ 0.2049221 M+
0.24702873 X+ 0.25488525 Y+ 0.22102332 Z+ 0.22068534 M+
0.19660498 X+ 0.1616678 Y+ 0.13052558 Z+ 0.17070752 M+
0.18908279 X+ 0.24176324 Y+ 0.28332753 Z+ 0.17008117 M+
X+ Y+ Z+ M+

0.19705632 X+ 0.18578164 Y+ 0.16498434 Z+ 0.23360388 M+

-0.82977283 X+ 0.15590207 Y+ 0.20013923 Z+ 0.2049221 M+
0.24702873 X+ -0.74511475 Y+ 0.22102332 Z+ 0.22068534 M+
0.19660498 X+ 0.1616678 Y+ -0.86947442 Z+ 0.17070752 M+
0.18908279 X+ 0.24176324 Y+ 0.28332753 Z+ -0.82991883 M+
1 X+ 1 Y+ 1 Z+ 1 M+
-1 W = 0
-1 X = 0
-1 Y = 0
-1 Z = 0
-1 M = 0
-1 = 0

-1 W = 0
-1 X = 0
-1 Y = 0
-1 Z = 0
-1 M = 0
-1 = 0
Exercise 2. Markov chains (Initial state multiplication):
Suppose that 4 types of soft drinks are obtained in the market: Hipinto, Cola, Fanta and Schweppes
STATE Hipinto Cola Fanta Scheweppes
Hipinto 0.25 0.15 0.3 0.3
Cola 15% 40% 25% 20%
Fanta 22% 28% 15% 35%
Scheweppes 22% 16% 34% 28%

MATRIX OF PROBABILITIES
STATE Hipinto Cola Fanta Scheweppes SUM
Hipinto 0.25 0.15 0.3 0.3 1
Cola 0.15 0.4 0.25 0.20 1
Fanta 0.22 0.28 0.15 0.35 1
Scheweppes 0.22 0.16 0.34 0.28 1

0.15 0.23 0.27 0.35

INITIAL STATUS VECTOR Q1

q0= 0.15 0.23 0.27 0.35 p=

q1 0.2084 0.2461 0.262 0.2835

q2 0.209025 0.24842 0.259735 0.28282

q3 0.20888135 0.24869875 0.25993155 0.28248835

the probability that a person that drink hipinto at the present week drink Schweppes at the week 3.
0.28248835

q4 0.20885753 0.24879067 0.25987486 0.28247694

q5 0.20885038 0.24880617 0.25987831 0.28246514

the probability that a person that drink hipinto at the present week drink Schweppes at the week 5.
0.28246514

q6 0.20884908 0.24881037 0.25987655 0.282464

q7 0.20884875 0.24881119 0.25987656 0.28246351

the probability that a person that drink hipinto at the present week drink Schweppes at the week 7.
0.28246351
ta and Schweppes

0.25 0.15 0.3 0.3

0.15 0.4 0.25 0.20
0.22 0.28 0.15 0.35
0.22 0.16 0.34 0.28

ppes at the week 3.

pes at the week 5.

pes at the week 7.

En un hospital de tercer nivel, cada paciente se clasifica de acuerdo con una
condición crítica, estable o saludable. Estas clasificaciones son actualizadas
diariamente por un especialista, de acuerdo con la evaluación experimentada por
el paciente. Las probabilidades con las que cada paciente cambia de un estado a
otro se presentan en la siguiente tabla:

Critica Estable Saludable Critica

Critica 50% 30% 20% Critica 0.5
Estable 40% 40% 20% Estable 0.4
Saludable 10% 60% 30% Saludable 0.1

q0 1

q1 0.5

q2 0.39

q3 0.373

q4 0.3707

q5 0.37041

q6 0.370375
Estable Saludable Total q0= (1 0 0)
0.3 0.2 1
0.4 0.2 1
0.6 0.3 1

0 0 JUEVES
0.5 0.3 0.2
0.3 0.2 VIENES P= 0.4 0.4 0.2
0.1 0.6 0.3
0.39 0.22 SABADO

0.405 0.222 DOMINGO

0.4071 0.2222 LUNES

0.40737 0.22222 MARTES

0.407403 0.222222 MIERCOLES

En Colombia existen 6 principales operadores móviles como Claro, Movistar, WOW, Directv, Ti
Uff, a los que llamaremos estados. El siguiente gráfico resume las probabilidades que tiene cad
cliente de permanecer en su operador actual o realizar un cambio de empresa.

ESTABLE CLARO MOVISTAR UAU DIRECT TV

CLARO 0.15 0.16 0.19 0.15
MOVISTAR 0.20 0.10 - 0.40
UAU 0.24 0.19 0.25 0.17
DIRECT TV 0.19 0.18 0.17 0.15
TIGO 0.1 0.15 0.23 0.16
UFF 0.15 0.16 0.17 0.19

CLARO MOVISTAR UAU DIRECT TV

q0 0.2 0.15 0.15 0.1

q1 0.166 0.1557 0.1713 0.2011

q2 0.174146 0.158399 0.169075 0.200327

q3 0.17421373 0.15818764 0.16840435 0.20074174

q4 0.1741505506 0.1581867284 0.1683985948 0.2006861631

q5 0.1741406753 0.1581840812 0.1684055322 0.2006865838

q6 0.1741411565 0.158184451 0.1684063729 0.2006862507

q7 0.174141289 0.1581844577 0.1684063249 0.2006863367

q8 0.1741412976 0.1581844594 0.1684063115 0.2006863358

q9 0.174141296 0.1581844588 0.1684063109 0.2006863359

q10 0.1741412958 0.1581844588 0.168406311 0.2006863357

q11 0.1741412958 0.1581844588 0.168406311 0.2006863357

q12 0.1741412958 0.1581844588 0.168406311 0.2006863357

Claro, Movistar, WOW, Directv, Tigo y
e las probabilidades que tiene cada
mbio de empresa.

TIGO UFF Total

0.18 0.17 1
0.10 0.20 1 0.15 0.16 0.19 0.15 0.18 0.17
- 0.15 1 P= 0.20 0.10 - 0.40 0.10 0.20
0.19 0.12 1 0.24 0.19 0.25 0.17 - 0.15
0.18 0.18 1 0.19 0.18 0.17 0.15 0.19 0.12
0.18 0.15 1 0.1 0.15 0.23 0.16 0.18 0.18
0.15 0.16 0.17 0.19 0.18 0.15

TIGO UFF
0.18 0.22

0.142 0.1639

0.138721 0.159332

0.13889785 0.15955469

0.1390396232 0.1595383399

0.1390401763 0.1595429512

0.1390391436 0.1595426253

0.1390389593 0.1595426325

0.1390389683 0.1595426273

0.1390389705 0.1595426279

0.1390389707 0.1595426279

0.1390389707 0.1595426279

0.1390389707 0.1595426279