Referencias....................................................................................................................10 Cadenas o Procesos de Markov 6
Capítulo 1
Introducción a las cadenas de Markov
La cadena de Markov es un proceso estocástico a tiempo discreto y con espacio de
estados discretos, y se debe de cumplir la propiedad que para cualquier entero n ≥ 0.
Un proceso estocástico es todo aquel proceso que no se puede predecir, está conformado
por variables aleatorias que dependen de un arranque o argumento que le dé un inicio.
Entonces tenemos que una cadena de Markov es un proceso estocástico donde el estado
futuro depende de nuestro estado actual.
Para Markov si ya existía un estado actual de un proceso estocástico se podían predecir
su histórico y también tener la probabilidad en un futuro.
Markov basado en los trabajos de P. L. Chebyshev modelo su proceso en la teoría de la
probabilidad. Fue un profesor en la Universidad de San Petesburgo donde desarrollo todo
su modelo en los estilo de escritura de los poemas, el cual era otra de sus pasiones en la
vida.
Metodología
Para que un proceso estocástico se cumpla depende de un pasado histórico o algo que
hizo que iniciara el proceso, y lo que se estudia en estos procesos o modelos es la
probabilidad que suceda esa acción.
En base a esto podríamos llegar a la conclusión y determinar que los procesos tienen
memoria. Cadenas o Procesos de Markov 7
Es decir que tenemos como condicionamiento que debemos de tener un motivo para tener
ese proceso, el cual en un momento n + 1 depende del momento (n) que paso antes o
anteriormente para poder seguir con la cadena.
Por esta simple razón podemos atrevernos a realizar probabilidad a largo o corto plazo, en
donde estaremos prediciendo lo que pasa en lapso de periodos o tiempo determinados en
un sistema.
Markov definió la cadena como una secuencia infinita donde X1, X2,….., Xk, Xk+1,…., las
variables estaban conectadas donde Xk+1, k será independiente de X1, X2 en caso de que
Xk sea conocida.
También definió la cadena como homogénea si las distribuciones de Xk +1 dado Xk eran
independiente de k.
La mayoría de sus trabajos se dedicaron a este tipo de cadenas simples aunque llevaron a
tener que la probabilidad está conectada con los eventos que ocurrieron anteriormente.
Markov concluyo que “la independencia de las variables no resultan en una condición
necesaria para la validez de la ley de grandes número”.
Cadenas o Procesos de Markov 8
Capítulo 2
Utilización de las cadenas de Markov.
Desde el principio de la utilización de este modelo el cual fue en la poesía, Markov
marco una diferencia en la probabilidad, en la actualidad las cadenas de Markov tienen
aplicaciones en ámbitos reales en donde podemos analizar la probabilidad futura basada
en los resultados anteriores.
Este modelo es muy útil en el ámbito de la economía y de las finanzas, aunque también
tiene otras utilizaciones como en la Música, la medida de la población donde se ve el
cambio de frecuencia de crecimiento de la población.
Es utilizada en la Simulación, exactamente en la teoría de colas, con el Modelo M/M/1 en
el cual podemos ver un claro ejemplo de lo que puede determinar este modelo.
Y tenemos que las cadenas de Markov también han sido base para la meteorología en
claramente se ve las condiciones de este modelo, en donde ya tenemos históricos de los
climas de años pasado y así cada temporada podremos tener una probabilidad de las
temperaturas que estarán rondando en nuestra ciudad, País o en cierta región del planeta.
Aplicaciones reales
Esta herramienta matemática se puede usar para la base de un negocio o para algún tipo
de este giro, a la hora de usar los datos del año que anteriormente paso, así podemos tener
un estimado de lo que pasara con nuestro negocio.
Así como se puede usar en la economía, también podemos utilizar esta cadena para el
tema de la salud, así podemos tener la probabilidad de ver los pacientes que recibieron la Cadenas o Procesos de Markov 9
atención necesaria y la probabilidad de los pacientes que tendrán que volver a una
segunda cita.
Comentarios
Las cadenas de Markov son un sistema que parece sencillo, pero en cuanto más se va
empleando en un lugar o suceso, este cambia repentinamente y puede variar dependiendo
de lo que ya ocurrió, nos ayuda mucho en la vida cotidiana, y que hasta su creador la
utilizo primeramente en la poesía y hacer un cálculo de este, hoy en día se utiliza hasta en
la música, podemos ver que los procesos matemáticos nos ayudan en muchos lugares en
donde uno no pensaría que nos ayudara o fuera necesario.
Cadenas o Procesos de Markov 10 Lista de referencias
Caballero, M. E. (2004). Cadenas de Markov: un enfoque elemental. México: Sociedad
Matemática Mexicana. Stewart, W. J. (1994). Introduction to the Numerical Solution of Markov Chains. Princeton Univeritity Press.
