¿Qué es y para qué sirven las cadenas de Markov?
Una cadena de Markov es una serie de eventos, en la cual la probabilidad de que ocurra un evento depende del evento inmediato anterior. Algo más importante aún, es que permite encontrar el promedio a la larga o las probabilidades de estado estable para cada estado.
¿Qué es la matriz de transición?
En matemáticas, una matriz estocástica (también denominada matriz de probabilidad, matriz de transición, matriz de sustitución o matriz de Markov) es una matriz utilizada para describir las transiciones en una cadena de Markov.
¿Qué es la propiedad de Markov?
La propiedad de las cadenas de Márkov es que las transiciones entre los estados, solo puede producirse entre estados vecinos. Solo se puede llegar al estado i desde el estado i-1 o bien de i+1. Con lo que queda demostrado que la probabilidad de tener una transición en un estado, no depende del tiempo anterior.
¿Qué es una cadena de Markov absorbente?
Un estado tal que si el proceso entra en él permanecerá indefinidamente en este estado (ya que las probabilidades de pasar a cualquiera de los otros son cero), se dice estado absorbente. De una cadena de Markov que consta de estados transitorios y absorbentes se dice que es una cadena absorbente de Markov.
¿Dónde se pueden aplicar las Cadenas de Markov?
La aplicación de Cadenas de Markov en el análisis y pronóstico de series de tiempo es una metodología alternativa con la cual se pueden realizar pronósticos con buena exactitud y confiabilidad.
¿Qué es un estado en una cadena de Markov?
Todos los estados de una cadena de Markov irreducible pertenecen a la misma clase, es decir, o bien todos son de transición, o todos son recurrentes nulos o todos son recurrentes positivos. En particular, si la cadena de Markov es finita todos los estados son recurrentes positivos.
¿Qué es una probabilidad de transición?
En la teoría de los procesos estocásticos y, en particular, en la teoría de las cadenas de Markov, se denomina probabilidad de transición, Py, a la probabilidad de que estando el sistema en el estado E¡ en el momento n pase al estado E¡ en el momento n + 1.
¿Por qué se originó el estudio de las cadenas de Markov?
Su principal utilidad es el análisis del comportamiento de procesos estocásticos. La explicación de estas cadenas la desarrolló el matemático de origen ruso Andréi Márkov en 1907. Así, a lo largo del siglo XX, se ha podido emplear dicha metodología en numerosos casos prácticos de la vida cotidiana.
¿Qué propiedad fundamental tienen las cadenas de Markov?
Las cadenas de Markov tienen la propiedad de que la probabilidad de que Xn = j sólo depende del estado inmediatamente anterior del sistema: Xn-1 . P (Xn = j \ Xn-1 = i) se denomina cadena homogénea, esto es, las probabilidades son las mismas en cada paso.
¿Qué son las cadenas absorbentes?
5.6 Cadenas Absorbentes Un estado absorbente es aquel del que no puede salirse. Esto puede observarse fácilmente en la matriz de transición, porque un estado absorbente tiene una probabilidad de transición hacia sí mismo de uno y cero hacia todos los demás estados.
¿Cuáles son los elementos de la cadena de Markov?
Ingredientes de una cadena de markov: Conjunto de K estados exhaustivos y mutuamente excluyentes definen las posibles situaciones (ej. Bien-discapacitado-muerto) Ciclo: periodo de tiempo en el que ocurren transiciones entre estados (ej: un mes) Probabilidades de transición entre estados en un ciclo.