Mind map
Proceso Estocástico

Map content
Proceso Estocástico
¿Qué es un Proceso Estocástico?
- Es un concepto matemático que sirve para usar magnitudes aleatorias que varían con el tiempo o para caracterizar una sucesión de variables aleatorias (estocásticas) que evolucionan en función de otra variable, generalmente el tiempo. Cada una de las variables aleatorias del proceso tiene su propia función de distribución de probabilidad y pueden o no estar correlacionadas entre sí.
¿Qué es una Cadena de Markov?
- Sea X1 una variable aleatoria que caracteriza el estado del sistema en puntos discretos en el tiempo t = 1,2…..
- La familia de variables aleatorias (Xi) forman un proceso estocástico con una cantidad finita o infinita de estados.
- Una cadena de Markov es un proceso estocástico que satisface la condición markoviana.
- La familia de variables aleatorias (Xi) forman un proceso estocástico con una cantidad finita o infinita de estados.
- Sea X1 una variable aleatoria que caracteriza el estado del sistema en puntos discretos en el tiempo t = 1,2…..
Clasificación de los Estados de la Cadena de Markov
- 1.- Dados dos estados i y j, una trayectoria de i a j es una sucesión de transiciones que comienza en i y termina en j, de forma que cada transición de la secuencia tenga probabilidad positiva.
- 2.- Un estado j es alcanzable desde un estado i si hay una trayectoria de i a j.
- 3.- Dos estados i y j se comunican si i es alcanzable desde j y j es alcanzable desde i.
- 4.- Un conjunto de estados S en una cadena de Markov es cerrado (constituyen una clase de la cadena) si ningún estado fuera de S es alcanzable desde un estado en S.
- 5.- Un estado i es absorbente si pii=1
- 6.- Un estado i es transitorio si hay un estado j alcanzable desde i,pero el estado i no es alcanzable desde j.
- 7.- Un estado es recurrente si no es transitorio.
- 8.- Un estado i es periódico con periodo k>1 si k es el menor número tal que todas las trayectorias que parten del estado i y regresan al estado i tienen una longitud múltiplo de k.
- 9.- Si un estado recurrente no es periódico es aperiódico.
- 10.- Si todos los estado de una cadena son recurrentes, aperiódicos y se comunican entre sí, la cadena es ergódica.
Matriz de Transición de Markov
- Es una matriz utilizada para describir las transiciones en una cadena de Markov. Ha encontrado uso en la teoría de la probabilidad, en estadística y en álgebra lineal, así como en informática. Existen varias definiciones y tipos de matriz estocástica:
- Una matriz estocástica derecha es una matriz cuadrada cada una de cuyas filas está formada por números reales no negativos, sumando cada fila 1.
- Una matriz estocástica izquierda es una matriz cuadrada cada una de cuyas columnas está formada por números reales no negativos, sumando cada columna 1.
- Una matriz doble estocástica es una matriz cuadrada donde todos los valores son positivos, además que todas las filas y columnas suman 1.
- Es una matriz utilizada para describir las transiciones en una cadena de Markov. Ha encontrado uso en la teoría de la probabilidad, en estadística y en álgebra lineal, así como en informática. Existen varias definiciones y tipos de matriz estocástica:
Probabilidad de Transición
- En la teoría de los procesos estocásticos y, en particular, en la teoría de las cadenas de Markov, se denomina probabilidad de transición, Py, a la probabilidad de que estando el sistema en el estado E¡ en el momento n pase al estado E¡ en el momento n + 1.
Probabilidad Condicionales
- es la probabilidad de que ocurra un evento A, sabiendo que también sucede otro evento B. La probabilidad condicional se escribe P(A|B) o P(A/B), y se lee «la probabilidad de A dado B».
Propiedades de Markov
- La propiedad de las cadenas de Márkov es que las transiciones entre los estados, sólo puede producirse entre estados vecinos. Sólo se puede llegar al estado i desde el estado i-1 ó bien de i+1.
Variables de Estado
- Describen el estado de un sistema o de uno de sus componentes, ya sea al comienzo, al final o durante un periodo de tiempo. Estas variables interaccionan con las exógenas y las endógenas del sistema, de acuerdo a las relaciones funcionales dispuestas.
Images and files in the map
Information
- Description
- ingenieria de sistemas Mind Map on Proceso Estocástico, created by David Freitas on 10/07/2020.
- Created by
- David Freitas
- Views
- 4
- Rating




