Cadenas de Markov
“Tiempo Discreto”

ICIPEV

Profesor: Pedro Peña Carter Ingeniero Comercial UTFSM MBA IEDE ESPAÑA

Departamento de Industrias

Universidad Técnica Federico Santa Maria

Introducción
Un Proceso Estocástico se define como secuencia de variables aleatorias {Xt} tT, donde el conjunto de índices T puede ser un conjunto discreto, por ejemplo T = {0,1,2,3,...}, caso en el cual decimos que el proceso es tiempo discreto o bien T puede ser un intervalo, por ejemplo T= [0,), caso en el cual decimos que el proceso es en tiempo continuo.

Departamento de Industrias - Universidad Técnica Federico Santa Maria

Introducción
El proceso estocástico {Xt}, t  T puede representar por ejemplo:
El nivel de inventario de …ver más…

http://www.scielo.cl/pdf/ingeniare/v14n2/art09.pdf
Departamento de Industrias - Universidad Técnica Federico Santa Maria

Dinámica de Paciente
TABLA Paciente 1 Paciente 2 Paciente 3 Paciente 4 Paciente 5 Paciente 6 Paciente 7 Paciente 8 Día 1 C B B A B C B B Día 2 B B C B C C D B Día 3 A A B C A C E B Día 4 A E C B A C B Día 5 E A A E B B Día 6 A E A D Día 7 A A B Día 8 A A B Día 9 Día 10 Día 11 Día 12 Día 13 A A A E E B B B B E

Pij 

Cantidad total de transiciones desde el estado i al estado j Cantidad total de transiciones desde estado i a cualquier estado

DETERMINAR LA MATRIZ DE PROBABILIDADES DE TRANSICIÓN
Departamento de Industrias - Universidad Técnica Federico Santa Maria

Dinámica de Paciente
  X ij (n)    
1, 0, Si un paciente que ingresa en el estado i está en el estado j al cabo de n etapas. Lo Contrario.

E ( X ij (n))  Pij (n)

MATRIZ DE PROBABILIDADES DE TRANSICIÓN

Vij (n) 

m 1,... n.

X