LABORATORIO DE CADENAS DE MARKOV

CASO 1: Dados los siguientes estados, de un

conjunto de 950 alumnos

Aprobado
Desaprob
ado
Abandono
Expulsado
Prob
Inicial
Costos

Aprobad Desaprob Abandon Expulsad

o
ado
o
o
0.2
0.3
0.1
0.4
0.25
0.1
0.5

0.35
0.2
0.3

0.4
0.2
0.1

0
0.5
0.1

0.2
2000

0.1
1500

0.35
1000

0.35
900

a) Determinar la probabilidad de cada uno de los estados

b) Determinar la cantidad de desaprobados en el periodo 5
c) Determinar los costos para los prximos 15 periodos
CASO ESTUDIO
Una empresa fabrica productos electrnicos. Antes de mandar a ventas un producto,
se analiza el lote. Las categoras de inspeccin son: no funciona (NF), regular, bueno y
excelente. Los productos NF se desechan, mientras que los lotes excelentes se envan
inmediatamente a ventas. Los lotes regulares y buenos se regresan para ajustes y se
vuelven a probar.
Las proporciones de lotes regulares y buenos que cambian de categora se dan en la
tabla siguiente:
A
DE

NF

Regular

Bueno

Excelente

Regular

0.05

0.25

0.35

0.35

Bueno

0.15

0.2

0.65

a) Descrbase este proceso de prueba como una cadena de Markov absorbente y

calclese la matriz de transicin.
b) De 100000 lotes existentes actualmente, a los que se acaba de realizar una
inspeccin y result que hay 30000 lotes buenos, 20000 lotes regulares, 45000
lotes Excelentes y 5000 lotes NF Cuntos lotes de cada categora habr
dentro de 3 inspecciones?
c) Cuntos lotes Excelentes habr en las prximas 5 inspecciones.
d) Cuntas veces, en promedio, se volver a inspeccionar un lote que ya se
haba probado y haba resultado regular en la prueba anterior?
e) Cuntas veces, en promedio, se inspeccionar de nuevo un lote que ya se
haba probado y dio por resultado ser bueno?
f) Cul es la probabilidad de que se deseche un lote regular?
g) Cul es la probabilidad de que un lote regular llegue a ventas?

h) De 30 000 lotes probados como buenos originalmente. Cuntos llegarn a

ventas?

APLICACIONES
El rea de investigacin de marketing de una fbrica estima que 20% de las
personas que compra un producto 1 mes, no lo comprar el mes siguiente.
Adems, el 30% de quienes no lo compren 1 mes lo adquirir al mes
siguiente. En una poblacin de 1000 individuos, 100 compraron el producto
el primer mes. Cuntos lo comprarn al mes prximo? Y dentro de dos
meses?

En una poblacin de 10,000 habitantes, 5000 no fuman, 2500 fuman uno o

menos de un paquete diario y 2500 fuman ms de un paquete diario. En un
mes hay un 5% de probabilidad de que un no fumador comience a fumar un
paquete diario, o menos, y un 2% de que un no fumador pase a fumar ms
de un paquete diario. Para los que fuman un paquete, o menos, hay un 10%
de probabilidad de que dejen el tabaco, y un 10% de que pasen a fumar
ms de un paquete diario. Entre los que fuman ms de un paquete, hay un
5% de probabilidad de que dejen el tabaco y un 10% de que pasen a fumar
un paquete, o menos. Cuntos individuos habr de cada clase el prximo
mes?

EJERCICIOS
PROBLEMA 1.- Una mquina puede estar en dos estados: F funciona o Q
averiada, con tFF = 0.8, tQQ = 0.4, tQF = 0.6, tFQ = 0.2. Cuando funciona da
una utilidad de 480 por periodo y, cuando est averiada, los gastos son de
160 por periodo.
a) Cul es la ganancia media por periodo?
b) Cul es la probabilidad de que la mquina este averiada en el tercer
periodo?
c) En un periodo de 1 ao, Cuntos meses funcionar la mquina? Y
Cuntos meses estar averiada?
d) Verifique si un plan de mantenimiento preventivo que cuesta $50 por
periodo, alterando: tFF a 0.9 y tQQ a 0.3 vale la pena.
PROBLEMA 2.- Un jugador tiene $2. Apuesta $1 cada vez y gana $1 con
probabilidad . Deja de jugar si pierde los $2 o si gana $4.
1) Cul es la probabilidad de que pierda su dinero al final de, a lo sumo, 5
juegos?
2) Cul es la probabilidad de que el jugador tenga $3 despus de 4
jugadas?
3) Cul es la probabilidad de que el juego contine despus de 7 juegos?
4) Cuntos periodos se espera que pase para terminar el juego?
PROBLEMA 3.- Un asaltante notorio puede estar en uno de tres estados:

i)
ii)
iii)

Suelto, practicando asaltos.

Preso en la delegacin de polica, esperando su transferencia.
Preso en la crcel.

Considerando las siguientes probabilidades de transicin:

taa = 0.6; Permanecer suelto.
tab = 0.4; Ser preso y llevado para la delegacin.
tba = 0.2; Fugar de la delegacin.
tbb = 0.2; Continuar en la delegacin.
tbc = 0.6; Ser llevado a prisin.
tcc = 0.8; Continuar en la prisin.
tca = 0.2; Fugar de la prisin.
Calcule la probabilidad de que un asaltante, inicialmente suelto, siga suelto
(practicando asaltos) despus de dos periodos.

PROBLEMA 4.- Una enfermedad tropical no fatal tiene un proceso viral que
dura 3 semanas. La probabilidad de que un individuo sano contraiga la
enfermedad en cualquier semana es 0.1. Se dispone de dos medicamentos
para abreviar la duracin de la enfermedad. El primer medicamento puede
utilizarse slo durante la semana 1, y cura de inmediato al 50% de los
pacientes. El segundo medicamento debe usarse en la semana 2, cuando la
tasa de curacin es tambin del 50%.
a) Qu fraccin de la poblacin est infectada en cualquier momento si
no se dispone de medicamento?
b) Si ambos medicamentos se emplean cuando es adecuado, para qu
fraccin de la poblacin infectada se reducir, debido a los
medicamentos, la duracin de la enfermedad?
El costo semanal del programa de medicamentos para cada individuo de la
poblacin completa es de $5. Si el costo de cada semana laboral perdida
debido a la enfermedad se evala en $50, se pagar por s mismo el
programa?