Priorización

Unidad 9
Seleccin, Priorizacin y
Negociacin
Cmo evaluamos, comparamos y
elegimos alternativas?
Sebastian Uchitel 2
Evaluacin de Opciones Alternativas
IR involucra la exploracin de sistemas alternativos
obtenidos de seleccionar distintas alternativas a...
refinamiento de objetivos
asignacin de responsabilidades a agentes
resolucin de conflictos
resolucin de obstculos
Sebastian Uchitel 3
Criterio de Evaluacin
Opciones pueden ser evaluadas con respecto a
el grado de aporte a objetivos blandos
Ej. minimizar costo, maximizar el confort del pasajero, ...
el grado de satisfaccin de objetivos de comportamiento
E.g. Evitar [Choque de Trenes], Evitar [Descarrilamiento]
Lograr [Ambulancia en sitio de incidente en 14 minutos]
o, dualmente, grado de reduccin de riesgo
E.g. riesgo de sobrepasar estimacin de tiempo y costo, de choque de trenes, de no llegar al sitio
de incidente a tiempo, etc.
Es un problema de criterios mltiples
En general los criterios son incomparables...
Sebastian Uchitel 4
Evaluacin y Seleccin de Alternativas
Tcnicas de razonamiento cualitativas
Ej. El framework NFR (Mylopoulos et al.)
Tcnicas de razonamiento cuantitativas
Criterio de evaluacin medible
Sebastian Uchitel 5
Razonamiento Cualitativo
Relacionando Opciones con Objetivos Blandos
Impacto Positivo
++ (LOGRA) Opcin satisface completamente el objetivo blando
+ (AYUDA) Opcin satisface parcialmente el objetivo blando
Impacto Negativo
-- (IMPIDE) Opcin viola totalmente el objetivo blando
- (DIFICULTA) Opcin viola parcialmente el objetivo blando
Obj. Blando Opcin
Resolucin de Obstculo
Refinamientos Y/O
Refinamiento de Objetivo
Asignacin de Resp.
Resolucin de Conflicto
Impacto
Positivo
Impacto
Negativo
Afirmacin
Impacto
Justificado
por
Ayuda/Dificulta
Mundo de los Objetivos Blandos
Mundo de los Objetivos de Comportamiento
Sebastian Uchitel 6
Ejemplo de Coordinador de Reuniones
Reunin Conveniente Planif.
Restric. Recolectadas
Reunin Planificada
en Base a Restricciones
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Sebastian Uchitel 7
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Reducir Esfuerzo
del Iniciador
--
++
++
Tiempo de
Recolec. Reducido
++ -
-
Reducir Esfuerzo
de participantes
Precisin de
Restricciones
Sebastian Uchitel 8
Representacin Tabular
- + - ++
Recolec. va
Web
+ - ++ ++
Recolec. va
agendas
- + - --
Recolec. x
iniciador
Restricciones
Recolectadas
Reducir
Esfuerzo de
participantes
Precisin de
Restricciones
Tiempo de
Recolec.
Reducido
Reducir Esfuerzo
del Iniciador
Opciones Objetivos
Objetivo Blando
Afirmacin: algunos
participantes ya
usan agenda
Afirmacin: Algunas
agendas no estarn
actualizadas
Sebastian Uchitel 9
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Precisin
++ -
Flexibilidad
para iniciador
++
-
Sebastian Uchitel 10
Best Dates Proposed Best Date Selected
Scheduler
O
interactive
scheduling
Iniciador
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Precisin
++ -
Flexibilidad
para iniciador
++
-
Elaboracin del Grafo de Objetivos Blandos
Mejores Fechas
Propuestas
Mejor Fecha
Seleccionada
Scheduler
O
Resolucin
Interactiva
Iniciador
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Precisin
++ -
Flexibilidad
para iniciador
++
-
Reducir Esfuerzo
del Iniciador
--
++
++
Tiempo de
Recolec. Reducido
++
-
-
Reducir Esfuerzo
de participantes
Precisin de
Restricciones
Elaboracin del Grafo de Objetivos Blandos
Reducir esfuerzo
de usuarios
Calidad de
Planificacin
Calidad de
Decisin
Tiempo para
decidir
Iniciador
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Precisin
++ -
Flexibilidad
para iniciador
++
-
Reducir Esfuerzo
del Iniciador
--
++
++
Tiempo de
Recolec. Reducido
++
-
-
Reducir Esfuerzo
de participantes
Precisin de
Restricciones
Mejores Fechas
Propuestas
Mejor Fecha
Seleccionada
Scheduler
O
resolucin
interactiva
Razonamiento sobre Objetivos de Alto Nivel
Reducir esfuerzo
de usuarios
Calidad de
Planificacin
Calidad de
Decisin
Tiempo para
decidir
Iniciador
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Precisin
++ -
Flexibilidad
para iniciador
++
-
Reducir Esfuerzo
del Iniciador
--
++
++
Tiempo de
Recolec. Reducido
++
-
-
Reducir Esfuerzo
de participantes
Precisin de
Restricciones
Mejores Fechas
Propuestas
Mejor Fecha
Seleccionada
Scheduler
O
resolucin
interactiva
Reglas de Propagacin Cualitativa
Etiquetado de Objetivos
el grado cualitativo con que el objetivo est satisfecho.
Etiqueta(G) ! {Completamente Satisfecho, Parcialmente
Satisfecho, Parcialmente Violado, Completamente Violado}
CV < PV < PS < CS
Reglas de Propagacin Bottom-up
AyudaA(G1, G, ++): Etiqueta(G) = CS
AyudaA(G1, G, +): Etiqueta(G) = PS
DificultaA(G1, G, --) Etiqueta(G) = CV
DificultaA(G1, G, -) Etiqueta(G) = PV
Y-Refinamiento(G, {G1, , Gn}): Etiqueta(G) = min Etiqueta(Gi)
O-Refinamiento(G, {G1, , Gn}): Etiqueta(G) = max Etiqueta(Gi)
Ejemplos de Propagacin
CS
PS
PS
CS
PS
CS
CS
++
PV
-
p
r
o
p
a
g
a
c
i
n
p
r
o
p
a
g
a
c
i
n
Ejemplo de Propagacin
!
!
CS
PS
CS
CS
CS
PS
PV
Reducir esfuerzo
de usuarios
Calidad de
Planificacin
Calidad de
Decisin
Tiempo para
decidir
Iniciador
Reunin Planificada
Scheduler
Iniciador
O
Recoleccin
x iniciador
Recoleccin
va agenda
Recoleccin
va Web
Resolucin
Automatizada
Resolucin
Manual
Precisin
++
Flexibilidad
para iniciador
++
Reducir Esfuerzo
del Iniciador
++
Tiempo de
Recolec. Reducido
++
Reducir Esfuerzo
de participantes
Precisin de
Restricciones
+
_
PV
PV
CS
Mejores Fechas
Propuestas
Mejor Fecha
Seleccionada
Scheduler
O
resolucin
interactiva
++ PV o CS?
-
Conflictos de Propagacin
Un objetivo blando puede tener aportes positivos y negativos
simultneos
Conflicto: Objetivo satisfecho o violado?
Grado(G) " {CS, PS, PV, CV})
Razonamiento Cualitativo: Beneficios y Limitaciones
! Expone contribuciones de opciones a objetivos blandos
! Promueve elaboracin de objetivos
identificar nuevas opciones que contribuyen de mejor manera a
objetivos existentes.
! Promueve la negociacin
! Boehm: We found that the most important outcome... is not a
rigorous specification but a team of stakeholders with enough trust
and vision to adapt effectively to unexpected changes
" Definicin de Objetivos Blandos suele permanecer vaga
" Decisin sobre informacin cualitativa puede justificarse de
manera dbil.
Evaluacin y Seleccin de Alternativas
Tcnicas de razonamiento cualitativas
Ej. El NFR framework (Mylopoulos et al.)
Tcnicas de razonamiento cuantitativas
Criterio de evaluacin medible
Razonamiento Cuantitativo
Asignacin
Rpida
Movilizacin
Rpida
Asignacin
Precisa
Intervencin
Rpida
Sistema A Sistema B
++ ++
++
++
-- --
++ ++
++
++ ++ -- Sistema B
++ -- ++ Sistema A
Movilizacin
Rpida
Asignacin
Precisa
Asignacin
Rpida
Idea General: cuantificar influencias positivas y negativas
Asignacin
Rpida
Movilizacin
Rpida
Asignacin
Precisa
Intervencin
Rpida
Sistema A Sistema B
Razonamiento Cuantitativo
3 5
9
0.9
0.1
0.1
0.5 0.7
0.9
0.9 0.5 0.1 Sistema B
0.7 0.1 0.9 Sistema A
Movilizacin
Rpida
Asignacin
Precisa
Asignacin
Rpida
Proceso de Razonamiento Cuantitativo
1. Estimar el puntaje de cada opcin con respecto a un
conjunto de criterios de evaluacin (ej. objetivos blandos)
2. Estimar el peso de cada criterio sobre la calidad global del
sistema
3. Propagar el puntaje de cada opcin
Ej. Computar el puntaje global como un promedio ponderado
ptje_global(opcin) = # peso(criterio) X ptje(opcin, criterio)
Asignacin
Rpida
Movilizacin
Rpida
Asignacin
Precisa
Intervencin
Rpida
Sistema A Sistema B
Ejemplo Promedio Ponderado
3 5
9
0.9
0.1
0.1
0.5 0.7
0.9
10.9
9.5
Intervencin
Rpida
0.9*9 0.5*5 0.1*3 Sistema B
0.7*9 0.1*5 0.9*3 Sistema A
Movilizacin
Rpida
(Ponderado)
Asignacin
Precisa
(Ponderado)
Asignacin
Rpida
(Ponderado)
Elicitacin de Cantidades
De dnde salen los nmeros?
Stakeholders con amplio conocimiento del dominio
Cmo se estiman?
elicitacin directa de valores absolutos
elicitacin de valores relativos mediante
comparacin de a pares
(a ver esto ms adelante)
Elicitacin de Cantidades
Reemplazar ++/-- con nmeros estimados del 0 al 1
donde x significa opcin satisface el objetivo (100*x) %
de los casos
Dificultad: peso y puntaje no tienen significado preciso en el dominio
0.68
0.56
0.43
1
Total
0.1 0.5 0.2 0.2 Peso relativos
0.2 0.8 0.4 0.9 Recolec. va Web
0.5 0.3 0.9 0.9
Recolec. va
agendas
0.2 0.7 0.3 0
Recolec. x
iniciador
Reducir
Esfuerzo de
participantes
Precisin de
Restricciones
Tiempo de
Recolec.
Reducido
Reducir
Esfuerzo
del Iniciador
Objetivos
Blandos
Objetivos Blandos
Tcnicas de Razonamiento Cuantitativo
Ventajas:
!Bajo costo, fcil de usar
!output es un orden total de opciones
!Proceso de estimacin cuantitativa pude generar
discusiones y clarificaciones entre stakeholders
Desventajas:
" Composicin de criterios en un slo valor oculta
conflictos
" Definicin de objetivos blandos sigue siendo vaga
" Parmetros son difciles de validar porque no estn
expresados como cantidades medibles del dominio
Resumen hasta el momento...
Tcnicas cualitativas
Exponen contribuciones y conflictos
Permiten resolucin y elaboracin de objetivos y alternativas
Explicitan afirmaciones validables
Reglas de propagacin de grano grueso difciles de justificar
Tcnicas cuantitativas
Esconden conflictos y contribuciones
Facilitan exploracin de criterios de propagacin
De dnde salen y qu significan los valores?
No favorecen elaboracin de criterios
de aceptacin medibles
Razonando sobre criterios medibles
Existen tcnicas probadas para algunos objetivos no
funcionales. Ej:
confiabilidad (diagramas de fallas, modelos de markov)
performance (teora de colas)
pero con integracin dbil con modelos de IR...
Veremos una extensin del Modelo de Objetivos para
razonar sobre satisfaccin parcial
Criterios de aceptacin: Funciones Objetivas
Variables de calidad: Fenmeno medible en el dominio de
aplicacin
Propagacin: Ecuaciones de refinamiento
Objetivo Lograr [Intervencin De Ambulancia]
Def: Cuando un incidente es informado, la ambulancia estar en el
sitio del incidente en menos de 14 minutos.
Variable de Calidad
Nombre: Tiempo De Respuesta
Tipo: Tiempo
Universo de Muestreo: Conjunto de reportes de incidente
Denicin: Tiempo entre reporte inicial de un incidente y
momento de arribo de primer ambulancia al sitio del incidente
Variables de Calidad
Un atributo de un objetivo
Una variable aleatoria con:
nombre, tipo, universo de muestro, y definicin informal
Debe relacionarse con una cantidad medible en el
dominio de aplicacin
Funciones Objetivas
Objetivo Lograr [Intervencin De Ambulancia]
Def. Cuando un incidente es informado, la ambulancia estar en el
sitio del incidente en menos de 14 minutos.
50% 35% Max Prob(TiempoResp < 8') tasa_resp_8!
95% 80% Max Prob(TiempoResp < 14') tasa_resp_14'
Esperado Actual Mod Def Nombre
Funcin Objetiva
Especifican cantidades relacionadas con un objetivo a
ser maximizadas/minimizadas
Vinculan un conjunto de variables de calidad matemticamente
Adems tienen nombre, modalidad, y valor actual y esperado
Reglas de Propagacin
Renamiento de Variable de Calidad
T.Respuesta = T.Movilizacin + T.Viaje
Intervencin de Ambulancias
T.Respuesta: Time
Ambulancia Movilizada
T.Movilizacin: Time
Ambulancia Mov. Interviene
T.Viaje: Time
Modelo de Objetivos
Intervencin de Amb.
Amb. Mov. Interviene. Amb Movilizada
Incidente Codificado Amb. Movilizada Segn
Formulario
Amb Asignada
Segn Formulario
Amb. Asignada Movilizada
Tiempo de
Respuesta
Tiempo de
Viaje
Tiempo de
Llamado
Tiempo de
Cmputo
Tiempo de Reaccin
Evaluacin de Alternativas (bottom-up)
1. Estimar funciones de distribucin variables de calidad de hojas
Tiempo de Viaje ~ f(NroDeAmbLibres, Distancia, ....)
Tiempo De Llamado ~ Exp(60) para sistema actual
Exp(50) para sistema informatizado
Estimado a partir de
datos estadsticos del sistema actual
opiniones expertas y experiencia
(= estimacin subjetiva sobre cantidades medibles especficas del
dominio.)
Evaluacin de Alternativas (bottom-up)
2. Propagacin utilizando ecuaciones de
refinamiento de variables
Objetivo
Prop. Req.
Objetivo
Req. Req.
Objetivo
Servicio de Ambulancias
0,02 0,01 0,01 P(Falla de Movilizacin)
4 min 2 min 2 min Tiempo de Deteccin de Fallas
Promedio

50 seg 80 seg 80 seg Tiempo de Movilizacin Promedio
95 % 93 % 84 % Respuesta de 14 minutos
52 % 47 % 30 % Respuesta de 8 minutos
Funciones Objetivas
30 seg 30 seg 60 seg Tiempo de Asignacin Promedio
50 seg 50 seg 60 seg Tiempo de Llamado Promedio
Automatizacin de
llamados y asignacin
y movilizacin de
ambulancias.
Automatizacin de
llamados y
asignacin de
ambulancias
Sistema Manual
Parmetros
Resumen
- Modelo de Objetivos Extendido -
Independencia de aspectos cuantitativos y de
comportamiento
Criterios de aceptacin y propagacin puede cambiar
en forma independiente
Cuantificacin basada en aspectos relevantes
del dominio
Facilita anlisis de sensitividad
Aplicable a anlisis de obstculos y riesgos
Promueve generacin de criterios medibles
Priorizacin
Elecciones en IR
Qu objetivos satisfacer?
Balancear tiempo/costo vs. funcionalidad
Decidir que funcionalidad va en la prxima versin
Qu riesgos atacar?
Qu alternativa de sistema construir?
Cada eleccin requiere priorizar opciones
Que atributos deben tenerse en cuenta?
Cmo se cuantifican estos atributos?
Costo/Beneficio
Calcular el retorno de inversin (ROI)
Evaluar el valor que aporta cada objetivo al proyecto
Evaluar el costo relativo de cada objetivo
Analizar el costo vs. beneficio
Costo (porcentual)
V
a
l
o
r

(
p
o
r
c
e
n
t
u
a
l
)
Prioridad baja
Prioridad
intermedia
Prioridad
alta
5 10 15 20 25 30
5
10
15
20
25
30
Severidad/Probabilidad
Para riesgos
Evaluar la probabilidad de ocurrencia de cada riesgo
Evaluar la severidad (costo) de ocurrencia de cada riesgo
Analizar el probabilidad vs. severidad
Probabilidad
S
e
v
e
r
i
d
a
d
5
10
15
20
25
30
1 0
Alta
Exposicin
x
x
x
x
x
Efectividad
Para medidas de contingencias o prevencin de riesgos
Evaluar el costo de cada medida
Evaluar la efectividad (grado de reduccin de severidad o
probabilidad de riesgo) de cada medida
Analizar el costo vs. efectividad
Costo
E
f
e
c
t
i
v
i
d
a
d
Prioridad baja
Prioridad
intermedia
Prioridad
alta
5 10 15 20 25 30
5
10
15
20
25
30
Estimacin de Cantidades
Dos enfoques:
Escala absoluta
ej. dlares, horas hombre, probabilidades, etc.
Requiere mucha experiencia y conocimiento del
dominio
Valores relativos
(ej. mas/menos; mucho/poquito/nada)
Mas fcil de elicitar
Priorizacin se transforma en un problema de ordenar
tems
Algunas Complicaciones
Es difcil cuantificar diferencias
Elementos suelen
ser incomparables (e.g. diversos niveles de
abstraccin)
no ser independientes
Stakeholders suelen
ser inconsistentes
estar en desacuerdo
Analytic Hierarchy Process (AHP)
- Proceso de Jerarqua Analtica -
Toma de decisiones basado en cuantificacin y priorizacin
Aspecto clave: Slo se hacen comparaciones de a pares
Proceso:
1. Seleccionar un conjunto de tems y un criterio de comparacin
Ej. Objetivos y Preferencia
Ej. Riesgo y Costo relativo
Ej. Sub-objetivos blandos y peso relativo
Ej. Alternativa y contribucin a objetivo de alto nivel
2. Construir matriz cuantificando relacin entre cada par de tems de
acuerdo al criterio de comparacin
3. Computar autovalor de la matriz
4. Interpretar autovalor como el peso relativo de cada tem con
respecto al criterio de comparacin
Algoritmo para verificar consistencia de evaluacin de a pares
[Karlsson & Ryan, 1997]
Ejemplo AHP
Problema: Priorizar objetivos a implementar.
Solucin: Aplicar AHP para estimar valor y costo
relativo
1. tems:objetivos. Criterio: preferencia
2. Crear matriz M de n x n (para n objetivos)
1. Para cada elemento M(x,y) completar con n de 1 a 9:
1 - si x e y tienen el mismo valor
9 - si x es extremadamente ms preferido que y
y para M(y,x) el valor inverso (1/M(x,y)).
Ejemplo AHP: Priorizacin de Objetivos
3. Estimacin de autovalores (promedio de
columnas normalizadas) de M
1. Dividir cada elemento en la matriz por la suma de
su columna
2. Calcular la suma de cada fila
3. Dividir cada suma de fila por cantidad de filas
4. (Opcional) Computar M^2 y volver a empezar(*)
4. Interpretar resultado:
porcentaje de cada objetivo al valor total del
proyecto
1 3 1/3 1/4 Req4
1/3 1 1/5 1/2 Req3
3 5 1 3 Req2
4 2 1/3 1 Req1
Req4 Req3 Req2 Req1
0.12
0.04
0.36
0.48
Req4
0.27 0.18 0.05 Req4
0.09 0.11 0.11 Req3
0.45 0.54 0.63 Req2
0.18 0.18 0.21 Req1
Req3 Req2 Req1
Normalizar
columnas
sumar
filas
0.16 0.62
0.09 0.34
0.50 1.98
0.26 1.05
sum/4 sum
AHP - Estimacin de Valor
Req1 - 26% del valor total.
Req2 - 50% del valor total
Resultado
8.33 11 2.16 4.75 Sum
Grfico de RoI
Realizar AHP 2 veces:
Estimar valor relativo
Estimar costo relativo
Usar resultados para calcular proporcin de ROI
Costo (porcentual)
V
a
l
o
r

(
p
o
r
c
e
n
t
u
a
l
)
Prioridad baja
Prioridad
intermedia
Prioridad
alta
5 10 15 20 25 30
5
10
15
20
25
30
Coordinador de Reuniones
- Comparacin de alternativas usando AHP -
Problema: Evaluar cuanto una opcin es mejor que otra
para satisfacer un objetivo
Ej. Para lograr Tiempo de Recoleccin Reducido
Uso de agenda es 9 veces mejor que iniciador
Uso de agenda es 5 veces mejor que va web
Ejemplo de escala: 1 es igual', 3 es un poco mejor', 5 es mucho mejor,
7 es claramente preferido por encima de, 9 es valor mas alto
Opciones
1 1/7 5 web
7 1 9 agenda
1/5 1/9 1 iniciador
web agenda iniciador
Tiempo de Recoleccin Reducido
Opciones
0.19 web
0.75 agenda
0.06 iniciador
Tiempo de
Recoleccin
Reducido
Negociacin
Permea las actividades de evaluacin y priorizacin.
Aparece en la definicin de...
el grado de aporte a objetivo blandos
los pesos relativos de comparaciones de a pares
las estimaciones de valores absolutos de costos,
probabilidades, beneficios, etc
los criterios de aceptacin - funciones objetivas
Para tcnicas generales de negociacin ver clsicos
D. Pruitt. Negotiation Behavior. Academic Press, 1981
H. Raiffa. Art and Science of Negotiation. Harvard University
Press, 1982.
Tcnica aplicada a Ingeniera de Software: W-Theory,
Boehm
Resumen
Evaluacin, Seleccin y Negociacin de Alternativas
Tcnicas Cualitativas
Objetivos etiquetados y reglas de propagacin
Tcnicas Cuantitativas
Propagacin ponderada
Modelo de Objetivos Extendido
Variables de calidad, funciones objetivas y refinamiento de variables
Tcnicas de Priorizacin
AHP

Priorización

Hochgeladen von

Dokumentinformationen

Copyright

Verfügbare Formate

Dieses Dokument teilen

Dokument teilen oder einbetten

Freigabeoptionen

Stufen Sie dieses Dokument als nützlich ein?

Sind diese Inhalte unangemessen?

Copyright:

Verfügbare Formate

Priorización

Hochgeladen von

Copyright:

Verfügbare Formate

Unidad 9

Das könnte Ihnen auch gefallen