JUPEMA Calidad Software 2015 09

Copyright Cenfotec S.A. 2000..
2014
Calidad del software

Calidad en los sistemas de informacin
Junta de Pensiones del Magisterio Nacional
JUPEMA
Ignacio Trejos Zelaya
Universidad Cenfotec, Cenfotec
17 de setiembre del 2015
Copyright Cenfotec S.A. 2000..2014
Agradecimientos
Watts Humphrey
Capers Jones
John Nicholls
Tony Hoare
Tom Gilb
Dorothy Graham
Marcelo Jenkins
Mario Jimnez (Eximius)
Roberto Sasso
Edwin Garro
Gregory Alfaro
Exactus / Softland
Mis alumnos, mis colegas
Cenfotec, ITCR
Resultados de 8,000 proyectos

Standish Group
Ms de 200%
tarde
6%
101-200%
tarde
16%
Cancelados
29%
51-100%
tarde
9%
21-50% tarde
8%
Menos que
20% tarde
6%
A tiempo
26%
Calidad y sexo
"Salvando las diferencias, la calidad tiene mucho en comn con el
sexo. Todo el mundo lo quiere. Todo el mundo cree que lo conoce.
Todo el mundo cree que su ejecucin es slo cuestin de seguir las
inclinaciones naturales.
Y, por supuesto, la mayora de las personas piensa que los
problemas en estas reas son producidos por otra gente."
Philip Crosby, Quality is free, Mc Graw Hill, 1979
Falta de compromiso de la administracin

superior con el proyecto
No conseguir el compromiso de los usuarios
Mala comprensin de los requerimientos
Inadecuada participacin de usuarios
Manejar mal las expectativas de usuarios
finales
Alcances: cambios / objeciones
Falta de conocimiento / habilidades
requeridas en el personal del proyecto
Falta de requerimientos congelados
Introduccin de nuevas tecnologas
Dotacin de personal insuficiente /

inadecuado
Conflicto entre departamentos usuarios
1 = menos importante, 10 = ms importante
Keil, Cule, Lyytinen, Schmidt. 1998*
* 40 proyectos,. CACM 41(11), 11.1998
Factores de desafo
Factores de deterioro
xito en el tiempo
CHAOS Manifesto, 2013
gil vs Cascada - diferencias
Falta de compromiso de la administracin

superior con el proyecto
No conseguir el compromiso de los usuarios
Mala comprensin de los requerimientos
Inadecuada participacin de usuarios
Manejar mal las expectativas de usuarios
finales
Alcances: cambios / objeciones
Falta de conocimiento / habilidades
requeridas en el personal del proyecto
Falta de requerimientos congelados

Introduccin de nuevas tecnologas
Dotacin de personal insuficiente /
inadecuado
Conflicto entre departamentos usuarios
1 = menos importante, 10 = ms importante
Keil, Cule, Lyytinen, Schmidt. 1998*
* 40 proyectos,. CACM 41(11), 11.1998
Qu es calidad?
"La totalidad de las caractersticas de un producto o
servicio, que tienen que ver con su capacidad de satisfacer
necesidades enunciadas o implcitas"
ISO 8402
The International Standard Quality Vocabulary
Vistas de calidad - Garvin

1. Basada en el valor
(diseo s/ precio)
Calidad por costo
5. Transcendente
(excelencia innata)
Reputacin
Calidad
2. Basada en el usuario
(adecuacin al propsito)
Visin del cliente
4. Basada en el producto
(obtener lo que se paga)
Mismo producto
ms caractersticas
3. Basada en el proceso
(conforme a los requerimientos)
Satisfacer especificacin del cliente
Calidad - cuantitativa
Grado de conformidad
Calidad adecuacin a propsito

Utilidad y practicidad
Calidad - comparativa
Grado de excelencia
Calidad del software

Grado con el cual el cliente o usuario percibe que el
software satisface sus expectativas
IEEE 729-83
Beneficios para el cliente
Satisfaccin del cliente

Mayor confiabilidad del software
Reduccin de errores al operar el software
Satisfaccin de los requerimientos del usuario
Beneficios para la organizacin

Se satisfacen los requerimientos del cliente
Estabilidad de los requerimientos
Verificacin de haber implementado los requerimientos
para las diversas caractersticas
Los procesos se aplican de manera consistente
El proceso mejora al transcurrir el tiempo
Es multidimensional
Debe
trabajar por
largo tiempo
Buen
rendimiento
Adaptado a mis
necesidades
especficas
Ser capaz de usarlo

con UNIX o
Windows
Fcil de usar
Sin pulgas
ni defectos
Bueno!
Obviar el diseo
Modelo de calidad de McCall
Facilidad de Mantenimiento
(Puedo corregirlo?)
Flexibilidad
(Puedo cambiarlo?)
Portabilidad
(Podr usarlo en otra mquina?)
Reutilizabilidad
(Podr reutilizar alguna parte del software?)
Revisin
Transici
n
Facilidad de Prueba
(Puedo probarlo?)
Interoperabilidad
(Podr hacerlo interactuar
con otro sistema?)
Operacin
Correctitud (Hace lo que quiero?)

Confiabilidad (Lo hace de forma confiable todo el tiempo?)
Eficiencia (Se ejecutar en mi hardware lo mejor que pueda?)
Integridad (Es seguro?)
Facilidad de uso (Est diseado para ser usado?)
Modelo de calidad ISO 9126
Conflictos entre factores

Cmo un factor
de abajo afecta
un factor a la
derecha
Correctitud
Correctitud
Eficiencia
Confiabilidad
Integridad
Utilizabilidad
McConnell
Utilizabilidad
Eficiencia
Confiabilidad
Integridad
Adaptabilidad
Exactitud
Robustez
Adaptabilidad
Exactitud
Robustez
Errare humanum est
Cada
Pulga
Anomala
Zafis
La primera pulga (bicho)
Error, defecto, falla
NIST Report, 2002

Errores de software costaron $59,500 M / ao, 0.6% PIB
EUA
1/3 de esos costos, $22,200 M, podra ser eliminado si se
mejora la infraestructura y los procesos de validacin de
software
80% de los costos del desarrollo de software en un proyecto
tpico se gastan en la identificacin y correccin de defectos
Potenciales de defectos
requerimientos
diseo
cdigo
documentacin
malas correcciones
Causas ms comunes
Definicin de requerimientos errnea

Fallas en la comunicacin entre cliente y desarrollador
Desviaciones de los requerimientos de software
Errores de diseo lgico
Errores de codificacin
Incumplimiento de instrucciones de documentacin y
codificacin
Deficiencias en el proceso de pruebas
Problemas de interfaz de usuario
Errores en procedimientos
Errores de documentacin
8000 proyectos
Ms de 200%
tarde
6%
101-200%
tarde
16%
Cancelados
29%
51-100%
tarde
9%
21-50% tarde
8%
Standish Group
Menos que
20% tarde
6%
A tiempo
26%
Fuentes de defectos
Bender & Associates
Costos de detectar + reparar defectos (HP)

Actividad
Requerimientos
Diseo
Codificacin
Integracin
Pruebas finales
Entrega
Hewlett-Packard 1991
Costo
$45
$450
$1,500
$1,500
$45,000
$450,000
Esfuerzo
< 1 h/p
6 h/p
20 h/p
20 h/p
600 h/p
6,000 h/p
Costos de reparacin (IBM)
Costo de los errores
Sistema
Acumulacin de defectos
PROBLEMA
Anlisis de
Reqs.
Diseo
Construccin
Pruebas
Davis
Especif.
correcta
Especif.
incorrecta
Diseo
correcto
Diseo
errneo
Diseo de
espec. errnea
Construccin ConstruccinConstruy s/unConstruy s/

correcta
errnea diseo errneo
ideas errneas
Funciones
correctas
Errores
Errores
corregibles incorregibles
Problemas
ocultos
Trabajo y re-trabajo
requerimientos
diseo programacinpruebas aceptacin
Deteccin tradicional
requerimientos
Probabilidad de resultados
Capers Jones, 2009
Cmo lograr calidad en el software?
The quality of a system is governed by the quality of the

processes used to develop and evolve it
Watts S. Humphrey
Importa el proceso?
Trabajo no
productivo
Porcentaje de
esfuerzo
Trabajo productivo
Proceso
Tiempo
Mc Connell
Atencin al proceso
Trabajo no
productivo
Trabajo productivo
Proceso
Mc Connell
Proceso de software
Quin hace Qu, Cundo y Cmo
Ciclo de
vida
Herramienta
Actividades
(cmo,
cuando)
Personas
Paradigma
Proceso de
Software
Prcticas y principios
Notacin
Roles
(quin)
Artefactos
(qu)
La calidad se construye...
En la especificacin de necesidades
En el diseo de productos o servicios
En la construccin del producto
En la provisin del servicio
Mediante el soporte ofrecido a lo largo del ciclo de vida
del producto
... a travs de los procesos
Hacia la calidad
Los defectos son evitables
El mejoramiento continuo de la calidad no reside en
aumentar las pruebas, sino en mejorar continuamente
los procesos de produccin
Costo de la calidad (resumen)

Costo de la calidad
Prevencin
Evaluacin
Falla
Interna
Externa
Costo de la (no-) calidad

Costos de prevencin: costo de actividades diseadas
para evitar baja calidad en productos o servicios
Costos de evaluacin: costos asociados con medir,
evaluar o auditar productos o servicios para asegurar
conformidad con estndares de calidad o
requerimientos de rendimiento
Costos de falla: costos que resultan de productos o
servicios que no conforman con los requerimientos o
que no satisfacen las necesidades de los usuarios
costos resultantes de la baja calidad
Costos de falla
Costos de falla internos: costos de falla que ocurren
antes de enviar el producto al cliente o antes de
proveerle un servicio
Costos de falla externos: costos de falla que ocurren
despus de enviar el producto al cliente, o que le
ocurren durante o despus de proveerle un servicio
Costos de prevencin
Descripciones de puestos
Filtrado de candidatos
Evaluaciones de personal
Educacin
Capacitacin
Anlisis de mercado
Encuestas
Planeamiento
Pronsticos
Proyectos piloto
Revisiones de procedimientos
Redaccin de procedimientos
Adopcin de estndares
Planeacin de la calidad
Capacitacin en calidad
Administracin del aseguramiento
de la calidad
Incentivos de calidad
Estudios de capacidades
Revisiones de diseo
Prototipaje
Revisiones de requerimientos con
usuarios
Biblioteca de reutilizacin
Administracin de la configuracin
Evaluacin de proveedores
Encuestas a proveedores
Costos de evaluacin
Lectura de documentos
Revisiones
Caminatas (walkthroughs)
Inspecciones de proceso
Inspecciones finales
Validacin de prototipos
Auditoras de producto
Pruebas de unidades
Pruebas de integracin
Pruebas del sistema
Pruebas de aceptacin
Evaluacin de calidad de
proveedores externos
Actividades de verificacin y
validacin
Auditoras de proceso
Pruebas de rendimiento en el
campo
Preparacin y configuracin
de equipo para pruebas
Benchmarking
Costos de falla internos
Accidentes
Errores de contabilizacin
Cambios de diseo
Rotacin de personal
Equipo no disponible
Gastos financieros en exceso
Gastos de viaje en exceso
Reparar defectos
Re-trabajo correctivo
Actualizar documentos
Re-integracin
Restauracin de versiones
Horas extra
Obsolescencia
Sobrepagos
Rediseo
Reinspeccin
Re-probar
Retrabajo
Desechar elementos
Pruebas de regresin
Costos de falla externos
Visitas a clientes quejosos

Insatisfaccin del cliente
Avisos de cambios a productos en operacin
Soporte tcnico para quejas provocadas por
defectos
Equipo no disponible
Mantenimiento de cdigo (y otra
documentacin) y liberacin de versiones
corregidas
Evoluciones de productos debido a defectos
Gastos financieros excesivos
Gastos de viaje en exceso
Mejora debida a defecto
Multas
Capacitacin a personal en servicio
Prdida de reputacin
Reduccin de ventas
Revisiones de fallas en campo

Reclamos por acuerdos de servicio
Prdida de clientes
Re-trabajo, re-inspeccin, etc.
Garantas, costos financieros, etc.
Litigios
Pago de daos y perjuicios
Prdida de participacin de mercado
Obsolescencia
Sobrepagos
Concesiones de precio
Errores de precio
Rediseo
Reinspeccin
Reparacin en-caliente
Re-probar
Devoluciones
Costos crecientes de mercadeo y promocin
de ventas
El tmpano
La calidad afecta los costos del software
Capers Jones
Correccin tarda de defectos es cara

50-200X
Costo de
corregir
50-200X
Fase en que se
crea un defecto
Requerimientos
1X
1X
Arquitectura
Diseo detallado
Construccin
Requerimientos
Arquitectura
Diseo detallado
Construccin
Liberacin
Fase en que se corrige un defecto
McConnell
Deteccin localizada
requerimientos
Corregir ms defectos ms temprano

50-200X
No ac
Costo de
corregir
Arreglar ac
50-200X
Fase en que se
crea un defecto
Requerimientos
1X
1X
Arquitectura
Diseo detallado
Construccin
Requerimientos
Arquitectura
Diseo detallado
Construccin
Liberacin
McConnell
Tasa de defectos (0)
Kan / Westfall
Tasa de defectos (1)
Kan / Westfall
Aseguramiento
Patrones planificados y sistemticos de acciones
necesarias para proveer confianza
Producto : requerimientos tcnicos pre-establecidos
Proceso : conforme a estndares pre-establecidos
Verificacin y validacin
Verificacin -- estamos construyendo el producto
correctamente?
are we building the product right?
Validacin -- estamos construyendo el producto
correcto?
are we building the right product?
Costo de la calidad
Enfocarse en calidad desde temprano tpicamente
reduce el esfuerzo y acorta el tiempo
McConnell
Esttica y dinmica
Sommerville, 2000
Verificacin y validacin
Valida
Necesidades del
Negocio
Verifica
Valida
Definicin de
Requerimientos
Verifica
Revisiones
Estticas
Pruebas de
Aceptacin
Diseo del
Sistema
Verifica
Valida
Pruebas del
Sistema
Valida
Valida
Valida
Construccin
Del Sistema
Verifica Valida
Pruebas de
Integracin
Valida
Pruebas
Dinmicas
Pruebas
Unitarias
69
Ciclo (de vida) V

Feasibility
Study
Requirements
definition
Statement of
requirements
Project
Operation
phase out
Operational
software
Project
initiation
Plans
Updated
requirements
Test data
Requirements
specification
Review
Requirements
specification
OperationalProject
test
completion
Accepted
software
Test cases
Test data
Test cases
Test cases
Test data
Test
Test cases
Acceptance
test
Tested
software
Integration
test
data
Architectural
design
Test data
Test cases
Design
Integrated
specificationIntegrati
Review
software
on
Detailed
Buil plan
Integration
design
d
Walkthrough
File
Module
designss
Test
Test
data
cases
Coding
Code Reading
Tested
modules
LEGEND
SDLC
Phase
Baselined
Phase products
Unit
Test
Code
Integracin con ciclo
Pruebas de
aceptacin
Especificacin de
requerimientos
Casos de prueba
Revisin
Especificacin de
requerimientos
Software
probado
Casos de prueba
Diseo
Revisin arquitectnico
Pruebas de
integracin
Deteccin localizada
requerimientos
Descubrimiento de defectos usual
Capers Jones
Descubrimiento de defectos con inspecciones
Capers Jones
Desarrollo incremental
Davis et al.
Proceso iterativo + V&V
PA
D
PI
C
PU
PA
D
PI
PU
PA
D
PI
PU
iteracin
Filtrado de defectos
Eficiencia en remocin de defectos
Capers Jones
Bajar costos de defectos
Fase en que se
crea un defecto
Requerimientos
10X?
1X
10X?
1X
Arquitectura
Costo de
corregir
Diseo detallado
Construccin
Requerimientos
Arquitectura
Diseo detallado
Construccin
Liberacin
McConnell
Qu significa todo esto?

Reduccin de tiempos: del 10% al 45%
Cuando comienzan las pruebas, las inspecciones han
atrapado 85% de los defectos
IBM (DBMS)
Reduccin del 50% defectos liberados (a clientes),
respecto de versin anterior
Cronograma baj en 15%
Pruebas: de 3 turnos en 60 das a 1 turno en 40 das
Valoracin por clientes: pasaron de pobre a bueno
Mantenimiento: reduccin de costo del 45% (ao 1)
Tasa de descubrimiento de defectos (Rayleigh)
Putnam & Myers
Tasa de descubrimiento de defectos

Defect Discovery Rate
50
40
30
20
10
0
1
11
13
15
17
19
Week
Costo de los errores
Sistema
Prevencin y deteccin temprana
Ms bueno, ms barato, ms rpido

El software de alta calidad no es ms caro. Es ms
rpido y barato construir y mantener software de alta
calidad que software de baja calidad, desde el desarrollo
inicial hasta llegar al costo total de propiedad. Capers
Jones
High-quality software is not expensive. High-quality software is faster and
cheaper to build and maintain than low-quality software, from initial
development all the way through total cost of ownership. Capers Jones
Beneficios calidad <-> economa
Reducir cancelacin de proyectos

Reducir litigio en contratacin externa
Acortar cronogramas de desarrollo
Bajar costos de desarrollo
Bajar costos de mantenimiento
Reducir costos de garantas
Incrementar satisfaccin de clientes
Aprovechar oportunidades de mercado
Desarrollar oportunidades de innovacin
Mejorar moral de equipos tcnicos
Softland (Exactus ERP)
Satisfaccin de clientes
(94% entregas a tiempo)
Satisfaccin de los clientes

(93% satisfechos o ms)
CMM
Optimizante
Administrado
Definido
Repetible
Inicial
Visibilidad del proceso
CoSQ: CMM/1 vs CMM/3
Krasner
Raytheon CMM
Ahorros en costos (DB Systems GmbH)
SEI Carnegie Mellon University Performance Results of CMMI Based process improvement
Rendimiento
Costo de calidad y CMM
Sedigh-Ali et al.
Efectos avance en CMM
CoSQ versus Mejoras en rendimiento
Krasner, 1999
Gracias por su atencin!
Ignacio Trejos Zelaya

itrejos@ucenfotec.ac.cr
Las personas, la gente

La tecnologa se hace por la gente
La tecnologa la hace la gente:
Invencin (concepto, diseo, construccin de prototipos)
Construccin, fabricacin, adaptacin
Comercializacin
Soporte tcnico, soporte a usuarios
Mantenimiento, integracin
Educacin, capacitacin, entrenamiento
Documentacin (manuales, guas, etc.)
Administracin
Contratos, registro y proteccin de propiedad intelectual
El xito de las TIC exige ms que informticos!
Causas comunes de conflicto en equipos

Metas que compiten (en conflicto)
Mala comprensin de las responsabilidades del puesto
o trabajo
Mala comprensin de requerimientos
Interdependencia
Mecanismo de retroalimentacin
Sistema de evaluacin de desempeo
Conflictos de inters
Desacuerdos sobre estrategia
Desacuerdos sobre ejecucin
Falta de foco
Planificacin deficiente
Cultura de echar la culpa
Egocentrismo
Bsqueda de reconocimiento individual
Falta de conocimiento de principios y valores de agilidad
Temor al fracaso
Falta de responsabilidad del equipo

Metas que compiten (en conflicto) 31
Mala comprensin de las responsabilidades del puesto
o trabajo 55
Mala comprensin de requerimientos 51
Interdependencia 22
Mecanismo de retroalimentacin 25
Sistema de evaluacin de desempeo 35
Conflictos de inters 37
Desacuerdos sobre estrategia 35
Desacuerdos sobre ejecucin 33
Falta de foco 30
Planificacin deficiente 33
Cultura de echar la culpa 58
Egocentrismo 45
Bsqueda de reconocimiento individual 44
Falta de conocimiento de principios y valores de agilidad
24
Temor al fracaso 42
Falta de responsabilidad del equipo 50

JUPEMA Calidad Software 2015 09

Hochgeladen von

Dokumentinformationen

Copyright

Verfügbare Formate

Dieses Dokument teilen

Dokument teilen oder einbetten

Freigabeoptionen

Stufen Sie dieses Dokument als nützlich ein?

Sind diese Inhalte unangemessen?

Copyright:

Verfügbare Formate

JUPEMA Calidad Software 2015 09

Hochgeladen von

Copyright:

Verfügbare Formate

Copyright Cenfotec S.A. 2000..

Calidad del software

Resultados de 8,000 proyectos

Copyright Cenfotec S.A. 2000..2014

Falta de compromiso de la administracin

Dotacin de personal insuficiente /

Keil, Cule, Lyytinen, Schmidt. 1998*

* 40 proyectos,. CACM 41(11), 11.1998

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

CHAOS Manifesto, 2013

Copyright Cenfotec S.A. 2000..2014

gil vs Cascada - diferencias

Copyright Cenfotec S.A. 2000..2014

Falta de compromiso de la administracin

Falta de requerimientos congelados

Keil, Cule, Lyytinen, Schmidt. 1998*

* 40 proyectos,. CACM 41(11), 11.1998

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Vistas de calidad - Garvin

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Calidad adecuacin a propsito

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Calidad del software

Copyright Cenfotec S.A. 2000..2014

Beneficios para el cliente

Satisfaccin del cliente

Copyright Cenfotec S.A. 2000..2014

Beneficios para la organizacin

Copyright Cenfotec S.A. 2000..2014

Ser capaz de usarlo

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Modelo de calidad de McCall

Correctitud (Hace lo que quiero?)

Copyright Cenfotec S.A. 2000..2014

Modelo de calidad ISO 9126

Copyright Cenfotec S.A. 2000..2014

Conflictos entre factores

Copyright Cenfotec S.A. 2000..2014

Errare humanum est

La primera pulga (bicho)

Copyright Cenfotec S.A. 2000..2014

Error, defecto, falla

Copyright Cenfotec S.A. 2000..2014

NIST Report, 2002

Copyright Cenfotec S.A. 2000..2014

Copyright Cenfotec S.A. 2000..2014

Definicin de requerimientos errnea

Bender & Associates

Copyright Cenfotec S.A. 2000..2014

Costos de detectar + reparar defectos (HP)

Copyright Cenfotec S.A. 2000..2014

Costos de reparacin (IBM)

Copyright Cenfotec S.A. 2000..2014