02 Evaluacion ROI

Gestin de la formacin en base al modelo
del retorno de inversin

Evaluacin de los programas de
formacin en base al Modelo del Retorno
de Inversin
Jaime Moreno Villegas: jmoreno@sociometrika.com
Septiembre de 2013
Objetivos de aprendizaje
Al final del mdulo los participantes estarn en la capacidad de:
1. Enumerar las funciones claves de la gestin estratgica del proceso de

formacin.
2. Enumerar los niveles de evaluacin de los programas de formacin.
3. Determinar el nivel de evaluacin de un programa de formacin.
4. Planificar la evaluacin de los programas de formacin en los cinco
niveles.
5. Usar la metodologa ROI para evaluar los programas de formacin.
6. Identificar programas de formacin que tengan impacto y retorno de
inversin.
7. Realizar mejoras al proceso de deteccin de necesidades de
capacitacin para que identifique programas que puedan ser medidos en
el nivel de impacto y retorno de inversin.
2013. Jaime Moreno Villegas.
Los 5 niveles de evaluacin
1. Reaccin
Mide la satisfaccin de los usuarios con el programa
2. Aprendizaje
Mide el aprendizaje de los participantes
3. Aplicacin
Mide si los participantes aplican lo aprendido en su trabajo
4. Impacto
Mide el impacto o cambio en los resultados
5. ROI
Mide el retorno econmico de la inversin
Reaccin
La reaccin y percepcin que tienen los participantes del evento y sus

caractersticas a la finalizacin del mismo.
Conferencia: Finanzas personales en poca de crisis
Al final de la conferencia, los participantes calificarn al menos con 4 / 5 las siguientes afirmaciones:
1. La exposicin del conferencista fue clara y comprensible.
2. El contenido de la conferencia fue muy til.
3. Aplicar las recomendaciones presentadas.
4. Usar el material que se entreg en la conferencia.
Los tems de reaccin tienen que enfocarse ms al contenido del evento y la

Intencin de aplicacin, antes que al desempeo del instructor.
Se recomienda que el 100% de cursos y eventos se evale en este nivel.
Aprendizaje
Las acciones que los participantes estn en capacidad de realizar

como consecuencia del programa de formacin.
Al final de este mdulo los participantes estarn en capacidad de:
Formular objetivos de aprendizaje

Accin o desempeo
a ejecutar
Objeto de la accin
Todo curso debera tener objetivos de aprendizaje

entre el 40% y 60% de cursos deben evaluarse en este nivel
Aplicacin o transferencia
Las acciones que los participantes llevarn a cabo en su trabajo,

despus del programa de formacin.
Cursos
Objetivos de aplicacin (N3)
Tcnicas de entrevista
Aplicar las tcnicas de entrevistas en al menos el 90% de las

entrevistas de forma inmediata
Rediseo de procesos
Redisear el 100% de los procesos del rea hasta fin de ao
Habilidades de negociacin
Usar las habilidades de negociacin en al menos el 80% de

transacciones con los proveedores
Asesora comercial
Asesorar a todos los clientes de acuerdo a las tcnicas aprendidas

en el curso
Si resulta difcil plantear objetivos N3 a un curso, pregntese:

Es pertinente este curso? beneficia a la organizacin?
Entre el 20% y 40% de cursos deben evaluarse en este nivel.
Impacto
Los resultados que se esperan como consecuencia del

curso y que sern medidos por indicadores de gestin
previamente identificados.
Cursos
Objetivos de impacto (N4)
Tcnicas de ventas
Incrementar el volumen de ventas en un 10%
Estrategias de marketing
Aumentar la participacin de mercado en un 5%
Elaboracin de plizas de seguro
Reducir el tiempo de emisin de las plizas. Actual 24 horas,

meta: 12 horas.
Mejoramiento de la calidad de productos
Reducir el ndice de defectos por unidad en un 10%
No todos los cursos de formacin se miden en este nivel, pero tenga en cuenta
que a partir de este nivel, la capacitacin tiene un valor estratgico.
Entre el 10% y 20% de cursos deben evaluarse en este nivel.
Retorno de inversin
El retorno econmico esperado de la inversin efectuada

Cursos
Objetivos de impacto (N4)
Tcnicas de ventas
Un ao despus del curso por cada dlar invertido

esperamos un retorno de $ 2.2 dlares
Estrategias de marketing
Un ao despus del curso se espera una relacin

beneficio costo de al menos 1.5
Mejoramiento de la calidad de productos
Un ao despus del curso se espera un retorno de

inversin del 200%
Se puede calcular ROI siempre que hayan existido impactos positivos (N4),
los beneficios puedan ser costeados y se hayan registrado la categora de
costos del programa. Entre el 5% y 10% de cursos deben evaluarse en este nivel.
Evaluacin de reaccin
Desempeo del instructor
Objetivos y contenidos del

programa
Instalaciones
Materiales
Recursos audiovisuales
Logstica
Desde el punto de vista del Modelo ROI, la informacin ms crtica de esta

evaluacin es:
Intencin de Aplicacin
Nivel de autoeficacia
Favorabilidad del entorno
Reaccin, cont.
Intencin de
Aplicacin
La predisposicin inicial que tiene

el participante para aplicar lo
aprendido en su trabajo.
Nivel de Autoeficacia
El grado de seguridad que tiene el

participante en sus propias
capacidades para aplicar lo
aprendido.
Favorabilidad
del entorno
La percepcin del participante

respecto a las facilidades que
brinda el entorno de trabajo para
aplicar los aprendizajes.
10
Reaccin, cont.
Intencin de
Aplicacin
Pienso aplicar lo aprendido en mi trabajo.
Los conceptos, herramientas y metodologas que he aprendido son aplicables
a mi trabajo.
El curso me ha generado algunas ideas que pienso aplicar en mi trabajo.
Estudios han demostrado que la intencin de aplicacin es uno de los
predictores de la transferencia real al trabajo. Mayor intencin, mejor
probabilidad de aplicacin.
11
Reaccin, cont.
Nivel de Autoeficacia
Me siento listo o preparado para aplicar lo aprendido en mi trabajo.
Este curso ha aumentado mi seguridad con el tema.
Tengo la seguridad de que me ir bien cuando aplique lo aprendido en mi trabajo.
Estudios han demostrado que si la intencin de aplicacin se acompaa de

un bien nivel de autoeficacia, la probabilidad de transferencia es mayor
12
Reaccin, cont.
Favorabilidad
del entorno
Dispongo del tiempo necesario para aplicar lo aprendido en mi trabajo.

Dispongo de los recursos necesarios para aplicar lo aprendido en mi trabajo.
Considero que mi jefe o compaeros me pueden apoyar en aplicar lo aprendido.
Pienso que mi entorno de trabajo favorece la aplicacin de aprendizajes.
Los estudios sugieren que cuando la percepcin respecto al entorno de trabajo
Es negativa, las posibilidades de aplicacin estn seriamente limitadas, a pesar
de los dos factores anteriores.
13
Reaccin, cont.
Evaluacin de Reaccin
Curso: Coaching Ejecutivo
N = 14
Desempeo del instructor
Metodologa
Objetivos y contenidos
Materiales
Intencin de aplicacin
Autoeficacia
Favorabilidad del entorno
4,7
5 = total acuerdo
4 = de acuerdo
3 = mediano acuerdo
2 = en desacuerdo
1 = total desacuerdo
4,3
4,5
4,6
3,1
Cul es su pronstico respecto

a las posibilidades de aplicacin de
este curso en el trabajo?
3,5
2,8
Logstica
4,2
Satisfaccin general
4,2
14
Aprendizaje
Curso: Legislacin Laboral

Al final del programa los participantes estarn en capacidad de:
1.
2.
3.
4.
5.
6.
7.
Consultar y encontrar informacin en el Cdigo del Trabajo.

Identificar los tipos de contratos de trabajo.
Calcular la jornada laboral de acuerdo al tipo de contrato.
Elaborar el rol de pagos.
Calcular las provisiones de ley.
Calcular liquidaciones.
Explicar derechos y obligaciones del empleado y del empleador.
Las tareas donde la persona debe ser competente son los objetivos de
formacin del programa
15
Aprendizaje, cont.
La evaluacin de aprendizaje tambin se conoce como:

1. Evaluacin referida al criterio.
2. Evaluacin contra estndares de desempeo.
3. Evaluacin de competencia laboral.
Compara el desempeo del participante contra unos estndares de
desempeo o normas de competencia previamente establecidas.
Elementos para evaluar
Evaluacin
de
aprendizaje
Desempeo a evaluar
Mtodo de evaluacin
Condiciones bajo las que
efectuar el desempeo
Criterios, estndares o
normas de evaluacin
16
Aprendizaje, cont.
Tipos de Objetivos
de Aprendizaje
Objetivos
Cognoscitivos
Objetivos
Procedimentales
Objetivos
Afectivos
Definir los cinco niveles de evaluacin de los programas.
Instalar un censor de carga.
Sustentar las razones por las cuales uno est a favor o en contra del
suicidio asistido.
17
Aprendizaje, cont.
INSTRUMENTOS Y CRITERIOS DE EVALUACIN DEL APRENDIZAJE
Objetivos
Cognoscitivos
Objetivos
Procedimentales
Pruebas de conocimientos
Pruebas tcnicas
Pruebas orales
Anlisis de casos
Juegos de roles
Pruebas de desempeo y
Simulaciones con el uso
de listas de chequeo y
rbricas de evaluacin
Son las respuestas correctas

de la pregunta o del caso
Estndares de proceso
Estndares de resultado
Estndares mixtos
18
Aplicacin
El grado en que los participantes aplican en su trabajo los

conocimientos y habilidades aprendidos, para mejorar su desempeo y
aumentar la efectividad organizacional
Aprendizaje
Transferencia
Aplicacin en el
trabajo
Si la gente no aplica lo que aprende, la capacitacin sirve de poco
19
Aplicacin, cont.
Cadena de valor de la formacin
Aprendizaje
Aplicacin
Impacto y ROI
20
10
Aplicacin, cont.
50 jefes van a un curso de formacin de instructores.

Despus de un ao solo 5 de ellos han realizado cursos en la
institucin.
Un grupo de personas va al curso de mejoramiento de
procesos. Seis meses despus se encuentra que no se ha
realizado el mejoramiento de ningn proceso.
Un grupo de gerentes asiste al curso formulacin de
objetivos e indicadores de gestin. A los tres meses se
constata que ninguno de ellos ha formulado objetivos ni
indicadores para sus reas.
21
Aplicacin, cont.
La Aplicacin de los Aprendizajes es el

puente indispensable para que la capacitacin
tenga impacto y retorno de inversin
Resultados
e impacto
Aprendizaje en
el programa
APLICACIN
22
11
Aplicacin, cont.
Adquirir
conocimien
to
Adquirir el
conocimien
to para el
uso
Practicar
para
establecer
el
desempe
o
PROCESO DE APRENDIZAJE
Aplicar en
el trabajo
Aplicar de
manera
continua
en el
trabajo
Generaliza
r las
aplicacion
es
DESEMPEO EN EL TRABAJO
El proceso de transferencia del aprendizaje
23
Aplicacin, cont.
CURSO: Retroalimentacin del desempeo
Dirigido a: Jefes
Aprender las caractersticas de la retroalimentacin
Aprender los pasos de la retroalimentacin
Hacer juegos de roles con otros participantes para ensayar los pasos de la
retroalimentacin
Aplicar los pasos de la retroalimentacin en una situacin real con un

colaborador
Continuar las retroalimentaciones de manera regular con todos los

colaboradores
Sobre los principios de la retroalimentacin, delegar y empoderar a los

empleados para tener un mejor impacto en el desempeo del grupo
Aprendizaje
Desempeo
24
12
Aplicacin, cont.
Factores que afectan la aplicacin
Caractersticas del
individuo
Diseo
Instruccional
Aprendizaje en
el programa
Aplicacin
en el trabajo
Caractersticas del
entorno y la cultura
organizacional
25
Aplicacin, cont.
Transferencia
TRANSTEMPORALIDAD
DE LAS BARRERAS A LA
TRANSFERENCIA
Despus del evento

Aprendi algo pero no se siente
seguro de aplicar.
Aprendi, pero el ambiente de
trabajo impide la aplicacin.
Aprendi, pero su jefe y sus pares
no le animan ni le apoyan.
Durante el evento
Aprende cosas que no
necesita en su trabajo.
Abandona el evento porque
lo vienen a buscar.
Falta de
transferencia
Antes del evento

Dice que ir, pero no va.
Acepta asistir pero con
reticencia.
No tiene claro a lo que va.
26
13
Planificar las acciones de aplicacin
Actores
Antes
Durante
Despus
Gerentes
Enviar comunicacin sobre la

importancia del programa.
Asistir a la clausura del

evento para agradecer y
animar al grupo para que
realice las aplicaciones.
Jefes
Mantener reunin con

participantes para motivarlos
al programa.
Los jefes de cada rea

visitan a su equipo en la hora
del almuerzo para agradecer
y reforzar su participacin en
el curso
Mantener reunin con los

participantes para revisar
plan de accin.
Apoyar la ejecucin del plan.
Recursos
Humanos
Enviar informacin detallada

del programa.
Ayudar al instructor a
entregar y explicar el uso de
los planes de accin
Comunicar el perodo en el
que se harn las
evaluaciones de aplicacin
Participante
Participar en la reunin del

jefe y leer la informacin
enviada por recursos
humanos.
Completar el plan de accin

en el programa.
Mantener reunin con el jefe

para pulir plan de accin.
Solicitar apoyo al jefe cuando
sea necesario
Instructor
Proponer posibles objetivos

de aplicacin a los
participantes para revisin.
Reservar tiempo para que los

participantes elaboren el plan
de accin y orientarles sobre
la manera de completar el
formato.
27
Aplicacin, cont.
Formacin de agentes
de transferencia
El rea de formacin debe formar a la persona que maneja personas

(supervisores, jefes, gerentes, etc.) para que desempeen el papel de
agentes de transferencia.
Objetivos de Aprendizaje, N2
Objetivos de Aplicacin, N3
Aprender las estrategias de transferencia

que se pueden aplicar antes, durante y
despus de los eventos de formacin,
para que los colaboradores apliquen lo
aprendido en el trabajo.
Aplicar las estrategias de transferencia

en el 100% de los casos donde los
colaboradores asistan a programas
de formacin.
28
14
Aplicacin, cont.
POLTICA ORGANIZACIONAL
DE CAPACITACIN
Subsistema de Instructores Internos
Los instructores internos de la organizacin:

1. Definirn objetivos de aprendizaje orientados al desempeo.
2. Formularn los objetivos de aplicacin de los cursos que dicten.
3. Sugerirn las estrategias de transferencia de los cursos que dicten.
4. Indicarn a los agentes de transferencia las condiciones
organizacionales necesarias para la transferencia.
29
Impacto
Nivel
Organizacional
Programas de nivel 4
se miden en el nivel
de impacto.
Impacto
Tangible
a. Tiempo
b. Volumen
c. Calidad
d. Costos
ROI
Intangible
a. Satisfaccin
b. Motivacin
c. Compromiso
d. Otros
30
15
Impacto
31
Impacto
Anlisis de Impacto Esmalte: Defectos por Unidad: Cscara de Naranja
25
A
Lnea Base
enero - mayo 2007
promedio = 9.6
Perodo de formacin y evaluacin

junio 2007
20
B
Perodo de Impacto
julio 2007 - junio 2008
promedio = .167
15
Posible mejora
M=B-A
-9.433 = .167 - 9.6
10
0
Ene-07 Feb-07 Mar-07 Abr-07 May-07 Jun-07 Jul-07 Ago-07 Sep-07 Oct-07 Nov-07 Dic-07 Ene-08 Feb-08 Mar-08 Abr-08 May-08 Jun-08
32
16
Impacto
Anlisis de Impacto: Promedios Mensuales de Ventas
Mejora = B - A
$ 52 618,62
300.000,00
PERIODO DE
INTERVENCIN
A
LINEA BASE
PROMEDIO = $ 171 858.40
250.000,00
Volumen de ventas
200.000,00
Fin de la
capacitacin
150.000,00
Inicio de la
capacitacin
100.000,00
B
INTERVENCIN
(Capacitacin)
PROMEDIO =
$ 224 477,02
50.000,00
0,00
FEBR
ENER EO/20 MARZ ABRIL/ MAYO/ JUNIO/ JULIO/ AGOS SEPTI OCTU NOVIE DICIE ENER FEBR MARZ MAYO/ JUNIO/
O/2007
07
O/2007 2007 2007 2007 2007 TO/20 EMBR BRE/2 MBRE/ MBRE/ O/2008 ERO/2 O/2008 2008 2008
Series1 134.63 120.52 169.58 171.83 150.86 151.06 182.45 174.58 208.77 183.85 217.33 196.78 205.60 246.84 241.44 222.29 206.19
Meses
33
Impacto
Mtodos de aislamiento de los efectos

del programa
Grupos de
control
Anlisis de
tendencias
Mltiples
lneas
base
Estimacin
de
expertos
34
17
Impacto
Grupos de Control
Grupo A
Promedio de ventas
40 (experimental)
Recibe curso
de capacitacin
Promedio de ventas
despus de un ao
60
Grupo B
Promedio de ventas
40 (control)
No recibe curso
de capacitacin
Promedio de ventas
despus de un ao
40
La mejora de 20 puntos se debe al curso de ventas
35
Impacto
Anlisis de tendencias
Volumen de ventas
Curso de
ventas
100
90
80
70
60
50
40
30
20
10
0
Punto de
corte
X = 60
Lnea
base
brecha
X = 40
X = 40
Pronosticada
Real
1
10
36
18
Impacto
Mltiples lneas base
Tasa de seleccin
25
A
20
15
Costos de reclutamiento
10
10
A
8
0
Tiempo de Ciclo
Numero
10
11
12
13
14
15
4
40
A
2
30
0
20
1
10
11
12
10
0
1
10
11
12
13
14
15
# dias
37
Impacto
Porcentaje de
influencia
Porcentaje de
confianza o
seguridad en la
estimacin
Porcentaje de
influencia
ajustado
10%
60%
6%
Efecto de la publicidad
26%
80%
21%
Condiciones
macroeconmicas favorables
10%
50%
5%
Curso de ventas
54%
70%
38%
100%
(debe sumar 100%)
(no debe
sumar 100%)
Probables factores de
influencia
Demanda
producto
inusitada
TOTAL
del
Estimacin del
grupo de expertos
38
19
Impacto
Estimacin del grupo de expertos: 38%

Mejora = punto de corte - lnea base
60 40 = 20 (mejora)
20 x 0.38 = 7.6 = 8
Los expertos estiman que de los 20 puntos de mejora, unos 8 puntos

se deben a la influencia del curso de ventas.
Se trata de una estimacin bastante conservadora
39
Retorno de inversin
Beneficios Netos del Programa

ROI% =
X 100
Costos del Programa
Donde:
Beneficios Netos del Programa =
Beneficios del Programa Costos del Programa
40
20
Retorno de inversin
Entendiendo al ROI
Beneficios
Costos
4000
5000
5000
5000
6000
5000
7000
5000
8000
5000
Beneficio neto
Razn costo
beneficio (RCB)
ROI%
Beneficio neto = beneficios costos

Razn costo beneficio = beneficios / costos
ROI% = (beneficio neto / costos) * 100
41
Retorno de inversin
Costos de la capacitacin
DIRECTOS
Honorarios de
instructores.
Transporte, viticos y
hospedaje.
Alimentacin.
Reproduccin de
material.
Renta de locales.
Alquiler de equipo.
INDIRECTOS
Salario y prestaciones de
los participantes.
Salarios y prestaciones
del personal que
organiza la capacitacin.
Suministros y servicios
(telfono, agua, luz).
42
21
KPIs del proceso de formacin
Reaccin
Aprendizaje
% de programas con
pronstico positivo de
aplicacin
% de programas con
cambios significativos de
conocimientos
43
KPIs del proceso de formacin
Aplicacin
% de programas
con
aplicacin
positiva
Impacto
% de programas con
impacto positivo
ROI
Retorno acumulado
de la inversin
44
22

02 Evaluacion ROI

Hochgeladen von

Dokumentinformationen

Copyright

Verfügbare Formate

Dieses Dokument teilen

Dokument teilen oder einbetten

Freigabeoptionen

Stufen Sie dieses Dokument als nützlich ein?

Sind diese Inhalte unangemessen?

Copyright:

Verfügbare Formate

02 Evaluacion ROI

Hochgeladen von

Copyright:

Verfügbare Formate

Gestin de la formacin en base al modelo

del retorno de inversin

Al final del mdulo los participantes estarn en la capacidad de:

1. Enumerar las funciones claves de la gestin estratgica del proceso de

2013. Jaime Moreno Villegas.

Los 5 niveles de evaluacin

Mide la satisfaccin de los usuarios con el programa

Mide el aprendizaje de los participantes

Mide si los participantes aplican lo aprendido en su trabajo

Mide el impacto o cambio en los resultados

Mide el retorno econmico de la inversin

2013. Jaime Moreno Villegas.

La reaccin y percepcin que tienen los participantes del evento y sus

Los tems de reaccin tienen que enfocarse ms al contenido del evento y la

2013. Jaime Moreno Villegas.

Las acciones que los participantes estn en capacidad de realizar

Formular objetivos de aprendizaje

Todo curso debera tener objetivos de aprendizaje

2013. Jaime Moreno Villegas.

Las acciones que los participantes llevarn a cabo en su trabajo,

Objetivos de aplicacin (N3)

Aplicar las tcnicas de entrevistas en al menos el 90% de las

Redisear el 100% de los procesos del rea hasta fin de ao

Usar las habilidades de negociacin en al menos el 80% de

Asesorar a todos los clientes de acuerdo a las tcnicas aprendidas

Si resulta difcil plantear objetivos N3 a un curso, pregntese:

2013. Jaime Moreno Villegas.

Los resultados que se esperan como consecuencia del

Objetivos de impacto (N4)

Incrementar el volumen de ventas en un 10%

Aumentar la participacin de mercado en un 5%

Elaboracin de plizas de seguro

Reducir el tiempo de emisin de las plizas. Actual 24 horas,

Mejoramiento de la calidad de productos

Reducir el ndice de defectos por unidad en un 10%

2013. Jaime Moreno Villegas.

El retorno econmico esperado de la inversin efectuada

Objetivos de impacto (N4)

Un ao despus del curso por cada dlar invertido

Un ao despus del curso se espera una relacin

Mejoramiento de la calidad de productos

Un ao despus del curso se espera un retorno de

2013. Jaime Moreno Villegas.

Desempeo del instructor

Objetivos y contenidos del

Desde el punto de vista del Modelo ROI, la informacin ms crtica de esta

Favorabilidad del entorno

2013. Jaime Moreno Villegas.

La predisposicin inicial que tiene

El grado de seguridad que tiene el

La percepcin del participante

2013. Jaime Moreno Villegas.

2013. Jaime Moreno Villegas.

Estudios han demostrado que si la intencin de aplicacin se acompaa de

2013. Jaime Moreno Villegas.

Dispongo del tiempo necesario para aplicar lo aprendido en mi trabajo.

2013. Jaime Moreno Villegas.

Desempeo del instructor

Favorabilidad del entorno

Cul es su pronstico respecto

2013. Jaime Moreno Villegas.

Curso: Legislacin Laboral

Consultar y encontrar informacin en el Cdigo del Trabajo.

2013. Jaime Moreno Villegas.