Beruflich Dokumente
Kultur Dokumente
Versin:
Fecha:
Cdigo:
TABLA DE CONTENIDO
OBJETIVO:..................................................................................................................................................3
ALCANCE: ..................................................................................................................................................3
DIRIGIDO A: ...............................................................................................................................................3
1. GENERALIDADES...............................................................................................................................3
1.1.
Definicin de los Instrumentos de Evaluacin (IE) ......................................................................3
1.2.
Principios de los IE .......................................................................................................................3
1.3.
Caractersticas de los IE................................................................................................................4
1.4.
Partes de los IE .............................................................................................................................4
2. ETAPAS DE CONSTRUCCIN DE IE ....................................................................................................7
2.1.
Primera Etapa: Alistamiento ........................................................................................................8
2.2.
Segunda Etapa: Planeacin ..........................................................................................................8
2.2.1. Matriz de Planeacin para Evaluar Conocimiento .......................................................................8
2.2.2. Matriz de Planeacin para Evaluar Desempeo ....................................................................... 22
2.2.3. Matriz de Planeacin para Evaluar Producto............................................................................ 24
2.3.
Tercera Etapa: Construccin ..................................................................................................... 26
2.3.1. Orientaciones para la Construccin de tems ........................................................................... 26
2.3.2. Orientaciones para la Construccin de Listas de Chequeo del Desempeo (LD) ..................... 33
2.3.3. Orientaciones para la Construccin de Listas de Chequeo del Producto (LP) .......................... 36
3. CUARTA ETAPA: VERIFICACIN ..................................................................................................... 38
3.1.
Verificacin Tcnica y Metodolgica de los tems e Indicadores de Evaluacin ...................... 38
4. QUINTA ETAPA: VALIDACIN ........................................................................................................ 39
4.1.
Validacin de tems ................................................................................................................... 39
GLOSARIO ............................................................................................................................................... 41
ABREVIATURAS....................................................................................................................................... 45
BIBLIOGRAFA......................................................................................................................................... 46
BIBLIOGRAFIA SECUNDARIA................................................................................................................... 49
Versin:
Fecha:
Cdigo:
FORMATOS
Formato 1. Cuestionario
Formato 2. Hoja de Respuesta
Formato 3. Clave de Respuesta
Formato 4. Lista de Chequeo del Desempeo
Formato 5. Lista de Chequeo del Producto
Formato 6. Matriz de Planeacin para Evaluar Conocimiento
Formato 7. Matriz de Planeacin y para Evaluar el Desempeo
Formato 8. Matriz de Planeacin para Evaluar el Producto
Formato 9. Verificacin Tcnica de tems
Formato 10. Verificacin Tcnica de Indicadores
Formato 11. Verificacin Metodolgica de tems
Formato 12. Verificacin Metodolgica de Indicadores
Formato 13. Validacin de tems
ANEXOS
Anexo 1. Acta de Construccin de Instrumentos de Evaluacin
Anexo 2. Acta de Confidencialidad para Construccin de Instrumentos de Evaluacin.
Anexo 3. Taxonoma de los Objetivos Educativos de Benjamn Bloom.
TABLAS
Tabla 1. Matriz de Planeacin para Evaluar Conocimiento
Tabla 2. Tiempo Asignado por Formato de tem segn Nivel de Pensamiento
Tabla 3. Codificacin del tem
Tabla 4. Matriz de Planeacin para Elaborar Indicadores de Desempeo
Tabla 5. Codificacin del Indicador de Desempeo
Tabla 6. Matriz de Planeacin para Elaborar Indicadores de Producto
Tabla 7. Codificacin del Indicador de Producto
Tabla 8. Matriz para la Construccin de tems
Tabla 9. Combinacin de Opciones de Respuesta
Tabla 10. Matriz para Construccin de Indicadores de Desempeo
Tabla 11. Estructura Gramatical para Indicadores de Desempeo
Tabla 12. Matriz para Construccin de Indicadores de Producto
Tabla 13. Estructura Gramatical para Indicadores de Producto
Tabla 14. Abreviaturas BNI
GRFICOS
Grfico 1. Etapas para la Construccin de Instrumentos de Evaluacin
Grfico 2. Procesos de Pensamiento
Grfico 3. Representacin del tem
Versin:
Fecha:
Cdigo:
OBJETIVO:
Establecer parmetros para la construccin de instrumentos de evaluacin de competencias laborales,
que contribuyan a la calidad, validez, y confiabilidad de la Evaluacin y Certificacin de Competencias
Laborales (ECCL) del SENA como Ente certificador en Colombia.
ALCANCE:
Esta metodologa define criterios de medicin, validacin y confiabilidad de los instrumentos de
evaluacin con base a una ruta clara y definida de alistamiento, planeacin, construccin, verificacin y
validacin desde parmetros particulares de la Evaluacin y Certificacin de Competencias Laborales.
DIRIGIDO A:
El experto metodolgico asignado por el centro evaluador para garantizar instrumentos de evaluacin
que permitan valorar las evidencias requeridas por la NCL con la calidad, validez y confiabilidad que estos
exigen.
1. GENERALIDADES
1.1.
Son herramientas de medicin que utiliza un evaluador para valorar las evidencias de conocimiento,
desempeo y producto requeridas en una Norma de Competencia Laboral para determinar la
competencia de un candidato.
1.2.
Principios de los IE
1.3.
Versin:
Fecha:
Cdigo:
Caractersticas de los IE
Ser claros, lgicos y concisos de manera que al ser aplicados, midan la competencia del candidato
para desempearse en una funcin productiva.
Definir adecuadamente lo que se pretende medir, centrndose exclusivamente en lo que pide la
NCL.
Identificar y caracterizar al sujeto. Conocer el perfil de los candidatos que desempean la funcin
en procura de garantizar pertinencia en los instrumentos.
Tener en cuenta los actores que participan en la evaluacin. (Experto Tcnico Constructor,
Experto Metodolgico, Evaluador y Candidato).
Proporcionar resultados que permitan al evaluador emitir un juicio evaluativo sobre la
competencia laboral verificada del candidato.
Contribuir al cumplimiento de los principios de evaluacin y certificacin de la competencia
laboral.
Versin:
Fecha:
Cdigo:
La estructura de estos formatos cuenta con cuatro partes claramente identificables: encabezado (cdigo
y nombre del formato), datos de identificacin, cuerpo del instrumento y concepto de la evaluacin.
A. ENCABEZADO:
De manera general para todos los formatos de instrumentos, se utiliza este encabezado y solo difiere el
nombre del instrumento, por ejemplo; cuestionario, evaluacin de conocimientos. Lista de chequeo del
desempeo, evaluacin del desempeo. Lista de chequeo del producto, evaluacin del producto.
LISTA DE CHEQUEO
(EVALUACIN DEL DESEMPEO O EL PRODUCTO)
CDIGO:
DATOS DE IDENTIFICACIN:
De manera general para todos los formatos de instrumentos, incluyen los datos de aplicacin de la prueba,
datos de la norma de competencia y titulacin o perfil ocupacional. Los datos del candidato solo se
especifican en los formatos de LD, LP y Hoja de Respuestas del Cuestionario (HR).
PRIMER APELLIDO:
CLAS
E
SEGUNDO APELLIDO:
NMERO DOCUMENTO
NOMBRE:
LUGAR EXPEDICIN
DA:
MES:
AO:
CDIGO:
CDIGO:
Versin:
Fecha:
Cdigo:
NOMBRE EVALUADOR:
NORMA DE COMPETENCIA LABORAL A EVALUAR
CDIGO:
VERSIN:
NOMBRE:
TITULACIN O PERFIL OCUPACIONAL DE COMPETENCIA LABORAL A LA QUE PERTENECE LA NORMA
CDIGO:
VERSIN:
NOMBRE:
PROYECTO:
DESEMPEO
PRODUCTO
MOMENTOS DE OBSERVACIN
EXIGIDOS EN LA NORMA
N
INDICADORES DE EVALUACIN
1
Fecha:
2
Fecha:
3
Fecha:
Lugar:
Lugar:
Lugar:
Hora:
Hora:
Hora:
CUMPL
E
SI NO
CUMPL
E
S NO
I
CUMPL
E
S NO
I
OBSERVACIONES
Versin:
Fecha:
Cdigo:
C. CONCEPTO DE LA EVALUACIN:
Aqu se incluyen, para los formatos de LD, LP y HR, las valoraciones cualitativas: cumple o an no cumple y la
identificacin de las competencias faltantes. En los formatos: clave de respuestas y el cuestionario no se
incluye el concepto de la evaluacin.
JUICIO DE LA COMPETENCIA:
CUMPLE
AN NO CUMPLE
___________________________________
FIRMA DEL CANDIDATO
________________________________
FIRMA DEL EVALUADOR
2. ETAPAS DE CONSTRUCCIN DE IE
Versin:
Fecha:
Cdigo:
Versin:
Fecha:
Cdigo:
3.
Versin:
Fecha:
Cdigo:
10
Versin:
Fecha:
Cdigo:
porque es ms verstil y cuenta con mayor equilibrio estadstico, por ello son un recurso para estudiar
amplias poblaciones de candidatos.
Los siguientes formatos de tems pueden considerarse variaciones del grupo Seleccin Mltiple con
nica (SMUR) y se clasifican en:
a.
b.
c.
d.
e.
f.
g.
h.
Jerarquizacin (J)
Localizacin o Identificacin (L.I)
Condiciones si-entonces (C.S.E)
Ordenamiento con nica Respuesta (O.U.R)
Apareamiento (A)
Verdadero Falso Mltiple (V.F.M)
Anlisis de Relaciones (A.R)
Anlisis de Postulados (A.P)
a. Jerarquizacin (J)
Son tiles para evaluar la capacidad de ordenamiento lgico: cronolgico, jerrquico, secuencial. Para
la construccin se requiere contar con un material suficientemente homogneo referido a un solo
tema, perodo, espacio geogrfico, etctera.
Nivel de pensamiento: reconocimiento.
Ejemplo:
11
Versin:
Fecha:
Cdigo:
12
Versin:
Fecha:
Cdigo:
Fuente: tecnoculto.com
Ejemplo:
13
Versin:
Fecha:
Cdigo:
14
Versin:
Fecha:
Cdigo:
15
Versin:
Fecha:
Cdigo:
e. Apareamiento.
Es til para facilitar la relacin entre dos o ms columnas de palabras, smbolos, frases, oraciones,
las cuales se deben asociar o relacionar a travs de lneas, letras, nmeros o smbolos. La columna
que contenga los enunciados, debe contener al menos tres respuestas ms que la columna de los
tems y en las opciones de respuesta las relaciones de la clave, deben repetirse en otra de las
opciones.
16
Versin:
Fecha:
Cdigo:
17
f.
Versin:
Fecha:
Cdigo:
g. Anlisis de relaciones.
Es til para facilitar el anlisis a partir de una afirmacin y una razn unidas por la palabra
PORQUE. El candidato debe analizar y decidir la veracidad o falsedad de cada una de ellas y si
existe o no relacin de causalidad, entre la razn y la afirmacin.
Nivel de pensamiento: anlisis
18
Versin:
Fecha:
Cdigo:
19
Versin:
Fecha:
Cdigo:
h. Anlisis de postulados.
Es til para el anlisis de la informacin dado que consta de un problema y dos informaciones
identificadas con los nmeros I y II. Se debe decidir si las informaciones son necesarias y suficientes
para solucionar el problema. Este tipo de tem por sus caractersticas no permite identificar el reactivo
y clasificar distractores en las opciones de repuesta ya que est predeterminado por el formato.
Nivel de pensamiento: anlisis
Instrucciones para la construccin: El enunciado se construye a partir de una afirmacin sobre una
situacin, teora, fenmeno, hecho, etc. que se problematiza. Para la solucin del problema se
entregan dos alternativas de solucin identificadas con I y II, donde el candidato debe determinar si
el problema se soluciona con ambas, con I, con II o con ninguna.
20
Versin:
Fecha:
Cdigo:
9. Tiempo de respuesta del tem: Permite estimar el tiempo total que se le asigna al candidato para
responder la prueba. Este se determina segn el formato de tem y el nivel de pensamiento
seleccionado por el constructor.
Tabla 2. Tiempo de Respuesta Asignado por Formato de tem segn Nivel de Pensamiento.
Fuente: Construccin ENIE
21
Versin:
Fecha:
Cdigo:
10. Ruta del tem: Codificacin que da cuenta de la trazabilidad del tem dentro de la prueba de
conocimiento. Indica la secuencia de relaciones entre el tem de conocimiento del elemento de la
NCL, los criterios de desempeo, los rangos de aplicacin especficos asociados y el consecutivo del
tem a construir.
Nota: cuando la norma de competencia laboral no est relacionada con una titulacin se deben dejar
tres ceros, as: T000_
22
Versin:
Fecha:
Cdigo:
La matriz contiene en sus columnas la informacin que se tomar como insumo para la construccin de
indicadores de desempeo. A continuacin se detalla cada columna de esta matriz:
1. Evidencias Requeridas de Desempeo: en esta columna se registran una a una las evidencias de
desempeo objeto de la evaluacin, definidas en cada Elemento de la NCL.
2. Criterios de Desempeo: en esta columna se transcriben los criterios definidos en cada elemento
de la NCL, que estn sistemticamente asociados con la evidencia a evaluar.
3. Conocimientos esenciales: en esta columna se registran los conocimientos esenciales definidos
en el elemento de competencia asociados al criterio de desempeo.
4. Rango de Aplicacin: en esta columna se registran los rangos de aplicacin o escenarios de
trabajo, definidos para el elemento de competencia de la NCL y asociados a los criterios de
desempeo; asociando dichos rangos de aplicacin a las caractersticas o atributos identificados
para el desempeo.
5. Ruta del indicador de evaluacin del desempeo: Codificacin que da cuenta de la trazabilidad de
cada indicador dentro del instrumento de evaluacin del desempeo. Indica la secuencia de
relaciones entre el elemento de la NCL, los criterios de desempeo, los rangos de aplicacin
especficos asociados y el consecutivo del indicador a construir.
23
Versin:
Fecha:
Cdigo:
Ejemplo:
Se registran adems los datos de identificacin del Nivel de la titulacin laboral a la que pertenece la NCL
objeto de construccin de IE. Si la NCL se encuentra en diferentes Titulaciones y estas son de diferente
nivel de cualificacin, para cada una de ellas se debe elaborar indicadores de evaluacin del desempeo
acordes a las habilidades requeridas para el nivel. Una vez realizada esta planeacin se procede a construir
los indicadores de evaluacin del desempeo en la siguiente Etapa de Construccin de Listas de Chequeo
del Desempeo.
24
Versin:
Fecha:
Cdigo:
La matriz contiene en sus columnas la informacin que sirve como insumo para la construccin de los
indicadores de producto. A continuacin se detalla cada columna de esta matriz:
1. Evidencias Requeridas de Producto: en esta columna se registran las evidencias de producto
objeto de la evaluacin solicitada en cada Elemento de la NCL. De cada uno de los productos a
valorar, se caracteriza la naturaleza de los mismos: intangible (ejemplo: servicios), tangibles
(ejemplo: documentos, objetos o resultados observables y medibles del trabajo).
2. Criterios de Desempeo: en esta columna se transcriben los criterios definidos en cada elemento
de la NCL, que estn sistemticamente asociados con la evidencia a evaluar.
3. Conocimientos Esenciales: en esta columna se registran los conocimientos esenciales definidos
en el elemento de competencia asociados al criterio de desempeo.
4. Rango de Aplicacin: en esta columna se registran los rangos de aplicacin definidos para el
elemento de competencia de la NCL, asociando dichos rangos de aplicacin a las caractersticas
identificadas para el producto.
5. Ruta del indicador de evaluacin del producto: Codificacin que da cuenta de la trazabilidad de
cada indicador de evaluacin dentro de la lista de chequeo de producto. Indica la secuencia de
relaciones entre el elemento de la NCL, los criterios de desempeo, los conocimientos esenciales,
los rangos de aplicacin especficos asociados y el consecutivo del indicador a construir.
25
Versin:
Fecha:
Cdigo:
Ejemplo:
Se registran adems los datos de identificacin del Nivel de la titulacin laboral a la que pertenece la NCL
objeto de construccin de IE. Si la NCL se encuentra en diferentes Titulaciones y estas son de diferente
nivel de cualificacin, para cada una de ellas se debe elaborar indicadores de evaluacin del producto.
Una vez realizada esta planeacin se procede a construir los indicadores de evaluacin del producto en la
siguiente Etapa de Construccin de Listas de Chequeo del Producto.
26
Versin:
Fecha:
Cdigo:
11. Tipo de tem: Hace referencia al carcter de obligatoriedad o contingencia de los tems en la estructura
de la prueba. Por obligatorio se entiende el tem que se ha establecido en la matriz como necesario o
indispensable para evaluar el conocimiento a criterio del experto constructor. Por contingencia se
entiende el tem que permite variar el uso de aplicaciones para valorar el conocimiento.
Conceptualizacin de los componentes del tem:
tem: Unidad bsica de medida y elemento constitutivo de un test, prueba o instrumento de
conocimiento.
Caractersticas del tem:
Los tems son unidimensionales lo que significa que deben pedir cuenta de un solo constructo o
conocimiento esencial.
Cada uno de los tems deben gozar de absoluta independencia para ser resueltos. Un tem no
debe contener la respuesta de otro o depender de otro contenido para ser resuelto.
Un tem debe contener toda la informacin necesaria para ser resuelto. La carencia de
informacin generalmente conduce al evaluado a intuir o suponer datos que pueden alterar la
respuesta.
27
Versin:
Fecha:
Cdigo:
El uso de abreviaturas y siglas de sistemas, sntomas, patologas, drogas, etc. pueden incidir en la
mala respuesta de un candidato, cuando se excede en su utilizacin.
Evitar cualquier seal que conduzca al evaluado a la respuesta correcta an cuando no posea el
conocimiento. Estas seales pueden ser: repeticin de palabras en el enunciado y en la clave de
respuesta, uso de lenguaje tcnico en la clave de respuesta y lenguaje no tcnico en los
distractores, longitud de la clave de respuesta diferente a la de los distractores, opciones de
respuesta descontextualizadas y sin correspondencia sintctica con el enunciado.
12. Enunciado: Parte del tem que suministra la informacin necesaria y suficiente, hace referencia a un
conocimiento contextualizado a travs de variables situacionales o problemticas. Este puede incluir
afirmaciones, estudios de caso, situaciones hipotticas, grficas, tabla de datos, fotografas,
esquemas, figuras, mapas o similares.
El enunciado est compuesto por los siguientes componentes:
Contexto: Hace referencia al lugar o escenario donde se desarrolla la accin, este advierte al
candidato la ubicacin espacio temporal. (Rango de aplicacin). No necesariamente se requieren
fechas ni nombres de lugares siempre y cuando el candidato pueda entrever los sitios o escenarios
de aplicacin. Responde al Dnde?
Reactivo: Es un estmulo que orienta las instrucciones a travs del cual se espera que el evaluado
ofrezca una respuesta, conducta o accin posterior. Es el detonante de la accin y determina el
nivel de pensamiento. Responde al Cmo?
28
Versin:
Fecha:
Cdigo:
el sistema en el cual acta; en el estricto caso de los seres humanos el estmulo es lo que
desencadenar una respuesta o reaccin posterior. (Montero, 2000: 56)
Contener el conocimiento esencial, los criterios de desempeo y los rangos de aplicacin. Para
ello se debe contar con la norma como referente nico y central, no se debe ir ms all de lo que
pide la norma.
Utilizar un lenguaje claro, preciso y directo, que permita reducir al mnimo el tiempo que el
candidato emplea para leer cada enunciado y la prueba en general. Se debe utilizar el lenguaje
tcnico de la norma.
Redactar en forma afirmativa, es decir, evitar al mximo las negaciones. De ser necesaria la
negacin: NO, EXCEPTO, NINGUNA, stas deben registrarse en maysculas y negrita.
Ser comprendido por s mismo y sin necesidad de leer las opciones de respuesta como apoyo para
su interpretacin.
Evitar posiciones ideolgicas, prejuicios y juicios de valor que generen sesgo en los candidatos.
29
Versin:
Fecha:
Cdigo:
13. Opciones de respuesta: Parte concluyente del enunciado y se caracteriza por ser frases, datos o
informaciones lgicas y verdaderas que pueden ser escogidas como respuesta. El nivel de verdad de
las opciones se relaciona con el acercamiento que tenga o no sobre la clave de respuesta.
Las opciones de respuesta se clasifican en:
Clave: Es la opcin correcta que satisface las exigencias del constructo. Corresponde a la
informacin, problema o contenido solicitado en el enunciado a travs del reactivo.
Distractores: Son las opciones que no satisfacen completamente las exigencias del constructo
pero conservan niveles de verdad en relacin con lo que se pregunta.
Las opciones de respuesta deben quedar de manera aleatoria, la siguiente tabla ofrece algunas
combinaciones:
Evitar distractores fcilmente descartables, por ser obvios o de otros rdenes gramaticales o
sintcticos.
Evitar distractores descontextualizados (absurdos) que sean fcilmente descartables, incluso para
el que no sabe.
Evitar distractores muy similares o sinnimos que permitan concluir que si uno es incorrecto,
tambin lo es el otro.
30
Versin:
Fecha:
Cdigo:
Utilizar frases o palabras tcnicas contenidas en el enunciado que permitan encontrar correlacin
con las opciones de respuesta.
Tener una extensin (nmero de palabras) similar y en lo posible mantenerse en una sola lnea.
En caso de superar una lnea se debe garantizar equilibrio construyendo dos largas y dos cortas.
Variar la ubicacin de la clave de respuesta. Una forma de hacerlo es ordenar alfabticamente las
opciones de respuesta a partir de la primera letra de la primera palabra con la que inicia la opcin,
con esto se logra un orden aleatorio para cada tem.
Redactar en forma afirmativa, evitando trminos negativos tales como NO. En caso de ser
necesario la negacin se debe escribir en mayscula y negrilla.
Ejemplo:
31
Versin:
Fecha:
Cdigo:
Todas las respuestas son pases del continente americano que son productores de caf, lo que
garantiza que las opciones de respuesta tienen nivel de verdad.
En caso de encontrar alguna opcin de respuesta que no corresponda a un pas caficultor del
continente americano, esa opcin no tiene nivel de verdad y por tanto es fcilmente descartable
para el candidato. A este tipo de opciones se les denomina opciones de respuesta
descontextualizadas.
14. Clave: En esta columna se debe registrar la opcin de respuesta correcta elegida por el constructor.
15. Justificacin de la clave de respuesta: En esta columna se debe registrar los referentes tericos o
empricos que soportan la clave de respuesta y evidencian la veracidad de la misma. Garantiza
transparencia y equidad con la toma de evidencia de conocimiento y es referente en procesos de
auditora y en el caso de que un candidato interponga apelaciones.
Tipos de la justificacin:
a. Fuente Bibliogrfica: Se establece mediante la fuente bibliogrfica de un libro, documento,
decreto, gua, procedimiento, etc. de donde el constructor tom la informacin para construir el
tem(s) o donde el constructor puede garantizar que la clave de respuesta se corrobora.
Ejemplos:
Zambrano, C. (1997). Manual tcnico para el cultivo de arroz. Editorial Vasco. Espaa.
Pgina 256.
Gonzalez, F. (1991). Teora y prctica del mantenimiento industrial avanzado. F.C.
Editorial. Mxico. Pgina 329.
32
Versin:
Fecha:
Cdigo:
33
Versin:
Fecha:
Cdigo:
6. Indicadores de evaluacin del desempeo: Describe las habilidades y destrezas que debe realizar
el candidato de acuerdo con lo exigido por la NCL. Las actividades deben responder a las
exigencias de la norma de competencia, ser observable y medible a partir de este instrumento.
Para la construccin de indicadores de desempeo se debe:
El verbo representa la accin que se est ejecutando dentro del desempeo descrito en
la norma de competencia.
El objeto es el elemento sobre el cual recae la accin del desempeo.
La condicin es el parmetro que se toma como referente para la evaluacin y determina
la calidad de la ejecucin.
34
Versin:
Fecha:
Cdigo:
Ejemplo:
Recomendaciones:
Los indicadores deben ser secuenciales en relacin con las acciones o resultados que un
candidato debe demostrar frente a una funcin productiva, pueden referirse a condiciones
de tiempo, lugar, cantidad, ambiente, seguridad, aplicacin de conocimientos tcnicos,
comportamientos, actitudes, mtodos de trabajo, organizacin, entre otras.
Evitar en la redaccin el uso de adverbios o adjetivos, tales como: siempre, nunca, totalmente,
absolutamente, completamente, entre otros, porque son difcilmente medibles.
Evitar el uso de verbos aprobatorios como ptimo, preciso, exacto, correcto, adecuado,
conveniente, entre otros, porque son difcilmente medibles.
Evitar el uso de verbos cognitivos como: conoce, comprende, entiende, identifica, entre otros,
porque son difcilmente medibles.
Los indicadores deben ser unidimensionales, lo que significa que midan o evalen una sola
dimensin del desempeo, de lo contrario se debe desglosar o fragmentar en otros
indicadores.
Los indicadores deben seguir la secuencia lgica: tcnica y cronolgica, del proceso de trabajo
a evaluar.
35
Versin:
Fecha:
Cdigo:
Los indicadores deben ser tareas que describan las actividades y no deben ser transcritos
textualmente como aparecen en la norma, ya que constituyen el referente de las diferentes
funciones laborales.
Los indicadores deben garantizar el cubrimiento total de los criterios de desempeo asociados
a cada evidencia de desempeo a evaluar.
Ejemplo:
36
Versin:
Fecha:
Cdigo:
6. Indicadores de evaluacin del producto: Son atributos o caractersticas esenciales del producto
de una funcin productiva, hacen referencia a los aspectos claves de los productos en trminos
de las especificaciones de forma, contenido, diseo, funcionalidad y ofrecen indicios de la calidad
del trabajo realizado. En esta columna se registran los indicadores necesarios y suficientes para
cubrir totalmente la evaluacin de los atributos del producto que evidencian los criterios de
desempeo y rango asociados a la evidencia. Si dichas caractersticas son diferentes, dependiendo
del rango de aplicacin, esto indica que tenemos un nuevo producto y se deben registrar los
indicadores especficos correspondientes por separado.
Para la construccin de indicadores de producto se debe:
Ejemplo:
37
Versin:
Fecha:
Cdigo:
Nota: Las recomendaciones para la construccin de indicadores de desempeo son las mismas que para
los indicadores de producto.
Ejemplos:
La verificacin de los tems e indicadores busca confirmar mediante la aportacin de evidencia objetiva
que se ha cumplido los requisitos especficos que aseguran la validez y confiabilidad de los mismos. La
confirmacin comprende acciones tales como la revisin sistemtica y objetiva de los productos
construidos antes de su liberacin para uso, mediante la confrontacin de lo planeado con lo elaborado,
al mismo tiempo de su conformidad disciplinar, tcnica, metodolgica y normativa.
La verificacin de los de los tems e indicadores que realiza el SENA, implica una comprobacin tcnica y
metodolgica con el fin de confirmar que los IE cumplen con todos los requisitos de calidad presentados
en este instructivo. Aunque desde el punto de vista formal la verificacin es una sola, para efectos
prcticos, se subdivide en 2 momentos:
1. Verificacin Tcnica de tems e Indicadores de Desempeo y Producto.
a. Una verificacin tcnica donde un par experto tcnico corrobora los items frente a la
pertinencia, relevancia y claridad de los mismos respecto a la norma (Ver formato 9).
b. Una verificacin tcnica donde un par experto tcnico corrobora los indicadores de
desempeo y producto frente a la correspondencia, pertinencia, relevancia y claridad de los
mismos respecto a la norma (Ver formato 10).
38
Versin:
Fecha:
Cdigo:
Posteriormente las recomendaciones realizadas por el experto tcnico se envan al constructor quien
debe realizar los ajustes pertinentes a los tems e indicadores.
Validacin de tems
La validacin de tems busca confirmar mediante el suministro de evidencia objetiva tomada de un grupo
de candidatos o participantes a los que previamente se les aplic la prueba, que los IE han cumplido los
con requisitos de validez y confiabilidad para la utilizacin o aplicacin especfica de los mismos. El trmino
"validado" se utiliza para designar el estado correspondiente, hace referencia a aquello que vale
legalmente o que es firme y subsistente.
La validacin de los IE en los procesos de certificacin de competencias laborales es real o simulada. La
primera se realiza durante el primer aplicativo de la batera (primer uso posterior a ser entregada por el
banco nacional de instrumentos) donde los candidatos despus de terminar la toma de evidencia y
garantizando la cadena de custodia, diligencian una lista de chequeo en la que suministran informacin
sobre claridad, comprensin, dificultad, tiempo, longitud, entre otros. Posterior a la consolidacin de la
informacin, las observaciones se remiten al constructor para que realice los ajustes pertinentes.
La segunda se realiza mediante la aplicacin del IE como prueba preliminar a un grupo de participantes
con experiencia en la funcin laboral que se pretende medir, el diligenciamiento de una lista de chequeo
y las garantas de confidencialidad de los instrumentos (mnimo 10 personas). Se debe garantizar que los
participantes no hayan sido parte en la construccin de la NCL, en la construccin de los IE y que no sean
futuros candidatos a ser certificados en la norma de competencia cuyos IE se estn validando. Es necesario
manifestar a los participantes que el ejercicio es una prueba para confirmar la validez y confiabilidad del
39
Versin:
Fecha:
Cdigo:
40
Versin:
Fecha:
Cdigo:
GLOSARIO
CONTEXTO: Hace referencia al escenario laboral donde se plantea una accin problematizada,
este advierte al candidato sobre el rango de aplicacin que se pretende evaluar.
41
Versin:
Fecha:
Cdigo:
CRITERIOS DE DESEMPEO: Resultados que una persona debe obtener y demostrar en situaciones
reales de trabajo, con los requisitos de calidad especificados para lograr el desempeo
competente. (Metodologa para la construccin de Normas de Competencia Laboral. SENA 2003).
ELEMENTO DE COMPETENCIA LABORAL: Descripcin de lo que una persona debe ser capaz de
hacer en el desempeo de una funcin productiva, expresada mediante los criterios de
desempeo, el rango de aplicacin, los conocimientos y comprensiones esenciales y las evidencias
requeridas. (Metodologa para la construccin de Normas de Competencia Laboral. SENA 2003)
EVALUACIN DE COMPETENCIA LABORAL: Proceso por medio del cual se recoge de una persona,
evidencias de desempeo, de producto y de conocimiento con el fin de determinar si es
competente o an no para desempear una funcin laboral. (Metodologa para Evaluar y
Certificar competencias laborales. SENA 2003)
42
Versin:
Fecha:
Cdigo:
OPCIONES DE RESPUESTA: Parte concluyente del tem caracterizadas a travs de frases, datos o
informaciones, lgicas y verosmiles, que pueden ser escogidas como respuesta a la pregunta.
RUTA DE TEM: Codificacin que da cuenta de la trazabilidad del tem dentro de la prueba de
conocimiento. Es decir, indica la secuencia de relaciones entre el tem de conocimiento del
elemento de la NCL, los criterios de desempeo y los rangos de aplicacin especficos asociados,
que permiten la construccin de cada uno de los tem que estructuran un cuestionario. La
codificacin de la ruta del tem es importante para la administracin del Banco de Preguntas.
SIMULACRO: Es una representacin objetiva de los escenarios laborales que hacen posible que
los desempeos y habilidades de un candidato puedan ser observados y valorados por un agente
externo, como si estuviera en un ambiente laboral real.
43
Versin:
Fecha:
Cdigo:
44
Versin:
Fecha:
Cdigo:
ABREVIATURAS
45
Versin:
Fecha:
Cdigo:
BIBLIOGRAFA
Abad, F. Garrido, J. Olea, J. y Ponsoda, V. (febrero 2006). Introduccin a la Psicometra: Teora Clsica
de
los
Test
y
Teora
de
la
Respuesta
al
tem.
Recuperado
de:
http://aprendeenlinea.udea.edu.co/lms/investigacion/file.php/39/ARCHIVOS_2010/PDF/IntPsi
cometria_aristidesvara_1_.pdf
Anderson, L. & Krathwohl, D. (2000). Versin de la Taxonoma de Bloom de habilidades de
pensamiento
Tomado
de
Pg.
4.
Recuperado
de
http/://www.eduteka.org/taxonomaBloomCuadro.php3
Bloom, B. (1954). Taxonoma de los objetivos educativos: Tomo I, El dominio cognitivo. Nueva York,
David McKay & Co.
Cheung, D. Y Bucat, R. (2002). How can we construct good multiple choice tems. Hong Kong: Sciens an
Technlogy Education conference.
Colas, M. (1994). La formulacin de preguntas en el acto didctico: un estudio comparativo. Facultad
de Filosofa y Ciencias de la Educacin. Facultad de Filosofa y Ciencias de la Educacin Gonzalo
Bilbao, 5 Sevilla.
Derrida, J. (1994). Qu hacer de la pregunta Qu hacer? (Pars), 92 pp. 91-110. Traduccin de Bruno
Mazzoldi en El tiempo de una tesis. Desconstruccin e implicaciones conceptuales, Proyecto A
Ediciones, Barcelona, 1997, pp. 29-39.
Elena, T. (2009). Ttulo de la ponencia: La pregunta, informa? Comunica?: Estudios Culturales. 1
Jornadas Regionales de Actualizacin en Comunicacin La investigacin en comunicacin
social Facultad de Artes y Ciencias - Departamento de Comunicaciones Sociales. Universidad
Catlica de Salta - Salta, 22 y 23.
Expsito, E. (2010). Evaluacin formativa y compartida en educacin superior. Propuestas, tcnicas,
instrumentos y experiencias. Revista Complutense De Educacin. Recuperado de:
http://search.proquest.com/docview/220925519?accountid=41919
Elliot W. E. (2000). Benjamn Bloom (1919-1999). Texto publicado en Perspectivas: revista trimestral
de educacin comparada (Pars. UNESCO: Oficina Internacional de Educacin), vol. XXX, n 3.
Recuperado de: http://www.ibe.unesco.org/publications/ThinkersPdf/blooms.pdf
46
Versin:
Fecha:
Cdigo:
Fowler, Brbara. La taxonoma de Bloom y el pensamiento crtico. (2002). Missouri, Estados Unidos.
Especialista en Aprendizaje - Longview Community College. Recuperado de
http://www.eduteka.org/profeinvitad.php3?ProfInvID=0014
Freire, P. (1987). Pedagoga de la Pregunta. En: Educacin y Cultura. No. 11. Bogot. Ceid. FECODE.
Fowler,
B.
(2002).
La
taxonoma
de
Bloom
Longview Community College. Missouri, Estados Unidos.
el
pensamiento
crtico.
Guerci de Siufi, B. (2008). La pregunta como soporte de un pensamiento crtico localizado. Cuadernos
de la Facultad de Humanidades y Ciencias Sociales, Nm. 35, Noviembre pp. 23-37. Universidad
Nacional de Jujuy. Argentina.
Hans-Georg, G. (1998). Verdad y Mtodo. Fundamentos de una hermenutica filosfica. Desde las
pginas 439 / 443. La primaca hermenutica de la pregunta. Ediciones sgueme Salamanca.
Haladyna y Downing. (1989). A taxonomy of multiple choice tem writing rules. En Apply Measurement
in Education. Vol. 3
Haladyna, T. (1994). Development and validat in multiple choice test tems. New Jersey: Lawrence
Earlbaum Associates.
Losada, H. (2009). Conclusiones sobre la aplicacin de la taxonoma de Bloom al diseo de
herramientas pedaggicas. Departamento de lenguajes y sistemas informticos. Universidad
Rey Juan Carlos, Mstoles, Madrid Espaa. Editorial Dykinson S.L.
Macas, A., & Maturano, C. (2010). Evaluacin de la comprensin a travs de la formulacin de
preguntas por los estudiantes a partir de la lectura de un texto de fsica. Revista Signos, 43(74),
411.
Recuperado
de:
Retrieved
from
http://search.proquest.com/docview/1017674322?accountid=41919
Montero, E. (2000). La teora de respuesta a los tems: una moderna alternativa para el anlisis
psicomtrico de instrumentos de medicin. Escuela de Estadstica, Universidad de Costa Rica,
2060 San Jos, Costa Rica.
Morales V. P. (2006). Las pruebas objetivas: normas, modalidades y cuestiones discutidas (ltima
revisin) Universidad Pontificia Comillas Madrid. Facultad de Ciencias Humanas y Sociales.
47
Versin:
Fecha:
Cdigo:
48
Versin:
Fecha:
Cdigo:
Salazar, C. (2011). Informe sobre pruebas objetivas. Versin actualizada del Informe original elaborado
por la profesora Coordinadora de Apoyo al Estudiante de la Escuela de Derecho-Caracas.
Snchez Soto, I. & Flores Paredes, P. (2004). Influencia de una metodologa activa en el proceso de
ensear y aprender fsica. Journal of Science Education, 5(2), 77-83. Retrieved from
http://search.proquest.com/docview/196930161?accountid=41919
BIBLIOGRAFIA SECUNDARIA
Las
pruebas
objetivas
de
conocimientos.
www.sre.urv.es/web/aulafutura/php/fitxers/496-7.pdf
Recuperado
de
49