TCNICAS DE VALIDACIN DE UN CUESTIONARIO

David Ral Gmez Jaimes

Universidad de Guadalajara Centro de Recursos para la Enseanza y el Aprendizaje - CREA Maestra en Tecnologas para el Aprendizaje CUCEA Mayo 2009

NDICE
INTRODUCCIN OBJETIVO

INSTRUCCIONAL CONTENIDO CONCLUSIONES BIBLIOGRAFA EVALUACIN

INTRODUCCIN

De acuerdo a Gayou (2003), en la investigacin en general, los investigadores buscan preguntarles -cosas- a las personas a quienes investigan. La entrevista individual cuenta con guas de lo que preguntaremos; igualmente, los grupos focales echan mano de una gua de temas sobre los que queremos que las personas hablen u opinen. En ambos casos, se usan cuestionarios que generalmente no son del conocimiento de los participantes en forma evidente. El cuestionario que se tratar aqui es el que se les proporciona a las personas para que lo respondan.

INTRODUCCIN

Es muy cierto lo que dicen Roberto Hernndez Sampieri y sus colaboradores respecto a que el instrumento ms utilizado para recolectar datos es el cuestionario (1998), particularmente cuando hablamos del paradigma cuantitativo, y probablemente este hecho ha inducido a muchos investigadores cualitativos a no considerarlo una opcin vlida, ni siquiera a tomarse en cuenta. El cuestionario es una de las muchas formas bsicas mediante las cuales los investigadores obtienen informacin que buscan en sus estudios.

OBJETIVO INSTRUCCIONAL

El usuario de este objeto de aprendizaje ser capaz de:

Distinguir las caractersticas de un cuestionario. Distinguir entre los diferentes tipos de cuestionarios y su finalidad. Preparar y validar debidamente un cuestionario.

CONTENIDO

Fundamentos y carctersticas de un cuestionario. Pasos para elaborar un cuestionario.

Fundamentos y caractersticas de un cuestionario

El proceso de construccin y validacin de un cuestionario/escala de medida es relativamente complejo y requiere el conocimiento terico claro del aspecto que queremos medir, as como poseer conocimientos informticos para realizar las pruebas estadsticas.
2. Ser vlido, ser capaz de medir aquello que se pretende medir y no otra cosa. 5. Delimitado claramente en sus componentes (dimensiones), de manera que cada uno contribuya al total de la escala de forma independiente. 3. Ser fiable, preciso, es decir, con mnimo de error en la medida. 6. Estar basado en datos generados por los propios usuarios. 7. Ser aceptado por usuarios, profesionales e investigadores.

Como todo instrumento de medida, ha de reunir las siguientes caractersticas:

1. Ser adecuado para lo que se pretente medir (teoricamente justificable). 4. Ser sensible, que sea capaz de medir cambios tanto en los diferentes individuos como en la respuesta de un mismo individuo a travs del tiempo.

Pasos para elaborar un cuestionario

1. 2. 3. 4.

5.
6. 7. 8. 9.

10.

Definicin del constructo o aspecto a medir. Propsito de la escala. Composicin de los tems. Nmero de tems. Contenido. Redaccin de los temes. Prevencin de los sesgos. Codificacin de las respuestas. Puntuacin de los tems. Proceso de validacin.

Prueba piloto o pretest cognitivo. Evaluacin de las propiedades mtricas de la escala.

Pasos para elaborar un cuestionario

1. Definicin del constructo o aspecto a medir.

Antes de proceder a medir algo debemos tener una idea muy clara de lo que queremos medir; a eso se le llama definir el constructo. Ello puede requerir la realizacin de una revisin de la bibliografa y la consulta con expertos en la materia. Sean actitudes, conductas o conocimientos, se debe definir en forma clara y precisa el objeto de la medida y, de ser posible, determinar y conocer la teoras que sustentan la definicin que se acuerde. Un problema puede definirse desde distintas perspectivas tericas y, por lo tanto, pueden proponerse definiciones diferentes de un mismo constructo.

Pasos para elaborar un cuestionario

2. Propsito de la escala.

Se trata de establecer el contenido del cuestionario, definir la poblacin a la que va dirigida, la forma de administracin y el formato del cuestionario.

El propsito de la escala va a determinar en gran medida el contenido de sus tems y algunos aspectos relacionados con su estructura y la logstica de la recoleccin de los datos. Si nuestro constructo o aspecto a medir fuera la calidad de vida, deberamos revisar exhaustivamente todas las posibles caractersticas que conforman la calidad de vida: independencia fsica, vitalidad, equilibrio emocional, sueo, capacidad para relacionarse con otros...Cada una de estas caractersticas se denominan componentes o dimensiones, y la clara definicin de cada una de ellas nos facilitar la construccin de las preguntas que nos ayuden a explorar esa parte del aspecto que queremos medir.

Pasos para elaborar un cuestionario

3. Composicin de los tems.

Los cuestionarios se componen de una serie de tems. El tem es la unidad bsica de informacin de un instrumento de evaluacin,y generalmente consta de una pregunta y una respuesta.

Pasos para elaborar un cuestionario

4. Nmero de tems.

Como regla general, se considera que el nmero mnimo de tems para evaluar un fenmeno sera de 6, pero el nmero de ellos puede ir desde 10 a 90, de manera que puedan abarcar de forma proporcional cada una de las dimensiones definidas a priori en el constructo. Se recomienda realizar el doble de tems de los que van a necesitarse en la versin definitiva del cuestionario.

Pasos para elaborar un cuestionario

5. Contenido.

En funcin del contenido, los cuestionarios pueden ser uni o multidimensionales. En los primeros, ms del 80% de los tems evala una sola dimensin (por ejemplo, el cuestionario de dolor de McGill). En los multidimensionales, los tems evalan dos o ms dimensiones (por ejemplo, las escalas de calidad de vida, SF-361).

Pasos para elaborar un cuestionario

6. Redaccin de los temes.

Al formular la pregunta deben tenerse en cuenta factores como la comprensin (es necesario adaptar el lenguaje y el tipo de eleccin de respuestas al nivel sociocultural de los individuos a quienes va dirigido el cuestionario), as como la aceptabilidad para el sujeto que es preguntado.

Pasos para elaborar un cuestionario

6. Redaccin de los temes.

De acuerdo a Scott (2000), existen una serie de criterios para la redaccin de las preguntas, que son los siguientes:

Preguntas vs Afirmaciones Hechos vs Opiniones Preguntas directas vs indirectas Preguntas predeterminadas vs Preguntas adaptadas a las respuestas Respuestas cortas Respuestas de escala Respuestas tabuladas Respuestas ordenadas Respuestas de check-list Respuestas categricas Claridad Tener cuidado con los temes de carcter negativo Emplear temes cortos Evitar el uso de temes dobles Evitar trminos que implican sesgos

Pasos para elaborar un cuestionario

7. Prevencin de los sesgos.

Un sesgo habitual es el error de tendencia central,es decir, la tendencia a elegir entre las diferentes opciones de respuesta, las centrales. Otro sesgo tambin frecuente es el de deseabilidad social, que se produce cuando se responde en funcin de lo que se considera socialmente aceptable. El sesgo de aprendizaje o de proximidad induce a contestar de forma similar a las respuestas anteriores. El error lgico se produce cuando el encuestado considera que todos los tems relacionados deben puntuarse igual. Hay que tener siempre en cuenta la redaccin del cuestionario y el formato, en cuanto que puede impedir el registro adecuado de la informacin.

Pasos para elaborar un cuestionario

8. Codificacin de las respuestas.

En funcin del nmero de opciones o tipo de respuestas, stas pueden ser:

Dicotmicas: S/No, Verdadero/Falso. Policotmicas: Estoy descontento conmigo mismo/ No me valoro/ Me odio/ Estoy satisfecho de m mismo. Analgicas: Se diferencian en funcin del sistema analgico utilizado.

Pasos para elaborar un cuestionario

9. Puntuacin de los tems.

Lgicamente, tambin es necesario definir el sistema de puntuacin que va a emplearse: simple o ponderado. Se dice que son tems simples cuando la puntuacin directa se obtiene con el sumatorio de respuestas acertadas o de los valores que se hayan dado a cada opcin. Se habla de tems ponderados cuando el valor de cada opcin de respuesta no es la misma o no se otorga el mismo valor a todos los aciertos.

Pasos para elaborar un cuestionario

10. Proceso de validacin.

Una vez diseado el borrador definitivo, es decir, una vez delimitada la informacin, formuladas las preguntas, definido el nmero de ellas que vamos a incluir en el cuestionario y ordenadas las preguntas, corresponde llevar a cabo la realizacin de la prueba piloto y la evaluacin de las propiedades mtricas da la escala.

Pasos para elaborar un cuestionario

10. Proceso de validacin.

Prueba piloto

Normalmente, se pasa el borrador del cuestionario a 30-50 personas, siendo aconsejable que se parezcan a los individuos de la muestra. Este pretest permitir identificar: Tipos de preguntas ms adecuados. Si el enunciado es correcto y comprensible, y si las preguntas tienen la extensin adecuada. Si es correcta la categorizacin de las respuestas. Si existen resistencias psicolgicas o rechazo hacia algunas preguntas. Si el ordenamiento interno es lgico; si la duracin est dentro de lo aceptable por los encuestados.

El pretest cognitivo se lleva a cabo mediante la realizacin de:

Entrevistas informales. Grupos focales. Sondeo sobre comprensin de las preguntas. Valoracin del cuestionario por parte de los participantes en el estudio.

Pasos para elaborar un cuestionario

10. Proceso de validacin.

Evaluacin de las propiedades mtricas de la escala.

Dado que lo que se esta diseando es una escala de medicin que permita tener una puntuacin, y poder comparar la de diferentes individuos o la del mismo individuo en diferentes momentos, se debe asegurar que el instrumento de medida sea fiable y vlido.

Pasos para elaborar un cuestionario

10. Proceso de validacin.

Evaluacin de las propiedades mtricas de la escala.

FIABILIDAD: Es el grado en que un instrumento mide con precisin, sin error. indica la condicin del instrumento de ser fiable, es decir, de ser capaz de ofrecer en su empleo repetido resultados veraces y constantes en condiciones similares de medicin. La fiabilidad de un instrumento de medida se valora a travs de: La consistencia (coeficiente alfa de Cronbach). La estabilidad temporal (coeficiente de correlacin intraclase CCI). La concordancia interobservadores (ndice Kappa)

Pasos para elaborar un cuestionario

10. Proceso de validacin.

Evaluacin de las propiedades mtricas de la escala.

VALIDEZ: Es el grado en que un instrumento de medida mide aquello que realmente pretende medir o sirve para el propsito para el que ha sido construido. Validez de contenido .- Se trata de someter el cuestionario a la valoracin de investigadores expertos, que deben juzgar la capacidad de ste para evaluar todas las dimensiones que deseamos medir. No cabe, por lo tanto, clculo alguno, slo las valoraciones cualitativas que los investigadores expertos deben efectuar. Validez de constructo.- Evala el grado en que el instrumento refleja la teora del fenmeno o del concepto que mide. La validez de construccin garantiza que las medidas que resultan de las respuestas del cuestionario pueden ser consideradas y utilizadas como medicin del fenmeno que queremos medir (anlisis factorial y la matriz multirrasgo). Validez de criterio.- Relacin de la puntuacin de cada sujeto con un Gold Standard que tenga garantas de medir lo que deseamos medir.

CONCLUSIONES

Lo que se valida no es el test, sino las puntuaciones del test, y por lo tanto, la pregunta que tratamos de responder es: Es vlido el uso de las puntuaciones de este test?.

La validez no se puede resumir en un solo indicador o ndice numrico, al igual que ocurra con la fiabilidad (coeficiente de fiabilidad, alfa de Cronbach, etc.).
La validacin es un proceso continuo y dinmico. La teora desempea un papel muy importante como gua tanto en el desarrollo de un test como de su proceso de validacin.

BIBLIOGRAFA
Alvarez Gayou Jurgenson (2003). Cmo hacer investigacin cualitativa: Fundamentos y metodologa. Mxico: Paids Educador. Martn, M.C. (2004) Diseo y validacin de cuestionarios. Matronas Profesin, vol.5(17):23-29. Consultado el 10 de abril de 2009 en: http://www.enferpro.com/documentos/validacion_cuestionarios.pdf Scott, P. (2000). Introduccin a la investigacin y evaluacin educativa. Guatemala: Direccin General de Docencia, Divisin de Desarrollo Acadmico Universidad de San Carlos de Guatemala.

Traver, J. A. y Garca Lpez, R. (2007). Construccin de un cuestionario-escala sobre actitud del profesorado frente a la innovacin educativa mediante tcnicas de trabajo cooperativo (CAPIC). Revista Electrnica de Investigacin Educativa, 9 (1). Consultado el 11 de abril de 2009 en: http://redie.uabc.mx/vol.9no1/contenido-traver.html

EVALUACIN
1.

En la investigacin el instrumento ms utilizado para recolectar datos es:

a)

El cuestionario b) La escala de Likert c) El paradigma cuantitativo

EVALUACIN
1.
Correcto

EVALUACIN
1.
Intntalo

de nuevo

EVALUACIN
2.

Un cuestionario es __________, es decir, con un mnimo de error en la medida.

a)

adecuado b) sensible c) fiable

EVALUACIN
2.
Correcto

EVALUACIN
2.
Intntalo

de nuevo

EVALUACIN
3.

Definir el constructo se refiere a:

a)

Definir la poblacin b) Lo que queremos medir c) Una serie de items

EVALUACIN
3.
Correcto

EVALUACIN
3.
Intntalo

de nuevo

EVALUACIN
4.

En funcin del contenido los cuestionarios pueden ser:

a)

Largos o cortos b) Unidimensionales o multidimensionales c) Preguntas o respuestas

EVALUACIN
4.
Correcto

EVALUACIN
4.
Intntalo

de nuevo

EVALUACIN
5.

Cul de los siguientes ejemplos NO es un criterio para la redaccin de un item?

a)

Preguntas vs Afirmaciones b) Verdades vs Argumentos c) Preguntas directas vs indirectas

EVALUACIN
5.
Correcto

EVALUACIN
5.
Intntalo

de nuevo

EVALUACIN
6.

Cul de los siguientes NO forma parte del proceso de validacin de un cuestionario?

a)

El pretest cognitivo b) La puntuacin de los tems c) Evaluacin de las propiedades mtricas de la escala

EVALUACIN
6.
Correcto

EVALUACIN
6.
Intntalo

de nuevo