.c .

cc
http://edpformacion.co.cc
http://edpformacion.co.cc
o .cc ©
©
. c .
o .cc c c
n
o n.co c i o n . c o
cio r m a on
(JEI09)ci
f o
Jornadas Estudiantiles de Investigación 2009
p r m a (EGCTI)
Escuela Graduada de Ciencias y Tecnologías
. e d pfo de la Información

w w .ed
Marzo 2009

p : / / w w w p : / /
hde t
t Contenido
: / / w h t
t p:/
Validez p
htt a Distancia y Profesores” de la EGCTI
del “Cuestionario de Evaluación de
htt
Cursos

o . c c Comité de Avalúo
o . c c
n . c . c c Alberto L. Hernández Hernández
n . c . c c
o n.co Oraliz Barreto Landrau cio n.co
a cio
c io f o r m
m a
. e d p
Supervisores:
foLugor
w
Dr. José
w . e d p
Sánchez

p : / / w Dr.
w
Carlos
w Suárez Balseiro
p : / /
httttp://w httttp:/
Dra. Luisa Vigo Cepeda

h Graduada
Escuela de Ciencias y Tecnologías de la Información
alberto.hernandezhernandez25@upr.edu
h
o . c c oraliz.m.barreto@upr.edu
o . c c
n . c . c c n . c . c c
o n.co Resumen: La EGCTI y el Comité de Avalúo en su compromiso c i o con .
n elc
o
a cio evaluaciones de sus
cio
ofrecimiento de
servicios académicos de excelencia, practica semestral y m
cursos y profesores. Considerando que la educaciónfo
p r m a
sistemáticamente

son diferentes a las presenciales, el Comité

. e d p f o
de Avalúo r
y las experiencias
revisó
de aprendizaje a distancia
varias estrategias de avalúo

w
existentes, y construyó un cuestionario w . e
dirigidod a evaluar los cursos ofrecidos a distancia y los

p : / / w
profesores que ofrecen los mismos.
w w
Método: Para realizar esta investigación utilizamos métodos
p : / /
de Validez de h tt p://Lawmuestra que se utilizó para estimar la validez de contenido se htt p:/
cuantitativos y cualitativos.
Contenido”.
El instrumento principal utilizado fue una “Hoja de jueces expertos

h
compuso de nueve t t
(9) juez expertos que evaluaron el cuestionario desarrollado para evaluar la
educación a distancia. Resultados: Como resultado de la estimación de la validez de contenido, h t t
el cuestionario utilizado para evaluar los cursos (presenciales y a distancia) fue reducido de
. c c
cincuenta
o de.ccontenido
y tres (53) reactivos a un cuestionario de treinta dos (32) reactivos diseñado
. c c
o .ccútil y
n . c c
exclusivamente para evaluar de la educación a distancia. Conclusión: Los
n . c
procesos de validación
o n.code calidad, que responda a las necesidades, el diseño y el contextoacdeilaoeducación
permiten recoger información valiosa para la construcción de
n
un
. c o
instrumento

ci o o a distancia. La
r
foEGCTI.
información que recopilará este nuevo cuestionario no sólo m c i
a desarrollar planes de acción
será útil para conocer si los objetivos
del programa académico se alcanzaron, sino que además
d p en lao r m
permitirá
.e dpf
para mejorar la calidad de la educación a distancia
w
Palabras claves: Educación w
/ / w
a Distancia,
w . e
Construcción de Pruebas, Validez de contenido, Avalúo
/ /
p : w p :
httttp://w httttp:/
h 1
h
http://edpformacion.co.cc ©
 .c .cc
http://edpformacion.co.cc
http://edpformacion.co.cc
o .cc ©
©
. c .
o .ccc c
n
o n.co c i o n . c o
cio r m a cion
Introducción:
p f o r m a
. eend f o
La EGCTI y el Comité de Avalúo
w
w unawcultura
. d p
su compromiso con el ofrecimiento de servicios
e de avalúo por la cual práctica semestral y
académicos de excelencia
p : / / w w
mantiene
p : / /
t
htevaluaciones
: / / wde sus cursos y profesores. La EGCTI durante los pasados tres (3) h
t
t p:/
sistemáticamente
h tt p h tt
años académicos estuvo utilizando el mismo cuestionario para evaluar a los profesores y los

o . c c presenciales y a distancia. Considerando que la educación y las experiencias .

o decc
n . c cursos
. c c n . c . c c
o n.coaprendizaje a distancia son diferentes a las presenciales, el Comité c o
deiAvalúo
a a ievaluar n . c ovarias
revisó

c io o
f rm r
estrategias de avalúo existentes, y construyó un cuestionario m dirigidoc
a o los cursos
ofrecidos a distancia y los profesores que.e d p
ofrecen los f o
w w . e d p mismos.

: /
El cuestionario para
p / w w
evaluar a w
los cursos a distancia y sus profesores fue desarrollado de
p : / /
t :y//respondiera
htsensible w a las necesidades de avalúo particulares de la educación htt p:/
forma que fuera
h tt p h tt
a distancia ofrecida por la EGCTI. Consecuentemente se estimó la validez de contenido del

o . c c La estimación de la validez de contenido permite verificar si el cuestionario o . c csirve

n . c . c c
cuestionario.
n . c . c c
o n.copara medir el constructo para el cual fue desarrollado y si responde c ai o
las
. c ode los
necesidades
n
a ciosintaxis, claridad de
cio f o r
participantes, además de verificar si cumple con los criteriosm
m a
de redacción,

. e p r
d pfonos permitió reafirmar la identificación
w w .ed
exposición y coherencia lógica. La validez de contenido

p : / w
de los elementos que son/representativos
w wy esenciales para la evaluación efectiva de cursos a p : / /
distancia. h
tt p://w h tt p:/
h tt h tt
Metodología:

. c
o .cc c .
o .ccc c
El método utilizado en este trabajo fue principalmente cuantitativo, aunque integramos
n . c
o n.coestrategias que nos permitieron obtener información de carácteracualitativo. n . c o
c io nEl .instrumento
c
ci o f o m
principal utilizado para recopilar la información fue unar“Hoja a
de c i
jueces
oexpertos de Validez de
mque fungieron como juez expertos
e
. dp d p f o r
w w
Contenido”. La muestra se compuso de nueve
. e
(9) participantes

p : / / w w w p : / /
httttp://w httttp:/
h 2
h
http://edpformacion.co.cc ©
 .c .cc
http://edpformacion.co.cc
http://edpformacion.co.cc
o .cc ©
©
. c .
o .cc c c
n
o n.co c i o n . c o
cio r m a expertos
de juecesc i o nfue de seis (6)
f
para evaluar el cuestionario. La composición de este grupo
p o r m a
. e dque pcontaban
f o
w
estudiantes y tres (3) profesores de la EGCTI
d con conocimientos y experiencias en
w Todos.elos profesores que participaron habían ofrecido o
la educación a distancia /
p : w
en/la EGCTI.w
w p : / /
t
httcursos : / / w h t
t p:/
estaban ofreciendo
h t p a distancia, mientras que los estudiantes habían tomado o estaban
h tt
tomando cursos a distancia.

o . c c o . c c
n . c . c c Procedimientos:
n . c . c c
o n.co Para realizar este trabajo primero revisamos el cuestionario c o
el i“Cuestionario
a ciacadémicosn . c ode
c io o
f rm
Evaluación de Cursos y Profesores” utilizado en los pasados r m a
tres años
o por la EGCTI
d p forevisados se encuentran: la definición
.elos delementos
w w
para evaluar sus cursos y profesores. Entre
. e p
: / /
de las dimensiones y variables
p w del
w w
cuestionario, la calidad de la redacción, sintaxis; claridad de
p : / /
exposición y h
tt p:/del/wcuestionario, sus variables; reactivos y preguntas ambiguas o htt p:/
tt
organización
h h tt
problemáticas, y las escalas utilizadas. Luego, realizamos una revisión de literatura sobre la

o . c c a distancia, los procesos de avalúo pertinentes, los reglamentos institucionales, o . c cy las

n . c . c c
educación
n . c . c c
o n.coguías de agencias acreditadoras. También se hizo observación deacursos c iodistancia
n . c ola EGCTI
de

cio activos en el primer semestre 2008-2009. Posteriormente,rm

o
f rm mediantec
a o
la irevisión de literatura y la

observación de los cursos, identificamos.las

d p
evariables f o
w w . e d p que eran importantes para evaluar la

: / /
educación a distancia (cursos
p w y
w w
profesores) en la EGCTI.
p : / /
htttdetphaber
Después ://w llevado a cabo los pasos antes mencionado construimos el h
tt p:/
tt
h
“Cuestionario de Evaluación de Cursos a Distancia y Profesores”. Este cuestionario tuvo una
h
o . c c preliminar por los miembros del Comité de Avalúo. Luego este cuestionario.c
o se c
n . c . c c
revisión
n . c . c c
sometió

o n.coal estimado de validez de contenido utilizando un panel de a o las

o n.cRecopilamos
juecesiexpertos.
c
ci o datos e insumos ofrecidos por los jueces, y computamos
f o r m a
el índice c
de i o
validez de contenido para
m(ne - N/2)/(N/2). En esta fórmula
e
. dp d p f o r
w w
cada ítem utilizando la fórmula estadística
. e
de Lawshe (1973):

p : / / w w w p : / /
httttp://w httttp:/
h 3
h
http://edpformacion.co.cc ©
 .c .cc
http://edpformacion.co.cc
http://edpformacion.co.cc
o .cc ©
©
. c .
o .cc c c
n
o n.co c i o n . c o
cio r m a(el número
c i o nde participantes que
f o
estadística ne significa la frecuencia de la opción “Esencial”
p r m a
escogieron esta opción), mientras que la.N e d pelfonúmero total de participantes.
w w .ed significa

Resultados:
p : / / w w w p : / /
t
htttputilizado
El cuestionario
w
:// durante los pasados tres años académicos para evaluar los cursos htttp:/ t
h
de la EGCTI, tanto los presenciales como los ofrecidos a distancia, fue reducido de un total de
h
o . c c o . c c
n . c 53
. c c
reactivos (48 de selección múltiple y 5 preguntas abiertas) a un cuestionario inicial
n . c . c c
diseñado

o n.coexclusivamente para la evaluación de la educación a distanciaadec41ireactivos, o n.c(32ode selección

c io o
f rm
múltiple, 7 de matriz, 2 preguntas abiertas). Los reactivos r m a c
de matriz i
se
oelaboraron para evaluar
d
.e dComo p foresultado de la estimación de la validez de
w w
las particularidades de la educación a distancia.
. e p
: / /
contenido, la versión inicial
p w
del
w w
cuestionario para evaluar los cursos en línea y sus profesores fue
p : / /
t :/26/wde selección múltiple, 4 de matriz, 2 preguntas abiertas. La htt :/
htreactivos:
reducido a 32
h ttp h ttp
estimación de validez de contenido permitió volver a evaluar si las preguntas eran útiles para los

o . c c a distancia y los profesores que imparten los mismos, y la corrección ode .losctipos c de
n . c cursos
. c c n . c . c c
o n.copreguntas y su orden, las escalas, la organización, el vocabulario, c ilaoredacción,
n . c ola ortografía,
aparacielocuestionario final NO
cio f o r
gramática, y las instrucciones. Los ítems que no se utilizaronm
m a
. e p
validez p f r
d de contenido.
o
w w
cumplieron con el requisito estadístico de
. e d
Resultados esperados: //
p : w w w p : / /
tt p:/un/westudio piloto (pautado para finales de marzo de 2009), para htt p:/
Se hahcoordinado
h tt h tt
examinar la utilidad y calidad del cuestionario, su administración y contestación vía Internet. De

o . c c o . c c
n . c o . c c
identificarse errores u omisiones durante el estudio piloto, se corregirán e integrarán
n . c o . c c al

o n.c cuestionario y se desarrollará la versión oficial para la EGCTI.

a
El
c i o
cuestionario
n . c
oficial se utilizará

ci o o r ma distancia
a c o
i y los profesores que la
d p f
desde agosto 2009 para evaluar exclusivamente los cursos
r m
imparten.
w e
. dp f o
/ / w w w . e / /
p : w p :
httttp://w httttp:/
h 4
h
http://edpformacion.co.cc ©
 .c .cc
http://edpformacion.co.cc
http://edpformacion.co.cc
o .cc ©
©
. c .
o .cc c c
n
o n.co c i o n . c o
cio r m a cion
Conclusiones:
p f o r m a
. e d pfo
w dew avalúoeesd
: / w
Para fomentar una cultura
w . necesario desarrollar herramientas e instrumentos
/ w sobre la calidad de la enseñanza y el aprendizaje en un tp://
t p
htttp://w
que permitan recopilar información
htttp:/
h de educación. Los procesos de validación de contenido permiten recoger h
programa graduado

o . c o . c c
información valiosa para la construcción de un instrumento útil y de calidad. Aunque este es un
c
n . c . c c
proceso usual en la construcción de cuestionarios, para la construcción de
n . ceste
. c c
cuestionario
o n.coexistieron ciertas dificultades: (1) la ausencia de cuestionarios c
a cio i o n . c ode cursos a
c io distancia; (2) la diversidad de concepciones dep la f
o r m
m a
de evaluación

. e d pfo r
educación a distancia; y (3) la diversidad de

w wde .laeEGCTI.
d
p : / / w
formatos de los cursos a distancia
w
Tomando en cuenta estas dificultades la
wlogro significativo. p : / /
h tttp://w
construcción de teste cuestionario fue un
httttp:/
h entre los tipos de jueces (profesores y estudiantes) provocó comentarios h
La diferencia

o . c o . c c
encontrados respecto a la función de las preguntas abiertas. Esta diferencia pudiera deberse a que
c
n . c . c c n c
las partes está más interesada en el tipo de información que se quiere.recopilar,
. c c
o n.coque la otra en se interesa más en el tiempo que toma contestaraelccuestionario. o con
una de mientras
io n.cEsperamos
cio o
f rmr m a c i o
d p
este nuevo cuestionario responder a ambas preocupaciones,
.e dapdistancia o tomando en cuenta particularmente
f en la EGCTI. La información que
w w . e
p : / / w
aquellos aspectos que caracterizan
w
la
weducación

p : / /
h tttp://w
recopilará este tcuestionario no sólo será útil para conocer si los objetivos del programa
httttp:/
h sino que además permitirá desarrollar planes de acción para mejorar la h
académico se alcanzaron,

. c
calidad de la educación a distancia en la EGCTI.
c
o Referencias: .
o .cc c c
n . c . c c n . c
o n.coLawshe, C.H. (1975). A quantative approach to content validity.aPersonnel c . c o
io nPsychology,
ci o r
fo rmam c i o
25, 563-575.
. e d p f o
w w .ed p
p : / / w ww p :/ /
httttp://w httttp:/
h 5
h
http://edpformacion.co.cc ©