EJERCICIOS TEMA 3:

FIABILIDAD DEL TEST

PROBLEMA 1

Un psiclogo aplica un test de razonamiento
abstracto a una muestra de 100 escolares. Seis
semanas despus aplica ese mismo test y obtiene una
correlacin entre ambas aplicaciones de 0,81. con
qu mtodo ha obtenido la fiabilidad?


Solucin:

Ha aplicado el procedimiento test-retest que evala
la fiabilidad como estabilidad en las puntuaciones.
PROBLEMA 2

Un equipo de orientadores aplica un test en un
colegio a la clase de 4B. Dos meses despus aplican
el mismo test a la clase de 5C. Qu mtodo
pretenden seguir para evaluar la fiabilidad del test?

a) El mtodo Test-Retest
b) Formas paralelas
c) Procedimiento dos mitades
d) El diseo est mal planteado


Solucin:

El diseo est mal planteado, ya que para un test-
retest tendran que haber utilizado a los MISMOS
sujetos. Formas paralelas exige pasar DOS tests
paralelos a los mismos sujetos. Dos mitades requiere
UNA aplicacin del test a una muestra, dividir el test
en dos mitades (normalmente pares-impares),
calcular la correlacin y aplicar la correccin de
Spearman-Brown. Ninguno de los mtodos encaja
dentro del esquema de este equipo de psiclogos.
PROBLEMA 3
Seale el objetivo que se pretende conseguir con
cada una de las siguientes actuaciones en la
construccin de un cuestionario.
a) Correlacionar las puntuaciones totales en el
cuestionario con las mismas puntuaciones obtenidas
un mes despus.
b) Correlacionar las puntuaciones de la mitad par
con las obtenidas en la mitad impar.
c) Valorar todas las covariaciones que se producen
entre los diferentes elementos.
d) Correlacionar las puntuaciones totales en el test
con las obtenidas por los mismos sujetos en una
forma paralela.

Solucin
a) Es la fiabilidad entendida como estabilidad
temporal, conocida como Test-retest
b) Es la fiabilidad como consistencia interna por el
mtodo de las dos mitades (hay que aplicar la
correlacin entre ambas mitades y aplicar la
correccin de Spearman-Brown).
c) Es la fiabilidad tambin entendida como
consistencia interna, pero valorando todas las
covariaciones de los tems. Es el mtodo alfa de
Cronbach.
d) Se trata de obtener la fiabilidad por el mtodo de
las formas paralelas.
PROBLEMA 4
Un psiclogo escolar desarrolla un test de 72 tems
para medir la motivacin de logro. Encontr que la
correlacin entre los tems pares e impares era de
0,69. Concluye en su informe que la fiabilidad del
test es de 0,69, ests de acuerdo?

Solucin:
No, ya que hay que aplicar la correccin de
Spearman-Brown. La correlacin entre la mitad par
e impar subestima la fiabilidad del test.


Si aplicamos la correccin segn la frmula de
Spearman-Brown:

82 , 0
69 , 0 1
69 , 0 2
1
2
) 1 ( 1

=
+
=
+
=
+
=
PI
PI
xx
xx
nxx
r
r
r n
r n
r


PROBLEMA 5
Decir si las alternativas son verdaderas o falsas:
a) La correlacin entre los tems pares e impares
de un test es una sobreestimacin del verdadero
coeficiente de fiabilidad.
b) Un test A obtiene un coeficiente alfa de
Cronbach de 0,5. La varianza del test A ser
mayor que la suma de las varianzas de los tems
que lo integran.
c) El coeficiente alfa es una medida de la
estabilidad temporal de una prueba.
d) Los errores de medida son siempre positivos
e) Si disminuye la covarianza entre los tems de un
test, se produce un incremento del valor de alfa

Solucin:
a) Falso, dado que la correlacin entre formas
paralelas subestima la fiabilidad (para corregir
eso hay que aplicar Spearman-Brown)
b) Verdadero. La varianza del test es igual a la
suma de las varianzas de los tems ms dos
veces la suma de todas las covarianzas distintas
que hay entre los tems:

+ =
=
jl
J
j
j X
S S S 2
1
2 2
. Slo si
alfa es cero, la suma de las covarianzas de los
tems sern = 0. Este comentario se deduce de la
frmula:
|
|
.
|

\
|

=

2
2
1
x
jl
S
S
k
k
o
, donde, como se ve, = 0 si el
numerador (dos veces la suma de todas las
covarianzas) es = 0 . Como en el enunciado se
nos dice que = 0,5, entonces la suma de las
covarianzas es positiva. Volviendo a la frmula
de la varianza del test:

+ =
=
jl
J
j
j X
S S S 2
1
2 2
, como el
trmino
jl
S 2 es positivo, necesariamente la
varianza del test
2
X
S es mayor que la suma de las
varianzas de los tems:

=
>
J
j
j X
S S
1
2 2
.
c) Falso. El coeficiente es una medida de la
consistencia interna de la prueba.
d) Falso. Los errores de medida (E = X V) son
tanto positivos como negativos. Recordad que el
error de medida es aleatorio, luego habr
ocasiones en que un test nos sobrestime el nivel
de rasgo (error de medida positivo) y otras en
las que nos subestime el nivel de rasgo (error de
medida negativo). Adems, la media de los
errores, recordad tambin, es cero, por lo que
tiene que haber tanto errores positivos como
negativos (a menos que todos los errores fuesen
cero en cuyo caso estaramos ante un test con
una fiabilidad = 1, cosa que en la prctica nunca
ocurre).
e) Falso. aumenta a medida que aumenten las
covarianzas entre los tems. La covarianza entre
cada par de tems nos dice hasta qu punto estn
relacionados. es precisamente una medida
global de relacin (covariacin) entre los tems,
o si se quiere, es una medida de consistencia
interna u homogeneidad entre los tems.
PROBLEMA 6
La matriz de varianzas-covarianzas de un test es:

|
|
|
|
|
.
|

\
|

2 0 05 , 0 10 , 0
0 2 30 , 0 40 , 0
05 , 0 30 , 0 5 , 2 30 , 0
10 , 0 40 , 0 30 , 0 2


a) Se trata de un test de rendimiento tpico o de
rendimiento ptimo?
b) Cunto vale el coeficiente alfa?
c) Quitaras algn tem? Por qu?
d) Calcula el sin ese tem?, qu debe ocurrir?

Solucin:
a) Es un test de rendimiento tpico, ya que las
varianzas superan el valor 0,25 (mximo valor de la
varianza en tems de rendimiento ptimo).

b) Primero obtenemos la varianza del test:


+ =
=
jl
J
j
j X
S S S 2
1
2 2

2 , 10 ) 0 05 , 0 30 , 0 10 , 0 40 , 0 30 , 0 ( 2 2 2 5 , 2 2
2
= + + + + + + + =
X
S

Aplicamos ahora :
22 , 0
2 , 10
7 , 1
3
4
2 , 10
) 0 05 , 0 30 , 0 10 , 0 40 , 0 30 , 0 ( 2
1 4
4
= |
.
|

\
|
= |
.
|

\
| + + +

= o

c) Se debera quitar el tem 4, que covara
negativamente con el tem 1 (-0,10), tambin con el
tem 2 (-0,05) y cero con el tercero.
d) Calculamos la varianza para el nuevo test de tres
tems:

+ =
=
jl
J
j
j X
S S S 2
1
2 2

5 , 8 ) 30 , 0 40 , 0 30 , 0 ( 2 2 5 , 2 2
2
= + + + + + =
X
S

Recalculamos

35 , 0
5 , 8
2
2
3
5 , 8
) 30 , 0 40 , 0 30 , 0 ( 2
2
3
= |
.
|

\
|
= |
.
|

\
| + +
= o


Qu debe ocurrir? Lgicamente que aumente alfa al
hacer ms consistente (homogneo) el test al
descartar un tem que parece que no se relaciona con
el resto (o si lo hace, lo hace negativamente, lo cual
es peor).

PROBLEMA 7
Un test consta de cuatro tems con varianzas 0,24,
0,15, 0,25 y 0,20. La covarianza entre cada par de
tems fue nula. Cunto vale ?

Solucin:
El coeficiente vale cero, ya que los tems son
independientes entre s.
Formalmente, como se define:

|
|
.
|

\
|

=

2
2
1
X
jl
S
S
K
K
o


jl
S 2 = 0, al ser las covarianzas todas nulas, de lo
que se deduce que es cero.
PROBLEMA 8
Obtener el interpretar el ndice


tem1 tem2 tem3 tem4 Total

4 1 1 2 8

2 2 3 2 9

1 1 1 1 4

4 1 1 3 9

1 2 2 2 7

1 4 4 3 12

2 2 4 2 10

1 1 2 1 5
Varianza 1,5 0,94 1,44 0,5 6


Solucin:
El coeficiente vale:

36 , 0
6
) 5 , 0 44 , 1 94 , 0 5 , 1 (
1
1 4
4
1
1
2
2
=
|
.
|

\
|
+ + +

=
|
|
.
|

\
|

=

X
j
S
S
K
K
o

PROBLEMA 9
Un test est compuesto por seis tems dicotmicos.
Cunto valdr la fiabilidad del test si?

a) Todos los tems son independientes entre s
b) Fuesen iguales la varianza de las puntuaciones
en el test y la varianza verdadera


Solucin:
Para la pregunta a), tenemos que al ser todos los
tems independientes entre s, la fiabilidad ser cero
(por ejemplo, si la calculamos por el mtodo de las
dos mitades, tendramos que obtener la mitad par
(suma de los tems 2, 4 y 6) y la mitad impar (suma
de los tems 1, 3 y 5). La correlacin (r
PI
=0), por lo
que la fiabilidad ser cero.
Para la pregunta b), si
2 2
V X
S S = entonces la fiabilidad =
1, ya que por definicin
2
2
X
V
xx
S
S
r = (adems,
2
E
S ser
cero).
PROBLEMA 10
El test A tiene una varianza error de 25 y el test B de
10. Podemos concluir que el test B es ms fiable
que el test A?

Solucin:
No podemos concluirlo. Depende de la varianza
emprica del test A y el test B. Por ejemplo, si la
varianza emprica del test A es de 100 la fiabilidad
de tal test ser 0,75 ( ) 75 , 0
100
25
1 1
2
2
2
2
= = = =
X
E
xx
X
V
xx
S
S
r
S
S
r ,
mientras que si la varianza emprica del test B es de
20, la fiabilidad ser de 0,50.

PROBLEMA 11
Indicar si las siguientes afirmaciones son o no
verdaderas:
a) El error tpico de medida es siempre menor o
igual que la desviacin tpica de las
puntuaciones empricas
b) El coeficiente de Cronbach puede tomar un
valor negativo, siempre y cuando exista al
menos una correlacin negativa entre tems

Solucin:
La pregunta a es verdadera. Recordar que
2 2 2
E V X
S S S + =
(el error tpico de medida es la desviacin tpica de
2
E
S ). Luego el error tpico de medida,
E
S , ser como
mucho igual a la desviacin tpica del test. Eso
ocurrir cuando
V
S
sea cero, o dicho de otra manera,
cuando la fiabilidad sea cero.
La pregunta b s es verdadera. Efectivamente alfa
puede ser negativo cuando haya covarianzas
negativas entre los tems.

PROBLEMA 12
Un test de inteligencia espacial tiene una varianza de
4. Diga si las siguientes afirmaciones son o no
verdaderas:
a) El error tpico de medida ser mayor o igual que
2.
b) Si aadisemos 10 tems paralelos al test
original, la varianza de los errores ser la misma
en ambos tests (el original y el alargado).

La pregunta a no es verdadera. Si el error tpico de
medida es mayor que 2 ( 2 >
E
S ), entonces la varianza
error sera mayor que la varianza emprica del test
2 2
X E
S S > , lo cual es imposible. Recordar que
2 2 2
E V X
S S S + =
La pregunta b tampoco es verdadera. Al alargar un
test aumenta la varianza error en el test alargado
(consecuentemente aumenta el error tpico de
medida). Lo que pasa es que aumenta ms despacio
de lo que aumenta la varianza de las puntuaciones
verdaderas, de ah que al alargar un test aumente la
fiabilidad.
PROBLEMA 13
Decir si las siguientes afirmaciones son o no
verdaderas.
a) El error tpico de medida de un test puede tomar
valores negativos
b) A una muestra de 40 personas se les aplica un
test A. Obtuvieron 40 puntuaciones muy
homogneas, por lo que es de esperar que la
fiabilidad del test, entendida como consistencia
interna u homogeneidad sea muy alta.
c) La correlacin entre las dos mitades de un test
es el coeficiente de fiabilidad del test.
d) Cuando se aumenta la longitud de una prueba
aadiendo tems paralelos, la varianza de las
puntuaciones verdaderas se incrementa ms que
la varianza de los errores de medida.

Solucin:
A es falsa (una desviacin tpica nunca puede ser
negativa).
B es falsa, ya que al aplicar un test a un grupo muy
homogneo (con puntuaciones muy homogneas), la
fiabilidad tender a no ser alta.
C es falsa tambin, ya que la fiabilidad se obtiene
aplicando la correccin de Spearman-Brown.
D es verdadera.
PROBLEMA 14
Un test A tiene un coeficiente de fiabilidad de 0,80 y
una varianza de 25.
Obtener la varianza de las puntuaciones verdaderas y
el error tpico de medida.
Obtener la diferencia mnima entre las puntuaciones
de dos personas para considerar con probabilidad
0,95 que sus puntuaciones son distintas.
Juan obtiene una puntuacin de 28 puntos en el test
A y Pedro de 24, podemos afirmar con un nivel de
confianza del 95% que sus puntuaciones en el rasgo
difieren?

Solucin:
Como 20 25 80 , 0
2 2
2
2
= = = =
X XX V
X
V
XX
S r S
S
S
r
Como 24 , 2 20 , 0 5 1 = = =
xx X E
r S S

Para obtener la diferencia mnima tenemos que
igualar la diferencia mnima a una Z = 1,96:

21 , 6 24 , 2 2 * 96 , 1
24 , 2 2
96 , 1
2
= = = = Dif
Dif
S
Dif
Z
E


No podemos afirmar que la puntuacin de Juan y
Pedro sean distintas con un nivel de confianza del
95%, ya que la diferencia, 4 puntos, no supera la
diferencia mnima.
PROBLEMA 15
Cunto valdr el coeficiente de fiabilidad de un test
si?
a) La varianza error fuese el doble de la varianza
verdadera
b) El 30% de la variabilidad de las puntuaciones
en el test se debiese a errores de medida


Solucin:

Resolvemos a). Si
2 2
2
E V
S S =
entonces
2 2 2 2 2 2 2
3 2
V V V X E V X
S S S S S S S = + = + =
. Adems,
33 , 0
3
2
1 1
2
2
2
2
= = =
V
V
X
E
xx
S
S
S
S
r

Resolvemos b). Si el 30% de la varianza emprica
(del test) es atribuible al error, el 70% ser atribuible
a las diferencias en el nivel de rasgo, por lo que el
coeficiente de fiabilidad ser 0,70.
PROBLEMA 16

Un test de 5 tems se aplica a 200 personas. La
varianza del test es de 1,42. No hay omisiones.
Obtenga el alfa de Cronbach e interprtelo.

tem 1 tem 2 tem 3 tem 4 tem 5
Aciertos 160 140 160 100 80


Solucin:

Las varianzas de los tems son:

tem 1 tem 2 tem 3 tem 4 tem 5
Aciertos 160 140 160 100 80
Dj 0,80 0,70 0,80 0,50 0,40
S
2
j
0,16 0,21 0,16 0,25 0,24


35 . 0
42 , 1
24 , 0 25 , 0 16 , 0 21 , 0 16 , 0
1
1 5
5
1
1
2
1
2
= |
.
|

\
| + + + +

=
|
|
|
|
|
.
|

\
|

=

=
X
K
j
j
S
S
k
k
o
PROBLEMA 17

Diga con qu aumentaramos la fiabilidad de un test.

a) Seleccionando un par de criterios externos que
sean buenos V F
b) Seleccionando un grupo normativo que sea
homogneo en el rasgo (grupo normativo es el
grupo al que se aplica el test) V F
c) Aumentando la longitud del test V F
d) Eliminando todos los tems fciles de un test
V F

Solucin:

a) Es falso. Los criterios externos precisamente
por ser externos no afectan al comportamiento
del test, sino que sirven como evidencias de la
validez del mismo (ver ms adelante tema de
validez)
b) Es falso. Justamente al revs. Cuanto ms
heterogneo sea el grupo normativo ms fiable
ser el test.
c) Es verdadero. Al aumentar el test con tems
paralelos aumentamos a su vez la fiabilidad
d) Es falso. tems demasiado fciles seguramente
no sean tems buenos ni siquiera en trminos de
homogeneidad, pero hay tems fciles que
pueden aportar mucha fiabilidad al test (por
ejemplo, los tems que covaren con el resto).
PROBLEMA 18

Tenemos un test A de 30 tems cuyo coeficiente de
fiabilidad es 0,80. Tenemos un test B de 60 tems
con el mismo coeficiente de fiabilidad. Aadimos 30
tems paralelos a ambos test luego la fiabilidad de
ambos tests alargados ser la misma. Justifica tu
respuesta.

Solucin:
No tendrn la misma fiabilidad, ya que el primer test
lo alargamos 2 veces y el segundo 1,5 veces.
Aplicando Spearman-Brown tenemos que:

89 , 0
80 , 0 ) 1 2 ( 1
8 , 0 2
) 1 ( 1

=
+
=
+
=
xx
xx
Anxx
r n
r n
r
86 , 0
80 , 0 ) 1 5 , 1 ( 1
8 , 0 5 , 1
) 1 ( 1

=
+
=
+
=
xx
xx
Bnxx
r n
r n
r

PROBLEMA 19

Disponemos de un test inicial, A, de 20 tems, que
tiene un coeficiente de fiabilidad raa. Multiplicamos
su longitud por 2, 3 y 4, siempre con elementos
paralelos, y formamos los tests B, C y D, de 40, 60 y
80 tems, respectivamente. Obtenemos sus
coeficientes de fiabilidad: rbb, rcc y rdd. Dado que el
test B resulta de aadir 20 tems al test A; el C, de
aadir otros 20 al test B; y el D, de aadir otros 20 al
C, cabe esperar que rbb raa = rcc rbb = rdd rcc?

Solucin:
Las diferencias no sern iguales entre dos
fiabilidades. Las diferencias sern mayores al
principio y menores despus.



PROBLEMA 20

Tenemos un test de 12 tems con una fiabilidad de
0,50. Queremos obtener una fiabilidad de 0,83
luego cuntos tems paralelos deberamos aadir
al test original?

Solucin:
Para calcular el nmero de formas paralelas que hay
que aadir tenemos que aplicar la frmula:

88 , 4
) 83 , 0 1 ( 50 , 0
) 50 , 0 1 ( 83 , 0
) 1 (
) 1 (
=

=
nxx xx
xx nxx
r r
r r
n


Hay que aadir n 1 formas paralelas, que son 4,88
1 = 3,88. Como originalmente tenemos 12 tems,
12*3,88 = 46,56 tems, que redondeando son 47.


PROBLEMA 21

Dos candidatos a un puesto obtienen una diferencia
en un test de 6 puntos. La diferencia estandarizada Z
entre los dos candidatos resulta ser de 2,76. Luego:

a) Debemos rechazar que ambas puntuaciones
sean iguales
b) Si el error tpico de medida fuera menor del que
tiene el test, nuestra decisin anterior podra
haber cambiado

Solucin:
Rechazamos efectivamente que ambas puntuaciones
son iguales, ya que la probabilidad asociada a un
valor Z = 2,76 es menor de 0,01 (o 0,05 en su caso).

Respecto a la pregunta b decir que nuestra decisin
NO se habra modificado, ya que al disminuir el
error tpico hubisemos encontrado an una Z ms
grande.