Beruflich Dokumente
Kultur Dokumente
Robert L. Tkorndike
Teachers College,
Colum.bia University
EDITORIAL
M~XICO
ESPA~~A
COLOMBIA
.
VENEZUELA
LIMUSA
ARGENTINA
PUERTO PICO
p"
. -!
[-)
-.
m1
Captulo 2
UCII
uaui ~
a ig u n rriumcnw
U L F ~ N ~ C IDEL
~ N ATRIBUTO LATENTE O DOMINIO DE LA PRUEBA
.'
.:'l
* a
'
I ti.
#\:
' ,
, il., l : . ; .
. :., , ,,
(
.:
,la,;:
..
)<B
1,:
. ,;,
i1:
:*
, .
J .
.!
& .
... I(;
el*
::,
,~.,.!,,,1.1
'...#i1
.1:,,,,
. l . ,
:..;,. .
. .
i n ~ ;,
, 1.1,
,\~]r.,,;
,:.,
. ~ r o b ~ b l h e n t c triirid.deeir.qu&
&s
antes de que se inicie el desarrollo de '
-2tnarpfil'iba.u~ k . i ~ h f u r h ' e n t ~debe
, . s t conocer qu4"es'ld que se dessea' pro'bar.i'Quiz&iio ts tan trivial 'decir que sedebe poder expresar esa intencin
tan?cl?r;il)t.cxplfcitamtnteieomeber
posible;La intencin se expresa en for.
-rn%gencaic~rei~ricimbre
que%&d d d auibutb o doniinio: "tiabilidad vera maysculas
~ b a l ~ d a b e&'tl
z a taJcuI'6 'i,ntlco";"hiaestra ai,SIuso de I
exblos-nombretpropias",~"eficicncia en mtcanografia", "intetCs por I mecnica" o "impulsividad": Sin e h b u g o , la.$etiquetad puedtn'significar, ms
,-l)led(!co& dift?tntes,bata petronas difermces. Incluso' algo tan especifico
y tangible como "destteh'tn' el clculo a ~ t m t i c o "puede
~
significar vtloci.
dad y exactitud de ciculor simples con rirneros enteros, y mientras que
fp~.\rttl;!higr&Wla'hibiiidaa pui:litvar a taboi'de principi?ih'fin c;klm.
los largos y complejos con empleo de fracciones; decimale$ y pYHntesis. Las
dos cosas pueden constituir atributos notablemente dilerentes y una perso.
.:
.,
27
na que es sobresaliente en una, tal vez slo sea tipica en la otra. Por esta
razn, es deseable alguna especificaciSn y restriccin adicionales.
La. espec'ificacin pormenorizada y objetiva del atributo se da en la eta.
pa de preparar el plan detallado de la prueba. En este punto, se intenta del-nitar
- -con detalle_.las
.. caractersticas del contenido y del proceso mental que
se
va
a
detectar,
media.iitc1os
Sin embargo, al pen.
__... -.---.
..----.-.
..
_..ejerciCta3-dt5li'pruu.
.
.
sar en un p r o y e c t o ~ d e s a r r o I l ode pruebas, el primer paso ser precisar
y aclarar el significado del atributo. A continuacin se presentan algunos
ejemplos de rasgos o dominios definidos.
<
*.
-^
28
"
'
.
.
. . ! 1.J
'~
P U N U C I ~DE
N W E U B O R A C I ~ NDE PRUEBAS
les, que la cornposicibn de una prueba y el nivel de dificultad de sus ejercicios dependen en forma considerable de los tipos de decisiones para las
cuales sc van a usar los resultados. Se consideran los siguientes tipos:
insfwcici. Aqu la alternativa tpicamente es si un individuo (o un grupo) tiene maestra en ciertas habilidades, de modo
que vale la pena presentar un nuevo tema en clase, o ya sea que una
persona (o grupo) haya alcanzado suficiente maestria de dominio en
un coriocimiento o habilidad que precisamente se acaba de ensear,
para que sea posible pasar a una nueva unidad de instruccin.
DecYiunes & diugdstico. El objetivo en este caso es identificar las de&
ciencias particulares, o los errores en el aprendizaje de una persona,
con objeto de iniciar a-ccic'ries correctivas. Para ambas decisiones de
instruccin y de diagnstico, las pruebas se enfocan por lo general
en el grado de maestria de uno o ms dominios definidos con bastante precisin.
Decisionu & sekccin. stas son decisiones para admitir o excluir en
un grupo, para contratar o no. Ordinariamente son, cuando menos
en cierto grado, decisiones de comparaciJn y competencia cuando
el nmero de vacantes esta limitado y la prueba se lleva a cabo con
objeto de admitir a los candidatos m;ls proinisorios.
Deciiioncs de coloeacidn. Este ttrmino usualmente se refiere a una je.
rarquizacibn de programas o posiciones de entrenamiento. El pro.
blenia es determinar dbndc se puede ubicar rns ventajosamente a
cada sujeto en la jerarqua. A cul nivel debe entrar un estudiante
transferido, durante el aiio escolar, a otra escuela? En qu tipo y nivel de estudio de lenguas. o de un programa de maiemticas, tendr
mayor aprdvechamiento un alumno de nuevo ingreso? Qu tan coin.
plejas son las tareas que deben asignarse a un nuevo empleado de
oficina o negocio?
Decisiorm & clasifcacin. stas difieren d e las decisiones de colocacin
en que la decisidn es de tipo, ms bien que de nivel. ;A cul curso
de entrenamiento debe asignarse un nuevo recluta en el ejrcito? Se
capacitar esta persona ins fcilmente como oficinista o como mecnico, como cocinero o conio chofer?
1. Ilecisiune@
,"
. . ,
U* instrumepo
.
,
&;bae$b
deberfa fer, plane=do con;.svi
un grupo
de sjeui. en pa&u& y.
definidos d e deci$4n. ~ d ~ h edeb i
dculo,a+n&tic+ puede di,rigirsc a alumnos,del quinio grado, para identifi& individuo? b n deficiencias, y diagnoqticar la naturaleza de esas dcfi.
pa& de &I programa de sdyci6n para
dencias,,,~,pk& .~s+-u!~c.&z~
contra* a j e @ ,de banco:' U& p m e b d e ,mecanogmfa,puede scr parte
de un examen de, cuno pru? una d b de mecanografa en ~ e c u n d a t ho,
una p h e b a p u a ididtantea de un puesto iecr.etarial. Al piancar una prue.
ba,'er importanti tener en m&. el h p o d cual se aplicar4 y los tipos de
decisin que u van a bas& en los.resultadosde la pruebi ha'especificacio.
nes puz. el contenid? de Ia pruebi, il nivel de diticulta$ la duracirin de
la pitjba, lu pu,ntuacioner que w v&,a obtener,y para la forma en la cual
se van a reportar, t o d b dependen del grupo que.= desee Probar y ,lasdeci.
,,
siones que se podrm tomar con b y en ellas.
+,',
>+,\
L anterior .ayudad a que',elresuit;rdo final sea i i
claro posible en
definicin de los grupo's q " r:
~
probar. Qu nivela dk Edad o grado se repre?ent+n? ~ ~ s u f n ~ r ~ ~ r ~
iaj~personas
~ i t a d con
a s la gama coni.
pleta del atributo? Se sele&onad el p p o de alguna f o 6 i en particular?
(Los'grupoa,~leccionados
pyedcn ,yprconstituidos por ptt-i~nascon habilidCd .robresaliente, p&nq q u c , m candidatos a becas o patrocinios,
O
'?*+CI, p q r i l p e r y * ~ l t 9 ~ ~ p ~ ~ i ,marginal,
idad
que ,&'califican para
$sp4ilc+ ;(Los sujeto; de examen perteneinsqcci6fi ?n+ui,dudo,
cen a grupos especiales de lenguaj o cultura? Coi1 quC mocivacibn tornai..~
. ..
rnlaprueba? .
.: .Tambin u importantec o i n ~ ede'antemano
r
el uso de lbs resultados de
la prueba <Estdiseiiada la prueba simplemente como una herramienta de
investi@ei6n;u:decir: panicolom -a todos los sujetos de examen, thn exacsu posiblei,en:la d a del atributo datetite, de.tnodo que
tamente~como.
a t e atributo pueda estudiarse en telaci6n con'otras caractrtistieas del india
viduor.o,en-reladnlcon lodiatamitntos que K le estC aplicandoi .o bien
se.destinar para usar 1os'~esultados
como base de decisian endguna spli.
caci6n7 Si,= tnu d lo ltimo,'P quC tipo de aplicaci6n? Se'pueden identi.
fi-:varios.tipor de apli&aoner @eiequieren diseos bien,diferentes del
instrumento d c pruebz.Que&dui>,!confomese exponen terna adiciona.
'
L . ,'l.
<.
os
2.
'
Y.
4.
3 ,
U,
.I
5.
cisiones que una persona, quizi con ayuda profesioiial. ioma acerca
36
,'
-1
,
1,s
d *
*'
i ,
i .:t
'
-{.
,
r
Cualquier pnieba debe llevarse a cabo dentro de los limites establecidos me.
diante restricciones aplicables. Es importante que quien elabore la prueba
estmento a estas restricciones y haga los ajustes necesarios.
La resacci6n ms obvia es l a del tiempo. El tiempo requerido para la
pruebafrecuentemente K concede a disgusto. En las escuelas, los maestros
tienden a cbnsiderar ei tiempo d e las pruebas como tiempo robado a su pro.
grama de estudios, y los administradores con frecuencia ven el programa
d e pruebas como un i.iconveniente que interrumpe el tranquilo flujo del
dia escolar. En lu agencias d e empleos, los candidatos pueden espsrar dedi.
car sblo un tiempo limitado al proce.w de presentar la solicitud de empleo.
La presin por el requisito de breiedad en las pruebas es muy autkntica. Pero
la presibn por la precisibi. en~laslevaiuacionesde la prueba esa igualmente
verdadera y el elaborador 'de pruebas est en conflicto perenne pues debe
producir una prueba~sufi'cientementebreve para que sea aceptabieGporlos
usuarios, y que a la vez profiorcione informacibn considerablemente exacta
para permitir decisiones tiles. En la planeacibn d e una prueba; el elabora.
dor debe estar consciente d e lasresuicciones de tiempo, d e modo que la es.
pecificacibn de tiempo se ajuste a estos limites requeridos por los usuarios.
Una segunda restriccin, que es frecuente, seria que la prueba se deba
administrar a un p p o , y n o a unkdividuo. Un corolario comn en la apli.
cacibn a un p p o , aunque n o absolutamente necesario, es que la prueba
se limite d material impreso en un folleto. Si tiene lugar esta rcstriccibn,
1
debe respetarse e inciuinc en el plan d e la prueba.
Aun cuando una prueba se aplique individualmente, es necesario tener
en cuenta las condicimes q u e un examinador tipico, con un nivel i!iedio
de entrenamiento y habilidad, pueda mangar. {Ser dificil manipular el material de prueba? {El examinador tendri que tomar decisiones rpidas accrca de la secuencia en que se van a presenar las tareas? {Deben hacerse juicios
al vuelo, corrigiendo las respuestas conforme se est re~lizandola prueba?
;Qu tan complejo es el registro d e rapucstm que debe hacer el examinador?
,,Puede ser p v ve ni ente imponer otras restriccp+nes al' diseo de
la prueba As, en ~ n a * ~ r u edbea lectura se puede desear especificar que
el contenido no se facilite ms a personas d e uno de los dos sexos, y
que el contenido sea apropiado para lar minorias o grupos d e bajo nivel
socioeconmico.~nel qso d e una prueba d e rendimiento en ciencias, qiie
31
Coiiociinienio
* Comprensin
Aplicaciii
AnAlisis
Sntesis
Evaliiaci6ii
s o i u a u a ~ ! p a usol ap soso!xJe3
sopunua sol a3!j!iuapl
sP.U!3![JaU
SR[ 3P qRY133PRU! O
opan3apa 01 a? a p u a p p a
al aliu:, anlu!is!a
I<I.:I
~ i ; . ,';,
,;
t i
"
.,,,,
1 ~ 1 1~ :
,:: ,,, t.
'
.i,.
* I : . I / > 1 i i 1 1 /:iI>~.li..;-..
.:
..
.,
..,
m
,
,
..$.
Eni'crmedadcs
n o conia~ioiras,20%
(1.
Niincrci
dc iicrns
--
'
B. Erif'ermcdades
ccin~agiosas,40%
a criterio, para evaluar la maestra de un dominio especifico, la caracicristica clave del plan detallado dehe especificar muy claramente el tloininio que
se va a estudiar. la especificacitin dehe indicar 1) la forma del estimulo quc se
presenta a los sujetos, 2) la forma de respuesta que se va a solicitar, y 3) el
estrldar (inevitahlemente arbitrario) qiie se usar para reprcsciitar I;i miles.
tra satisfactoria.
Por ejernplo, se puede especificar: "Cuaiido sc prescrita una niiicsirn de
'LO multiplicaciones con el li)rmato ri x b
?, el sujcto escri1)c I;i rvspticsta
correcta a cuando menos !8", "I);itlos 4 prratiis sin puiituacin. c;id;i uno
compuesto d e 5 frases simples, y dadas las instruccioncs para m a i n r cualquier puntuacim necesaria, pone puntos al final de 16 o ms oraciones".
El plan debe indicar cmo se cstal)lcce el mucstreo dcl dominio. lo niis.
ino que cualquier reszriccin adicional y de limiiacihn del doiiiinio. Por cjcm.
pio, en el caso d e Ir multiplicaciiin, se puedc especificar que "cada u n o de
los 10 digitos aparezca el mismo nmero de veces". En el segundo ejemplo,
se puede especificar que "la lorigitud dc la frase no exceda de 10 palabras,
y quc el vocabulario se limite a las Y000 palahras ms comunes en la lengua
de que sc trate. El propi)sito de dicha cspecificacii)n adicional es: 1 ) hacer
:S:
.o
"
c..
; ,
.'
,O;
'
>
'
a',
' V I
"
'
, ,:L.
.\
4,.
lf>
>.,
,8.
,!$,
l.
8 :
. b C < I l ! ,,,
,;,;!S
,,
'
. * ,
1,,,;*
l . . .
,
.
. kl,:-u!,, -
, ,..!
.;,f{;\?\,
.,
,S,-.
..
; l : y ) ! \
!; q
:y!.31:
c.
,:
,,:
',
#a,141[
.;.,la
.:
especfica de ella, como criterio para juzgar el nuevo tem. Sin embargo, debido a que el sistema de puntuaciin que se usa en dichas pruebas, rara vez
est. al alcance del investigador, por lo general se debe usar la puntuacin
total como criterio para el conjunto de tems de la forma de ensayo. Aun
cuando pueda haber unos tems deficientes, que disminuyan la precisih del
bloque de ensayo como medida del atributo latente, este efecto es general.
mente pequeiio, y la piintuaci6n total proporciona un criterio razonablemente
confiable.
PLANEs PARA ANALIZAR Y USAR LA INFORMACI~N
DEL ENSAYO
Una vez tomadas !as decisior;es sobre las muestras que se van a probar, debe
formularse un plan para el anlisis y el uso de los resultados del ensayo.
iCules anlisis estadisticos deben aplicarse? QuC uso se har6 de los resul.
tados estadsticos? Que significado tienen los resultados en relacin con
el contenido y la cobertura representativos del dominio que se va a evaluar
cor. la prueba?
El interbs se centra ahora (como se expone con tlciallc cn el capiiilo
4) sobre la dificultad del tem y su validez para diferenciar a quiencs califi
quen alto de quieries califiquen ms bajo en el atributo latente, como se de.
fine basndose en el criterio de calificacin usado para rcpresent;ir csc
atributo. Tambin puede ser de inters, en ciertas pruebas de habilidad, en.
contrar cuntos sujetos seleccionaron todas las respuestas equivocadas, y as
como en qu proporcin eligieron cada una de las mismas, aquellos sujetos
menos capaces. Esva ltima informacin es til, principalmente si quien cla.
bora la prueha se propone revisar el tem con objeto de mejorar su cfectivi.
dad. Las opiniones difieren acerca de cunto beneficio se obtiene al tratar
de salvar un tem mal redactado. Algunos elaboradores consideran que la
energa se invierte mejor al escribir nuevos items, en lugar dc iraiar tlc rc.
forzar los dbiles. No obstante, si se emprende tal operacin de rescate, la in
formacin sobre el funcionamiento de cada una de las elecciones errbncas
(suponiendo'un tem de eleccin mltiple) resulta de, mucha utilidad.
Deben eliminarse los tems que no 3on tiles, para diferenciar entre los
examinados mas capaces y los nienbs, especialmente aquellos que muestran
una discrimiriacin inversa. Merece dar cierta atencin a la seleccin de items
que discriininan en forma tan marcada como sea posible, pero por lo general, el principal uso de los indices de discriminacin, es excluir los tems
defrctuosos. Con el criterio de calificaci6n se puede establecer un nivel mninio de correlacin por debajo del cual se rechazarn los tems. Este mni.
mo tiende a descender para grupos homogneos que, segn se espera, tierieii
poca variacin en el atributo latentr y tambin en el caso de tems muy diversos, con un solo factor comiin, no predominante. Por el contrario, el ni-
PLANUCI~N
DE U E L
iI
42
~ ~ ~ O DE
~ CPRUEBAS
I ~ N
II
ie,
II
>
,/{
' :, ,
.!' :
. ! ,
,.!
,.
:,
.:,i,i
.;
t !
.,, .
t . .
::
,o.
;.
..! * .
. .
m * ?
..
...
. , i
.,,,,.
<
1>
i . ;
';.">.
43
.
,
44
1I