Una Decada

U
MTRO. ANDRS EDUARDO SNCHEZ MOGUEL

Director de Pruebas y Medicin
LIC. RAQUEL AHUJA SNCHEZ

Directora de Evaluacin de Escuelas
LIC. MARA ANTONIETA DAZ GUTIRREZ

Directora de Proyectos Internacionales y Especiales
MTRA. MAGDALENA DEL PILAR GONZLEZ MARTNEZ

Directora de Relaciones Nacionales y Logstica
MTRA. REBECA REYNOSO ANGULO

Directora de Comunicacin y Difusin
ING. ENZO MOLINO RAVETTO

Director de Informtica
LIC. JAVIER DE JESS NOYOLA DEL RO

Director de Administracin y Finanzas
LIC. CSAR JAVIER GMEZ TREVIO
i n e e :
Director de Asuntos Jurdicos
2 0 0 2 - 2 0 1 2
Director de Indicadores Educativos
e v a l u a c i n
DR. HCTOR VIRGILIO ROBLES VSQUEZ
d e
Directora General Adjunta
d c a d a
DRA. ANNETTE SANTOS DEL REAL
camisa rustica.indd 1
El Informe 2012, INEE: una dcada de evaluacin,

es una obra colectiva dedicada a celebrar los primeros diez aos de vida del Instituto Nacional
para la Evaluacin de la Educacin. En sus pginas
recoge reflexiones tanto de los logros alcanzados
como de los desafos que enfrenta y el significado
de sus aportaciones a la sociedad mexicana.
Las voces que aqu confluyen son de muchos
de los que colaboraron en la fundacin del INEE y de
otros que le han impreso dinamismo y vitalidad a
su funcionamiento, dejando constancia de la afortunada convergencia de actores e instituciones
que en su creacin supieron dar buen cauce a
las necesidades de evaluacin educativa. Tambin
es una rendicin de cuentas en la cual no slo
se muestran avances, sino se reconoce que cualquier accin emprendida para beneficiar a la sociedad es susceptible de mejora.
Para el INEE, festejar una dcada de evaluacin
es una esplndida ocasin para pensar en lo que
se ha hecho y se debe hacer, a fin de proveer al
sistema educativo de informacin ms pertinente
y oportuna, y con ello contribuir al cabal cumplimiento del derecho de todos los nios y jvenes
a una educacin de buena calidad.
u n a
Directora General
2002-2012
DIRECTORIO
DRA. MARGARITA ZORRILLA FIERRO
inee
Pantone 8003C
7/6/12 1:50 PM
inee
A
2002-2012
inee
A
2002-2012
INEE: UNA DCADA DE EVALUACIN
Primera edicin, 2012

ISBN:
INSTITUTO NACIONAL PARA LA
EVALUACIN DE LA EDUCACIN
Jos Ma. Velasco 101, Col. San Jos Insurgentes,

Delegacin Benito Jurez, C.P. 03900, Mxico, D.F.
Coordinacin general
Alejandra Delgado Santovea

Annette Santos del Real
Rebeca Reynoso Angulo
Coordinacin editorial
Mara Norma Ordua Chvez

Diseo grfico y composicin electrnica
Publicaciones corporativas
Corrector de pruebas
Juan Carlos Rosas Ramrez

Fotografa
Archivo Iconogrfico inee

Archivo Iconogrfico dgme/sep, fotografas de Ral Barajas
Archivo Iconogrfico de la Direccin de Comunicacin Social del iea
Comunicacin Social de la Subsecretara de Educacin Bsica, sep
Comunicacin Social de la Presidencia de la Repblica
Ilustraciones
Tomadas de los Suplementos Este pas (s.f.)

El estado que guardan nuestras escuelas
Cuatro aos del inee. Qu hemos aprendido?
Los estudiantes, las escuelas y su entorno
El contenido, la presentacin, as como la disposicin en conjunto y de cada

pgina de esta obra son propiedad del editor. Se autoriza su reproduccin parcial
o total por cualquier sistema mecnico o electrnico para nes no comerciales
y citando la fuente.
Consulte el Catlogo de publicaciones en lnea: www.inee.edu.mx
Impreso y hecho en Mxico. Distribucin gratuita. Prohibida su venta.
ndice
9 Prlogo
10 Introduccin
Captulo 1
Captulo 2
Captulo 3
16 El proyecto del inee

y sus primeros aos
30 Experiencias, aportaciones
y aprendizajes en la
construccin de sistemas
de indicadores educativos
para Mxico
50 La evaluacin de resultados
nacionales de aprendizaje
Felipe Martnez Rizo
24 El inee, a diez aos

de su creacin
Hctor Virgilio Robles Vsquez
36 En atencin a los diez aos

de trabajo del inee
Rafael Daz Garca
Teresa Bracho Gonzlez
27 Iniciamos nuestras actividades

con el pie derecho
Carlos Muoz Izquierdo
55 El anlisis curricular y los Excale

de Ciencias naturales
Noem Garca Garca
Reyes Tamez Guerra
26 Con los primeros

diez aos del inee
Andrs Snchez Moguel
37 Colaboracin del inee

en el desarrollo
de competencias
para la evaluacin
Jos Luis Veloz Garca
38 Desafos del inee

en el desarrollo de
indicadores educativos
56 Los retos que enfrent el inee

para evaluar el logro educativo
del Sistema Educativo Nacional
Eduardo Backhoff Escudero
60 Usos pedaggicos
de las pruebas Excale
Jos Francisco Soares
62 Evaluaciones de logro
comparables en el tiempo
Arturo de la Orden Hoz
Daniel scar Taccari Gilli
41 La evaluacin para todos

David Caldern Martn del Campo
42 El inee y la definicin del rezago

educativo en la medicin oficial
de pobreza en Mxico
Ricardo Aparicio Jimnez
44 La importancia del trabajo

conjunto del inee y la Direccin
General de Planeacin de la sep
Andrs Ortiz Brizuela
45 La contribucin del inee

al desarrollo de un sistema
de indicadores para apoyar
la mejora de la calidad
de la educacin bsica y media
superior en Mxico
Leticia Hernndez Rodrguez
46 El inee en el panorama
iberoamericano: perspectivas
para la prxima dcada
Alejandro Tiana Ferrer
65 Los resultados
de las evaluaciones
del inee como un reflejo del
funcionamiento del sistema
educativo mexicano
Celia Daz Argero
66 Adaptacin lingstica
y cultural de pruebas
de logro acadmico
Guillermo Solano-Flores
69 Mi experiencia en los comits

de pruebas Excale
Gabriel Ojeda Vzquez
ndice
Captulo 4
72 La participacin de Mxico
en pruebas internacionales
Mara Antonieta Daz Gutirrez
79 Quin necesita al inee?

Agustn Tristn Lpez
80 Mxico sin pisa

y Mxico con pisa
Captulo 5
94 La evaluacin de los recursos

y procesos escolares
Raquel Ahuja Snchez
97 Colaboracin entre evaluadores

y tomadores de decisiones para
el diseo y desarrollo de polticas
educativas ms pertinentes
Eva Moreno Snchez
Captulo 6
112 El vnculo con las reas

Estatales de Evaluacin
y el proceso de recoleccin
de informacin
Pilar Gonzlez Martnez
116 El inee y las reas

Estatales de Evaluacin
Mara Guadalupe Beltrn Medina
Rafael Vidal Uribe
83 Colaboracin en la codificacin
de pisa
98 El estudio de las condiciones

de la oferta educativa
Guadalupe Ruiz Cullar
Rosa Elena Patn Lpez
84 La aportacin del inee

al gip y a la evaluacin
101 Apoyando a la formacin

de los equipos tcnicos
Leonor Cariola Huerta
Francisco Ernesto Reyes Jimnez
Jos Felipe Martnez Fernndez
Enrique Roca Cobo
86 Implicaciones y desafos
de la participacin del inee
en pruebas y estudios
internacionales
118 La aplicacin de
instrumentos de evaluacin
y sus procesos asociados:
en qu estamos y para
dnde vamos?
102 La importancia de la evaluacin

de los recursos y procesos
escolares para la planeacin
y el mejoramiento de la calidad
del sistema educativo
Benilde Garca Cabrero
120 Contribuciones del inee

al proceso de levantamiento
de datos
Juan Carlos Camacho Gmez
124 Promover un mayor uso de los

resultados de las evaluaciones
Ana Isabel Bravo Fuerte
88 El desarrollo e impacto de pisa

Andreas Schleicher
108 La revolucin de la evaluacin

Gilberto Guevara Niebla
125 Experiencia en los procesos

de levantamiento de
datos del inee
Mara del Carmen Snchez Espinosa
Captulo 7
Captulo 8
128 La difusin de resultados:

un desafo de la evaluacin
educativa
156 Qu sigue? El inee: entre

lo instituido y lo instituyente
Margarita Zorrilla Fierro
Annette Santos y Alejandra Delgado
134 La experiencia del inee

en la difusin de resultados
para docentes
Pedro Ravela Casamayou
137 Los mape de geometra y

decimales: un granito de arena
Silvia Garca Pea
164 Estndares ticos

en la evaluacin educativa.
Papel y retos del inee
Manuel Jorge Gonzlez-Montesinos
y Jess Miguel Jornet Meli
166 El compromiso del inee

con la equidad educativa
Sylvia Schmelkes del Valle
138 Uso y diseminacin

de la informacin
Logros y retos del inee
168 Contribucin del inee

al desarrollo de la educacin
en Mxico
Pedro Flores Crespo
Jos ngel Pescador Osuna
141 A desevaluar!
Manuel Gil Antn
142 Aportes del inee a las polticas

educativas para disminuir
la vulnerabilidad a la exclusin
educativa
Dalila Lpez Salmorn
146 Hacia un mejor uso

de la evaluacin educativa en
Mxico: no basta saber dnde
est el tesoro...
Alejandro Mrquez Jimnez
148 El inee y la investigacin

Felipe Tirado Segura
152 Qu se quiere saber y cmo

se piensa usar la informacin?
Santiago Cueto Caballero
172 ndice de autores
Prlogo
den vida a este Sistema y que hagan del Instituto una

autoridad de evaluacin educativa preponderante.
El dcimo aniversario y la autonoma obtenida invi
tan a pensar en el futuro del Instituto, ya que adquiere
mayores retos y responsabilidades. El inee ha logrado
consolidarse como referente en evaluacin educativa,
ahora es importante potencializar su protagonismo.
Nuestro pas es una repblica federal en donde
el fenmeno educativo ocurre de diversas maneras;
por lo tanto, el Instituto debe continuar con su traba
jo para que las evaluaciones e indicadores educativos
respondan a la pluralidad social del pas. El espritu fe
deralista debe prevalecer en sus acciones futuras; su
mayor libertad demanda reforzar vnculos con los es
tados a fin disear instrumentos y metodologas que
se adapten a los contextos culturales de millones de
mexicanos. En tal esfuerzo, las autoridades del inee
estarn acompaadas y respaldadas por la sep.
En el presente contexto, la articulacin curricular de
la educacin bsica (Acuerdo Secretarial 592) demanda
a las autoridades educativas federal, estatales y al pro
pio inee, perfeccionar sus mecanismos e instrumentos
de evaluacin para retroalimentar al sen. A partir de
los resultados obtenidos y con el anlisis de diversos
indicadores, podremos reorientar y/o reforzar polticas
para la mejora de la educacin. Adems el inee, junto
con otras instituciones, habr de dedicar mayores es
fuerzos para la evaluacin de los estudiantes del nivel
medio superior. Todo esto para hacer de la evaluacin
un autntico instrumento para la mejora educativa.
Finalmente, el inee debe verse a s mismo como
una institucin autnoma con altsima responsabi
lidad para orientar la evaluacin de la educacin y
difundir sus hallazgos. Es necesario que estreche lazos
con las entidades federativas, maestros, instituciones
nacionales y extranjeras, y con los principales toma
dores de decisiones, sin que ello suponga perder de
vista a la comunidad escolar. Esta vinculacin activa
consolidar el peso del Instituto en la definicin de
la poltica educativa. As lograremos un mayor im
pacto y trascendencia de la evaluacin educativa, una
sociedad mejor informada sobre el estado que guar
da el servicio educativo provisto por el Estado y los
particulares, e instrumentos tiles para orientar las
acciones de mejora educativa.
inee: una dcada de evaluacin
a historia reciente del Sistema Educativo Nacio

nal tiene como uno de sus protagonistas ms
emblemticos al Instituto Nacional para la Eva
luacin de la Educacin (inee). Creado por Decreto Pre
sidencial el 8 de agosto de 2002, el Instituto represent
un parteaguas en la manera de pensar, analizar y abordar
el fenmeno educativo. Las reformas de los aos no
venta otorgaron un peso importante al aseguramiento
de la calidad y al diseo de instrumentos de evalua
cin para tal fin. Tuvieron que pasar diez aos desde
la firma del Acuerdo Nacional para la Modernizacin
de la Educacin Bsica (1992) para que fuese creada
la institucin que hoy celebra su dcimo aniversario.
Las aportaciones del inee durante estos aos son
evidentes, particularmente en la calidad de sus inves
tigaciones, instrumentos y publicaciones. La Secretara
de Educacin Pblica (sep) cont as con un aliado con
el cual ha trabajado de manera conjunta a fin de forta
lecer la evaluacin educativa. Destaco el compromiso
y vocacin del Instituto a lo largo de sta su prime
ra dcada de existencia, que ha permitido contar con
herramientas e instrumentos tcnicos para ampliar
nuestra comprensin de las variables que interactan
en el hecho educativo. Servidores pblicos de la sep,
autoridades estatales, as como agentes privados, ven
en el inee una institucin para construir y perfeccionar
el Sistema Educativo Nacional (sen).
Celebrar la labor del Instituto es reconocer
a quienes proveyeron los cimientos y disearon
su estructura, as como a aquellos que han fijado su
mirada en el crecimiento continuo de la institucin.
El 15 de mayo del ao en curso el inee celebr una
nueva etapa en su breve y contundente historia;
junto con la conmemoracin del Da del Maestro,
se reform su Decreto de Creacin. Este hecho lo
defini como un organismo pblico, descentralizado
y no sectorizado a la sep, con autonoma tcnica, de
operacin y de decisin. Bajo este nuevo esquema,
el Instituto contar con rganos tcnicos externos
que apoyarn a sus reas internas en la ejecucin
de las funciones sustantivas y en el acompaamiento
consultivo de los representantes de los principales
actores evaluativos.
La reciente modificacin es un paso importante en
la conformacin de un Sistema Nacional de Evaluacin
de la Educacin (snee) independiente de cualquier in
ters poltico, gremial, partidista o econmico. El inee
es ahora el responsable de consolidar su lugar en el
snee, a fin de emplazar las modificaciones jurdicas que
Francisco Ciscomani Freaner

Subsecretario de Educacin Bsica, sep.
9
Introduccin
resentar el Informe 2012 del Instituto Nacional

para la Evaluacin de la Educacin (inee) es una
gran responsabilidad y un considerable desafo
porque el Instituto cumple diez aos de existencia y su
conmemoracin permite reflexionar acerca de quines
somos, de dnde venimos y tambin, a dnde vamos.
El inee se cre por Decreto presidencial el 8 de
agosto de 2002 y en l se defini el objeto o tarea cen
tral de la nueva institucin: ofrecer a las autoridades
educativas, as como al sector privado, las herramien
tas idneas para hacer la evaluacin de los diferentes
elementos que integran sus co
rrespondientes sistemas educa
tivos. Adems, se precisaba que
el Instituto se hara cargo de
colaborar con la Secretara de
Educacin Pblica (sep) en la
evaluacin del Sistema Educa
tivo Nacional (sen) y a la vez
ofrecer lineamientos para la
evaluacin que realizaran las
autoridades educativas locales
(estados, Distrito Federal y mu
nicipios). Al inee le correspon
dera desarrollar un sistema
de indicadores que permitiera
evaluar la calidad del sen; apo
yar la realizacin de las evalua
ciones nacionales del logro de
aprendizaje de los alumnos; de
sarrollar modelos para la eva
luacin de las escuelas; impulsar
la cultura de la evaluacin; difundir los resultados de las
evaluaciones bajo su responsabilidad y coordinar la
participacin de Mxico en los proyectos internacio
nales de evaluacin.
Estos planteamientos generales se precisaron tanto
en el primer Plan Maestro de Desarrollo (2004-2012),
como en el segundo (2007-2014). As, la misin del Insti
tuto se expres en los siguientes trminos: El Instituto
Nacional para la Evaluacin de la Educacin contribuir
al mejoramiento de la educacin en Mxico a travs de
la realizacin de evaluaciones integrales de la calidad del
sistema educativo y de los factores que la determinan,
as como de la difusin transparente y oportuna de sus
resultados para apoyar la toma de decisiones, la mejora
pedaggica en la escuelas y la rendicin de cuentas.
La evaluacin de la educacin no es una tarea ex
clusiva del inee, sino tambin de otras instancias del
10
nivel federal y del estatal; por ello, desde su creacin

se pens que la misin del Instituto fuera tambin la
promocin de polticas y mecanismos de coordinacin
y articulacin de los distintos esfuerzos de evaluacin.
A diez aos de la creacin del Instituto, el licencia
do Felipe Caldern Hinojosa, Presidente de los Estados
Unidos Mexicanos, firm el 15 de mayo la reforma al
Decreto de creacin por el cual se define al inee como
un organismo pblico, descentralizado y no sectorizado,
con autonoma tcnica, de operacin y de decisin. A
travs de esta reforma, el Instituto establece una nueva
relacin con la sep, que implicar
mayor autonoma, una estructu
ra organizacional ms fortaleci
da y nuevas funciones.
La historia del inee no se ago
ta en su marco jurdico y norma
tivo, es una historia de personas
que construyeron expectativas,
realizaron propuestas, enfrenta
ron dificultades y que tuvieron
sueos que poco a poco se hi
cieron realidad.
El inee es una organizacin
que est viva, y esto significa
pensarla as, como una institu
cin en constante movimiento,
que a lo largo de estos diez
aos ha tenido un proceso de
crecimiento y maduracin que
no ha sido lineal; por el con
trario, quienes han sido y son
parte de su historia han tenido la capacidad de actuar
en el marco de lo instituido, es decir, en ese siste
ma de normas y valores que le dan sentido, pero al
mismo tiempo han sido portadores de la innovacin,
el cambio y la renovacin que se refiere a un siste
ma instituyente. De esta manera, la convivencia de
lo instituido con lo instituyente ha sido un proceso que lo
oxigena y le da vida.
En congruencia con lo anterior, el Informe 2012 que
hoy entrega el inee a la sociedad tiene el propsito de
hacer un recuento de lo hecho pero, sobre todo, un
balance de sus logros, aportaciones y desafos, as como
una visin prospectiva de su desarrollo.
Este informe se construy de manera colectiva, con
las aportaciones de algunas de las personas que son
parte esencial de la historia del Instituto, actores que
desde diversos escenarios colaboraron en su nacimien
En 2005, la Secretara de Hacienda

y Crdito Pblico autoriz una estructura y plantilla
171 colaboradores para el inee;

actualmente cuenta con 144.
ocupacional de
Las pruebas que conocemos como Excale (Ex

menes de la Calidad y el Logro Educativos) significan
una de las aportaciones ms relevantes del Instituto. El
texto principal es de Andrs Snchez, director del rea
de Pruebas y Medicin. Enseguida se presentan siete
textos escritos por distintos especialistas nacionales e
internacionales; destacan los testimonios de colabo
radores del inee en distintas fases de la construccin
de las pruebas mencionadas, as como dos textos que
abordan cuestiones centrales de las pruebas a gran
escala: la perspectiva sobre los usos pedaggicos y la
adaptacin cultural de la pruebas de logro.
El tercer tema de esta segunda parte se refiere a
la participacin de Mxico en proyectos internacio
nales de evaluacin. El texto central es de la autora de
Mara Antonieta Daz, directora del rea de Proyectos
Internacionales, adems de otros textos, cuyos autores
son especialistas destacados en el mbito internacional,
que tratan asuntos como la participacin de Mxico en
Congreso
Internacional
sobre educacin
secundaria, 2012.
to, desarrollo y consolidacin; por ello, encontrarn

que sus aportaciones representan distintas miradas.
Estoy convencida de que el inee merece ser conocido y
reconocido a travs de todas ellas y qu mejor oportu
nidad que el dcimo aniversario para hacerlo.
El Informe se estructura en tres grandes aparta
dos, cada uno de ellos incluyen textos principales y
complementarios.
El primer apartado tiene como tema central el
proyecto y los rasgos que caracterizaron los prime
ros aos de vida del Instituto. El texto principal es de
la autora de Felipe Martnez Rizo, quien fue respon
sable del diseo inicial de la institucin y su primer
director general. La contribucin de Felipe se acom
paa de tres textos breves escritos por quien fuera
en esos aos Secretario de Educacin Pblica y por
los dos primeros presidentes del
Consejo Tcnico.
Con la finalidad de responder a
la pregunta sobre qu ha logrado
el inee en estos diez aos y hacia
dnde dirigir su evolucin, en la se
gunda parte se desarrollan algunos
temas que significan el corazn de
la actividad y trabajo del Instituto,
que son: el diseo y funcionamiento
de un sistema de indicadores edu
cativos; las pruebas Excale; la par
ticipacin de Mxico en pruebas
internacionales; el estudio sobre
las condiciones de la oferta esco
lar; los procesos de recoleccin de
informacin y, por ltimo, la difu
sin de la informacin generada y
la promocin de su utilizacin por
distintos actores educativos.
Diversos autores contribuyen con sus puntos de
vista acerca de las experiencias y aprendizajes relacio
nados con la construccin de sistemas de indicadores
educativos para Mxico, as como con los desafos que
tiene el Instituto en esta materia. El texto principal es
de la autora de Hctor Robles, director del rea de In
dicadores Educativos del inee. Asimismo, se cuenta con
las participaciones de dos entidades federativas: el Con
sejo Nacional de Evaluacin de la Poltica de Desarrollo
Social (Coneval) y el Instituto Nacional de Geografa y
Estadstica (Inegi), al igual que de uno de los especialis
tas del Consejo Tcnico del inee y que actualmente es
investigador de la Comisin Econmica para Amrica
Latina y El Caribe (Cepal). Tambin colaboran Mexica
nos Primero, A.C., un funcionario de la Secretara de
Educacin Pblica (sep) y se cierra este apartado con el
texto de un especialista de la Organizacin de Estados
Iberoamericanos (oei) sobre la contribucin del Institu
to en Iberoamrica.
11
Introduccin
el Programa Internacional de Evaluacin de Estudian

tes (pisa, por sus siglas en ingls), la conformacin del
Grupo Iberoamericano de pisa (gip) y la participacin
del inee, las implicaciones y desafos de la colabora
cin del Instituto en pruebas y estudios internaciona
les, los cambios en la conceptualizacin y desarrollo de
pisa y las implicaciones del uso de sus resultados para
los pases participantes. Se incluye tambin un texto
testimonial sobre la colaboracin en el proceso de
adaptacin de las pruebas internacionales.
El cuarto tema de esta segunda parte trata sobre
el estudio de las condiciones de la oferta escolar. El
texto central es de Raquel Ahuja, directora del rea de
Evaluacin de Escuelas. Adems, se presentan cuatro
textos en los que se profundiza sobre el significado de
la evaluacin de las condiciones de la oferta educati
va, as como las implicaciones de esta evaluacin vista
como un insumo para el mejoramiento de la calidad
de la educacin; se habla de la colaboracin entre eva
luadores y tomadores de decisiones para el diseo y
desarrollo de polticas educativas ms pertinentes y de
la formacin de personal tcnico en la creacin de es
trategias de evaluacin ms eficaces.
Los procesos de recoleccin de informacin es el
quinto tema de esta seccin. El texto principal lo escri
be Pilar Gonzlez, responsable del rea de Relaciones
Nacionales y Logstica del Instituto. Otros cinco textos
tratan de asuntos como los estndares de calidad en
los levantamientos de datos, la importancia de la parti
cipacin de las entidades federativas y del Distrito Fe
deral en el proceso de recoleccin de informacin, el
futuro de los procesos de aplicacin de instrumentos
de evaluacin a gran escala y un par de testimonios de
personas que han participado en distintas funciones en
el levantamiento de datos.
Cierra esta segunda parte con el tema de la difu
sin de la informacin generada por el Instituto y la
promocin para su uso. El texto principal es escrito
por Annette Santos y Alejandra Delgado, titular y co
laboradora, respectivamente, de la Direccin General
Adjunta del inee. Adems, aparecen diversos textos
sobre la difusin de resultados para docentes, el uso
de la informacin para el diseo de polticas pblicas
y programas educativos, los resultados de la evalua
cin para la investigacin, el uso de resultados en el
desarrollo de materiales para la prctica educativa, la
evaluacin en la mejora de la calidad educativa, la in
formacin como generadora de conocimiento sobre
la educacin, as como la contribucin del inee en la
cultura de la evaluacin.
12
Por ltimo, en el tercer apartado se renen re

flexiones sobre la nueva misin y arreglo institucional,
as como los desafos que en conjunto se plantean para
su futuro. Se abordan temas especficos, como la necesi
dad de establecer un cdigo de tica para las evaluacio
nes educativas, el compromiso del inee con la equidad
educativa y una visin sobre su contribucin al desarro
llo de la educacin en Mxico.
El acontecer de la institucin ha transcurrido en
un tiempo y un espacio que son nicos e irrepetibles.
Fueron las personas que le dieron origen, junto con
aqullas que se han ido incorporando, quienes han
configurado el ethos institucional, es decir, una iden
tidad sustentada en valores como el respeto, la ho
nestidad, la austeridad, la pertinencia, la inclusin y la
equidad. Asimismo, un ethos que se fundamenta en los
criterios tcnicos de objetividad, validez, confiabilidad
y replicabilidad. Estos rasgos se suman al logos confor
mado por los argumentos tcnicos que fundamentan
los resultados de los estudios que realiza y difunde
el inee, as como al pathos institucional que refiere a la
pasin con la que los equipos de trabajo realizan sus
tareas, buscando siempre que nuestro quehacer con
tribuya a mejorar la calidad de la educacin de los
nios y jvenes de Mxico.
La historia de la institucin no est escrita de una
vez y para siempre, se construye en el quehacer coti
diano de decenas de personas que la hacen posible.
Como institucin tcnica, el inee tiene la responsabili
dad de reinventar sus formas de trabajo para asegurar
su calidad y pertinencia.
Por hoy hacemos un corte en nuestra labor institu
cional para compartir con la sociedad este Informe, es
un compromiso que estamos obligados a cumplir pero,
al mismo tiempo, es una gran alegra porque represen
ta el esfuerzo de un trabajo conjunto que se cons
truy dentro y fuera de los muros del inee. En estos
diez aos hemos integrado un excelente equipo inter
no y tambin hemos contado con la valiosa colabora
cin de otras instancias pblicas, de universidades e
institutos de investigacin, as como de organismos so
ciales. Se han tejido importantes alianzas con diversos
actores, quienes han contribuido a que el Instituto sea
reconocido por su posicionamiento social de credibili
dad, respeto y solidez.

Mxico, d.f. , mayo de 2012.
Archivo Iconogrfico de la Direccin de Comunicacin Social del iea.
Captulo
El proyecto del inee

y sus primeros aos
Felipe Martnez Rizo
a evaluacin del sistema educativo en particular en educacin bsica ya exista en Mxico antes del surgimiento del
Instituto Nacional para la Evaluacin de la Educacin (inee).
Desde la dcada de los setenta, la Secretara de Educacin
Pblica (sep) aplicaba pruebas de rendimiento; su nmero aument en 1994 con las pruebas del Factor de Aprovechamiento Escolar de Carrera Magisterial y posteriormente con las
de estndares nacionales en 1998. El nacimiento del inee buscaba ser un avance cualitativo, por ello debe analizarse con
una perspectiva ms amplia, tomando en cuenta los cambios
sociales y polticos ocurridos a fines del siglo XX y en los
primeros aos del XXI.
Con el triunfo del Presidente Vicente Fox en julio del ao 2000, Mxico
vio por primera vez un cambio de partido gobernante por va electoral,
acompaado de una creciente demanda de participacin en la vida pblica
en especial de transparencia en el acceso a la informacin a la que res
pondieron medidas como la ciudadanizacin del Instituto Federal Electoral,
la aprobacin de la Ley de Transparencia y Acceso a la Informacin y la
creacin del Instituto Federal de Acceso a la Informacin. En educacin,
las tendencias autoritarias haban trado consigo que los resultados de eva
luaciones del rendimiento escolar, aplicadas desde los aos setenta... no se
difundieran ni se usaran para la rendicin de cuentas o para dar sustento
a las polticas educativas. Lo anterior favoreci el avance de ideas que de
tiempo atrs se manejaban en la comunidad de investigadores educativos,
algunos de los cuales formaron parte del equipo de transicin que prepar
el programa de gobierno del presidente electo.
El grupo que conform el rea de educacin de ese equipo acept
la sugerencia del autor de estas lneas en el sentido de proponer la crea
16
Primera sesin de la
Junta Directiva, 2002.
plena autonoma al organismo, pero no implicaba nego

ciaciones para alcanzar mayora en las cmaras, por lo
que el Presidente opt por esta va y expidi el Decreto
de creacin el 8 de agosto de 2002, lo que provoc di
versas reacciones: todas manifestaban que un organismo
as era necesario, pero algunas mostraban insatisfaccin
porque el nuevo Instituto no tuviera ms autonoma.
Las posturas crticas provenan de dos sectores: algu
nos legisladores vean la creacin del inee por decreto
como una invasin a su mbito de competencia, en tan
to que representantes del sector privado teman que, al
no ser completamente autnomo de la sep, se tradujera
en subordinacin y, por ende, en falta de transpa
rencia en la difusin de resultados, como la que haba
prevalecido. Sin embargo, el diseo de la estructura de
gobierno y la manera en que se puso en marcha el inee
le dieron, de hecho, mucha autonoma.
cin de un organismo tcnico que evaluara el sistema

educativo, hasta entonces a cargo exclusivamente de
la sep. La propuesta buscaba dar continuidad, en una
escala nacional, al trabajo de evaluacin comenzado
20 aos antes en el estado de Aguascalientes, donde
un grupo dirigido por el suscrito prepar un diagns
tico de la situacin educativa en la entidad. Ese diag
nstico fue pionero en su tipo en el pas, y se realiz
entre 1981 y 1982 a solicitud del delegado de la sep; en
1993, en el recin descentralizado sistema educativo,
conduje un segundo diagnstico, similar al anterior, a
solicitud del gobierno del mismo estado. En ambos
casos el trabajo incluy la sntesis de indicadores esta
dsticos, informacin sobre las escuelas y, especialmen
te, el diseo y la aplicacin de pruebas de rendimiento
para primaria y secundaria. Esos trabajos fueron los
antecedentes directos del proyecto al que se refieren
estas lneas.
La propuesta de crear el inee se relacionaba con
el proceso de democratizacin de la vida pblica, en
particular en lo relativo a transparencia. El Presidente
Vicente Fox lo hizo evidente con la expresin que co
menz a utilizar desde los primeros das de su gestin,
cuando empez a referirse al futuro organismo de eva
luacin como el ife educativo.
En diciembre de 2000, el titular de la sep me propu
so desarrollar un proyecto completo para crear el inee
a partir del anteproyecto del equipo de transicin. La
creacin del organismo se aplaz ms de un ao debido
a los cuestionamientos para elegir la mejor alternativa
legal, entre la que prefera la Comisin de Educacin del
Senado, mediante una ley, y la que propona la expe
dicin de un decreto presidencial. Esta ltima no dara
17
El proyecto del inee y sus primeros aos
La Junta Directiva, mximo rgano de gobierno

del inee, es presidida por el titular de la sep y est in
tegrada por 14 personas ms; siete funcionarios dos
subordinados del Secretario y siete representantes
de sectores no gubernamentales. Esta composicin
plural hace que las decisiones de la Junta impliquen un
amplio grado de consenso por parte de sus integran
tes y, a la vez, favorece su independencia, ya que ni el
titular de la sep ni el snte, o cualquier otra instancia,
tienen el control de las decisiones.
El Consejo Tcnico est formado por 16 especia
listas, mexicanos o no, reconocidos por su trabajo en
evaluacin o investigacin educativa, a quienes la Junta
Directiva del Instituto designa con base en sus mritos
personales. Los consejeros han sido estudiosos desta
cados, cuyo perfil asegura que el trabajo se apegue a
estndares de calidad, adems de ser garanta adicional
de independencia.
La forma de nombrar al primer director general
tambin contribuy a fortalecer la autonoma del inee:
el Presidente acept no hacer personalmente la de
signacin, sino encomendarla a la Junta Directiva, la
cual decidi hacerla mediante un concurso de mritos
a partir de una convocatoria pblica; as, sin interven
cin del Secretario de Educacin, la Junta design al
primer director y nombr a los 16 primeros conse
jeros tcnicos con un procedimiento similar, lo que
afianz su legitimidad.
El Instituto Nacional para la Evaluacin de la Educa
cin comenz a operar en julio de 2003. En ese momen
to el sistema educativo contaba
ya con muchas evaluaciones,
pero stas adolecan de limi
taciones tcnicas, ausencia de
difusin y falta de articulacin,
lo que el inee se propuso co
rregir. La misin del Instituto
se precis en el Plan Maestro
de Desarrollo, aprobado por
la Junta Directiva, que dice:
El inee contribuir al
mejoramiento de la educa
cin en Mxico a travs de
la realizacin de evaluacio
nes integrales de la calidad
del sistema educativo y
de los factores que la de
terminan, as como de la
difusin transparente y
oportuna de sus resulta
dos para apoyar la toma de decisiones, la mejora
pedaggica en las escuelas y la rendicin de cuentas.
El Plan Maestro precisa varios puntos en relacin
con esta misin:
Que se debern utilizar instrumentos y metodo
logas que permitan hacer mediciones vlidas y
18
confiables de la calidad del sistema educativo, que

se debern contrastar con referentes pertinentes
para la formulacin de juicios de valor mesurados
y contextualizados; que las evaluaciones particula
res debern integrarse en diagnsticos objetivos;
y que se deber poder comparar la situacin de
Mxico con otros pases, gracias a los proyectos
internacionales.
Que, adems de sus trabajos ordinarios, que se
rn verdaderas investigaciones evaluativas, el inee
deber llevar a cabo y promover otras investiga
ciones, en particular de tipo metodolgico y expli
cativo, y para explorar la manera en que se usan
los resultados.
Que los resultados se harn del conocimiento de
los actores educativos, con elementos para su an
lisis e interpretacin, para que sirvan para susten
tar acciones de mejora educativa y para desarrollar
la cultura de la evaluacin.
En consecuencia, el Plan Maestro defina tres lneas
para organizar el trabajo sustantivo del inee:
1. Evaluacin de la calidad del sistema educativo, in
cluyendo evaluacin de resultados de aprendizaje;
evaluacin de recursos y procesos; integracin de
elementos de contexto y construccin de indica
dores; y recoleccin y sistematizacin de datos.
2. Difusin de resultados de la evaluacin y fomento
de su uso para formular polticas, para mejorar la
gestin escolar y los procesos de enseanza y de
aprendizaje, para avanzar en el conocimiento so
bre la calidad de la educacin y para promover la
cultura de la evaluacin.
3. Investigacin y formacin de recursos humanos,
con las dos lneas correspondientes.
De 2003 a 2008 y hasta la fecha, las acciones del
inee han buscado hacer realidad estas ideas. A lo lar
go de la presente obra se encontrar amplia informa
cin sobre lo que se ha podido concretar hasta aho
ra. En las pginas siguientes se comentar, desde una
perspectiva personal, lo realizado durante el lapso en
que me correspondi la honrosa tarea de conducir
esos trabajos.
1. Evaluaciones nacionales e internacionales
En 2003, el inee se hizo cargo de las Pruebas de Es

tndares Nacionales, desarrolladas desde 1998 por la
sep. El Instituto recibi las pruebas aplicadas en ese
ao y las bases de datos de todas sus aplicaciones. El
anlisis de resultados puso en evidencia serias limita
ciones tcnicas, por lo que se decidi desarrollar nue
vos instrumentos, los Exmenes de la Calidad y el Lo
gro Educativos (Excale). Los primeros se efectuaron
en 2005 con una aplicacin especial de las pruebas
El inee ha realizado
28 convenios de colaboracin con
instituciones educativas como las universidades

Autnoma de Baja California, Autnoma de Aguascalientes,
Iberoamericana, de Sonora, Pedaggica Nacional
y la Pontificia Universidad Catlica de Chile.
cacin de Espaa. De la misma manera, desde 2003

asumi un papel activo en el Segundo Estudio Regional
Comparativo y Explicativo (serce) del llece.
Una buena medicin de los niveles de aprendizaje
implica que las pruebas se apliquen a muestras repre
sentativas. La falta de capacidad tcnica para el diseo
de muestras complejas hizo que
para la aplicacin de Excale, en
2005, el inee recurriera a un des
tacado especialista extranjero y a
tres expertos mexicanos. Con su
apoyo, el personal de la institucin
se capacit para que la muestra
utilizada en 2006 fuera calculada
internamente y con supervisin
de especialistas externos. La pre
cisin alcanzada en 2005 se man
tuvo con el nuevo diseo matricial,
y la representatividad por entidad se ampli a domi
nios muestrales de los que antes se tena solamente
representatividad nacional: las escuelas privadas y las
telesecundarias. En 2007, el trabajo de capacitacin en
muestreo continu, lo que hizo posible que en 2008 se
utilizara por primera vez una muestra con un nuevo di
seo, a cargo ntegramente del personal del Instituto, lo
cual permiti desagregar el estrato de escuelas urbanas
en funcin de su grado de marginalidad.
Mantener estndares de calidad en todas las enti
dades, escuelas y grupos, para que todos los partici
pantes tengan condiciones iguales, es difcil en un ex
tenso territorio con miles de comunidades dispersas,
y adems debe realizarse con el mayor cuidado para
asegurar que la informacin obtenida sea confiable. En
todos los casos las cifras de cobertura efectiva de las
escuelas y alumnos incluidos en las muestras alcanzaron
holgadamente los parmetros que establece pisa, que
considera como mnimos aceptables de cobertura efec
tiva 85% de escuelas y 80% de alumnos. En las aplicacio
nes del inee la cobertura de escuelas se ha situado siem
pre por encima de 95% y la de alumnos cerca de 90%.
En sntesis, puedo afirmar que entre 2003 y 2008,
el inee avanz sustancialmente en la calidad tcnica de
las evaluaciones de aprendizaje. Para valorar esto, hay
que tener en cuenta que las tcnicas de medicin y
anlisis complejo de datos avanzaron mucho en la se
de estndares del ao 2000, con lo que fue posible

emprender, por primera vez en el pas, el estudio de
las tendencias del nivel de aprendizaje de los alumnos
mexicanos, a partir de ese ao.
Para evaluar el sistema educativo y no a cada
alumno o escuela en lo individual basta aplicar prue
bas en ciertos grados, con intervalos amplios; por ello,
el inee estableci un ciclo de cuatro aos: un ao se
evala 3 de preescolar, otro 3 de primaria, uno ms
6 de primaria y luego 3 de secundaria. El diseo per
mite comparar resultados de diferentes aos, lo que
posibilita analizar tendencias. Otro rasgo distintivo de
Excale tiene que ver con su extensin y diseo: para
tener la mayor cobertura curricular posible, las prue
bas tienen un nmero grande de preguntas, con una
parte de respuesta construida o abierta, as es posible
evaluar reas que no incluyen las pruebas usuales, limi
tadas a la evaluacin de comprensin lectora y habili
dades matemticas.
El carcter muestral y la aplicacin cclica de slo
un grado cada ao minimiza la carga sobre las escue
las y permite aplicaciones bien controladas, gracias a las
cuales es posible obtener mediciones muy precisas del
rendimiento en los niveles deseados. Contrario a lo
que el sentido comn podra indicar, y de manera simi
lar a las mejores evaluaciones internacionales, el diseo
de Excale es el ms adecuado para cumplir con el pro
psito de ofrecer resultados sobre el sistema educativo
como tal y sobre sus grandes subsistemas.
En el plano internacional, Mxico particip en
el Tercer Estudio Internacional de Matemticas y
Ciencias (timss) en 1995, pero la sep no permiti
que los resultados del pas, que no eran satisfacto
rios, se incluyeran en el informe respectivo. Mxico
particip tambin en el Primer Estudio Regional del
Laboratorio Latinoamericano de Evaluacin de la
Calidad Educativa (llece) en 1997, pero no se pre
par un informe nacional al respecto. En el primer
ciclo de las pruebas pisa de la Organizacin para la
Cooperacin y el Desarrollo Econmicos (ocde) en
2000, la participacin de Mxico se limit a traducir
los instrumentos y aplicarlos a la muestra mnima.
Tampoco se hizo informe nacional.
A partir de 2003, cuando el inee asumi la respon
sabilidad de la participacin de Mxico en las evalua
ciones internacionales, comenz un cambio sustancial,
que hizo que esa participacin fuera cada vez ms ac
tiva e importante, como se apreciar en el apartado
correspondiente. En 2006, la seriedad de la participa
cin de Mxico en pisa hizo que el suscrito, que repre
sentaba al pas en el Consejo Directivo de pisa, pasara
a ser miembro del Grupo de Planeacin Estratgica de
dichas pruebas y, posteriormente, vicepresidente. Por
iniciativa propia se cre el Grupo Iberoamericano de
pisa , formado por Espaa, Portugal, Argentina, Brasil,
Chile, Colombia y Uruguay, adems de Mxico, cuyo
liderazgo asumi el inee junto con el Instituto de Edu
19
gunda mitad del siglo xx, pero en Mxico y otros pa

ses de Amrica Latina tardaron en extenderse, por lo
que haba pocos especialistas en estos temas. Algunos
puntos destacables en este sentido, cuya introduccin
en el campo educativo en Mxico es atribuible al tra
bajo del inee, incluyen:
El diseo matricial de las pruebas, que permite una
amplia cobertura curricular.
El uso de preguntas de respuesta abierta, en espe
cial para evaluar expresin escrita.
El desarrollo de pruebas de ejecucin para la eva
luacin de nios de preescolar.
El uso de metodologas rigurosas para el estableci
miento de niveles de desempeo.
La utilizacin de la tcnica de Valores Plausibles y
de la Teora de Respuesta al tem.
El uso de modelos lineales jerrquicos y de ecua
ciones estructurales para analizar resultados.
Los primeros anlisis de tendencias de los niveles
de aprendizaje.
2. Evaluacin de recursos y procesos de las escuelas
En evaluacin son importantes, los resultados pero

tambin los recursos, procesos y elementos del con
texto en el que se hallan insertos el sistema educativo
y las escuelas. Por ello, adems de elaborar pruebas, se
desarrollaron proyectos para evaluar otros elementos
del sistema educativo y as tener informacin sobre
otras facetas de la calidad educativa, tales como los
recursos humanos, materiales organizativos con que
cuentan las escuelas, los procesos escolares y de aula,
as como lo relativo a la supervisin y el apoyo tcnicopedaggico que se ofrece dentro de ellas.
El trabajo de la Direccin de Evaluacin de Escuelas
comenz con un proceso de aclaracin de su tarea es
pecfica: un punto de vista subrayaba la importancia de
hacer estudios intensivos que exploraran en profun
didad y pequea escala algunos recursos y procesos;
otro punto destacaba la necesidad de hacer estudios
20
con muestras suficientes de escuelas, para dar resulta

dos que se pudieran extrapolar al conjunto del sistema
educativo. Finalmente, se lleg a un consenso en el
sentido de que ambos tipos de estudio son necesarios:
los de gran escala tienen muestras con representativi
dad al menos nacional, para ofrecer descripciones de
la situacin del sistema educativo, y los de pequea
escala porque sirven para disear a su vez los de
gran escala, as como para profundizar en algunos as
pectos de los hallazgos de estos ltimos.
En 2005 y 2006 se llevaron a cabo cinco estudios
particulares y se defini un ciclo segn el cual se eva
luaran progresivamente los niveles de preescolar, pri
maria y secundaria, siguiendo de manera aproximada
el ciclo de las pruebas Excale y combinando estudios
en pequea y gran escala, denominados estudios de
las Condiciones de la oferta educativa (coe). En 2007
y 2008 inici el ciclo en el nivel de preescolar. Cabe
destacar que la calidad de estos trabajos se compara
decorosamente con reconocidos trabajos internacio
nales. En 2008, el inee particip por primera vez en
un estudio internacional sobre prcticas de evalua
cin de aprendizajes.
3. Integracin de elementos
y construccin de indicadores
Adems del aprendizaje de los alumnos, el concepto

de calidad del inee incluye aspectos como cobertura y
eficiencia terminal, suficiencia de recursos y eficiencia
de su uso; impacto en la vida adulta de los educandos,
y equidad de la distribucin de recursos y procesos,
para aproximarse a la igualdad de oportunidades. Los
resultados de pruebas y estudios de condiciones de la
oferta educativa producen algunos indicadores; otros
se pueden construir con las estadsticas educativas so
ciales. Por ello, el inee estableci un rea para el de
sarrollo de indicadores, cuyo trabajo se plasma en el
anuario Panorama Educativo de Mxico, que se ha publi
cado anualmente desde 2003.
Los primeros indicadores fueron los tradiciona
les de cobertura y escolaridad, pero desde el primer
anuario se manejaron conceptos ms precisos y cri
terios tcnicos ms rigurosos que los usuales, lo que
llev a estimaciones diferentes y ms exactas. Cada
ao se aadieron nuevos indicadores o versiones ms
precisas, lo que hizo que el nmero de pginas de las
entregas del anuario aumentara de manera conside
rable. Por eso en 2007 se decidi publicar en forma
impresa slo una parte del conjunto de datos produ
cido y se present el resto en soporte magntico.
La construccin de indicadores cumple criterios
tcnicos y prcticos que garantizan su calidad. La me
todologa del inee permite verificar que cada indicador
satisfaga cinco criterios tcnicos (confiabilidad, validez,
comparabilidad, sensibilidad y estabilidad temporal)
y cuatro prcticos (utilidad, relevancia, claridad y ac
tualidad). Para ello, el Instituto utiliza un proceso de

revisin por jueces que involucra a tcnicos y usuarios
que, en rondas sucesivas, revisan detalladamente di
chas cualidades hasta alcanzar indicadores slidamente
consensuados. La escasez de trabajos metodolgicos
rigurosos hace que el del Instituto sea una aportacin
valiosa al desarrollo del campo, el cual ha trado con
sigo un creciente reconocimiento, manifiesto en los
seminarios con participacin internacional organizados
por el rea, as como en la participacin de su personal
en actividades organizadas por otras instancias, como
el programa de indicadores de la ocde, el Instituto de
Estadsticas de la unesco, el Coneval, el Inegi y la sep.
En 2007 y 2008 el rea avanz en el desarrollo de
indicadores ms finos y complejos en relacin con la
medicin de la pobreza educativa, la supervisin, la ha
bitabilidad de las escuelas, la equidad y el cumplimien
to del derecho a la educacin. Se perfeccion la meto
dologa para el desarrollo de indicadores y se capacit
al personal en el manejo de software especializado y de
tcnicas estadsticas avanzadas para la construccin
de indicadores complejos.
4. Difusin de resultados de la evaluacin
4.1 Uso de la evaluacin para la formulacin

de polticas educativas
De 2003 a 2006 el inee present resultados de sus

evaluaciones al Presidente de la Repblica; a las co
misiones de educacin del Senado y la Cmara de
Diputados; al titular de la sep, a los funcionarios de la
Subsecretara de Educacin Bsica, a la Unidad de Pla
neacin y Evaluacin de Polticas Educativas, a la Admi
nistracin Federal de Servicios Educativos del Distrito
Federal, al Consejo Nacional de Fomento Educativo y
otras autoridades federales, as como al Consejo Na
cional de Autoridades Educativas y a los titulares de las
32 reas Estatales de Evaluacin.
4.2 Uso de la evaluacin para mejorar la gestin
escolar y los procesos de enseanza y aprendizaje
Los maestros son destinatarios importantes de los re

sultados de las evaluaciones. La difusin dirigida a ellos
1 929 796
visitas en nuestro portal electrnico.
es difcil, dado su nmero y la necesidad de traducir

a recomendaciones aplicables, en la prctica cotidiana,
los resultados. En 2005, el inee emprendi un esfuerzo
de difusin para maestros con pisa para docentes. La
evaluacin como oportunidad de aprendizaje fue una
obra de la que se distribuyeron 250 mil ejemplares y
se organizaron talleres para capacitar a los maestros
para su uso en el aula. El paso siguiente consisti en el
desarrollo de una herramienta informtica, el Explora
dor de Excale, que presenta los contenidos cubiertos
por esas pruebas, con informacin sobre su sentido; su
ubicacin en el plan de estudios; un ejemplo de las pre
guntas que se utilizan en las pruebas para evaluar cada
contenido; los resultados obtenidos por los alumnos
del pas sobre cada pregunta, de cada entidad y de cada
tipo de servicio educativo; as como elementos para su
interpretacin y para que los docentes puedan ampliar
sus conocimientos al respecto.
4.3 Uso de la evaluacin para avanzar
en el conocimiento de la calidad de la educacin
Para los investigadores se lanz la serie Cuadernos de

Investigacin y se organizaron mesas de anlisis. El inee
puso en su portal las bases de datos de sus evalua
ciones, incluyendo una con ms de 40 mil textos pro
ducidos por cerca de 14 mil alumnos en respuesta a
las preguntas abiertas de las pruebas Excale, para que
cualquier investigador pudiera usarlas.
4.4 Promocin de la cultura de la evaluacin
La evaluacin no tiene sentido en s misma; lo adquiere

si ayuda a mejorar. Para ello es necesario que los resul
tados sean conocidos, se entiendan bien y sustenten
acciones de mejora. Por tal motivo, no slo hay que
hacer buenas evaluaciones, tambin hay que difundir
los resultados. Si se compara la difusin en 2008 con la
situacin que prevaleca unos aos antes, el contraste
es claro: los resultados eran conocidos slo por algunas
autoridades y se ocultaban a la sociedad; prcticas hoy
impensables. Ese avance se debi en parte al inee, gra
cias a sus esfuerzos en cuatro aspectos.
En los ltimos cuatro aos hemos recibido
Para que la sociedad exija una buena educacin es

indispensable que tenga informacin oportuna y con
fiable sobre los resultados de las evaluaciones. Ade
ms, requiere desarrollar la capacidad de entender
los resultados y valorarlos objetiva y mesuradamente,
considerando el contexto social de las escuelas. Dicha
capacidad es elemento constitutivo de la cultura de la
evaluacin. Fomentar esa cultura es la tarea ms difcil
de la difusin, por las dimensiones del universo al que se
dirige (toda la poblacin del pas) y por la debilidad de
la cultura de evaluacin, de la cultura estadstica y de la
capacidad de pensamiento crtico de buena parte
de ese universo.
21
El ilce y las secretaras de Educacin Pblica y de Desarrollo

Social; el cide, Ceneval, Colmex y Cinvestav y las ong
Mexicanos Primero y Visin 2030, a.c. tambin han
colaborado con el inee.
Para atender esto se decidi organizar regularmen
te presentaciones especiales a las asociaciones de pa
dres de familia, al Consejo del Compromiso Social por
la Calidad de la Educacin y otros grupos de la sociedad
civil. Como intermediarios entre quienes producen in
formacin y la sociedad, los comunicadores profesiona
les son un destinatario importante del esfuerzo de difu
sin del inee, a quienes se les prest atencin especfica
desde 2003 mediante ruedas de prensa y boletines. De
especial inters fueron las actividades de capacitacin
dirigidas a los periodistas que tienen a su cargo la fuen
te de educacin. Deben mencionarse tambin las pu
blicaciones impresas y el portal del inee en la web, que
en 2004 fue visitado en unas 25 mil ocasiones, y entre
septiembre de 2007 y agosto de 2008 alcanz la cifra
de 2 millones 200 mil.
5. Investigacin y formacin de recursos
humanos para la evaluacin
Adems de la evaluacin que, en s misma, es inves

tigacin de tipo aplicado, la misin del inee incluye el
desarrollo de otros dos tipos de actividades de inves
tigacin: de carcter metodolgico para producir o
perfeccionar instrumentos, tcnicas y procedimientos
de evaluacin; y de tipo bsico, que incluye estudios
explicativos y de carcter terico. En 2008, el trabajo
del Instituto ha conseguido que, en los medios especia
lizados de Mxico y, al menos, de Amrica Latina, se le
reconozca ya como un organismo que hace investiga
ciones de muy buena calidad.
22
La formacin del personal es indispensable para

la calidad tcnica de las evaluaciones y para mejorar la
capacidad de analizar, interpretar y comunicar los re
sultados. Las reas del inee organizaron numerosas
actividades formativas sobre una diversidad de temas
especializados, con participacin de especialistas de
Mxico y otros pases, incluyendo a algunos de los
ms destacados del mundo. Se aprovech tambin la
oferta de cursos y talleres ofrecidos en el marco de
programas de evaluacin como pisa . Una buena bi
blioteca es bsica en toda institucin de investigacin.
Por ello, el Instituto dio importancia a la constitucin
de un acervo que apoye el trabajo de su personal.
En 2008, el Centro de Documentacin del Instituto
se convirti en el ms prolijo de su tipo en el pas,
por su carcter altamente especializado y pese a sus
modestas dimensiones.
Conclusin
El balance hecho a fines de 2008 concluy que se ha

ban cumplido prcticamente todas las metas que el
inee se haba fijado para 2006 y buena parte de las esta
blecidas para 2010. Teniendo en cuenta la complejidad
que supone la consolidacin de instituciones pblicas,
se crey posible afirmar que el Instituto haba llegado a
un grado de madurez significativo en un lapso bastante
corto, lo que no quera decir que no hubiera aspectos
menos slidos que deberan fortalecerse.
De los tres retos que el inee enfrent al nacer, se
atendi muy bien el de mejorar la calidad tcnica, mien
tras que el de la difusin tuvo avances parciales, pero
sostenidos. En cambio, fue menor el progreso en lo
relativo a la articulacin de los esfuerzos de evaluacin
por instancias federales y estatales. En 2005 y 2006 se
dieron algunos pasos en este sentido, con reuniones
del inee con la Unidad de Planeacin y Evaluacin de
Polticas Educativas de la sep, y con participacin de las
Sindicato Nacional de Trabajadores de la Educacin,

las organizaciones de padres de familia, el sector em
presarial y los medios de comunicacin. Consciente
a la vez de la importancia del asunto y de mi escasa
experiencia en ese mbito, consider que lo correcto
era no intentar jugar al poltico, sino buscar una rela
cin respetuosa con todos los sectores, atendiendo
con prontitud y profesionalmente sus demandas de
informacin, apostando a que
sera la solidez de los informes
del inee su mejor defensa. Mi
valoracin es que se consigui
razonablemente, lo que creo
que se aprecia en la imagen de
seriedad que mantiene el Insti
tuto y pretendo haber contribui
do a formar.
Para terminar, retomo lo que
dije en marzo de 2009 con oca
sin del reconocimiento que la
Junta Directiva decidi otorgar
me tras dejar la direccin del inee.
Afirm entonces que cuando em
prend la tarea de poner en marcha
el Instituto, soaba con que fuera
una institucin ejemplar en lo tc
nico para que su trabajo fuera una
aportacin slida para la mejora
educativa; en lo administrativo, usando con eficiencia
los recursos que le proporciona la sociedad; y en lo hu
mano, para que todo el personal se sintiera respetado
y estimulado para dar lo mejor de s. Dije que poda
mos sentirnos satisfechos de lo logrado en condiciones
no siempre favorables, y precis:
No muchas instituciones pueden mostrar en un lapso
similar resultados tan copiosos ni de tan buena calidad.
Me parece, pese a los inverosmiles obstculos que la
kafkiana normatividad mexicana representa para las ins
tituciones, que en lo administrativo conseguimos unos
niveles de eficiencia ms que respetables. Y de lo que
no tengo duda es que el inee ha sido el lugar respetuo
so y amigable que vislumbraba hace siete aos. Como
Director trat siempre de dar ejemplo de dedicacin a
la tarea y de trato respetuoso a los compaeros. Cuan
do tom posesin como Rector de mi Universidad, dije
que esperaba que al fin de mi gestin los universitarios
pudieran decir: el Rector cumpli con su deber como
mejor pudo; encabez, en un ambiente cordial, un tra
bajo intenso cuyos frutos se aprecian ya y nos animan a
continuar; se equivoc algunas veces, pero nunca con la
intencin de daar a alguien; fue honrado y actu con
justicia; al final puede seguirse llamando, como siempre,
un buen amigo de todos nosotros.
Poder decir que tambin as sucedi en el

y sigue siendo mi mejor recompensa.
inee
reas de planeacin y evaluacin de todas las entidades

federativas, de las que result un proyecto para crear el
Sistema Nacional de Evaluacin Educativa, que no lleg
a ponerse en marcha.
Al final del sexenio 2001-2006 el trabajo del inee
comenzaba a tener impacto. Algunas acciones de me
jora se emprendieron o reforzaron gracias a que los
resultados despertaron o agudizaron la conciencia
sobre problemas a los que no se prestaba suficiente
atencin. Pueden mencionarse acciones para la re
forma de la educacin secundaria, las telesecundarias
y las primarias del Conafe. Con todo, estos avances
no se pueden considerar satisfactorios. Se carece de
mecanismos permanentes de interlocucin con au
toridades federales, en especial las que tienen ms
relacin con los resultados, como las direcciones
generales de la Subsecretara de Educacin Bsica.
Falta mucho para que los resultados sean interpre
tados correctamente y, sobre todo, aprovechados
sistemticamente para sustentar polticas que lleven
a la mejora educativa; y ms an, para que se dejen
de hacer lecturas simplistas y muchas veces errneas de
los resultados.
Para m, la experiencia de poner en marcha un
proyecto tan ambicioso fue la culminacin de varias
dcadas de esfuerzos por hacer investigacin edu
cativa en general, y en particular de tipo evaluativo,
con base en la conviccin de que tales trabajos son
necesarios para apoyar el esfuerzo de mejora de au
toridades y maestros, y para dar herramientas a los
ciudadanos para hacer efectivo su derecho a la rendi
cin de cuentas en este campo.
La experiencia tuvo varias facetas con caractersti
cas diferentes. Para m lo fundamental era la dimensin
acadmica y tcnica, que consideraba y sigo conside
rando parte esencial del proyecto. El trabajo en este
aspecto fue muy intenso, pero tambin muy satisfac
torio, porque pude ver cmo en unos aos se form
una institucin con equipos tcnicos de gran calidad y
de nivel internacional, lo que implic invitar a personas
con capacidad y mucho trabajo de capacitacin, todo
ello con una visin precisa de la meta que se persegua.
La dimensin administrativa, secundaria sin duda
con respecto a la anterior, pero indispensable en la
realidad, implic tambin mucho trabajo y fue me
nos satisfactoria, ya que consisti principalmente en
lidiar con una burocracia pesada y, con frecuencia,
irracional, que antepone el cumplimiento de normas
irrelevantes a la tarea sustantiva. Pese a ello, se pue
de sostener que los resultados fueron adecuados. A
juicio de personas conocedoras del sector pblico,
el tiempo que llev organizar y poner en marcha el
inee fue notable.
La dimensin poltica implic tambin una aten
cin considerable, dado el contexto en que naci el
Instituto y la necesidad de cuidar las relaciones con
actores importantes, como el poder legislativo, el
fue
23
El inee, a diez aos

de su creacin
Reyes Tamez Guerr a
gradezco enormemente la invitacin que se me hizo a participar

en esta publicacin con una reflexin personal sobre el Instituto
Nacional para la Evaluacin de la Educacin, al cumplirse los pri
meros diez aos de su creacin.
No me cabe ninguna duda que ste fue uno de los logros ms impor
tantes de la Secretara de Educacin Pblica en los aos en que tuve la
oportunidad de encabezar la dependencia, ya que representaba la culmi
nacin a una larga serie de esfuerzos que, desde la dcada de los setenta,
venan realizndose en materia de evaluacin educativa.
Con su constitucin, mediante Decreto presidencial del 8 de agosto de
2002, el Estado mexicano, la Secretara de Educacin Pblica y la sociedad
en general, pudieron contar con un organismo altamente especializado que
ofrecera los instrumentos, metodologas y anlisis necesarios para la eva
luacin regular del Sistema Educativo Nacional (sen). El presidente Vicente
Fox tuvo siempre mucha claridad sobre la relevancia del Instituto y desde
la primera vez que le expusimos el proyecto se comprometi a impulsarlo.
Desde la dcada anterior a la creacin del inee, exista un amplio con
senso, entre los especialistas y los responsables de la poltica educativa,
en torno a la necesidad de consolidar un sistema nacional de evaluacin,
objetivo que qued plasmado en el Programa Nacional de Educacin 20012006. Y en el marco de este objetivo de carcter estratgico, la creacin
del Instituto fue sin duda el elemento fundamental.
Recuerdo muy bien que desde los primeros meses de la gestin,
cuando trabajbamos con mucha intensidad y entusiasmo en el que sera
nuestro programa sectorial, el equipo de especialistas que coordinaba el
licenciado Felipe Martnez Rizo concibi a sta como una de las metas
principales a lograr durante el sexenio. Y fue precisamente Martnez Rizo
quien coordinara los trabajos para la proyeccin y creacin del nuevo
Instituto, que muy atinadamente qued luego bajo su responsabilidad.
Las contribuciones del inee al sen son innegables y estn a la vista
de todos. La tarea sustantiva del Instituto se defini muy claramente desde
el inicio: contribuir a elevar la calidad de la educacin nacional mediante la
evaluacin. Y tambin fue muy importante que el inee vertebr su esfuer
24
cipacin en la prueba pisa. Otro logro fundamental ha

sido la apropiada difusin de los resultados de dichas
evaluaciones entre la opinin pblica, con lo que ha
contribuido a permear en la sociedad una idea ms
objetiva y serena de nuestro sistema educativo; as, la
calidad y diversidad de sus publicaciones han enrique
cido el conocimiento que tenemos sobre distintos as
pectos del funcionamiento de la educacin en nuestro
pas. El punto de partida virtuoso que ha hecho posible
todo esto ha sido sin duda el alto rigor tcnico en la
elaboracin de los instrumentos, en el despliegue de
su aplicacin y en el procesamiento de los resultados.
En resumen, podemos decir con satisfaccin que
el Instituto Nacional para la Evaluacin de la Educa
cin ha cumplido plenamente su objetivo, logrando
naturalizar entre nosotros la funcin esencial de la
evaluacin en el mejoramiento permanente del Siste
ma Educativo Nacional.
Miembros del Primer Consejo Tcnico del inee, 2003

Dr. Carlos Muoz Izquierdo
Dr. Eduardo de la Garza
Dr. Jos Manuel lvarez Manilla y de la Pea
Dr. Arturo de la Orden Hoz
Dra. Ana Rosa Barahona Echeverra
Dr. Jos ngel Pescador Osuna
Dr. Eduardo Backhoff Escudero
Dr. Pedro Andrs Ravela Casamayou
Dr. David Francisco Block Sevilla
Mtra. Silvia I. Schmelkes del Valle
Dra. Teresa Bracho Gonzlez
Dr. Guillermo Solano Flores
Dra. Beatriz Estela Calvo Pontn
Dr. Alejandro Tiana Ferrer
Dr. Martn Carnoy
Mtra. Margarita Zorrilla Fierro
Felipe Martnez Rizo

y Reyes Tamez Guerra.
zo a partir de una definicin muy clara de lo que se en

tiende por educacin de calidad, como aqulla que es
relevante, es eficaz (interna y externamente), usa efi
cientemente los recursos, es equitativa y tiene un im
pacto positivo en el largo plazo.
Aunque en el momento de su creacin se conside
r una limitacin que el nuevo organismo no hubiera
sido instituido por el H. Congreso de la Unin, sino
mediante Decreto del Ejecutivo, por lo que no con
tara con la autonoma necesaria para la realizacin de
sus importantes tareas, el tiempo ha mostrado que
esa circunstancia original no afect la independencia
de actuacin y la alta calidad tcnica de sus tareas.
Desde luego, este notable desempeo y su continui
dad se explican en buena parte por el gran compromi
so, la capacidad y la probidad intelectual de quien fue
su primer director.
En el ao 2008, al darse a conocer la renuncia del
Lic. Felipe Martnez Rizo a la Direccin General del Ins
tituto, el doctor Pablo Latap tuvo una visin coinciden
te al escribir en un artculo que el mayor logro del inee,
en esos aos, fue preservar su autonoma respecto de
los partidos polticos, las fracciones parlamentarias, el
snte y la propia Secretara de Educacin, cumpliendo
a cabalidad con el propsito para el que fue creado. Es
justo mencionar que esa importante labor inicial fue
continuada con el mismo nivel de exigencia y compro
miso por quien ocupara en lo sucesivo esa titularidad,
la doctora Margarita Zorrilla Fierro.
La tarea desarrollada por el inee en sus primeros
diez aos de vida es destacable, tanto en lo que se re
fiere al desarrollo de instrumentos de evaluacin como
a su aplicacin en diferentes dimensiones y estrategias,
incluyendo las de carcter internacional como la parti
25
Con los primeros

diez aos del inee
Teresa Br acho Gonzlez
a creacin del Instituto marc un parteaguas en

la concepcin de la evaluacin educativa, en su
calidad tcnica y en la difusin de sus resulta
dos. Como organizacin de carcter pblico, ha tenido
siempre la intencin de contribuir al mejoramiento de
la educacin va la realizacin de evaluaciones integrales
de su calidad, as como de la difusin oportuna de sus
resultados (Plan Maestro de Desarrollo 2006: 23; Cdigo
de Conducta 2011: 4).
Beatriz Calvo y
Carlos Muoz
Izquierdo.
26
Desde sus primeros trabajos, el inee mostr que

era posible hacer una evaluacin rigurosa, significativa
y de utilidad para entender los problemas del sistema
educativo; que tambin lo era desarrollar instrumentos
pertinentes para analizar la calidad de nuestra educa
cin, y con ello logr poner en la mesa de la discusin
acadmica y poltica el valor de la evaluacin, incluyen
do sus complejidades. Difcilmente entenderamos bue
na parte de las discusiones acadmicas y las decisiones
de polticas educativas actuales sin esta aportacin.
Cmo hizo el inee para ser reconocido nacional e
internacionalmente? Una parte sustantiva de la eficien
cia y la calidad de su trabajo puede entenderse a partir
de tres condiciones fundamentales. La primera, los pro
fesionales en evaluacin que han formado parte de su
estructura y que han crecido en l. La segunda puede
atribuirse al papel que ha desempeado el Consejo Tc
nico, conformado por especialistas nacionales e inter
nacionales, en la discusin de todos los temas relevan
tes desde sus ms diversos aspectos: los estrictamente
acadmicos y tcnicos, los relativos a la factibilidad de

cada una de las evaluaciones, de su pertinencia y rele
vancia, y las cuestiones ticas involucradas en la evalua
cin y sus usos. Por ltimo, y de la mayor importancia,
la direccin de dos reconocidos acadmicos nacionales
comprometidos con los criterios ticos, tcnicos y me
todolgicos necesarios para realizar evaluaciones de la
ms alta eficacia. Sin la capacidad de gestin de Felipe
Martnez Rizo y Margarita Zorrilla, y su indiscutible ca
lidad acadmica, el inee difcilmente hubiese podido ser
lo que ahora es, y menos an, plantearse posibilidades
de mayor desarrollo en el porvenir.
Y hacia adelante, qu? Siempre pensamos que una
situacin ideal para el inee sera la de un Instituto con
mayor autonoma, con recursos suficientes y recono
cimiento sobre su seriedad y compromiso con la edu
cacin del pas. De estas tres condiciones, la confianza
en su capacidad ha sido razonablemente alcanzada. Ha
enfrentado sus retos con actitud moderada, represen
tando una posicin tcnica altamente calificada y aut
noma, y es ya un agente responsable y reconocido en
la discusin pblica, que ofrece elementos a la discusin
para entender y contribuir a resolver problemas
crticos del sistema educativo.
Fortalecer el papel de los actores acadmico-tc
nicos en los prximos aos no slo es deseable, sino
necesario para poder plantearse de nuevo las grandes
preguntas que han dado forma al trabajo actual de la
institucin. El sistema educativo tambin ha cambiado
y la ampliacin de las metas que se plantea debera
llevarnos a repensar cmo definir los parmetros
normativos que dan sustento a la evaluacin educa
tiva?, cmo definir la pertinencia terica y prctica
de los distintos enfoques conceptuales actuales de la
evaluacin?, cmo desarrollar mejores instrumentos
de medicin de los resultados del sistema? y cmo
comunicar mejor y oportunamente los resultados de
la evaluacin?
El momento invita a discutir cmo perfeccionar las
evaluaciones del sistema educativo para que sean ca
paces de aportar mejores elementos y as disminuir las
enormes brechas de equidad, calidad y pertinencia de
nuestra educacin, que sin duda preocupan a todos.
Conocerlas de manera seria permitir plantearse al
ternativas para caminar hacia adelante en la construc
cin de mejores condiciones para la educacin.
Iniciamos nuestras actividades

con el pie derecho
nas instituciones, sino la calidad de los insumos, pro

cesos y resultados de la que se imparte, globalmente,
en el sistema educativo del pas. Por tanto, las evalua
ciones del inee pueden orientar las decisiones que el
Estado necesita tomar para mejorar la calidad de la
educacin nacional.
En segundo trmino, el ct colabor en la elabora
cin del primer Plan Maestro del Instituto. Para hacer
lo era necesario clarificar las tareas que deberan ser
asignadas a cada una de las dependencias del propio
Instituto. Esto, a su vez, exigi tomar varias decisio
nes, como las siguientes: a) optimizar la distribucin
escalonada de las evaluaciones a cargo de la Direc
cin de Pruebas Medicin; b) determinar los princi
pales atributos de la metodologa que debe seguir la
Direccin de Escuelas para obtener resultados que
puedan ser aprovechados por la sep, y c) establecer las
prioridades que debe adoptar la Direccin de Indi
cadores para asegurar la relevancia y pertinencia del
Informe institucional Panorama Educativo de Mxico
que esa dependencia publica peridicamente.
Debo reconocer que sin la indiscutible calidad acad
mica de quienes integraron ese Consejo Tcnico, y sin las
mltiples cualidades personales y profesionales del Lic.
Felipe Martnez Rizo, no hubiera sido posible lograr los
objetivos que nos trazamos. Por esta razn, agradezco a
todos su participacin en las actividades que realizamos
durante los primeros aos de existencia del Instituto.
Reunin del Consejo
Tcnico, 2006.
Tuve el privilegio de presidir el Consejo Tcnico del

Instituto Nacional para la Evaluacin de la Educacin
(ct) durante el cuatrienio comprendido entre 2002 y
2006. Me referir aqu con la brevedad que exige el
espacio disponible a algunas de las actividades que
realiz dicho rgano de consulta durante esa poca.
Las he seleccionado porque considero que dejaron
una huella ms perdurable.
En primera instancia, el ct colabor en la defini
cin, en trminos operativos, de las funciones que el
inee debe desempear de acuerdo con sus documen
tos fundacionales. Cabe recordar que, por entonces,
se escucharon algunas voces que cuestionaban la per
tinencia de la creacin de ese Instituto, porque la sep
ya contaba con una Direccin General de Evaluacin.
Quienes as opinaban sugeran, por ejemplo, que el inee
slo se dedicara a evaluar las actividades educativas
que no estaban dentro del mbito de dicha Direccin,
tales como la educacin de los adultos, la capacitacin
para el trabajo y otras modalidades de educacin que
se imparten extramuros.
Ello revela que no fue nada fcil lograr que todos
los interesados en la educacin comprendieran la im
portancia estratgica que tendra un organismo creado
para realizar aquellas evaluaciones que los especialistas
clasifican como de bajo riesgo. stas, como sabemos,
no se proponen valorar la calidad de la educacin que
reciben determinadas personas o la que otorgan algu
27
Captulo
Experiencias, aportaciones
y aprendizajes
en la construccin de sistemas de
indicadores educativos para Mxico
n sus primeros diez aos, qu ha aportado el INEE al pas

en materia de indicadores educativos?, cules son las principales lecciones y qu retos enfrenta? Para responder a
estas interrogantes, plantearemos algunos antecedentes, especialmente nacionales, en materia de indicadores educativos.
Despus explicaremos los marcos normativos, conceptuales y
metodolgicos en que nos apoyamos para la construccin
del sistema de indicadores del Instituto y discutiremos la
validez de la informacin utilizada. Al final, se resumen las
lecciones y se establecen los retos que enfrentamos para
disear nuevos indicadores, actualizar los desarrollados y
encaminarnos a estudios que aborden componentes del sistema insuficientemente tratados todava.
Antecedentes de los indicadores educativos en Mxico
El uso de indicadores para monitorear aspectos importantes del sistema

educativo y apoyar la toma de decisiones no es nuevo en nuestro pas. De
acuerdo con investigaciones recientes, los primeros indicadores educativos
aparecieron durante el ltimo tercio del siglo xix para dar cuenta de la asis
tencia de los nios a la escuela, y fueron construidos a partir de los registros
de los maestros. La consolidacin de algoritmos para calcular algunos indi
cadores, como la asistencia media diaria, dilat dcadas. A inicios del siglo
xx apareci la nocin de nio retardado o retrasado escolar que englob
a todos aquellos alumnos que tenan en comn no avanzar en sus estudios
y quedar constantemente rezagados de sus pares con edades similares. En
1921, como seala Granja-Castro (2009), se estim el nmero de alum
nos retrasados comparando el grado cursado con el que hipotticamente
deban cursar de acuerdo con su edad. Cabe sealar que el concepto ac
30
Reunin de trabajo sobre

indicadores clave, 2011.
de un sistema de indicadores educativos de esta natu

raleza no continu cabalmente. El rea de la Secretara
de Educacin Pblica dedicada a la sistematizacin de
los registros escolares, de inicio y fin de ciclo, continu
su trabajo dando estimaciones de la demanda social de
educacin, as como de indicadores educativos, fun
damentalmente relacionados con la matriculacin y la
trayectoria de los alumnos (sep, 1996).
A mediados de la dcada de los noventa, la sep for
mul el primer anteproyecto de un Sistema Nacional
de Indicadores Educativos sin que pudiera concretarlo.
Lo que en el mbito nacional no pudo realizarse, se hizo
a nivel local. Por ejemplo, a inicios de los aos ochenta
y noventa, Martnez Rizo (1996) dirigi equipos para la
realizacin de sendos diagnsticos sobre la educacin
en el estado de Aguascalientes, que incluyeron sistemas
de indicadores, entre otras herramientas de anlisis.
En el terreno internacional, es de destacarse que
en 1973 la Organizacin para la Cooperacin y el De
sarrollo Econmicos (ocde) auspici por primera vez
el diseo de un sistema de 46 indicadores para valo
rar la contribucin de la educacin en seis campos:
transmisin de conocimientos; igualdad de oportuni
dades y movilidad social; contribucin al funcionamien
to de la economa; desarrollo integral de las personas;
tual de rezago en la escolarizacin se ha disociado de

las connotaciones clnicas originales. La creacin de la
Secretara de Educacin Pblica en 1921 permiti con
centrar los registros escolares de todas las escuelas del
pas en una oficina especializada en estadstica, con ello
se subsan la dispersin de la informacin existente
hasta ese momento. Se facilit entonces el clculo de
estadsticas e indicadores para el pas y las entidades
federativas sobre la matrcula, permanencia y egreso
de los alumnos en los tiempos planeados. Se cont as
con mejor informacin para proyectar la expansin del
sistema educativo, lo que constituy un gran logro; sin
embargo, la estadstica escolar no fue suficiente para
conocer las brechas en el acceso a la escuela de las
distintas subpoblaciones de nios. Esto es as porque,
de los registros escolares no puede inferirse directa
mente el nmero de nios y jvenes que no asisten a
la escuela o el de aquellos que nunca se inscribieron;
tampoco informa sobre la distribucin espacial de los
nios y sus caractersticas socioculturales y econmicas,
especialmente de los que no asisten. Esta limitacin fue
evidente para la comisin que elabor el Plan de Once
Aos a principios de los aos sesenta que, para contar
con la informacin de los nios de seis a 14 aos, en
carg un estudio muestral de hogares. As, la comisin
pudo elaborar un diagnstico de la participacin de los
nios en la escuela y con ello dio cuenta de la asocia
cin entre la no inscripcin, la desercin y la repeticin,
con las condiciones de origen de los nios.
El conjunto de indicadores y datos utilizados en di
cho diagnstico trascendi el mbito puramente esco
lar al incluir indicadores socioculturales y econmicos
de los nios y sus hogares. Por desgracia, el desarrollo
31
Experiencias, aportaciones y aprendizajes

en la construccin de sistemas de indicadores educativos para Mxico
transmisin y evolucin de valores, y evaluacin del

cumplimiento de los objetivos anteriores (Bottani y
Tuijnman, 1994). La iniciativa despert el entusiasmo
de algunos pases y agencias internacionales, pero no
se le dio continuidad. Varios fueron los motivos de
un xito limitado; probablemente el ms importante
haya sido la falta de vinculacin de los indicadores
con los problemas centrales de la poca, de modo
que resultaran instrumentos tiles para sustentar
decisiones mejor informadas. Adems, el sistema no
correspondi con las grandes expectativas generadas
en torno a su capacidad para identificar las causas de
los resultados educativos y cmo stas se relacionan
con la operacin y desempeo de los sistemas edu
cativos (Nutall, 1994; Wyatt, 1994). Esta propuesta
fue relanzada en 1987 por el proyecto Indicators of
National Education Systems (ines), cuyo sistema de in
dicadores se publica anualmente desde 1992 en Education at a Glance. ocde Indicators (ocde, 2011).
Con estos antecedentes se cre el inee. Una de
sus tareas principales fue, precisamente: desarrollar
y mantener un sistema de indicadores que permi
ta valorar en forma objetiva la calidad del Sistema
Educativo Nacional en lo concerniente a la educa
cin bsica y media superior (Decreto de Creacin,
dof 8-08-2002). Esta tarea ha sido realizada por la
Direccin de Indicadores Educativos (die), la cual des
de 2003 es responsable de la publicacin del anuario
Panorama Educativo de Mxico. Indicadores del Sistema
Educativo Nacional.
A diferencia del pasado, desarrollar y mantener
un sistema de indicadores hoy es tarea instituida en
el mbito del monitoreo y la evaluacin del Sistema
Educativo Nacional (sen). El inee colabora con la sep en
ese propsito a partir de la idea, plasmada en el Programa Nacional de Educacin 2001-2006, de crear un
Sistema Nacional de Indicadores Educativos (sie) que
refleje las problemticas centrales del sistema educa
tivo. De acuerdo con el Programa, el sie deba integrar
Teresa Bracho y Carlos Mancera en reunin

del Proyecto de Indicadores Estratgicos, 2011.
32
los resultados del aprendizaje de los alumnos, con as

pectos de la gestin escolar en los distintos subsiste
mas y en el educativo en su conjunto. El inee y la sep
avanzaron para concretar una versin bsica de lo que
sera el sni (sep e inee, 2006). La siguiente administra
cin federal refrend la importancia de construirlo;
en el Programa Sectorial de Educacin 2007-2012 se
propuso disear y construir sistemas de indicadores
para diversas unidades del sen (alumnos, maestros, di
rectivos, escuelas, tipos de servicio, tipos educativos
y modalidades), acotando que los indicadores deban
ser pertinentes y redundar en propuestas de mejora.
Los marcos normativos, conceptuales
y metodolgicos del Sistema de Indicadores
Educativos del inee
La die ha adoptado la nocin de Shavelson et al. (1989)

sobre lo que es un indicador: un estadstico simple
o compuesto relacionado a un constructo educativo y
til en el contexto de las polticas pblicas. sta ha sido
una eleccin afortunada entre las mltiples definicio
nes existentes, probablemente porque desde su inicio,
el inee cont con un marco normativo, un modelo de
evaluacin y una tarea clara.
En esta dcada hemos aprendido que la sencillez
de la definicin anterior slo es aparente. Su aplicacin
supone, en primer lugar, tener claridad sobre cules son
las problemticas centrales del sistema educativo (que
en adelante denominaremos constructos) susceptibles
de ser atendidas por la accin pblica; en segundo lugar,
apegarse a una metodologa que asegure, entre otras
cosas, la utilidad del indicador para las autoridades edu
cativas o la sociedad; en tercer lugar, contar con la ca
pacidad para elegir la(s) variable(s) clave del constructo
bajo anlisis y proponer un algoritmo que represente
la seal (indicador) que queremos destacar; en cuarto
lugar, revisar que la informacin, en caso de contar con
ella, satisfaga criterios de validez, consistencia y confia
bilidad o impulsar su generacin.
El cumplimiento del primero de los criterios des
critos se consigue conociendo los objetivos del sen y
comprendiendo sus principales limitaciones para alcan
zar las metas sociales de la educacin. El conocimiento
del marco normativo ayuda a delinear estas metas que
persigue la educacin, mientras que la apropiacin de la
comprensin de los especialistas y usuarios calificados
permite identificar aspectos importantes del sen, los
cuales es necesario monitorear a travs de indicadores;
estas orientaciones contribuyen a asegurar su utilidad
y forman parte de la metodologa del inee. El tercer y
cuarto criterios slo pueden conseguirse si existe un
grupo tcnico cuya tarea central sea desarrollar y ac
tualizar un sistema de indicadores.
Como hemos dicho, el marco normativo provee
un esquema general para identificar los objetivos y
metas sociales de la educacin, as como las obligacio
tre las subpoblaciones de alumnos; la suficiencia con

la que el sistema escolar satisface las necesidades de
los centros educativos en cuanto a recursos humanos,
fsicos y materiales; la eficiencia con que dichos recur
sos son administrados y, por ltimo, el impacto de la
educacin en la sociedad y en la vida de las personas.
En este enfoque, un sistema educativo es de ca
lidad si, de manera permanente, mejora su funciona
miento y sus resultados educativos para alcanzar los
fines y objetivos de la educacin con equidad. La capa
cidad para lograrlos tiene que ver con la pertinencia,
relevancia y el impacto de la educacin, as como con
el funcionamiento integral y las dimensiones de sufi
ciencia, eficiencia y eficacia.
La die ha dedicado esfuerzos al desarrollo de este
modelo y su integracin en otro ms general denomi
nado cipp (Contexto, Insumos, Procesos y Productos).
Esto ha facilitado la organizacin de los indicadores que
se presentan en el Panorama Educativo de Mxico. Re
mitimos al lector a ese anuario para explicaciones ms
detalladas del modelo de evaluacin y de la organiza
cin de los indicadores.
El desarrollo de la metodologa que aplica la die
para identificar constructos potenciales, susceptibles
de sealarse con indicadores, comprende: i) acercar
nos a los especialistas del propio sistema educativo y
fuera del mismo, para apropiarnos de sus conocimien
tos, comprensiones y preocupaciones sobre el sen;
ii) mantenernos informados de los adelantos naciona
les e internacionales sobre el diseo y construccin
de sistemas de indicadores; iii) someter los indica
dores a un proceso de validacin social y tcnica;
iv) revisar permanentemente las cualidades prc
ticas y tcnicas de los indicadores; y v) sustentar,
mediante estudios y la validacin de especialistas, el
diseo de nuevos indicadores.
En los momentos de arranque de los sistemas de in
dicadores que el inee ha generado para la educacin b
sica y posteriormente para la educacin media superior,
el contacto con especialistas y mandos medios y supe
riores fue crucial para la identificacin de las principales
Serie Polticas Educativas.
nes del sen y de la propia sociedad. Se delimita por los

artculos sobre el derecho a la educacin contenidos
en la Constitucin Poltica de los Estados Unidos Mexi
canos, la Ley General de Educacin que los reglamen
ta, los planes de desarrollo del pas y los programas
de educacin del gobierno federal, los tratados inter
nacionales pertinentes de los que Mxico es parte y
otras leyes como la Ley Federal del Trabajo, la Ley de
Desarrollo Social, la Ley General de Derechos Lings
ticos de los Pueblos Indgenas y la Ley General de la
Infraestructura Fsica Educativa.
Desde hace varios aos adoptamos el enfoque de
derechos humanos como un referente importante para
el desarrollo de indicadores. Nuestro propio trabajo en
la bsqueda de referentes educativos compartidos por
todos los mexicanos y la interrelacin con investigado
res e instituciones nos condujeron de manera natural a
comprender la importancia de esta perspectiva. Esta
mos en deuda con destacados investigadores, de casa y
fuera de ella, que generosamente nos compartieron sus
comprensiones. Recordamos con afecto a Don Pablo
Latap, quien en varias jornadas nos hizo partcipes de
sus conclusiones sobre el derecho a la educacin de los
nios mexicanos. Por otra parte, nuestra colaboracin
con el Consejo Nacional para la Evaluacin de la Poltica
de Desarrollo Social (Coneval), del que Ricardo Apari
cio da cuenta en este libro, para desarrollar un indicador
que midiera el cumplimento del derecho a la educa
cin, nos permiti seguir de cerca el proceso que llev
a esta institucin a optar por el enfoque de derechos
sociales en la realizacin de la medicin multidimensio
nal de la pobreza. Tambin influy nuestra interrelacin
con organizaciones de la sociedad civil como Mexicanos
Primero y la Red por los Derechos de la Infancia. Se
minarios internos del inee y con acadmicos externos,
adems de la orientacin de nuestros consejeros tc
nicos, nos permitieron tender puentes entre la nocin
de evaluacin de la calidad del sistema educativo del
Instituto y el enfoque de derechos humanos.
La orientacin conceptual ms importante que ha
guiado el desarrollo de los indicadores es el modelo de
evaluacin de la calidad de un sistema educativo, siste
matizado por el inee; este modelo lo sita inserto en el
medio social y en interaccin con otros mbitos, como
el laboral, que condicionan su operacin y resultados.
El modelo de evaluacin comprende un conjunto de
dimensiones que se deben tomar en cuenta para juz
gar la medida en que se alcanzan los objetivos y fines
de la educacin, as como las capacidades del sistema
educativo para alcanzar esas metas. Las dimensiones
a considerar comprenden: la relevancia de la educa
cin para el desarrollo del pas; la pertinencia de la
misma para la vida y el bienestar de los nios; la efica
cia con la que se alcanzan los objetivos escolares; la
equidad del sistema, entendida como la distribucin
de recursos y aplicacin de procesos idneos para
disminuir las brechas de los resultados educativos en
33

problemticas de ambos subsistemas educativos. En las

reuniones que conjuntaron a ms de 60 participantes,
se desprendieron listados de constructos que dieron
lugar a catlogos de indicadores con sus fichas tcnicas
(o metadatos) organizados de acuerdo con el modelo
cipp y con nuestro modelo de evaluacin. Los indica
dores fueron sometidos a un proceso de validacin,
revisin y mejora por parte de especialistas, mandos
medios y tcnicos involucrados en la explotacin de las
estadsticas educativas, as como de usuarios califica
dos. En general, este proceso demand varias reunio
nes hasta que, separadamente, especialistas y usuarios
alcanzaron un consenso sobre la importancia de los
indicadores y la viabilidad de su clculo. Una descrip
cin completa de la aplicacin de esta metodologa se
encuentra en Propuesta y experiencias para desarrollar
un Sistema Nacional de Indicadores Educativos (2007), en
donde se describe el esfuerzo conjunto sep-inee para
proponer un sistema de esta naturaleza.
Despus de producir y publicar los indicadores por
vez primera, inici un proceso de mantenimiento y de
revisin tanto de los clculos como de la utilidad de cada
indicador. Ocasionalmente, se ha decidido desplazar in
dicadores en desuso, poco tiles o metodolgicamente
dbiles, al anexo electrnico del Panorama Educativo
de Mxico, el cual adems suele mostrar informacin
complementaria a la desplegada en la parte impresa de
la misma publicacin.
La creacin de nuevos indicadores ha requerido
el desarrollo de estudios, clculos exploratorios y un
intercambio muy estrecho con los consejeros tc
nicos del inee, los cuales nos han acompaado
de manera sistemtica. De esta manera, se di
searon indicadores como los derivados de
la reconstruccin de trayectorias escolares
de una generacin de alumnos en primaria
o secundaria, o como el de rezago en la es
colarizacin adoptado por el Coneval en su
medicin multidimensional de la pobreza. Otros
estudios han propuesto indicadores sobre habitabili
dad educativa o referidos a los supervisores, que por
carencia de informacin no han podido calcularse.
La informacin utilizada en el clculo
de indicadores: algunas limitaciones
De acuerdo con la metodologa descrita, la creacin de

un indicador es primeramente un ejercicio de abstrac
cin para representar aspectos claves del sen; no se
determina por la existencia de informacin. Si acaso no
existe sta para calcular algn indicador, nuestra tarea
es propiciar su generacin.
Generalmente, la die calcula los indicadores a par
tir de informacin producida por otras reas del inee o
por instituciones externas; en mucho menor medida
recolecta por s misma la informacin. Del propio Ins
tituto, se utilizan las bases de datos de los resultados de
34
alumnos en las pruebas Excale o pisa, junto con su infor

macin de contexto. De instituciones externas, destaca
la estadstica educativa derivada de los censos admi
nistrativos de las escuelas, que se aplican al inicio y fin
de cada ciclo escolar a travs del formato 911; el censo de
recursos tecnolgicos en las escuelas aplicado por el ilce;
las bases de datos censales y las de encuestas de hogares
del Inegi; las proyecciones de poblacin del Conapo, as
como indicadores y datos internacionales de la ocde.
Aunque la informacin nacional es abundante, al
guna tiene limitaciones que provocan inconsistencias,
sesgos o prdida de validez en ciertos indicadores.
Adems, no existe informacin suficiente sobre deter
minados componentes del sen, como es el caso de los
docentes, de los cuales an no se sabe con precisin
su nmero. Ejemplos de sesgo o de falta de validez lo
dan indicadores que combinan fuentes de informacin,
como el de cobertura neta en primaria. Su numerador
es el total de los nios matriculados en primaria con
edades de 6 a 11 aos, cifra que rebasa el denomina
dor que es el total de estos nios, proyectado por el
Conapo o derivado del censo pertinente. Esto provo
ca que el valor del indicador sea mayor que 100%, lo
cual lo invalida. Los indicadores de trnsito de los alum
nos entre grados, niveles o tipos educativos, tambin
adolecen de cierto sesgo, resultado de la utilizacin
de datos transversales para intentar capturar fenme
nos longitudinales. En los rubros de infraestructura o
de gasto educativo estatal, la informacin disponible
contiene registros inconsistentes que impiden arribar
a datos precisos sobre las carencias e idoneidad de la
infraestructura escolar o sobre el gasto que realizan las
entidades en algunos tipos de servicio.
La die cuenta con experiencia limitada en la ge
neracin de informacin propia. Recientemente, con
investigadores de El Colegio de Mxico, se recolect
informacin muestral de jvenes de 18 a 29 aos en el
d.f. y su rea conurbada. El propsito del proyecto es
aportar conocimiento sobre la dinmica escolar y labo
ral de este segmento de la poblacin, en especial acerca
del fenmeno del abandono de la escuela y eventuales
retornos a sta, as como proponer indicadores sobre
dichas trayectorias.
El clculo de un indicador requiere del tratamiento
previo de la informacin que asegure su validez y confia
bilidad. La die no procesa acrticamente la informacin
disponible. Se parte, como se describi anteriormente,
de la identificacin de un constructo que requiere ser
concretado en uno o varios indicadores. Bosquejados
stos y preseleccionada una base de datos, se analizan
sus instrumentos de captacin, la definicin de las va
riables de inters y su metodologa; se analiza tambin
su calidad antes de hacer clculos extensos. El proce
dimiento rutinario involucra la reproduccin de cifras
control y la comparacin con fuentes alternativas. En
varias ocasiones, el cotejo de la informacin con otra
de mayor robustez ha permitido fundamentar el recha
zo de algunas bases de datos. Al final, el anlisis de la

informacin y, eventualmente, el acercamiento directo
con sus generadores, sostienen la eleccin o el rechazo
de una fuente de informacin o de una variable.
Algunas aportaciones, lecciones y retos
Agradecimientos
Las contribuciones al desarrollo del sie-inee han sido

diversas. Disculpndonos de antemano por posibles
omisiones y por no sealar especficamente a algunas
personalidades, dejamos constancia del apoyo inva
luable del equipo de la die, especialmente de sus tres
subdirectores; de los directores generales que ha te
nido el Instituto, y de su directora general adjunta; de
nuestros consejeros tcnicos, de especialistas y man
dos medios del sen que generosamente han colabora
do aportando informacin; de instituciones nacionales e
internacionales de cuyos levantamientos se sirven nues
tros indicadores, y de nuestros usuarios, especialmente
las organizaciones de la sociedad civil enfocadas en la
mejora de la educacin.
Referencias bibliogrficas
Bottani, N. y Tuijnman, A (1994). International Educational

Indicators: framework, development and Interpretation.
En Making Education Count. Developing and using international indicators. Paris: cire. oecd.
Granja-Castro, J. (2011). El lenguaje escolar de la desigualdad
en el umbral de la primera oleada de expansin de la
enseanza obligatoria. Revista Mexicana de Investigacin
Educativa. Num. 48, vol. 16.
Granja-Castro, J. (2009). Contar y clasificar a la infancia: las
categoras de la escolarizacin en las escuelas primarias
de la Ciudad de Mxico 1870-1930. Revista Mexicana de
Investigacin Educativa. Nm. 40, vol. 14.
Martnez, F. (1996). La calidad de la Educacin en Aguascalientes. Diseo de un Sistema de Indicadores. Mxico:
Instituto de Aguascalientes. Universidad Autnoma de
Aguascalientes.
Nuttall, D (1994). Choosing Indicators. En Making Education

Count. Developing and using international indicators. Paris:
cire. oecd.
Organisation for Economic Co-operation and Development
(2011). Education at a glance 2011: oecd indicators. Paris:
oecd.
Secretara de Educacin Pblica e Instituto Nacional para la
Evaluacin de la Educacin (2006). Sistemas de Indicadores Educativos de los Estados Unidos Mexicanos. Conjunto
bsico para el ciclo escolar 2004-2005. Mxico: sep e inee.
Shavelson, R. J., L. M: McDonnell, J. Oakes (Eds.) (1989). Indicators Systems for Monitoring Mathematics and Science
Education. California. E.U.: Rand Corporation.
Wyatt, T (1994). Education Indicators: A Review of the Lite
rature. En Making Education Count. Developing and using
international indicators. Paris: cire. oecd.
Una de las principales aportaciones del inee es el esta

blecimiento, mantenimiento y desarrollo de un sistema
de indicadores orientado a apoyar la mejora de la ca
lidad de la educacin bsica y media superior del pas.
Apegarnos a una perspectiva sistmica y a criterios tc
nicos exigentes impulsa, de manera natural, un proceso
de mejora y de retroalimentacin para poder cumplir
esta tarea con elevados estndares de competencia.
De las lecciones a destacar, ya hemos comentado
sobre la importancia de mantener un contacto continuo
con especialistas y usuarios, y la obligacin de sustentar
slidamente la creacin de nuevos indicadores. Una lec
cin que no se ha apuntado es la necesidad de contar
con un equipo humano especializado. Hemos aprendido
que la tarea de construir un sistema de indicadores no
puede basarse en el sentido comn, en la existencia de
determinada informacin o en un esfuerzo inicial para
calcular algn indicador. Cuando el inee da a conocer un
indicador, est obligado a actualizarlo regularmente y a
construir series de tiempo que permitan analizar su evo
lucin. Al mismo tiempo, valora su pertinencia y revisa
los programas de clculo. Todo ello demanda el mante
ner un equipo especializado de forma permanente.
Daniel Taccari, en su texto, incluido en este infor
me, aborda con mayor extensin los desafos que en
frenta el inee en la tarea de desarrollar un sistema de
indicadores cada vez de mayor utilidad y pertinencia.
Aqu enfatizamos dos retos que consideramos tambin
centrales para alcanzar esto: por un lado, continuar
aprendiendo qu problemticas limitan una mejora
importante de su calidad y qu innovaciones pueden
estar funcionando y, por otro, consolidar

algunos de los indicadores que propone
el Instituto. Para abordar el primer aspec
to, necesitamos profundizar nuestro co
nocimiento en torno a los esfuerzos que
realiza el sen por mejorar la infraestruc
tura, la formacin de docentes y el logro
educativo de los alumnos. De este modo
podremos desarrollar ms indicadores de
procesos. Tambin nos proponemos dise
ar verdaderos indicadores longitudinales
de las trayectorias escolares de los alum
nos y crear otros, concernientes al gasto
educativo y de docentes. Aparentemente
esto puede ser posible con la explotacin
del Registro Nacional de Alumnos, Maestros y Escuelas
(rname) que impulsa la sep. De forma paralela al de
sarrollo de nuevos indicadores, se consolidar parte
de los existentes pugnando porque el Inegi los reco
nozca como de inters nacional, como sugiere Leticia
Hernndez en su contribucin a esta publicacin.
35

En atencin a los diez aos

de trabajo del inee
R afael Daz Garca
a presencia del Instituto Nacional para la Eva

luacin de la Educacin desde el ao 2002, se
ha caracterizado por brindar aportaciones muy
valiosas en procesos de evaluacin e indicadores edu
cativos, as como de anlisis y difusin de resultados.
El modelo de evaluacin educativa, basado en
pruebas matriciales y de aplicacin muestral, como es
el caso de Excale y pisa, es de gran utilidad, ya que
permite conocer el desempe
o de estudiantes de educa
cin bsica, a fin de identificar
elementos para la atencin de
problemas.
Los indicadores que se publi
can en el Panorama Educativo de
Mxico son otro gran aporte del
inee, ya que ofrecen informacin
muy completa sobre el contexto
social, recursos, gestin, acceso
y trayectoria, as como resultados
educativos. El Panorama es indis
pensable para tener referencias del
comportamiento de otros estados
en los temas mencionados.
La difusin de estudios, anlisis, reportes, boletines
entre otros, se lleva a cabo con la aportacin de do
cumentos de trabajo, los cuales considero de mucha
utilidad para la identificacin de problemticas y para
la planeacin y formulacin de la poltica educativa.
Por otra parte, el Consejo Consultivo del inee, inte
grado por titulares de las reas estatales de evaluacin,
se puede considerar como un espacio de aprendizaje
colaborativo debido a la forma en que se abordan y
trabajan los procesos de evaluacin.
Como responsable de los procesos, estadstica e
indicadores educativos en el estado de Guanajuato y
de eventos como el Seminario internacional de indica
dores educativos, en 2007, he tenido la oportunidad de
36
aprender tcnicas, metodologas y estrategias utilizadas

en otros pases en los temas antes mencionados.
En conclusin, me parece que se han dado los pri
meros pasos en la construccin de un sistema de eva
luacin educativa; sin embargo, la gran tarea consiste
en ordenar y dar sentido a todos los procesos que
emergen con la puesta en marcha de planes y progra
mas educativos oficiales. Ante esta situacin, es nece
sario revisar y repensar el tipo y caractersticas de las
pruebas, as como el modelo de aplicacin de las mis
mas, de tal manera que con unos cuantos instrumen
tos de evaluacin seamos capaces de dar respuesta
a las preguntas que se desprenden de los problemas
identificados hoy en da.
Colaboracin del inee en el desarrollo

de competencias para la evaluacin
Las poblaciones de inters para la educacin me

dia superior y su crecimiento.
La disponibilidad de recursos tecnolgicos en edu
cacin media superior en Mxico.
El gasto y distribucin de recursos en este nivel.
La inscripcin en el sistema educativo del pas.
Las caractersticas de los alumnos, docentes y di
rectivos en el pas.
La presentacin del Sistema de Gestin Escolar de
la educacin media superior.
Esa fue la primera ocasin en que las instituciones
que atienden a este nivel educativo en el estado se
reunan para analizar estas temticas. De manera que
se desarroll una mesa de trabajo cuyo propsito
fue compartir experiencias y re

troalimentar al inee con informa
cin del contexto estatal, en el cual
se incorporan variables no conside
radas en sus anlisis nacionales.
Por otra parte, el inee realiz un
informe sobre los indicadores edu
cativos estatales y su relacin con
el contexto nacional, unificando vi
sin y criterio de anlisis oportuno
en los diferentes contextos y sub
sistemas de Durango.
En aquella ocasin, el Institu
to nos present una metodologa
para la construccin de indicado
res que permiten analizar y vislumbrar tendencias, de
manera que pueden tomarse decisiones oportunas y
adecuadas para los diferentes contextos educativos
del estado. Cabe destacar que se puso a nuestra dis
posicin un manual que contiene indicadores de las
diferentes modalidades educativas, desarrollados por
sus expertos y probados para la obtencin de infor
macin nacional. Es de nuestro inters adoptar dichos
indicadores y desarrollarlos en el Cobaed.
Posteriormente, contamos con la visita de expertos
del inee que nos capacitaron en la elaboracin de reac
tivos con la metodologa que ste utiliza para el diseo
de sus instrumentos de evaluacin. Dicha experiencia
fue muy enriquecedora para nuestro subsistema, ya
que adaptamos su metodologa para la elaboracin de
nuestro examen semestral institucional.
Otra importante aportacin de esta institucin ha
sido su asesora para la conformacin del departamen
to de Evaluacin Educativa, pues hemos recibido reco
mendaciones excelentes con relacin a las actividades
que debe desarrollar esta instancia. En entrevista per
sonal con expertos del Instituto, se hizo la sugerencia
de definir los indicadores educativos acordes con nues
tro contexto a partir de la problemtica detectada, as
como realizar la ficha tcnica de cada uno para, poste
riormente, desarrollar el Sistema de Indicadores Educa
tivos del Cobaed. Es importante comentar que el inee
nos proporcion algunas de sus obras ms relevantes.
Finalmente, la colaboracin con el Instituto ha enri
quecido nuestra visin de lo que es la evaluacin edu
cativa y la importancia de contar con indicadores que
nos permitan tomar las decisiones adecuadas en bene
ficio del Colegio de Bachilleres del estado de Durango.
El Colegio de Bachilleres del esta

do de Durango (Cobaed) es una
institucin con una trayectoria de
25 aos, cuenta con 18 mil alum
nos distribuidos en 33 planteles y
es el subsistema que ofrece una
mayor cobertura de educacin
media superior en la entidad.
A partir de 2011 iniciamos una
serie de actividades conjuntas con
el rea de Evaluacin Educativa, en
marcadas en el Plan de Desarrollo
Institucional. Entre otras, desarrolla
mos un examen semestral aplicable
al subsistema en su conjunto, en
donde se analiza el aprovechamiento acadmico de los
alumnos en todo el plan curricular; asimismo, realizamos
un anlisis de los resultados de las pruebas pisa y enlace,
los cuales sirvieron como diagnstico y punto de partida
para el diseo del mencionado Plan. En este mismo te
nor, llevamos a cabo una serie de acciones encaminadas
a la acreditacin de nuestros programas educativos con
el fin de incorporar nuestros planteles al Sistema Nacio
nal de Bachillerato.
As entramos en contacto con el inee, organismo
que de inmediato nos brind asesora y capacitacin,
y con el que nos fue posible intercambiar experiencias.
La primera actividad desarrollada con su colaboracin,
fue un taller de indicadores educativos en donde reu
nimos a todas las instituciones involucradas con la edu
cacin media superior de Durango. En dicho taller se
consideraron los siguientes aspectos:
37

Desafos del inee

en el desarrollo de
indicadores educativos
a definicin de polticas pblicas en el sector

educativo basadas en informacin confiable
y oportuna es una preocupacin compartida
por los pases de Amrica Latina y el Caribe. La regin
en su conjunto, y en particular Mxico, ha venido de
sarrollando sistemas de informacin en atencin a las
demandas del sector educativo provenientes tanto de
los compromisos internacionales y regionales, como
de los desafos por enfrentar en el terreno local.
Sin embargo, la pertinencia de la informacin de
pender, entre otros componentes, de la capacidad
de sus gestores para elaborar y poner a disposicin de
quienes toman las decisiones un conjunto de medi
das estadsticas que informen sobre los constructos
educativos relacionados con las polticas del sector. El
arreglo sistmico de estas medidas,
identificado generalmente como un
sistema de indicadores educativos, de
ber ofrecer un panorama amplio del
sistema educativo en su conjunto, la
posibilidad de monitorear sus objeti
vos, as como evidenciar sus fortalezas
y debilidades.
Desde su creacin, el inee ha cen
trado su inters y esfuerzos constantes
en desarrollar un sistema de indicado
res educativos que satisfaga las demandas del sector,
con un enfoque holstico e integral de la calidad de la
educacin, con especial nfasis en el monitoreo del
cumplimiento del derecho a la educacin en Mxico.
No es posible argumentar los desafos que enfrenta
el inee en el diseo y produccin de indicadores edu
cativos, sin antes hacer mencin de los avances que ha
desarrollado en su corta pero intensa vida institucio
nal. Sin afn de ser exhaustivos, vale comenzar con los
impactos que estos avances provocan, en referencia,
principalmente, del reconocimiento de la calidad e
institucionalidad del Panorama Educativo de Mxico, in
forme anual producido por el inee, el cual compendia
un conjunto de indicadores que describen la realidad
educativa nacional.
Pero no es gratuito dicho reconocimiento. Detrs
de cada uno de los desarrollos incluidos, existe un inten
so y comprometido trabajo por parte del inee en una
bsqueda implacable de producir informacin atingente
a los intereses derivados de la poltica local, sin descui
38
dar los compromisos asumidos por Mxico en el plano

internacional; as como y de manera especial un
cuidadoso abordaje tcnico que incluye el tratamiento
detallado de los aspectos estadsticos que estos indica
dores conllevan.
Siendo esta la situacin, vale preguntarse cules son
los desafos que an le quedan por enfrentar al res
pecto de cmo abordar el viejo pero siempre vigente
dilema de informar a los tomadores de decisiones.
En este sentido se podran enumerar diversas aris
tas posibles segn el enfoque y objetivos finales que se
postulen, pero esto no tendra pertinencia en tanto y en
cuanto no se analice en el contexto del sistema educati
vo mexicano, y el camino recorrido por el inee.
En un intento de acotar los posibles escenarios, se
consideran dos planos de accin para
la exploracin de futuros desarrollos:
cmo se produce la informacin y qu
informacin es necesario incorporar.
La posibilidad de generar indica
dores ms propicios muchas veces
est limitada por la disponibilidad de
la informacin base. En muchos casos,
renovar de las medidas tradicionales
para evaluar determinados procesos
educativos, que desembocan en esta
dsticas ms especficas, depende del tipo de informa
cin que se produce en las diversas instancias y, por
lo tanto, del papel de monitoreo, evaluacin y gestin
que dichas instituciones poseen.
Si bien es cierto que la finalidad del inee, establecida
en su acta de creacin y en sus diversos documentos
constitutivos, se refiere a la misin de evaluar la calidad
del sistema educativo (educacin bsica y media supe
rior), no le impide hacer uso de las diversas fuentes de
informacin disponibles en el sistema educativo, mu
chas de las cuales fueron diseadas para satisfacer de
mandas de la gestin administrativa y acadmica, ms
que para la generacin de estadsticas e indicadores
para la evaluacin y monitoreo del sistema educativo.
La proliferacin de las tecnologas de informacin y
comunicacin (tic) en los pases de la regin ha facilita
do la disponibilidad de volmenes cada vez ms cuan
tiosos de microdatos, muchos de los cuales se basan
en registros administrativos, como pueden ser aquellos
provenientes de los registros escolares, en cualquiera
Seminario Internacional de
Indicadores Educativos, 2007.
diseo y produccin innovador que incluso rompe los

esquemas de produccin y clculo de los indicadores
educativos tradicionales.
Las unidades de produccin de estadsticas educa
tivas se vern, tarde o temprano, entre la dualidad de
utilizar los indicadores tradicionales basados en infor
macin agregada, proveniente de los actuales eventos
estadsticos (en la mayora de los casos censos esco
lares), y los nuevos indicadores producidos bajo una
concepcin de registros administrativos, que permi
ten contar con datos individuales jams disponibles.
Mxico no escapa a esta situacin, ms an, se en
cuentra en el grupo de pases que ya pueden y deben
reflexionar sobre ello, en atencin a sus altos niveles
de desarrollo estadstico que les permite disponer de
valiossima informacin administrativa con esos fines.
A manera de ejemplo, cul debera ser el enfoque
conceptual y metodolgico para medir la desercin es
colar flagelo siempre presente
en tanto y en cuanto se disponga
de un seguimiento alumno por
alumno?, seguirn siendo vlidas
las estimaciones proyectivas de las
trayectorias educativas de los alum
nos, que suponen los anlisis de co
hortes, reconstruidas o cuasi reales,
ante la posibilidad de saber exacta
mente dnde se encuentra un nio
y establecer su condicin de alumno
regular, matriculado o desertor?
El segundo punto mencionado
respecto a los contenidos del sis
tema de indicadores es un desafo
de sus unidades de recopilacin bsica: alumnos, do

centes, establecimientos educativos, edificios escola
res, entre otros. Como en el caso de Mxico, algunos
pases disponen de estos sistemas de registros admi
nistrativos con cierta solidez en su establecimiento,
continuidad en su produccin y sistematicidad en su
acceso. En la mayora de los casos esta informacin es
de uso exclusivo para la gestin administrativa del sis
tema, y son pocos los casos donde se integra el sistema
de informacin educativa en su conjunto, posibilitando
la produccin de indicadores educativos para la evalua
cin y monitoreo.
El inee ha comenzado a transitar el camino hacia
el uso de este tipo de insumos con el objetivo de
aumentar la informacin en aquellos aspectos, com
ponentes y procesos del sistema educativo donde no
existe evidencia estadstica. Sin embargo, y en esto ra
dica uno de los desafos aqu expuestos, la disponibi
lidad de una amplia gama de registros administrativos
en un grado cada vez mayor en cuanto a su cobertura
y calidad, producidos de manera sistemtica e infor
matizada, deriva en la necesidad de buscar puntos de
encuentro con los mecanismos tradicionales de reco
pilacin de informacin.
As, cmo empatar la informacin de Control es
colar, Registro Nacional del Alumno, Formulario 911,
Recursos humanos, por citar algunas?
Ms all de los problemas inherentes a la potencial
incompatibilidad entre bases de datos que brindan in
formacin en algunos casos complementaria y muchas
veces de la misma ndole, el mayor reto es la produc
cin de indicadores ms precisos, incluso para medir los
mismos fenmenos bsicos. Esto exige un proceso de
39

Reunin tcnica
inee-upepeCeneval, 2012.
166 143
estudiantes han participado en las cuatro
aplicaciones de pisa en Mxico.
siempre vigente e inagotable. Todos los sistemas de

indicadores, cualquiera sea su mbito de aplicacin,
adolecen de una falta de exhaustividad, en su bsqueda
para dar respuesta a fenmenos vivos que cambian sus
objetivos en el espacio y en el tiempo.
ste es un punto donde el inee propende a la re
flexin continua y profunda, lo cual se ve reflejado en
los indicadores producidos. Sin embargo, la falta de un
sistema integrado de informacin educativa que abor
de todos los actores del sistema, como se mencion
anteriormente, plantea desafos que no siempre son
abordables con propuestas metodolgicas especficas.
De esta manera, queda por delante descifrar algunas
claves que son relevantes para entender el desempeo
del sistema educativo, como pueden ser indicadores
de los procesos de enseanza-aprendizaje y de los do
centes como factor fundamental; los planos de super
visin y gestin del sistema; el gasto en educacin, y la
infraestructura escolar, por mencionar algunos.
Pero el desafo mayor en cuanto a los contenidos
del sistema de indicadores educativos proviene de la
40
elaboracin de un sistema que permita el monitoreo

del cumplimiento del derecho a una educacin de
calidad, postulado en la Constitucin Poltica de los
Estados Unidos Mexicanos. En este sentido, los pasos
que ha dado el inee con la elaboracin del informe
El Derecho a la Educacin en Mxico constituyen un
avance respecto del uso, presentacin y anlisis de la
informacin educativa disponible. Pero tal como lo
identifica el mismo informe, queda camino por reco
rrer en tanto se avance en una concepcin operativa
de este derecho, que integre la normativa estipulada
en la Constitucin y leyes educativas, y en la identifi
cacin de los componentes y actores que permitan
evaluar el cumplimiento del derecho.
Algunas de las ideas aqu expuestas promueven
un necesario cambio de paradigma del qu y cmo se
produce la informacin del sector educativo. Esto con
ducir a la definicin de sistemas de indicadores edu
cativos que ofrezcan las herramientas necesarias para
operar los cambios sustantivos a partir de polticas p
blicas informadas. A la luz del desempeo de los aos
transcurridos desde su creacin, se ha demostrado que
el inee ha logrado capitalizar cada uno de los desafos
en un elemento motivador de desarrollo y propuestas
pertinentes con las demandas del sector, sin descuidar
la meticulosidad metodolgica y la solidez tcnica. Los
actuales retos seguramente constituirn nuevos incen
tivos para el inee y servirn para delinear las acciones
futuras en el terreno de sistemas de indicadores edu
cativos que posibiliten el monitoreo del cumplimiento
del derecho a la educacin en Mxico.
La evaluacin para todos
El hecho de no ser juez y parte, y la condicin de

autonoma tcnica, permite que el inee sea un faro. El
gobierno de la educacin pblica debe estar basado en
evidencia, no en ocurrencia, y mucho menos como
an padecemos en algunos aspectos en la ventaja
poltica de grupos e individuos a la caza del poder. No
slo es necesario que se evale a todos los agentes re
levantes del proceso educativo, sino que la evaluacin
sea de todos, para tomar la decisin ms adecuada. La
educacin ser plenamente pblica cuando la evalua
cin sirva para corregir, ajustar, rendir cuentas y mejo
rar los procesos porque se conocen, difunden y entien
den sus resultados. La esperanza de que la evaluacin
no sea un reporte confidencial que el poderoso usa o
desecha a conveniencia, sino que nos ponga a todos en
presencia de todos, para dar nuestro mejor esfuerzo
y determinar un rumbo comn, es el mejor futuro del
Instituto, un futuro promisorio si consideramos los ex
celentes resultados de estos primeros diez aos.
Para Mexicanos Primero, el Instituto Nacional para la

Evaluacin de la Educacin es un motivo de orgullo y,
sobre todo, de esperanza. Es un mrito de su equipo
actual pero tambin de aquellos que participaron en
su diseo e instauracin mantener un efectivo com
promiso con el rigor, la imparcialidad y la profundidad
en la realizacin de sus tareas. Ese aplomo es motivo
de orgullo, pues los mexicanos podemos confiar en una
institucin que ofrece referentes vlidos en una are
na contendida y de innegable conflictividad como es la
marcha de la educacin obligatoria en Mxico.
Nuestra organizacin naci con una vocacin de ac
tivacin y corresponsabilidad ciudadana, y muy rpido
se hizo evidente que sin ganar acceso a conocimiento
experto sobre los recursos, los procesos y, en especial,
sobre los resultados educativos del pas, nuestra aspi
racin a una incidencia positiva en la poltica pblica
estara desfondada. El contacto con los investigadores
y funcionarios del inee nos permiti adentrarnos en la
complejidad de las diversas modalidades y contextos,
tomar conciencia de la desigualdad en los resultados
y poner atencin en la responsabilidad que compete
a cada entidad federativa cuando se diagnostica al
Sistema Educativo Nacional. Al darnos y pedirnos aclara
ciones, entendimos que el entusiasmo o la buena inten
cin no son sustitutos adecuados del conocimiento,
pero tambin pudimos expresar, con apasionamiento, la
aspiracin a que los resultados de la investigacin edu
cativa no sean patrimonio de un cuerpo cerrado de ex
pertos, sino elementos disponibles a todos, con opor
tunidad y claridad, para ilustrar una toma de decisiones
ampliada, verdaderamente democrtica.
As, el 2 de octubre de 2009 firmamos un conve
nio de colaboracin, y con entusiasmo hemos aprove
chado los nuevos enfoques en los estudios del Institu
to, especialmente porque unos y otros compartimos la
conviccin de que el referente fundamental no es un
buen servicio a cargo del Estado, sino un derecho ina
lienable de los nios y los jvenes, y que la estadstica
debe ser cuidada y exacta en su estimacin, pero tam
bin centrada en identificar personas y sus trayecto
rias, y no agregaciones abstractas que llenan informes
autoelogiosos de los gobiernos en turno.
Archivo Iconogrfico dgme/sep.
41

El inee y la definicin
del rezago educativo en la medicin

oficial de pobreza en Mxico
1 La autonoma del Coneval se basa en las decisiones que toman los investi
gadores acadmicos que conforman la Comisin Ejecutiva y quienes forman
mayora en el rgano de Gobierno que rige al Consejo.
42
greso de las personas; el rezago educativo; el acce

so a los servicios de salud, a la seguridad social, a los
servicios bsicos en la vivienda y a la alimentacin; la
calidad y los espacios de la vivienda, as como el grado
de cohesin social. La medicin de pobreza, enton
ces, incorpora un conjunto de indicadores que se aso
cian con elementos constitutivos de un piso mnimo
del ejercicio de los derechos humanos fundamentales.
Adicionalmente, la Ley establece que las mediciones
de pobreza deben efectuarse con una desagregacin
por entidad federativa cada dos aos y a escala muni
cipal con una periodicidad quinquenal.
En el contexto de una visin unidimensional de la
pobreza, Amartya Sen (1976)2 considera que un mto
do de medicin riguroso consta de dos fases: la identi
ficacin y la agregacin. La identificacin permite dife
renciar a las personas pobres de aquellas que no lo son,
lo cual requiere establecer un umbral de pobreza3. La
agregacin radica en establecer un conjunto de indica
dores poblacionales que permiten conocer el nmero
y porcentaje de personas pobres y determinar su nivel
de pobreza.
xico fue el primer pas en el mundo que

incorpor un conjunto de derechos sociales
en su Carta Magna (1917), con lo que insti
tucionaliz formalmente la aspiracin de justicia social
que anim la lucha de la Revolucin Mexicana. A pe
sar de ello, no fue sino hasta casi un siglo despus, en
2004, cuando se configura una visin de Estado de una
poltica social integral, al crearse la Ley General de De
sarrollo Social (lgds) con el propsito explcito de ase
gurar que toda la poblacin pueda ejercer plenamente
los derechos sociales establecidos en la Constitucin
Poltica de los Estados Unidos Mexicanos (cpeum).
La lgds establece la creacin del Consejo Nacio
nal de Evaluacin de la Poltica de Desarrollo Social
(Coneval) como un organismo pblico que goza de
autonoma tcnica y de gestin. El Coneval tiene dos
atribuciones legales: la primera consiste en normar y
coordinar la evaluacin de la poltica social, y la segun
da, en establecer los lineamientos y criterios que rigen
la definicin, identificacin y medicin de pobreza en el
pas. Para el desarrollo de esta tarea debe asegurarse
la transparencia, objetividad y rigor tcnico1. La lgds
determina tambin los requisitos que debe satisfacer
la medicin de la pobreza, entre ellos, los indicadores, la
periodicidad, la desagregacin territorial y las fuentes
de informacin.
Existe una larga tradicin acadmica que concibe
la pobreza bajo una perspectiva monetaria, en la cual
las personas pobres son quienes no cuentan con los
recursos monetarios suficientes para satisfacer sus ne
cesidades bsicas. Esa concepcin se sustenta en la cen
tralidad de la capacidad adquisitiva de la poblacin para
estructurar su bienestar y calidad de vida. No obstante,
en los ltimos aos ha surgido con fuerza una visin de
la pobreza que, adems de reconocer la relevancia del
ingreso, propugna por considerar otras dimensiones
asociadas al bienestar y al desarrollo humano, como la
educacin y la salud, entre otras.
Precisamente una perspectiva multidimensional de
la pobreza es la que defini el Congreso de la Unin
en la lgds, al determinar que en su medicin deben
considerarse al menos los siguientes elementos: el in
Por otra parte, la identificacin en un mtodo mul

tidimensional de medicin de pobreza debe responder,
adicionalmente, a las siguientes cuestiones: definir con
precisin las dimensiones que se utilizarn, as como
sus indicadores respectivos; establecer los umbrales
2 Sen, Amartya (1976). Poverty: An Ordinal Approach to Measurement,
Econometrica, vol. 44, Nm. 2, pp. 219-231.
3 En la visin monetaria, el umbral de pobreza es la lnea de pobreza que se
determina a partir del valor monetario de una canasta de bienes alimenta
rios y no alimentarios.
4 Alkire, Sabina y James Foster (2007). Counting and Multidimensional Po

verty Measurement, ophi Working Paper Series, ophi Working Paper, p.
7. Oxford: Oxford Poverty & Human Development Iniative (ophi),
5 Puede demostrarse que el mtodo de medicin oficial de la pobreza sa
tisface dichas propiedades. Los detalles especficos se pueden consultar
en Metodologa para la Medicin Multidimensional de la pobreza en Mxico
(2010), disponible en www.coneval.gob.mx
6 Estos principios constituyen el eje normativo del quehacer institucional del
sector pblico a partir de la Reforma.
tiempo, el inee defini un conjunto de indicadores tc

nicamente rigurosos, precisos y robustos; despus de
una exhaustiva revisin, present la Norma de Escola
ridad Obligatoria del Estado Mexicano (neoem) como
el referente fundamental para la definicin y construc
cin del indicador de rezago educativo en la medicin
de pobreza.
La concepcin de la neoem toma en cuenta los
cambios constitucionales en la definicin de la educa
cin bsica prevalecientes hasta 20097, es decir, el es
tablecimiento de la educacin secundaria como parte
de la educacin bsica desde 1993, y de la educacin
preescolar a partir de 2002. Segn esta norma, una
persona tiene rezago educativo si se encuentra en al
guna de las situaciones siguientes: 1) si tiene entre tres
y cinco aos de edad y no asiste a la escuela; 2) si tiene
16 aos o ms, naci antes de 1982 y no complet la
primaria, o 3) si es mayor de quince aos, naci a partir
de 1982 y no complet la educacin secundaria.
Como el resto de los indicadores que conforman la
metodologa de medicin, el indicador de rezago edu
cativo satisface ciertas propiedades axiomticas, como
la posibilidad de comparar las tendencias en el tiempo
y su desagregacin espacial, entre otras.
En sntesis, podemos decir que el inee jug un papel
fundamental para la definicin de la medicin oficial de
la pobreza, ya que los criterios conceptuales y metodo
lgicos de la neoem permitieron precisar no slo un indi
cador tcnicamente riguroso, sino sentar una slida base
institucional para actualizar el umbral de rezago educa
tivo ante la reciente Reforma Constitucional que esta
blece la obligatoriedad de la educacin media superior.
para determinar si una persona padece privacin o ca

rencia en cada uno de ellos, y determinar la importan
cia relativa de cada indicador y la expresin matemtica
que los relaciona.
Un mtodo riguroso de medicin de la pobreza en
la fase de agregacin debe satisfacer tambin ciertas
propiedades axiomticas, entre ellas, ser comparable
en el tiempo y permitir conocer la contribucin de los
diferentes grupos poblacionales y las dimensiones a la
determinacin del nivel de pobreza4.
La actual medicin de pobreza en Mxico es re
sultado de un intenso proceso de investigacin llevado
a cabo entre 2006 y 20095, cuyo componente fun
damental fue la definicin de los indicadores que se
incorporaran a la medicin y la especificacin de los
umbrales el piso mnimo del ejercicio de los dere
chos sociales que seran utilizados para identificar
a las personas con carencias monetarias (ingreso) o
sociales (indicadores de rezago educativo, salud, segu
ridad social, vivienda y alimentacin).
Como institucin pblica, el Coneval decidi
que la metodologa de medicin habra de adoptar
como base el marco normativo del Estado mexicano
y cuatro principios fundamentales de los derechos
humanos: la universalidad, la indivisibilidad, la interde
pendencia y la progresividad, principios que en 2011
fueron incorporados al Artculo Primero de la cpeum
como parte de la Reforma Constitucional de los De
rechos Humanos6 .
En consecuencia, se determin que los indicadores
que se utilizaran en la medicin de la pobreza seran
los que establece explcitamente la lgds. Respecto a los
umbrales, se definieron cuatro criterios aplicables en
orden de prelacin: 1) utilizar normas legales, si exis
tan; 2) consultar a las instituciones pblicas especia
lizadas en la materia, v. gr. educacin, salud, vivienda;
3) utilizar mtodos estadsticos, y 4) tomar una decisin
por consenso de la Comisin Ejecutiva del Coneval.
Por lo que respecta al indicador de rezago educa
tivo, se tom en cuenta que el artculo tercero de la
Constitucin establece que la educacin bsica debe
ser universal, obligatoria y gratuita, y que el Instituto
Nacional para la Evaluacin de la Educacin (inee) es
una institucin del Estado que provee informacin para
el fomento de una educacin de calidad en Mxico.
As, entre 2007 y 2009 el inee a travs de la
Direccin de Indicadores Educativos y el Coneval
conformaron un grupo de trabajo con el objetivo de
proponer el indicador de rezago educativo que se uti
lizara en la medicin oficial de pobreza. Durante ese
7 Ao en que se aprob la metodologa de medicin de la pobreza.

43

La importancia del trabajo
conjunto del inee y la Direccin General

de Planeacin de la sep
a creacin del inee constituy una importante

respuesta a una de las principales demandas
que reclama la sociedad: mejorar el logro edu
cativo, principalmente en la educacin bsica, as como
eficientar este servicio para que permita, entre otras
cosas, un mejor aprovechamiento del gasto pblico.
Las ltimas dcadas del siglo pasado experimentaron
la gran expansin de la educacin primaria y secun
daria, y de manera ms reciente el crecimiento de la
educacin preescolar, cuya obligatoriedad se decret
en 2004. Podemos decir que actualmente la educacin
bsica casi ha alcanzado su cobertura universal, y que el
reto ahora es lograr que sea de calidad. Es aqu donde
el Instituto Nacional para la Evaluacin de la Educacin
tiene un importante papel no slo
para apoyar en la evaluacin de las
polticas, sino tambin como un ac
tor externo a la Secretara de Edu
cacin Pblica que se encarga de
informar a nuestra sociedad sobre
los logros educativos del pas.
El objetivo y las atribuciones
que dan origen al inee han impli
cado un importante acercamiento
con la Direccin General de Pla
neacin (dgp) de la sep, instancia
integradora y generadora de informacin vital para co
nocer la evolucin, los alcances, logros y retos a los que
se enfrenta el Estado respecto del Sistema Educativo
Nacional (sen).
Sin duda alguna, la dgp se constituye como una de
las principales fuentes para los trabajos y las publica
ciones que realiza el inee, al producir las estadsticas
oficiales de todas las escuelas que conforman el siste
ma educativo. Esta informacin permite construir los
principales indicadores relativos a las coberturas, el
flujo escolar y la eficiencia con la que operan los ser
vicios educativos; el trabajo continuo ha posibilitado
tambin la construccin de las series histricas de los
servicios otorgados y, a su vez, la elaboracin de
los pronsticos de la matrcula escolar para orientar las
polticas pblicas y conocer las alternativas de evolu
cin de este servicio.
Podemos afirmar que en los ltimos aos, la eva
luacin se ha convertido en una de las principales es
trategias de los programas de gobierno, tanto a nivel
federal como de las entidades federativas. Este factor
adquiere mayor relevancia cuando el servicio educati
44
vo manifiesta contrastes muy importantes entre las di

ferentes regiones del pas, ya sea entre estados, entre
zonas urbanas y rurales, o entre diferentes sectores
de la poblacin (nios y jvenes con necesidades espe
ciales, poblacin indgena, poblacin con alto grado de
dispersin, migrantes, etctera).
El trabajo conjunto del inee y la dgp se ha traducido
tambin en el fortalecimiento de los procesos de ge
neracin de estadsticas y construccin de indicadores,
ya que el Instituto se ha convertido en un importante
actor crtico para la mejora de la informacin del sen.
Como parte de este esquema de coordinacin,
puedo mencionar la publicacin Sistema de Indicadores
Educativos de los Estados Unidos Mexicanos para el ci
clo escolar 2004-2005. sta repre
senta hoy un importante punto de
referencia para quienes requie
ren conocer las caractersticas y
la forma de construccin de los
indicadores que dan cuenta del
desarrollo educativo.
Ms recientemente, y como
parte del proceso de fortalecimien
to de la evaluacin educativa, la
dgp ha efectuado un anlisis para el
rediseo de los formatos 911, me
diante los cuales se recaba la informacin estadstica
de todos los planteles que conforman el sen. El inee
particip en la elaboracin de un proyecto de rediseo
de este sistema de informacin que, sin duda alguna, en
el futuro permitir atender esta nueva dimensin de las
polticas pblicas. Estas actividades, en las que contribu
yen diversas reas, organismos y autoridades educati
vas de los estados, se han realizado con un importante
enfoque de objetividad y asimismo, se ha definido de
manera conjunta y con una visin integral el desarrollo
del sistema de informacin que opera la dgp, que re
presenta una herramienta de gran importancia para los
diversos procesos de planeacin, administracin, con
trol y evaluacin del sistema educativo, as como de la
rendicin de cuentas.
Ser de vital importancia mantener la estrecha coor
dinacin entre el inee y la dgp con el fin de impulsar una
mejora continua en las actividades de generacin de
estadsticas y construccin de indicadores educativos.
Hoy, la evaluacin debe ser un elemento de alta
prioridad en las polticas de Estado; el papel del inee
ser decisivo para impulsar su adecuado desarrollo.
La contribucin del inee al desarrollo
de un sistema de indicadores para apoyar la mejora de la

calidad de la educacin bsica y media superior en Mxico
de la informacin que se produce en el pas, con el ob

jeto de generar informaciones fundamentales para el di
seo, evaluacin y seguimiento de las acciones pblicas.
Para asegurar su uso, los sistemas de indicadores
deberan ser incluidos en el Sistema Nacional de In
formacin Estadstica y Geogrfica (snieg); de esta
manera, pueden ser considerados oficiales para la fe
deracin, estados, Distrito Federal y municipios, y de
uso obligatorio en los trminos que establece la ley del
mencionado Sistema.
La finalidad del snieg es suministrar a la sociedad
y al Estado datos de calidad e informacin pertinente,
veraz y oportuna, a efecto de coadyuvar al desarrollo
nacional. Las contribuciones entre el snieg y el inee son
indispensables en la dinmica de la generacin y evalua
cin del Sistema Educativo Nacional.
El sistema de indicadores del inee debe formar
parte de los insumos clave del sector, incorporndolo
como informacin de inters nacional. Ello permitir
garantizar su continuidad temporal y la generacin de
informacin histrica y consistente de aspectos clave
para realizar el monitoreo y evaluacin peridica de la
calidad de la educacin. Asimismo, permitir a las auto
ridades educativas profundizar en el diseo de acciones
para la mejora en la calidad educativa del pas.
Evaluar los resultados de la educacin formal que reci

be la poblacin del pas, en un contexto donde conflu
yen factores internos y externos al sistema educativo,
plantea un sinnmero de retos que deben ser atendi
dos de forma peridica. Del mismo modo, el diseo de
estrategias que den respuesta a los problemas que han
impedido contar con la educacin de calidad que se re
quiere, debe estar basado en un diagnstico continuo y
oportuno que suministre informacin objetiva.
Desde hace una dcada, el Instituto Nacional para
la Evaluacin de la Educacin se ha dado a la tarea
de detectar las dimensiones problemticas del desem
peo escolar, principalmente en la educacin bsica
y recientemente en la educacin media superior. Se
orienta por un modelo de evaluacin de la calidad del
sistema educativo, el cual sustenta sus lneas de trabajo
para desarrollar un sistema de indicadores, pruebas de
aprendizaje y estudios de evaluacin de escuelas.
El sistema de indicadores en su conjunto est dise
ado para apoyar la evaluacin de la calidad educativa
desde una perspectiva integral, ya que se concibe bajo
un esquema multidimensional que comprende la re
levancia, la eficacia interna y externa, el impacto, la
equidad y la eficiencia. Esto contribuye a detectar y
dimensionar los problemas del proceso y desempeo
educativos, adems de proveer informacin pertinente
y oportuna para la planeacin y toma de decisiones.
Algunos de los principales retos que enfrenta el
sistema de indicadores son: la actualizacin de los da
tos estadsticos; la atencin de los nuevos temas que
surgen de la propia dinmica demogrfica, social y
econmica del pas, y la consideracin del enfoque de
las polticas educativas. En este contexto, el sistema
de indicadores para apoyar la mejora de la calidad de
la educacin requiere de instrumentos y mecanismos
estadsticos que permitan consolidar la informacin ac
tual en que se basa, fortalecer el diseo de nuevos in
dicadores con mayor pertinencia y utilidad, y tambin
asegurar la oportunidad de su difusin, adems de su
confiabilidad y accesibilidad.
En ese sentido, los esfuerzos del inee se comple
mentan con las acciones del Inegi encaminadas a nor
mar y regular la captacin, procesamiento y publicacin
45

El inee en el panorama
iberoamericano:
perspectivas para la prxima dcada

46
onoc el proyecto del inee cuando apenas se

estaba gestando, incluso antes de haberse
procedido a su constitucin formal. Como
primer director del Instituto Nacional de Calidad y Eva
luacin (ince) de Espaa y chairperson, por entonces,
de la International Association for the Evaluation of Educational Achievement (iea), segu con inters el proceso
de puesta en marcha del nuevo organismo. Despus,
como miembro del Consejo Tcnico del Instituto entre
2002 y 2006, tuve ocasin de conocer ms a fondo sus
primeros proyectos y sus planteamientos instituciona
les y tcnicos, as como de implicarme en sus tareas.
Debo reconocer abiertamente que tengo simpata
por el inee: aprecio el trabajo que ha venido desarrollan
do, los estudios que ha producido y las contribuciones
que ha realizado. Pero creo ser justo si digo que esa
valoracin positiva no es fruto simplemente de mi indu
dable cercana a l y a sus responsables, sino que est
basada en un anlisis desapasionado. Estoy convencido
de que su aportacin al desarrollo de la evaluacin de
la educacin en Mxico ha sido muy valiosa y ha contri
buido a impulsar este campo.
De todos modos, no abordar en estas pginas el
anlisis de los logros alcanzados, que me parecen mu
chos y notables. Otros autores lo hacen en este mismo
volumen con rigor y solvencia. El encargo que he reci
bido tiene un propsito ms concreto, vinculado al
anlisis del papel que puede desempear el
inee en Iberoamrica, y en eso me centrar.
Lo primero que debo decir es que la
evaluacin de la educacin ha experimen
tado un desarrollo decidido en Iberoam
rica durante las dos ltimas dcadas. Si
bien es cierto que algunos pases comen
zaron incluso antes de los aos noventa
a evaluar sus sistemas educativos, fue en la
ltima dcada del siglo xx y en la primera del xxi
cuando asistimos a una expansin sin precedente de
este campo y al fortalecimiento de estas tareas a escala
regional. Aunque tuviese valiosos antecedentes, como
los trabajos que vena realizando la Direccin General
de Evaluacin de la Secretara de Educacin Pblica, la
creacin del inee se inscribi en esta tendencia.
Es indudable que a lo largo de su primera dcada
de existencia, el inee ha desarrollado importantes pro
yectos de evaluacin al servicio del sistema educativo
mexicano. Pero desde su creacin no ha dejado de
lado la vertiente internacional de su actuacin, a la que
ha concedido un lugar relevante en sus planes de tra

bajo. Baste recordar en ese sentido su destacada parti
cipacin en el estudio pisa, llevado a cabo por la ocde,
en cuya realizacin se ha comprometido persistente
mente. Los colegas de otros pases han reconocido su
relevante participacin y han asignado al Instituto, o
a sus representantes, un lugar destacado en diversas
instancias internacionales.
Tambin en el mbito iberoamericano, el inee ha
desarrollado una actuacin sobresaliente. Por una par
te, ha participado activamente en las tareas del Labo
ratorio Latinoamericano de Evaluacin de la Calidad de
la Educacin (llece), promovido por la unesco-orealc.
Por otra, ha impulsado la constitucin y el trabajo del
Grupo Iberoamericano de pisa (gip), que ha llevado a
cabo importantes anlisis regionales sobre los resulta
dos logrados por los pases participantes. Ese tipo de
actuaciones le ha permitido adoptar una perspectiva
internacional y, al mismo, tiempo conseguir un mereci
do reconocimiento ms all de las fronteras mexicanas.
Esa fortaleza deber ser utilizada de manera pro
ductiva en el mbito regional iberoamericano durante la
prxima dcada. Las condiciones son especialmente fa
vorables, debido sobre todo al impulso que est toman
do el proyecto Metas Educativas 2021. La educacin que
queremos para la generacin de los bicentenarios, y a la
necesidad de llevar a cabo su seguimiento y evaluacin.
En efecto, la Cumbre Iberoamericana de Jefes y Je
fas de Estado y de Gobierno, celebrada en diciembre
de 2010 en Mar del Plata, Argentina, aprob la puesta
en marcha de dicho programa de cooperacin, cuya
gestacin haba comenzado en 2008. Durante un pe
riodo de dos aos, la oei promovi un interesante de
bate en el que participaron numerosos actores de la
educacin de esa regin, contando con el estmulo y
1 http://www.oei.es/metas2021/libro.htm
2 http://www.oei.es/noticias/spip.php?article9489
ha sido invitado a colaborar en la evaluacin y segui

miento de las Metas 2021 y el inee se ha sumado a la
empresa. Ello implica la aportacin de algunos recur
sos profesionales y, sobre todo, de la experiencia y las
capacidades disponibles.
No cabe duda de que el inee ha construido una s
lida base tcnica e institucional a lo largo de su primera
dcada de vida, durante la cual se ha convertido en un
actor relevante en el mbito internacional de la evalua
cin educativa. Aunque todava tenga espacio para con
tinuar su desarrollo, es ya una institucin bien ubicada
que ha ganado credibilidad en este campo tan compli
cado y resbaladizo. se es su mayor activo, y sobre l
puede seguir construyendo y mirando hacia el futuro.
En ese contexto, sera muy deseable que los pro
gramas iberoamericanos pudieran contar con la co
laboracin del inee, no simplemente como un actor
adicional en esta tarea colectiva, sino asumiendo un
papel destacado en la misma. La experiencia que ha
adquirido es ya importante, los equipos tcnicos que
ha consolidado son solventes y estn bien capacita
dos, ha desarrollado proyectos complejos en Mxico,
y est en buenas condiciones para aportar sus capaci
dades para la mejora de la evaluacin de la educacin
a escala iberoamericana.
Desde mi punto de vista, sa es la perspectiva que
el inee tiene por delante para la prxima dcada. Sin
duda, tendr que responder a desafos vinculados al
refuerzo de su misin, especficamente mexicana, y
habr de continuar construyendo nuevas capacidades
tcnicas que le permitan desarrollar proyectos punte
ros en evaluacin. Pero en este mundo global en que
nos movemos y en el contexto iberoamericano en
que se plantean metas educativas exigentes, su impli
cacin en las tareas de cooperacin y apoyo mutuo
para la mejora resulta ineludible.
Taller de Evaluacin
de Impacto bid, 2012.
el apoyo de la Conferencia de Ministros y Ministras de

Educacin. Ese proceso de dos aos culmin en 2010
con la propuesta y aprobacin del nuevo programa.
Las Metas Educativas 2021 han establecido un mar
co de colaboracin entre los pases iberoamericanos
para conseguir un desarrollo sostenido de sus siste
mas educativos durante la presente dcada. Los obje
tivos planteados estn orientados a superar los dficits
pendientes del siglo xx, al tiempo que se afrontan los
nuevos desafos planteados en el siglo xxi. Se trata de
cerrar la brecha que separa en materia de educacin
a Iberoamrica respecto de los pases avanzados, as
como de promover la mejora en este campo. Con
ese propsito, el programa ha establecido once me
tas generales, desdobladas en 28 especficas, que se
concretan en un conjunto de 39 indicadores con sus
correspondientes niveles de logro, con objeto de per
mitir valorar su nivel de consecucin1.
La novedad de este programa, respecto de otros si
milares apoyados por diversos organismos internaciona
les, consiste en que pretende combinar la definicin de
unas metas comunes para el conjunto de la regin con
el reconocimiento de la diversidad de situaciones nacio
nales y, en consecuencia, de la multiplicidad de lneas de
actuacin. Las Metas Educativas 2021 son un marco ge
neral en el que cada pas puede y debe integrar sus pro
pios objetivos, formulando sus prioridades especficas.
Desde este punto de vista, la cooperacin internacional
no significa actuar de manera uniforme, sino compartir
una misma orientacin y apoyarse mutuamente para la
consecucin de metas convergentes.
El diseo novedoso de este programa regional de
cooperacin plantea algunos desafos importantes. En
tre ellos, cabe destacar la necesidad de contar con un
buen sistema de evaluacin y seguimiento que permita
monitorear el proceso que siguen los diferentes pases
y valorar los logros que alcanzan. Dada la combinacin
de diversidad y convergencia que implica este modelo,
el diseo de dicho sistema resulta clave, aunque sea
ciertamente complejo. La tarea ya se ha iniciado; su pri
mer fruto fue el informe que lleva por ttulo Miradas
sobre la educacin en Iberoamrica 20112.
El desarrollo de esta tarea de evaluacin y segui
miento debe, necesariamente, ser abordado de forma
colectiva por varios socios. Por una parte, la Organi
zacin de Estados Iberoamericanos (oei) ha puesto
en marcha y sostiene el funcionamiento del Instituto
de Evaluacin y Seguimiento de las Metas Educativas
(iesme), que cuenta con un Consejo Rector compues
to por los responsables de los organismos dedicados
a la evaluacin o la estadstica de los Ministerios de
Educacin participantes. Por otra parte, algunos pases
se han implicado ms decididamente en esa tarea, a
travs de las aportaciones que realizan sus institucio
nes seeras en estos campos. Concretamente, Mxico
47
Captulo
La evaluacin de resultados
nacionales de aprendizaje
Andrs Snchez Moguel
n 2005, cuando por primera vez se aplicaron los Exmenes para

la Calidad y el Logro Educativos (Excale), el contexto de la
evaluacin a gran escala en Mxico era muy diferente al actual.
Ya entonces exista una demanda importante de informacin sobre los aprendizajes alcanzados por los alumnos de educacin
bsica, pero la prueba enlace, que hace la Direccin General de
Evaluacin de Polticas de la sep, an no exista y las Pruebas
de Estndares Nacionales presentaban limitaciones tcnicas1.
Los propsitos del inee al desarrollar evaluaciones del aprendizaje fueron entonces, y siguen siendo, conocer el rendimiento
acadmico de los alumnos y, al mismo tiempo, explorar los factores de su contexto, para emitir juicios de valor sobre este aspecto del Sistema Educativo Nacional (sen), y de esa manera, apoyar
la toma de decisiones documentada, as como rendir cuentas a la
sociedad sobre el estado que guarda la educacin.
Una intencin explcita de estas pruebas, que Arturo de la Orden ana
liza con detalle en su colaboracin para este volumen, es la comparabilidad
en el tiempo. La decisin de alinear los Excale al currculo nacional obedece
a la intencin de obtener informacin que pueda responder a las preguntas:
en qu medida se estn alcanzando los aprendizajes pretendidos? y qu
tanto se est dotando a los estudiantes de los conocimientos y habilidades
que se establecen, de facto, como un aspecto del derecho a la educacin?
1 El escrito de Felipe Martnez Rizo en este mismo documento da cuenta con mayor detalle sobre el
contexto de la evaluacin en Mxico a inicios del siglo XXI.
50
Codificacin de Excale
Preescolar, 2011.
sin del trabajo en grupo que se ha llevado a cabo para

desarrollar nuestras pruebas2.
El ejercicio de diseo colegiado sigue siendo intenso
cada ao. Casi al mismo tiempo en que se termin una
serie completa de las pruebas alineadas al currculo de
1993, ste cambi y hubo que iniciar una nueva serie.
Actualmente se desarrollan ya las pruebas correspon
dientes a tercero de secundaria y se encuentran en
proceso de construccin las que estarn alineadas al
currculo de tercero y sexto de primaria.
Desde los primeros aos supimos que una de las
principales dificultades al comunicar los resultados de
los Excale est en expresar claramente cul es su ob
jeto de anlisis. Aunque se ha explicado de diversas
formas, incluyendo las metforas3, an no es claro para
En un primer momento, el trabajo realizado en la

Direccin de Pruebas y Medicin estaba enfocado a de
sarrollar un mtodo adecuado para tener instrumentos
de alta calidad, basado en los avances internacionales
sobre diseo de pruebas criteriales, tal como Eduardo
Backhoff seala en su escrito, en este mismo documento.
Es destacable, en esta primera etapa, el gran apoyo
que recibimos de diferentes actores educativos, mu
chos de ellos con visiones encontradas, pero dispues
tos a la discusin acadmica para llegar a consensos:
diseadores del currculo, autores de libros de texto,
acadmicos, profesores y directores de escuela, que ge
nerosamente aceptaron nuestras invitaciones a discutir,
a veces en jornadas extenuantes, los detalles que poco a
poco conformaron las primeras versiones de los Excale,
alineados al currculo de 1993 (vigente en ese momen
to) y aplicados durante los primeros aos de existencia
del inee. En ocasiones logramos que se sentaran a dialo
gar personas y grupos que previamente tenan reservas
entre s. Este trabajo colegiado, que consiste en incluir
tantas perspectivas sensatas distintas como sea posible,
contina. Aproximadamente 50 personas externas han
participado con sus anlisis y aportaciones en la factura
de cada Excale. Consideramos esta parte del trabajo
como una gran fortaleza del proceso de construccin
de pruebas nacionales; la participacin, por ejemplo, de
profesoras y profesores de las 32 entidades federativas,
de educacin indgena, rural, urbana pblica y privada,
en la validacin de los reactivos que se utilizarn en los
exmenes, nos aporta ciertas garantas de que lo que
se pregunta a los estudiantes de todo el pas es perti
nente. Las contribuciones de Noem Garca y Gabriel
Ojeda a este informe se centran justamente en su vi
2 Adems del trabajo de especialistas externos, son varias las reas del Ins
tituto que participan en los Excale; es destacable el enorme esfuerzo que
hace la Direccin de Administracin y Finanzas para resolver los contratos
y solicitudes de materiales y servicios ante una normatividad francamente
complicada, y el gran apoyo que ofrece la Direccin de Informtica para
automatizar procesos y capturar grandes volmenes de pruebas y cuestio
narios con confiabilidad.
3 Por ejemplo, se pueden equiparar los usos correctos de los Excale con la
labor de un epidemilogo. Dicho especialista no busca conocer el estado
de salud de cada persona, sino reconocer la distribucin, la frecuencia y el
movimiento de diferentes enfermedades en las poblaciones como conjun
to. Los estudios de este tipo llevan a acciones conjuntas, no individuales,
como campaas de vacunacin o cercos sanitarios.
51
La evaluacin de resultados nacionales de aprendizaje
Nota del peridico La Jornada

sobre aplicacin de Excale, 2006.
52
mucha gente que los Excale no hacen una evaluacin

de los estudiantes, sino del Sistema Educativo Nacional
con respecto al logro escolar que se alcanza. A lo largo
del tiempo, hemos recibido muchas solicitudes para
dar informacin sobre escuelas o estudiantes especfi
cos, pero el diseo de estas pruebas no permite ofre
cer datos a estos niveles de desagregacin. Los Excale
se aplican a una muestra de escuelas; en cada una, slo
unos 35 estudiantes son seleccionados para responder
los formatos; son matriciales, lo cual significa que cada
alumno responde nicamente una pequea parte del
total de reactivos de una de las cuatro asignaturas que
se evalan cada ao. De este modo, por ejemplo, slo
unos ocho o nueve estudiantes de una misma escuela
responden el Excale de Espaol, y cada uno de ellos
responde apenas una cuarta
o quinta parte de lo que se
evala, de tal manera que,
por escuela, slo se renen
una o dos respuestas a cada
pregunta de dicha prueba.
Es claro que esta informa
cin no es suficiente para
decir algo certero ni de los
alumnos que las contesta
ron ni de las escuelas que
participaron; pero agrupa
dos, sus datos son de gran
valor para estimar el logro
que tienen los estudiantes
en los niveles nacional, es
tatal, y por algunos tipos
y modalidades escolares.
La aparicin en 2006
de la prueba enlace, con propsitos y diseo muy dis
tintos a los de Excale, ha disminuido la presin para que
stos den resultados por alumno.
El reverso de la moneda es aportado por quienes
han dicho que, debido a que Excale no se aplic en su
escuela, los resultados no les aluden, lo cual tampoco
es cierto, pues la muestra est calculada para darnos
una buena aproximacin del logro a nivel nacional, y
en muchas ocasiones estatal, de modo que los resul
tados obtenidos hablan de lo que se aprende en las
diferentes aulas del pas.
La existencia simultnea de enlace y Excale causa
desconcierto. Por qu hacer dos pruebas nacionales
alineadas al currculo? enlace se aplica censalmente y
permite obtener informacin por alumno, mientras
que sus resultados agrupados pueden tener sesgos
muy difciles de estimar (por ejemplo, al no estar
cuantificada la proporcin de estudiantes de diferen
tes subpoblaciones que no participan en la prueba).
Por el contrario, Excale, como se menciona arriba, no
permite dar resultados por alumno, pero s agregados
nacional y estatalmente. La prueba desarrollada por
la sep, al ser aplicada a cada alumno con la intencin
de dar resultados individuales, considera una cantidad

acotada de contenidos curriculares, mientras que la del
inee, debido a su arreglo matricial, puede incluir ms
preguntas y por tanto abarcar porciones mayores del
currculo. Algunos usos de enlace la hacen una prue
ba de alto impacto (por ejemplo, al utilizar los resul
tados de los alumnos como componente de Carrera
Magisterial), mientras que Excale es de bajo impacto.
Finalmente, esta ltima incluye algunos elementos que
seran muy difciles y costosos de aplicar en una prueba
censal, como son la evaluacin de nios de tercero de
preescolar, y la de contenidos que requieren una res
puesta construida amplia, como la Expresin escrita.
Visibilizar estas diferencias para mostrar los mbi
tos de competencia y usos pertinentes de cada prue
ba no ha sido fcil. El inee y la Direccin General de
Evaluacin de Polticas han realizado esfuerzos en los
ltimos aos por hacer una reflexin conjunta de estos
temas y buscar elementos de dilogo, con el fin de
generar cierta complementariedad en las informacio
nes que ambas ofrecen. Estos trabajos an estn por
dar su fruto.
Aumentar los usos correctos de la informacin que
los Excale aportan al sen ha sido una preocupacin
constante. No nos cabe duda de que la informacin re
sultante puede ser de gran utilidad para el desarrollo de
polticas educativas relacionadas con la formacin inicial
y continua de los docentes, con el diseo curricular y de
materiales educativos, y con la focalizacin de esfuerzos
en determinadas entidades y modalidades educativas.
La informacin sobre factores asociados al logro, tema
al que el inee ha dedicado algunos volmenes, tambin
puede ser de uso regular cuando se reflexiona acerca
de las condiciones de gestin y organizacin escolar, y
sobre los programas de desarrollo social que benefi
cian a las familias de los estudiantes. Recientemente,
hemos buscado ampliar nuestra perspectiva sobre los
usos pedaggicos de los Excale.
En algn momento de la historia de la Direccin
de Pruebas pensamos que era posible que a partir de
los resultados en el logro, nosotros mismos pudi
ramos desarrollar sugerencias novedosas y certeras
de poltica educativa. Nuestros esfuerzos al respecto
no dieron el fruto esperado, pero nos ensearon que el
diseo de polticas requiere un panorama amplio de
informacin acadmica y poltica, as como el trabajo
de especialistas, al cual podemos contribuir slo con
determinados datos.
La aportacin de la Direccin de Pruebas debe in
cluir la capacidad de comunicar con oportunidad y cla
ridad los resultados de las pruebas a audiencias clave,
desafo que an hemos de superar:
Por diversas razones, en este momento tenemos
un rezago importante en el reporte de resultados
de las aplicaciones ms recientes de los Excale,
entre ellas, los cambios curriculares que sobrecar
Prueba Excale Ciencias.
simplistas de este tipo. Algo se ha avanzado en

este camino, pero todava no es suficiente.
Descifrar el significado de los informes Excale para
algunos resulta muy complejo an. Por ejemplo,
hay quienes tienden a asociar directamente los re
sultados con la calidad de la escuela o de los maes
tros, sin tomar en cuenta factores contextuales
que inciden en los mismos. El extremo contrario,
disociar totalmente los resultados escolares de la
responsabilidad que tienen los profesores y las es
cuelas, tampoco es deseable. Desde su creacin,
el inee ha buscado ofrecer informes equilibrados
que no caigan en ninguna de las dos posturas,
publicando, por ejemplo, anlisis de factores aso
ciados al logro. No obstante, debemos continuar
trabajando en este terreno.
garon al rea con la necesidad de hacer pruebas

alineadas a los nuevos programas. El rezago debe
resolverse, pues el sentido de la evaluacin est
en entregar resultados de manera tan fluida y
oportuna como sea posible.
La informacin que ofrecemos no siempre es sufi
cientemente clara. En ocasiones, la abundancia de
datos y precisiones dificulta la lectura de los mensa
jes centrales. Actualmente desarrollamos formatos
que permitan comunicar los resultados de manera
ms directa.
Los reportes de las pruebas Excale se han pre
sentado a muy diferentes audiencias, que incluyen
autoridades educativas, personal de las reas tc
nicas de la Secretara de Educacin Pblica y de
las secretaras estatales de educacin, profesores,
directivos y supervisores, investigadores educa
tivos, medios de comunicacin, entre otros. Sin
embargo, la interlocucin con estos grupos no se
ha consolidado como una prctica peridica, en la
que el anlisis conjunto de los resultados d lugar
a propuestas de mejora.
Ciertas audiencias an miran los resultados del lo
gro educativo desde una lgica deportiva, esto
es, como si fueran scores en una tabla de rankeos
para saber quin es el mejor y el peor de la tem
porada. Estos grupos no han logrado percibir la
informacin que se obtiene de las pruebas de lo
gro, como elemento de juicio para detectar forta
lezas y debilidades que conduzca a acciones para
la mejora. Est en las funciones del inee participar
en el establecimiento de una cultura de la eva
luacin que permita trascender interpretaciones
La preocupacin ante los desafos enunciados, as

como la reflexin constante en la interlocucin con di
ferentes actores educativos y ante los errores que he
mos cometido, nos han llevado a buscar nuevas mane
ras de trabajar en la tarea encomendada. En el reporte
de la aplicacin 2008 de Excale, se incluy un apartado
en el que explcitamente se enuncian usos adecuados e
inadecuados de las pruebas, con la intencin de evitar
53
Comit de
Formacin cvica
y tica.
interpretaciones errneas. En la bsqueda de mejores

usos de los datos, los reportes que estn preparndose
buscarn colocar ms claramente los mensajes centra
les, con textos breves y sustanciosos, as como grficas
que pretenden informar sin saturar.
Adems de estos cambios en los informes, la Direc
cin de Pruebas y Medicin trabaja en dos proyectos
especiales, cuyo cometido es fortalecer la calidad tcni
ca de las evaluaciones:
A partir de nuestro Plan Maestro de Desarrollo,
y tomando en cuenta solicitudes reiteradas para
reconocer las especificidades de las pruebas na
cionales con la poblacin indgena, estamos llevan
do a cabo, con la Universidad Autnoma de Baja
California, un estudio de factibilidad de adaptacin
del Excale de Pensamiento matemtico de prees
colar a la lengua y cultura maya.
Reconociendo la necesidad de hacer estudios de
validacin, se examina tambin el Excale de Len
guaje y Comunicacin de tercero de preescolar.
Particularmente nos interesa verificar que el turno
De 2003 a 2012, el inee ha realizado
15 levantamientos de datos piloto y

25 de datos definitivos.
54
que toman los nios para responder esta prueba

de ejecucin no provoca sesgos en los resultados.
Por otro lado, conviene comentar que el plan de
pruebas que se dise en 2004 ha sufrido algunos
cambios. Inicialmente, contemplaba una rplica cada
dos aos de las pruebas de sexto de primaria y tercero
de secundaria a una muestra relativamente pequea.
El anlisis de los resultados comparativos nos ha con
firmado que dos aos son muy pocos para dar cuenta
de cambios. Otra modificacin consiste en ampliar a
dos aos el tiempo dedicado al diseo de pruebas, lo
que permite una reflexin ms cuidadosa de lo que ha
de evaluarse y la mejor manera de hacerlo, y otorga
tiempos ms adecuados para desarrollar las versiones
finales, tras el anlisis de los resultados del piloteo.
Para terminar, me gustara destacar que en el cen
tro de la reflexin de quienes hacemos las pruebas
Excale, est la preocupacin por explorar de la ma
nera ms amplia posible, los usos adecuados de sus
resultados, comunicar ms claramente los hallazgos
fundamentales, prevenir contra las interpretaciones
incorrectas y continuar fortaleciendo la calidad tcni
ca del trabajo del inee. La Direccin de Pruebas y Me
dicin no tiene un trabajo rutinario que siga siempre
caminos conocidos. Desde que fui invitado a dirigirla,
he aprendido algo nuevo cada da, y todos los cola
boradores del rea han mostrado constantemente su
creatividad y capacidad de encontrar nuevos enfoques
para mejorar la interesante tarea de desarrollar prue
bas nacionales, que si bien no nos dicen nada sobre
alumnos individuales, s nos dicen mucho sobre el Sis
tema Educativo Nacional en su conjunto.
El anlisis curricular y los Excale

de Ciencias naturales
Noem Garca Garca
El imaginario
El primer borrador de este texto lo escrib en un viaje a

Paramaribo, Surinam. Les comparto esto porque quiz
algunos de ustedes no conozcan ese pas y de inmediato
habrn creado un imaginario de l; y es que cada uno
de nosotros, con los referentes que tenemos, creamos
imaginarios. Eso me pas en 2005 cuando por primera
vez el inee me invit a participar en el Comit Acadmi
co del Excale de Ciencias naturales.
Diversidad de experiencias
en los integrantes de los comits
Rigor y pertinencia metodolgica
Despus de varias horas de trabajo y de realizar en

sentido estricto un corte y pega de contenidos pro
gramticos en pliegos de papel, nos convencimos de la
pertinencia de la propuesta del inee e incorporamos
en ella cambios y precisiones. ste fue un buen inicio,
pues nos convencimos del rigor y la consistencia del
proceso metodolgico.
El anlisis curricular y los Excale
Cada experiencia en el diseo de los Excale ha sido di

ferente porque, si bien la tarea pareciera ser la misma,
ni las propuestas curriculares que son un referente
Una de las fortalezas de los comits est en sus inte

grantes, ya que participan diseadores de programas,
de materiales educativos, investigadores, maestros de
grupo de distintos niveles y especialistas. En 2005,
por primera vez el inee realiz un Excale de Ciencias
naturales y fue tambin la primera experiencia para
quienes participamos en su elaboracin. Cuando se
nos explic que el Comit Acadmico deba realizar el
anlisis del programa de estudios, la revisin de la ret
cula y la seleccin de contenidos que seran evaluados
los cuales se concentraran en la Tabla de conteni
dos, la tarea pareca sencilla, pues todos conocamos
muy bien los programas de la asignatura y los materia
les educativos. Sin embargo, en el momento que se
nos present la propuesta de retcula y la metodologa
con base en la cual se haba elaborado por el equipo
del inee, nosotros, al tener ideas divergentes, nos ne
gamos a aceptarla y nos dimos a la tarea de construir
la nuestra.
especfico con que trabajamos ni los actores que in

tegramos los distintos comits hemos sido los mismos.
El Plan y programas de estudio 1993, as como los
libros de texto de los alumnos y de los maestros fueron
los elementos bsicos para la construccin de los Excale
de Ciencias naturales de tercero de primaria en 2005, de
sexto de primaria en 2008 y de la reelaboracin del
Excale de tercero aplicado nuevamente en 2009.
En mi caso, como autora de libros para el maes
tro y coordinadora del equipo tcnico pedaggico de
los libros de texto, esta labor me demand la toma
de distancia y el anlisis crtico del currculo. La retcu
la nos permiti identificar fortalezas en la propuesta
curricular, pero tambin debilidades, por ejemplo, en
la secuenciacin, la graduacin de los contenidos y el
tratamiento de algunos temas en los materiales educa
tivos. Tngase presente que en el ao 2000 habamos
concluido el diseo de los libros para el maestro y para
los alumnos de primaria.
En el caso del Excale de tercer grado que se aplicara
en 2009, la experiencia tuvo otro matiz tanto para el
inee como para la sep, ya que en ese ao se estaba
implantando, en etapa de prueba en 5 mil escuelas,
una nueva propuesta curricular en 3 y 4 de primaria.
La oportunidad de conjugar el diseo de los nuevos
programas con el rediseo del Excale del mismo grado
elaborado en 2005, permiti obtener elementos para
la toma de decisiones, no slo respecto de la construc
cin del Excale, sino del nuevo currculo, cuya coordi
nacin acadmica estaba a mi cargo.
Actualmente, el diseo del Excale de Ciencias natu
rales 2011 de sexto de primaria nos representa un reto
y una oportunidad para indagar acerca del desarrollo
del Plan de estudios de Educacin Bsica 2011 y los
programas correspondientes.
Finalmente, concluyo expresando mi reconocimien
to al inee por la tarea que realiza y mi agradecimiento
por permitirme participar en este espacio de construc
cin y enriquecimiento.
55
Los retos que enfrent el inee

para evaluar el logro educativo
del Sistema Educativo Nacional
n febrero de 2004 fui nombrado titular de la

Direccin de Pruebas y Medicin (dpm). A sta
se le haba encomendado como tarea central
evaluar el aprendizaje que obtienen los estudiantes en
los niveles de educacin bsica y media superior. La
dpm tambin se propuso realizar estudios complemen
tarios que pudieran explicar las diferencias del logro
educativo en relacin con las condiciones socioeco
nmicas y escolares en que viven y estudian los alum
nos mexicanos. Todo lo anterior con el fin ltimo de
proporcionar informacin vlida y til para mejorar los
servicios educativos que se ofrecen en el pas y a la
vez coadyuvar a la rendicin de cuentas a la que tiene
derecho nuestra sociedad.
Para poder cumplir cabalmente con esta responsa
bilidad, era necesario contar con personal capacitado
en materia de evaluacin a gran escala. Especficamen
te, se requera personal altamente calificado en el cam
po de la psicometra y especialistas experimentados en
evaluar sistemas educativos completos.
Es importante decir que desde un inicio, la dpm
contaba con algunos profesionistas que haban par
ticipado de manera directa en diversos estudios na
cionales sobre aprovechamiento escolar, coordinados
por la entonces Direccin General de Evaluacin,
de la Secretara de Educacin Pblica. Aunque esta
experiencia era importante de inicio, a su vez era
insuficiente para afrontar los grandes retos que im
plicaba evaluar la calidad del Siste
ma Educativo Nacional (sen). Por
consiguiente, se tuvo que adoptar
un modelo y una metodologa que
posibilitara el cabal logro de los
propsitos de la dpm.
Este breve documento tiene la
intencin de describir la forma en
que fueron abordados y resueltos
los retos de mayor importancia
a los que se enfrent la dpm en el periodo 20042008: 1) definir una estrategia para evaluar al sen con
las limitaciones del personal disponible; 2) disear y
desarrollar un plan de evaluacin del aprendizaje de
largo plazo; 3) adoptar una metodologa robusta para
elaborar instrumentos de medicin vlidos y confia
bles, y 4) establecer lineamientos para interpretar y
difundir los resultados de las evaluaciones.
56
El primer gran reto que afront la dpm fue definir

la forma de evaluar al sen con las limitaciones del per
sonal antes sealadas. En estas circunstancias se opt
por aceptar que no se tena la experiencia ni el conoci
miento necesarios para disear y poner en marcha un
sistema de evaluacin nacional de logro educativo con
la calidad que se requera. Dos grandes ideas se adop
taron como ejes rectores para desarrollar el trabajo
de la dpm: 1) partir del estado del arte en materia de
evaluacin del aprendizaje en el mundo; es decir, apro
vechar al mximo las experiencias y los conocimientos
de otros sistemas de evaluacin nacionales e interna
cionales, y 2) realizar el trabajo de la dpm de manera co
legiada, con la ayuda y asesora de los mejores expertos
nacionales e internacionales disponibles.
Por lo anterior, fue necesario localizar a diversos
especialistas en evaluacin de sistemas educativos, con
dos propsitos: 1) contratar sus servicios para disear y
desarrollar los distintos productos requeridos en cada
una de las etapas del proceso evaluativo, cuando era
necesario por su complejidad y las limitaciones de tiem
po, y 2) recibir capacitacin y asesora para que el per
sonal del inee aprendiera la forma correcta de realizar
en un futuro estos trabajos sofisticados y complejos. El
modelo que utiliz la dpm oper de la siguiente manera:
1. Se reconoci una necesidad que no poda ser re
suelta por el personal disponible.
2. Se identific y contrat a expertos en la materia
para que le dieran solucin, con la ayuda de per
sonal tcnico de la dpm.
3. Se le solicit al mismo experto que capacitara a
los colaboradores que lo estaban apoyando.
4. Una vez capacitado el equipo del inee, ste realiz
el mismo trabajo en la siguiente ocasin, bajo la
supervisin del especialista.
5. Finalmente, los tcnicos de la dpm realizaron los
trabajos sin la supervisin de los expertos.
Con este esquema de contratacin y supervisin,
el inee logr disear y desarrollar el sistema de eva
luacin del aprendizaje adecuado para cumplir con las
funciones encomendadas, a la vez que capacit a su
propio personal en las tcnicas psicomtricas ms de
sarrolladas y sofisticadas en la actualidad. Es decir, en
muy poco tiempo, la dpm no slo desarroll su propio
Instituto para el Desarrollo de la Cultura Maya del Estado de Yucatn.
contestar estas preguntas, se analizaron distintos pro

gramas de evaluacin del aprendizaje de otros pases,
que compartan los propsitos centrales del inee. Espe
cialmente se analizaron dos de los ms consolidados en
el mundo: naep (Evaluacin Nacional para el Progreso
Educativo, por sus siglas en ingls), de origen estadouni
dense y pisa (Programa Internacional de Evaluacin de
Estudiantes, por sus siglas en ingls) de la Organizacin
para la Cooperacin y Desarrollo Econmicos (ocde).
De ambos programas se rescataron aquellos elemen
tos considerados prudentes, con el fin de garantizar
una experiencia evaluativa exitosa para Mxico.
Para disear el plan de evaluacin del aprendiza
je se parti del contexto educativo nacional y de sus
particularidades. Concretamente, se tom en cuen
ta que en el nivel de educacin bsica, el sen cuenta
con un currculo nacional y libros de texto gratuitos,
as como con un sistema ms o menos uniforme de
formacin de profesores. Se consider que en estas
circunstancias era pertinente evaluar los aprendizajes
que se establecen en el currculo nacional, entendido
ste en su acepcin ms amplia e inclusiva: planes y
programas de estudio, libros de texto para estudiantes,
libros para el profesor, y guas y fichas didcticas. Ante
la imposibilidad de evaluar todo en una sola prueba,
se evaluaron slo los dominios cognitivos de mayor
sistema de pruebas de logro, sino que adems se ubi

c en la vanguardia en las tcnicas de evaluacin del
aprendizaje a gran escala, indispensables para evaluar
sistemas educativos.
Por otro lado, para desarrollar muchos de los
productos y subproductos necesarios para disear y
construir instrumentos que midieran eficazmente el
aprendizaje que logran los estudiantes, fue necesario
contar con la participacin colegiada de una gran di
versidad de especialistas nacionales, conocedores del
currculo, de los dominios cognitivos por evaluar, as
como del contexto educativo nacional. Por dicha ra
zn, un denominador comn del trabajo de la dpm
fue solicitar el apoyo de las autoridades educativas
al mximo nivel (por ejemplo, Direccin General de
Desarrollo Curricular, Direccin General de Evalua
cin, y Direccin General de Materiales y Mtodos);
convocar a los especialistas nacionales expertos en
la teora y aproximaciones didcticas de los distintos
dominios curriculares a evaluar, a los representantes
de distintas instituciones educativas de gran prestigio
(por ejemplo, unam, Colmex, uam, Cinvestav), y con
tratar a una gran cantidad de profesores de educacin
bsica de todo el pas, con la experiencia y el saber
sobre la enseanza de los conocimientos y habilidades
que se requeran evaluar.
Otro reto que la dpm afront al inicio de su
gestin tuvo que ver con la definicin de un plan de
evaluacin que explicitara puntualmente: 1) los domi
nios cognitivos que se deberan evaluar, 2) los grados
escolares que deberan ser objeto de la evaluacin, y
3) el calendario de evaluacin detallado de cuando
menos una dcada, as como los meses del ao esco
lar en que se deberan realizar las evaluaciones. Para
Reunin de trabajo de
traduccin y adaptacin
de diez reactivos del Excale
a la lengua maya, 2012.
57
importancia (matemticas, espaol, ciencias sociales

y ciencias naturales). Asimismo, como las pruebas del
inee se consideran sumativas, se decidi evaluar a los
estudiantes de grados terminales de cada ciclo escolar,
adems del tercer grado de primaria. De esta manera
se establecieron intervalos escolares de tres grados: 3
de preescolar, 3 y 6 de primaria, 3 de secundaria
y 3 de bachillerato. Debido a que los conocimientos y
habilidades que adquieren los estudiantes no cambian
significativamente de un ao a otro, se consider per
tinente y econmico evaluar a los de un mismo grado
cada cuatro aos.
Una vez definidos los aspectos centrales de la eva
luacin (poblacin, contenidos y temporalidad), se
tuvo la necesidad de definir un esquema o calenda
rio de evaluaciones del aprendizaje que contemplara
la rotacin de grados y dominios cognitivos a evaluar
a travs del tiempo. Lo anterior se plasm en el do
cumento conocido como Plan General de Evaluacin
Reunin de
trabajo de Excale
Preescolar, 2008.
58
del Aprendizaje, elaborado en 2005, donde se deta

lla, justifica y documenta la racionalidad del sistema
de evaluacin adoptado por la dpm. Una caracterstica
sobresaliente de este plan es la posibilidad de darle
seguimiento a generaciones de estudiantes. Por ejem
plo, si en 2006 se evalu a los nios de tercero de
primaria, en 2009 a los de sexto, y en 2012 a los de
tercero de secundaria, aunque no son los mismos es
tudiantes puesto que las evaluaciones del inee son
muestrales, s es posible estimar lo que agregan tres
grados escolares en el aprendizaje de los estudiantes.
Una vez establecido el plan de evaluacin del
aprendizaje, el siguiente reto consisti en definir la
mejor manera de evaluar lo que aprenden los estu
diantes como producto de su escolaridad. Es decir,
se necesitaba contar con una metodologa robusta
para poder disear, construir, aplicar, analizar y validar
las pruebas o exmenes con las cuales se evaluara el
logro educativo de los estudiantes mexicanos. Estas
pruebas, conocidas por su acrnimo Excale (Exme
nes de la Calidad y el Logro Educativos), se definie
ron como pruebas criteriales, alineadas al currculo

nacional, con un formato matricial y, principalmente
de opcin mltiple, al tomarse en cuenta tanto las
necesidades nacionales como las mejores prcticas
evaluativas internacionales.
Estas pruebas son criteriales pues su intencin es
conocer en qu medida los estudiantes dominan los co
nocimientos y habilidades aprendidos en la escuela; es
decir, el criterio es la cantidad de material educativo que
los estudiantes en su conjunto dominan en cada asigna
tura. Son alineadas al currculo ya que Mxico cuenta
con planes y programas de estudio nacionales nicos
de educacin bsica, donde se establecen los conoci
mientos y habilidades que los nios y jvenes mexica
nos deben aprender, independientemente del tipo de
escuela en la que estudien. Son matriciales en el sentido
de que los conocimientos y habilidades del currculo se
exploran en una especie de matriz alumno-contenido,
donde algunos estudiantes contestan ciertas preguntas,
mientras que otros responden a reactivos diferentes,
en un entramado donde, entre todos resuelven todas
las preguntas de cada Excale. Finalmente, debido a la
cantidad de estudiantes que se evala anualmente,
la mayora de las pruebas de logro del inee tiene un
formato de opcin mltiple, con una respuesta correcta
y tres distractores. No obstante, la prueba de expre
sin escrita es de respuesta abierta, donde el estudiante
debe redactar diversos textos que son corregidos por
jueces, con base en rbricas.
Un ltimo reto que deseo puntualizar es el que
tuvo que ver con la interpretacin y difusin de los
resultados que arrojan los Excale. Conocer los resul
tados de aprendizaje, sin tener elementos para poder
explicar las diferencias que se observan, resulta de
poca ayuda para las autoridades que tienen la respon
sabilidad de formular polticas educativas. Por lo ante
rior, se tom la determinacin de disear instrumentos
que proporcionen informacin sobre el contexto per
sonal y escolar de los estudiantes, que aporten en la
realizacin de estudios y en la formulacin de hiptesis
que ayuden a entender las causas del estado en que se
encuentra la educacin en Mxico.
Finalmente, una parte menos tcnica, pero difcil
de lograr, fue la de difundir los resultados de la dpm, de
tal manera que fueran comprensibles y apreciados por
las audiencias destinatarias: las autoridades educativas,
los docentes, los acadmicos y la sociedad en general.
En esta rea, que apenas incursionamos, hay mucho
trabajo por hacer y mucho por aprender. No dudo
que, al ser el inee una comunidad que aprecia el apren
dizaje, en muy poco tiempo logre definir la mejor prc
tica de difusin de los resultados. Con ello se cerrara
el crculo de la evaluacin que se inici cuando se cre el
Instituto en 2002.
Usos pedaggicos
de las pruebas Excale
Jos Fr ancisco Soares
a Constitucin Poltica de los Estados Unidos

Mexicanos asegura a todos los nios y jvenes
de entre 4 y 17 aos de edad el acceso a la
educacin bsica y media superior. Aunque la cober
tura an no es completa en preescolar, secundaria y
bachillerato, el derecho a la educacin se define actual
mente como el derecho a aprender competencias que
permitan la insercin crtica y plena en la sociedad. Este
tema se desarroll ampliamente en el documento El
Derecho a la Educacin en Mxico (inee, 2009), donde
se ofrecen elementos para entender la importancia de
la educacin bsica en la construccin de la ciudadana.
Aprender lo que est en el currculo nacional es, en
Mxico, una manera de expresar el concepto del dere
cho a la educacin.
Sin embargo, un derecho cuya atencin no se verifi
ca, es slo una utopa. Por ello, distintos pases han esta
blecido evaluaciones del desempeo de los estudiantes
en educacin bsica; dichos instrumentos deberan ser
vistos principalmente como herramientas para la veri
ficacin de que el derecho a la educacin es atendido.
Estas evaluaciones cumplen otras funciones en
relacin con el sistema educativo: apoyan reflexiones
sobre el currculo, sobre la idoneidad y calidad de los
libros de texto, la administracin del sistema y la for
macin inicial y continua de los docentes. De manera
ms instrumental, las evaluaciones se utilizan tambin
para la produccin de indicadores que pueden ser
transformados en metas educativas, o utilizados como
insumos para el seguimiento de las polticas sociales y
econmicas de los gobiernos.
Adems de estas funciones, las evaluaciones nacio

nales tambin deberan ser tiles para guiar los proyec
tos pedaggicos de las escuelas, pues un programa de
evaluacin del sistema educativo que consume tantos
recursos debe contribuir de manera ms directa a la
60
educacin de los estudiantes. Por otra parte, la per

cepcin de utilidad es particularmente importante para
que los maestros y directores generen un entorno pro
picio para la aplicacin de las evaluaciones.
Desde que el inee surgi hace diez aos, estos fines
fueron considerados en su Plan General para la Evaluacin del Aprendizaje, un documento basado en los cono
cimientos ms slidos existentes en torno a la evaluacin
educativa. Su lectura muestra cmo cada etapa de las
evaluaciones del inee las pruebas Excale fue pla
neada detalladamente antes de llevarse a cabo. ste es
un documento cuya importancia va mucho ms all del
inee, y que resulta de utilidad para cualquier especialista
en el rea. En particular, su disponibilidad en espaol lo
coloca como un material valioso para apoyar procesos
similares en todos los pases iberoamericanos.
Los propsitos educativos de Excale se explicitaron,
en primer lugar, cuando se decidi que estos exme
nes deberan estar alineados al currculo; al respecto,
Mxico se encuentra en una posicin favorable, pues el
suyo facilita en gran medida la investigacin y la aplica
cin de acciones pedaggicas adecuadas.
La preocupacin por la relevancia pedaggica tam
bin est presente en los informes de los Excale pro
ducidos por el inee, los cuales tienen una seccin en la
que se presenta un mapa de los reactivos utilizados.
Esta tcnica coloca los reactivos de las pruebas en la
misma escala utilizada para presentar los resultados de
los estudiantes; as, el lector puede saber qu temas
podran resolver los estudiantes que se encuentran en
cada punto de la escala.
Esta informacin est disponible en el Explorador
Excale, sitio web del inee donde docentes, directores
de escuelas, supervisores educativos y todo el pbli
co tienen la posibilidad de consultar los contenidos de
cada evaluacin.
Ahora bien, la escuela trabaja con grupos de alum
nos. Esta realidad, en el contexto de las evaluaciones,
implica la creacin de niveles de desempeo en donde
se agrega a los estudiantes segn los resultados alcan
zados. Los puntos de corte de diferentes niveles fueron
establecidos, en el mbito de los Excale, a travs de la
tcnica Bookmark, que es el mtodo ms recomenda
do por la literatura. La metodologa utilizada est des
crita en otro documento cuya estructura y actualidad
es expresin de la solidez del inee.
Participante en el concurso
de usos pedaggicos de
Excale, 2008.
Puesto que las evaluaciones realizadas por el Insti

tuto estn basadas en las mejores prcticas existentes
e incorporan los elementos usuales de relevancia pe
daggica, pensar en el desarrollo de dicha dimensin
para la prxima dcada significa considerar cuestiones
muy ambiciosas.
1. El nmero de tems utilizados actualmente en

cada Excale es muy pequeo como para per
mitir la cobertura completa de los contenidos
curriculares y sus diferentes matices. Slo con una
cobertura total de estos contenidos, las evalua
ciones podran cumplir con sus funciones orien
tadoras para la enseanza. Ampliar el nmero de
tems disponibles, logrando conocer su posicin
en la escala de logro, no es tarea fcil, ya que los
Excale se aplican cada cuatro aos y, naturalmen
te, algunos tems de ciclos anteriores deben con
servarse para mantener la comparabilidad de las
puntuaciones entre diferentes aos de aplicacin.
2. Aunque los documentos declaren la existencia
de una alineacin de los Excale con el currculo
y que el proceso de construccin de tems exija
que cada uno de ellos sea referido al mismo,
an queda espacio para estudios sobre la alinea
cin de las pruebas con el currculo nacional y
con el efectivamente ofrecido a los alumnos de
distintos tipos de escuelas o de las entidades
federativas. Estas investigaciones podran arrojar
informacin til para estudios de factores asocia
dos que actualmente slo consideran variables
explicativas de origen social e institucional, siendo
que una posible explicacin para los bajos apren
dizajes de los estudiantes es la falta de nfasis en
la enseanza de los contenidos curriculares.
3. Los Excale identifican el porcentaje de alumnos en
cada nivel de logro y, utilizando el lenguaje de los
tems incluidos en la prueba, describen lo que los

estudiantes de cada nivel saben y son capaces de
hacer. Con esta informacin podran desarrollar
se materiales especficos para apoyar la ensean
za de alumnos en cada nivel de desempeo. Este
tipo de documentos sera diferente de textos
que sealan qu o cmo ensear en general, cuya
produccin corresponde a instituciones orienta
das a la investigacin curricular. Los documentos
producidos por el inee dirigidos a profesores de
bern reflejar en mayor medida la informacin
generada por sus evaluaciones.
4. Como el Sistema Educativo Nacional es muy
grande y descentralizado, la tarea de construc
cin de relevancia pedaggica debe ser realizada
en instancias de formacin continua y en los cur
sos de formacin inicial de docentes. De stas,
slo la primera puede ser apoyada por el inee, ya
que la segunda sobrepasa la misin de un instituto
de evaluacin. Por lo tanto, el inee debe vincular
se con los centros de formacin de docentes y las
autoridades educativas correspondientes, para
que los futuros maestros conozcan las escalas de
medida utilizadas por los Excale y sus respectivas
interpretaciones pedaggicas. En este proceso
de interaccin se consolidara un cdigo sobre
las expectativas de aprendizaje implcitas en el
currculo nacional, que deberan guiar todas las
acciones educativas.
El inee tiene mucho que celebrar por lo conseguido
hasta ahora, para hacer que sus evaluaciones sean rele
vantes para las escuelas y para los docentes de educa
cin bsica. Esta historia de xito permite imaginar que
los nuevos desafos aqu expresados, y otros identifica
dos a travs de la reflexin cotidiana que caracteriza al
Instituto, tambin sern resueltos.
61
Evaluaciones de logro
comparables en el tiempo
a necesidad de comparar el rendimiento aca

dmico o logro educativo de los estudiantes en
funcin de las puntuaciones obtenidas en dife
rentes aplicaciones de pruebas a lo largo del tiempo,
o en la aplicacin de diferentes formas de una prueba,
se presenta con frecuencia en la evaluacin sistemtica
y permanente de los sistemas edu
cativos. Las puntuaciones obtenidas
en aplicaciones de stas o diferen
tes pruebas aunque elaboradas y
aplicadas con la misma finalidad
pueden diferir sensiblemente, ya
que cambian las condiciones de
aplicacin, los sujetos examinados
y la dificultad de los tems modifica
el efecto de la instruccin u otras
causas. Si fuera as, obviamente, la
comparacin de estas puntuacio
nes exigira situar las pruebas en la
misma escala, es decir, expresar los
resultados o puntuaciones de dife
rentes pruebas en una escala co
mn. El mtodo estadstico para
situar estas puntuaciones en dicha
escala es lo que llamamos equiparacin de las pruebas.
Al centrarnos ahora en las evaluaciones del Insti
tuto Nacional para la Evaluacin de la Educacin, cual
quier decisin sobre escalamiento y equiparacin de
sus pruebas vendr determinada por la finalidad y ob
jetivos asignados a la evaluacin. Expresado de manera
general, el propsito de la evaluacin del inee es la de
terminacin de la calidad del desempeo del Sistema
Educativo Nacional a travs, fundamentalmente, de los
niveles de logro acadmico de los estudiantes. Esto se
traduce en una evaluacin longitudinal con nfasis en
los rendimientos acadmicos de los alumnos a lo largo
del tiempo, lo cual, obviamente, exige la comparabili
dad entre los grados y a travs de los aos. Es preciso
seleccionar un modelo psicomtrico que posibilite el
cumplimiento de las exigencias de comparabilidad a lo
largo del tiempo y, a su vez, requiera que las medidas
en los distintos puntos temporales sean obtenidas con
la misma vara de medir, slo posible con la equipara
cin vertical de las pruebas.
En sntesis, las puntuaciones obtenidas en distintas
aplicaciones y momentos a lo largo de un periodo
62
pierden las caractersticas que permitiran la compa

racin entre ellas, ya que los resultados difieren de
una a otra. Estos cambios son efecto, como hemos
sealado, de otros que paralelamente se producen
en diferentes elementos del contexto educativo y
social, entre los cuales podemos citar los siguientes:
cambios en los examinados y, en
consecuencia, la dificultad de las
pruebas; variacin en los currcu
los y, en parte, en qu y cmo se
aprende en la escuela; cambios en
las concepciones de los construc
tos o rasgos latentes que los tems
operacionalizan (logro acadmico,
habilidad lectora, etc.), que en las
pruebas se supone que tienen un
significado estable y universal, y al
teracin en las condiciones de apli
cacin de las pruebas. Todo ello
pone de manifiesto la alta proba
bilidad de que surjan dificultades
para la comparacin del logro aca
dmico a lo largo del tiempo.
Ante esta perspectiva, Wright
(1996) se plantea la siguiente cuestin: cmo pueden
ser investigados los cambios en el desempeo de los
alumnos a lo largo del tiempo, cuando todo a su alre
dedor est simultneamente en flujo?
Obviamente, las comparaciones requieren un mar
co de referencia estable, lo cual significa que, para com
parar el rendimiento acadmico de los estudiantes a lo
largo de una etapa, deben eliminarse o controlarse el
resto de los cambios producidos en su contexto y que
pueden afectarlo.
En efecto, la solucin al problema apunta a consi
derar la constancia de las pruebas, especialmente de su
dificultad, pero tambin la constancia general y el signi
ficado universal de la escala, en el mismo sentido que lo
pueda tener una escala fija de longitud o de tempera
tura. Un metro y cinco grados centgrados representan
la misma longitud y temperatura, cualquiera que sea
el instrumento de medida que se use ahora o el tiem
po transcurrido desde la ltima medicin. Para ello, se
precisa que las puntuaciones de un test de lectura, por
ejemplo, tengan esencialmente el mismo significado, al
menos, para todos los usuarios, y que los constructos
Preparacin para la
aplicacin de pruebas.
habilidad lectora y logro acadmico tengan un significa

do estable y universal.
En una perspectiva ms pragmtica, la constancia
general y el significado universal de la escala se facilita
ran con el mantenimiento y el desarrollo continuado
de las pruebas, ello implicara:
Por su parte, Wright responde a su pregunta en el

breve trabajo citado, indicando cmo podra aumen
tar la estabilidad de algunas facetas de las medidas,
lo cual constituye una valiosa ayuda prctica para en
frentar la solucin a problemas concretos de compa
rabilidad de las puntuaciones de pruebas aplicadas a
lo largo del tiempo.
A continuacin se presenta una sntesis de las facetas
de la estabilidad de las medidas para su comparacin:
1. Aseguramiento de constancia de la dificultad de
los tems a lo largo de todo el periodo de pruebas.
Las calibraciones de los tems de pretest, post-test
y pre-post sern estadsticamente estables.
El desarrollo y mantenimiento de un banco de

tems.
La construccin de mltiples formas y su corres
pondiente equiparacin.
El desarrollo de un conjunto de tems adicionales y
su piloteo en la aplicacin ordinaria de las pruebas.
El anlisis irt para reexaminar la fiabilidad de la
prueba, funcionamiento de los tems y sus even
tuales sesgos.
El desarrollo de una versin de las pruebas basada
en computadora.
2. Aseguramiento de la diferencia
entre los tems del pretest y del
post-test. Por ejemplo, cada uno de
los tems del pretest y del post-test
funcionar como dos tems diferen
tes. Para ello, puede procederse a
reformatear el conjunto de datos de tal modo que
cada uno se divida en dos.
3. Aseguramiento de compromiso. Con frecuencia,
la estructura de la escala cambia del pretest al
post-test: en el pretest, las categoras altas pue
den no ser observadas y en el post-test pueden
perderse las categoras bajas. Es necesario que
las escalas de ambas versiones sean iguales. Para
ello, las medidas deben basarse en el compro
miso de una serie de calibraciones obtenidas del
anlisis conjunto de los datos combinados del pre
y post-test.
4. Aseguramiento de la familiaridad del objeto de
medida. Cuando el objeto de la medida no es fa
miliar, por ejemplo, en un pretest previo a un pro
grama de entrenamiento, todos los tems sern
extraordinariamente difciles; en este caso, sera
muy til el conjunto de calibraciones del posttest. Por el contrario, en un post-test, tras un cur
so enfocado al dominio total del tema a medir,
todos los tems sern muy fciles; en este caso, s
sera de gran utilidad el conjunto de calibraciones
del pretest.
Ahora bien, desde su inicio el inee tuvo clara la
necesidad de conocer la evolucin del rendimiento
educativo en Mxico con el fin de determinar sus ten
dencias, tal como lo vena haciendo, con cierto xito,
el National Assessment of Educational Progress (naep), en
Estados Unidos. El inee tambin estaba consciente de
la necesidad de disponer de series de puntuaciones fia
bles de varios aos, obtenidas con la aplicacin sistem
tica de pruebas tcnicamente adecuadas que entonces
63
Comunicacin Social seb/sep.
427 972 exmenes Excale en

23 804 escuelas de 2003 a la fecha.
Se han aplicado
no existan, pero que hoy, al culminar su primer dece

nio de existencia, constituyen una esplndida realidad.
Pese a las carencias iniciales, el inee no renunci
a cumplir su funcin; para ello se aprovecharon puntua
ciones, en principio fiables, provenientes de las eva
luaciones internacionales timss 1995 y una rplica del
mismo examen en el ao 2000; esto permiti comparar
el rendimiento de los alumnos de nueve y 13 aos en
1995 con los de las mismas edades en 2000 (Backhoff
y Solano, 2011). Algo similar se hizo comparando los re
sultados de pisa 2000 con los obtenidos en 2003 (Vidal
y Daz). El inee, sin embargo, asumi un mayor riesgo
en su tercer y ms importante intento al comparar los
resultados, no totalmente fiables y con grandes limita
ciones tcnicas en su aplicacin, obtenidos en las prue

bas de Estndares Nacionales de Comprensin Lecto
ra y Matemticas a los alumnos de 6 de primaria y 3
de secundaria en el ao 2000, con los de una mues
tra de estudiantes de los mismos grados, a quienes se
aplic la misma prueba en 2005. Fue el primer intento
del inee de equiparar, si no las pruebas mismas, s las
condiciones de aplicacin, procedimientos y muestras.
Esta comparacin era muy importante porque permi
tira determinar cmo haba evolucionado la efectividad
de la educacin bsica en su conjunto.
Enfrentarse a los problemas tcnicos con todos los
medios disponibles, acudir a los expertos y a la inves
tigacin para seguir avanzando y alcanzar la adecuada
competencia tcnica que garantice su solucin, han sido
algunos de los rasgos definitorios del modo de operar
del Instituto a lo largo de su primera dcada. En resu
men, durante este periodo, el inee ha contribuido al
avance en la prctica de facilitar la comparabilidad de
los resultados de la medida del logro educativo a lo
largo del tiempo, lo que, obviamente, contina recla
mando la atencin de los responsables de las pruebas
de evaluacin de los sistemas educativos.
Backhoff y Solano (2011). Seleccin, anlisis y adaptacin de 10

especificaciones del Excale-00/Pensamiento Matemtico
para la poblacin indgena maya: Tercer reporte de investigacin. Ensenada: inee y Universidad Autnoma de Baja
California.
64
Vidal y Daz (2008, 20 de diciembre). Resultados de las pruebas

pisa 2000 y 2003 en Mxico. Recuperado de http://www.
inee.edu.mx /index.php?option=com_content&task
=view&id=3511&Itemid=1104
Wright B.D. (1996). Comparisons require stability. Rasch
Measurement Transactions 10:2 p. 506.
Los resultados de las evaluaciones
del INEE como un reflejo del funcionamiento del

sistema educativo mexicano
Celia Daz Argero
Direccin de Lengua y Comunicacin de la Subsecre

tara de Educacin Bsica) elaboradas para preparar
los Excale. Me recuerdo tambin haciendo esfuerzos
por comprender qu tipo de informacin permiten
los anlisis con el modelo de Rasch y otras precisio
nes tcnicas. Y, aunque seguramente no he aprendido
todo lo que hay que saber, ha cambiado mucho mi
percepcin de lo que significa evaluar el funcionamien
to de un sistema educativo.
Para poder ver imgenes en un espejo, es necesario
arrojar luz sobre los objetos que se desea observar. Lo
que el inee hace es, precisamente, proyectar luz sobre
el sistema educativo mexicano para que podamos ana
lizarlo desde diferentes perspectivas. Celebremos los
primeros 10 aos del inee con ideas que ayuden a mo
dificar simultneamente su labor y la de quienes somos
beneficiarios del trabajo que se hace en esta institucin.
Yo ya tengo algunas.
El Instituto Nacional para la Evaluacin de la Educacin

tiene sus cimientos donde antes los tuvo uno de los
centros de investigacin educativa ms importantes del
pas. Esta afirmacin no es una metfora. Durante mu
chos aos, el Departamento de Investigaciones Educa
tivas (die) del Cinvestav funcion en una hermosa casa
ubicada en Jos Mara Velasco 101. El edificio del inee
se ubica ahora en este mismo predio. Es producto de
la casualidad? No lo s, Borges considerara que no. Yo
estara de acuerdo con l. Si aceptamos que no se trata
de un hecho fortuito, podramos decir que ese terre
no parece destinado a ser un espacio donde se genera
conocimiento acerca del sistema educativo. O, dicho
metafricamente, un lugar en el que podemos obser
var reflejos del funcionamiento del sistema educativo
como si se tratara de un espejo.
Hay espejos que devuelven imgenes poco pre
cisas, pero hay otros que permiten conocer ms all
de los lmites de la percepcin humana; por ejemplo,
el Gran Telescopio Milimtrico que se encuentra en
Puebla y que fue diseado para detectar seales pro
venientes del universo desde una distancia de 13 mil
400 millones de aos luz; por supuesto, la precisin en
el diseo del instrumento es condicin necesaria para
su ptimo funcionamiento. En las diferentes ocasiones
que he colaborado con el Instituto, he atestiguado la
complejidad tcnica y la pericia con que se disean las
evaluaciones. Ello me permite afirmar que el inee es
uno de esos espejos que nos ayudan a conocer mejor
una realidad determinada.
Son muchas las imgenes que el Instituto permite
recrear. Si nos centramos nicamente en los resulta
dos de los Excale, veremos que los datos acumulados a
travs de los aos constituyen una invaluable fuente de
informacin. Por ejemplo, algunas de las interrogantes
acerca del desarrollo del lenguaje que an no han sido
resueltas, podran encontrar sugerentes pistas en estos
datos. Una evaluacin sistemtica de gran escala como
sta genera posibilidades que habitualmente un investi
gador o un equipo de investigacin no tienen.
En mis colaboraciones con el inee he aprendido
mucho. Me recuerdo, por ejemplo, frente a las enor
mes retculas (pegadas en la pared de mi oficina en la
65
Adaptacin lingstica y cultural

de pruebas de logro acadmico
a aplicacin de pruebas puede ser entendida

como un proceso de comunicacin en el que
se hacen preguntas (los tems de una prueba)
a los estudiantes, stos las contestan, y sus respuestas
son interpretadas por un sistema de evaluacin (Sola
no-Flores, 2008). Este proceso de comunicacin est
mediado por factores culturales. En primer lugar, ade
ms de contener un lenguaje acadmico, las pruebas
reflejan el estilo y el vocabulario de las personas que
las escriben. En segundo lugar, la informacin contex
tual incluida en los tems con el fin de hacerlos signifi
cativos presuponen la familiaridad del estudiante con
ciertas situaciones.
Por lo tanto, la validez de una prueba puede ser
afectada cuando no es posible atribuir sus resultados
al conocimiento del contenido que pretende evaluar,
sino al grado de familiaridad del estudiante con el
estilo discursivo y el vocabulario no acadmico de la
prueba, as como con las situaciones que constituyen
la informacin contextual de los tems. Diferencias en
tre dialectos (variantes de una misma lengua) y estilos
culturales pueden privilegiar a estudiantes de ciertas
regiones geogrficas, a ciertos grupos tnicos o niveles
socioeconmicos, a los pertenecientes al medio rural o
urbano, o bien al sexo femenino o masculino. La posi
bilidad de tal sesgo debe tomarse muy seriamente en
un pas como Mxico, que tiene una gran diversidad
tnica, cultural, lingstica y socioeconmica.
Como en la mayora de los sistemas evaluativos en
el mundo, el inee necesita contar con un conjunto de
procedimientos para examinar la adecuacin de sus
pruebas a grupos histricamente marginados. En el
caso de Mxico, las poblaciones rurales, indgenas y de
nivel socioeconmico bajo merecen especial atencin.
En el campo de la evaluacin educativa, hay tres
estrategias bsicas que se emplean para examinar y
minimizar el sesgo. Una de ellas se basa en el anli
sis del funcionamiento diferencial de tems (Camilli,
2006). Para examinar el sesgo de un tem,
se seleccionan dos muestras de los
grupos de inters (por ejemplo,
estudiantes del medio urba
no o del medio rural) cuyo
desem
peo en la prueba
total es equivalente, y se
analiza si las dos muestras
66
difieren significativamente en el desempeo en ese

tem. De haber una diferencia sustancial, se concluye
que est sesgado y se elimina o se trata de identificar y
resolver la fuente del sesgo. Hay evidencia de que inclu
so una palabra o una expresin idiomtica quiz sean
responsables del funcionamiento diferencial de un tem
(Ercikan, 2002).
Una segunda estrategia proporciona informacin
indirecta sobre los procesos cognitivos que tienen lugar
cuando los estudiantes interpretan y responden a los
tems. sta consiste en dar a los estudiantes versiones
preliminares y entrevistarlos acerca de los conocimien
tos y razonamientos que usan.
Una tercera estrategia emplea el juicio de eva
luadores y se enfoca en organizar talleres de revi
sin en donde maestros, expertos en currculum,
lingistas y especialistas en medicin educativa exa
minan los tems y recomiendan modificaciones cuyo
propsito es asegurar que estn escritos de manera
que la mayora de los estudiantes pueda entender
sin dificultad.
Los mtodos empricos y los basados en el juicio
de evaluadores producen distintos tipos de informa
cin sobre sesgo (Hambleton y Jones, 1992). Por tanto,
la informacin sobre el funcionamiento diferencial de
tems, las entrevistas cognitivas y los talleres de revisin
deben ser usados en combinacin. El primer mtodo es
bien conocido por los equipos de desarrollo de prue
bas. En cambio, slo recientemente se ha prestado ms
atencin al potencial que las entrevistas cognitivas y los
talleres de revisin tienen para identificar fuentes de
sesgo cultural y lingstico. Estas estrategias permiten
identificar y resolver diversos aspectos de validez cultu
ral durante todo el proceso de desarrollo de pruebas,
mediante la participacin de estudiantes de distintos
grupos regionales, tnicos y socioeconmicos, as como
la de muestras de maestros de dichos estudiantes
(Basterra, Trumbull y Solano-Flores, 2011).
El uso de pruebas en poblaciones para las que no
fueron diseadas originalmente presenta retos lingsti
cos y culturales an ms serios que los planteados por
el desarrollo de los instrumentos. Un caso importante
de adaptacin cultural emerge en el contexto de prue
bas internacionales. Las pruebas pisa se administran pe
ridicamente a estudiantes de varias decenas de pases,
incluyendo Mxico. Originalmente escritas en ingls,
escolar) plantea serios retos derivados de su heteroge

neidad. Cada individuo tiene un patrn nico de domi
nio en la modalidad oral y en la lecto-escritura tanto en
la primera lengua como en la segunda; dependiendo
de su historia escolar, cada estudiante tiene un patrn
nico de desarrollo de lenguaje acadmico en ambas
(Solano-Flores y Trumbull, 2008). Debido a tal hete
rogeneidad, la decisin de evaluar a las
minoras lingsticas en una u otra len
gua debe realizarse al nivel de las co
munidades o escuelas y debe basarse
en estudios que examinen la validez de
las medidas de logro acadmico, ob
tenidas al evaluar a los estudiantes en
cada lengua (Solano-Flores y Li, 2006).
Con el fin de determinar si es pertinente traducir
pruebas del inee a lenguas indgenas, actualmente se
investigan los factores crticos para minimizar sesgo
lingstico y cultural en la evaluacin de poblaciones
indgenas (Backhoff et al., 2011). En una fase inicial
de lo que puede ser un programa de investigacin a
muy largo plazo, se trabaja tambin con educadores
hablantes de lengua maya de la pennsula de Yucatn.
Esta labor no se limita a traducir, tambin incluye el
dichas pruebas son traducidas por cada pas de acuer

do con lineamientos proporcionados por el organismo
coordinador del programa.
Con financiamiento del inee, hemos desarrollado
una teora y una metodologa para la revisin de tra
ducciones de pruebas (Solano-Flores, Backhoff, y Con
treras-Nio, 2009). La teora presta especial atencin
a los aspectos semnticos, cognitivos, sociolingsticos,
socioculturales y de constructo, lo que permite la eva
luacin de la calidad de la traduccin de las pruebas.
La metodologa es sensible a la diversidad lingstica e
incluye la participacin de educadores, traductores y
especialistas en currculum, contenido y medicin, quie
nes discuten e identifican, por consenso, distintos as
pectos de la traduccin de los tems. La teora y la meto
dologa facilitan la identificacin de errores de traduccin
con un nivel de precisin no obtenido
anteriormente con otros procedi
mientos. Adems, hemos establecido
el correlato emprico entre el error
de traduccin y el desempeo de los
estudiantes en pruebas traducidas
(Backhoff, Contreras-Nio y SolanoFlores, 2011). Esta teora y esta meto
dologa pueden contribuir a optimizar la participacin
de Mxico en pruebas internacionales y a refinar los ele
mentos de interpretacin de los resultados de tales prue
bas (Solano-Flores, Contreras-Nio y Backhoff, 2012).
Otro caso importante de adaptacin cultural es la
traduccin y adecuacin de pruebas para la poblacin
indgena. Medir el logro acadmico de minoras lings
ticas (es decir, poblaciones cuya primera lengua no es
la predominante de una sociedad, un pas o un sistema
67
anlisis y la modificacin de documentos con los que

se generan pruebas (por ejemplo, las especificaciones
de tems) con la participacin continua de educado
res mayas. Por su nivel de atencin a mltiples etapas
del proceso de desarrollo y adaptacin, este trabajo
est estableciendo un nuevo estndar de rigor me
todolgico en el rea de la adaptacin lingstica y
cultural de pruebas.
La experiencia del inee con respecto a la adap
tacin cultural y lingstica de pruebas demuestra la
importancia de examinar estos
aspectos desde mltiples pers
pectivas profesionales, en todas
las etapas del desarrollo de ins
trumentos, y con una metodo
loga que asegure la apropiada
representacin de los diversos
grupos sociales del pas.
En sus primeros diez aos
de existencia, el Instituto ha
tenido la capacidad para exa
minar crticamente su propia
labor evaluativa con respecto
a factores lingsticos y cultu
rales tanto en el pas como en
el contexto internacional. Ms
an, ha apoyado proyectos de
investigacin que informan sus prcticas evaluativas
y que han producido importantes avances tericos y
metodolgicos en el campo de la traduccin y la adap
tacin lingstica y cultural de pruebas. El valor y la
magnitud de esta labor no deben subestimarse.
Backhoff, E., Contreras-Nio, L.A., y Solano-Flores, G.

(2011). La Teora del error de traduccin de pruebas y las
evaluaciones internacionales de timss y pisa. Mexico: Insti
tuto Nacional para la Evaluacin de la Educacin.
Backhoff, E., Solano-Flores, G., y Contreras-Nio, L.A.
(2011). Seleccin, anlisis y adaptacin de 10 especificaciones del Excale-00/Pensamiento Matemtico para la
poblacin indgena maya: Tercer reporte de investigacin.
Ensenada, B.C.: Diciembre, Instituto Nacional para la
Evaluacin de la Educacin y Universidad Autnoma de
Baja California.
Basterra, M. R., Trumbull, E., y Solano-Flores, G. (Eds.),
(2011). Cultural validity in assessment: Addressing linguistic
and cultural diversity. New York: Routledge.
Camilli, G. (2006). Test Fairness. En R. L. Brennan (Ed.), Educational measurement (4th ed.) (p. 221-256). Westport,
ct: American Council on Education/Praeger.
Ercikan, K. (2002). Disentangling sources of differential item
functioning in multi-language assessments. International
Journal of Testing, 2, pp. 199215.
Hambleton, R. K. y Jones, R. W. (1992). Comparison of empirical and judgmental methods for detecting differential item
functioning. Paper presented at the annual meeting of the
68
National Council on Measurement in Education, San Fran

cisco, CA, April 21-23, 1992.
Solano-Flores, G. (2008). Who is given tests in what langua
ge by whom, when, and where? The need for probabi
listic views of language in the testing of English language
learners. Educational Researcher, 37 (4), 189-199.
Solano-Flores, G., Backhoff, E., y Contreras-Nio, L.A.
(2009). Theory of test translation error. International
Journal of Testing, 9, 78-91.
Solano-Flores, G., Contreras-Nio, L.A., y Backhoff, E.
(2012). The measurement of translation error in PISA2006 items: An application of the theory of test trans
lation error. En Prenzel, M., Kobarg, M., Schps, K., &
Rnnebeck, S. (Eds.), Research in the Context of the
Programme for International Student Assessment. Sprin
ger Verlag.
Solano-Flores, G., y Li, M. (2006). The use of generalizability
(G) theory in the testing of linguistic minorities. Educational Measurement: Issues and Practice 25(1), 13-22.
Solano-Flores, G., y Trumbull, E. (2008). In what language
should English language learners be tested? En R. J. Kopri
va. (Ed.), Improving testing for English language learners, pp.
169-200. New York: Routledge.
Mi experiencia en los comits

de pruebas Excale
Otro aspecto muy importante ha sido el ambiente

de colaboracin y ayuda que se ha desarrollado en to
dos y cada uno de los Comits, sin olvidar que siempre
habr algo mejor para el trabajo si se discute con los
compaeros y la coordinacin de la especialidad.
Debo sealar que los Excale me han mostrado un
panorama amplio y completo de la situacin actual, no
en funcin de nicamente algunos alumnos o escuelas,
sino que nos llevan a visualizar de manera amplia la ver
dad referente al aprendizaje que pueden aplicar los es
tudiantes en su vida y en la resolucin de sus problemas.
La meticulosidad en la elaboracin de estas prue
bas nos ayuda a determinar el dominio que presentan
los estudiantes de acuerdo con la temtica correspon
diente al grado examinado, para saber si las razones
en los casos de bajo dominio son la complejidad de los
temas, o bien, un inadecuado tratamiento didctico.
Pero todo ser en vano si estas evaluaciones no
sirven de plataforma para buscar soluciones al bajo
aprendizaje que predomina en el estudiantado del ni
vel bsico. Las pruebas Excale elaboradas para evaluar
la comprensin y aplicacin de los conocimientos nos
muestran lo intil que resulta la simple memorizacin
de un tema.
Finalmente, creo que el inee cumple cabalmente
su misin, al mejorar el proceso de construccin para
cada nuevo Excale, entregando los resultados a la Se
cretara de Educacin Pblica y dando a conocer los
resultados en todo el pas para todo aquel que busque
la informacin.
Reunin de
trabajo Excale.
Soy maestro en Biologa, he participado varias veces

en los diversos comits elaboradores de especificacio
nes, de Niveles de Logro y de Validez y Sesgo, en las
diferentes etapas que se realizan en la construccin
de los Exmenes de la Calidad y el Logro Educativos
(Excale); desde mi primera colaboracin sent que el
rigor, cuidado y control para efectuar mi trabajo eran
normas que deba seguir para toda contribucin que
realizara para el inee.
Desde que egres de la Escuela Normal Supe
rior de Mxico, me han preocupado los problemas
que presentan muchos alumnos de todos los nive
les educativos para aprender las ciencias naturales.
Considero que el problema que ha ido en continuo
crecimiento es la falta de comprensin de lo que se
estudia, por lo tanto, ese factor es responsable, en
gran parte, del rechazo a lo que marca el programa;
la mayor parte de los estudiantes estudian para pa
sar la materia, pero no porque les interese realmen
te aprender.
Adems de corroborarme la importancia de la
comprensin del estudio para los alumnos, debo
destacar que los trabajos que he realizado en el inee
han sido agradables, tanto por el trato de su perso
nal, que se ha mostrado amistoso y colaborativo aun
bajo presin, como por la ayuda recibida por parte
de los compaeros que tienen a su cargo el grado
por evaluar durante la bsqueda de informacin para
completar el conocimiento de todo aquello que invo
lucra a mi materia.
69
Captulo
La participacin de Mxico
en pruebas internacionales
esde la creacin del inee en 2002, una de sus lneas de trabajo centrales fue la coordinacin de diversas evaluaciones
internacionales, cuyos resultados aportaran elementos adicionales al diagnstico nacional sobre la calidad del sistema
educativo. Mxico ya haba participado en al menos tres importantes evaluaciones internacionales a gran escala: el Tercer
Estudio Internacional de Matemticas y Ciencias (TIMSS) de la
International Association for the Evaluation of Educational
Assessment (IEA) en 1995, el Primer Estudio Regional Comparativo y Explicativo (PERCE) del Laboratorio Latinoamericano
de Evaluacin de la Calidad de la Educacin (llece) en 1997,
y el Programa para la Evaluacin Internacional de los Estudiantes (PISA, por sus siglas en ingls) de la Organizacin
para la Cooperacin y el Desarrollo Econmicos (ocde) en el
ao 2000.
Con la creacin del inee se marc un hito en cuanto a la importancia
que se le confera a la evaluacin internacional. Se asumi que la partici
pacin de Mxico en estas evaluaciones enriquecera el conocimiento del
sistema educativo, contribuira a la toma de decisiones de alto nivel para
definir polticas encaminadas a la mejora de la calidad de estos servicios,
fomentara una cultura ms amplia de la evaluacin en diferentes pblicos,
ayudara a alcanzar una mejor capacidad tcnica y, sin duda, permitira dis
poner de un comparativo respecto de otros pases que contribuyera al
diagnstico nacional de nuestro sistema.
A fin de cumplir a cabalidad con dicha encomienda y con el afn de
cuidar, tener el esmero y la dedicacin completa para la coordinacin de las
evaluaciones internacionales que fueran de su responsabilidad, en el enten
72
Codificacin de prueba PISA.
partir de la vasta informacin obtenida, difundida a su

vez a diferentes pblicos y, sobre todo, se ha propicia
do la colaboracin e intercambio de experiencias con
otros pases, en particular con aquellos que comparten
el mismo idioma. Todo esto en aras de obtener bene
ficios y experiencias provechosas que redunden en el
fortalecimiento de la capacidad tcnica del inee y en la
mejora de la calidad de la educacin.
A continuacin, se describen los proyectos interna
cionales en los que el inee ha participado a lo largo de
sus primeros diez aos de vida.
dido de que las distintas etapas y actividades implicadas

en su operacin son intensivas, complejas y se dan en
tiempos simultneos, se cre al interior del inee una di
reccin destinada expresamente a los proyectos inter
nacionales: la Direccin de Proyectos Internacionales y
Especiales (dpie).
La participacin de Mxico en los tres proyectos
mencionados fue limitada y con ciertas deficiencias que
no permitieron alcanzar los beneficios esperados. Esto
debido a la insuficiente capacidad tcnica del pas en
materia de evaluacin a gran escala, la incipiente expe
riencia en diferentes reas tcnicas y la falta de visin
en el potencial de los resultados para la mejora de la
calidad educativa. No obstante estas condiciones, haber
participado en esos ejercicios fue sin duda una decisin
importante y estratgica que marc un precedente para
Mxico y fue una oportunidad que permiti aprender
de lo ocurrido.
Desde su creacin, el inee se ha hecho cargo de dos
evaluaciones internacionales: pisa y los estudios regio
nales del llece. Este tipo de proyectos demanda que
los participantes se comprometan con un programa
de trabajo estricto para que sus actividades y produc
tos se cumplan en tiempo y forma, y en apego a los
estndares de los organismos coordinadores.
La conviccin del inee es cumplir enteramente con
dichos requerimientos y, adems, tener una participa
cin activa dentro de los proyectos. Durante estos diez
aos se ha realizado un importante esfuerzo para in
tervenir en el diseo de esas pruebas y ser integrante
de grupos internacionales de expertos. De igual modo,
se han desarrollado anlisis de resultados propios y se
han elaborado materiales de apoyo para docentes a
El proyecto pisa
El Programa para la Evaluacin Internacional de los

Estudiantes (pisa) es un estudio comparativo promo
vido por la ocde. Tiene como propsito identificar
en qu medida los estudiantes de 15 aos, que estn
por concluir o han terminado su educacin bsica,
han obtenido los conocimientos y habilidades rele
vantes para participar activa y plenamente en la so
ciedad moderna.
Estructura organizativa. Este Programa de periodi
cidad trienal es operado en diferentes niveles organi
73
La participacin de Mxico en pruebas internacionales
zativos. El Secretariado de la ocde es el responsable

y se relaciona estrechamente con el Consejo de Go
bierno de pisa (pgb) y el Consorcio. El Consejo de
Gobierno, por su parte, es un comit integrado por
los delegados de los pases participantes y su funcin
es supervisar y definir las prioridades de pisa .
Para desarrollar el proyecto se contrata en cada ci
clo a una o varias instituciones que conforman el Con
sorcio de pisa. Su funcin es desarrollar, bajo la estricta
vigilancia y supervisin del Secretariado, todos los as
pectos de la evaluacin: el diseo de la prueba y de los
cuestionarios, el muestreo, los anlisis de resultados, el
establecimiento de normas de calidad, la definicin de
procedimientos diversos, etctera. Adems, el Consor
cio se acompaa de grupos de especialistas integrados
por expertos de reconocido prestigio para que le brin
den asesora en distintos temas.
Un grupo ms es el forma
do por los Coordinadores Na
cionales (npm); en cada pas se
establece un Centro Nacional
y se nombra a un Coordinador
Nacional del Proyecto cuya res
ponsabilidad es coordinar todas
las actividades en el pas. En ge
neral, dentro del Centro Nacio
nal se espera que exista un grupo tcnico liderado por
el npm, encargado de realizar y cumplir con las activida
des del proyecto.
2003: pisa comienza a ser coordinado por el inee.
El segundo ciclo en que particip Mxico, pisa 2003,
fue la primera actividad que le correspondi coordinar
al inee, aunque slo en la fase de aplicacin definitiva.
Cuando el Instituto inici su operacin no dispona de
instalaciones ni de personal suficiente para contender
con las diversas tareas operativas que le demandaban
la aplicacin de ese ciclo, por lo cual se apoy en la
Direccin General de Evaluacin de la Secretara de
Educacin Pblica.
74
A raz de la intervencin del inee, se realizaron

cambios relacionados con la aplicacin y con el anli
sis y difusin de resultados. La muestra, que en el ao
2000 se haba acotado a la cantidad mnima permitida
de escuelas y estudiantes, en 2003 se extendi a lo
que se denomina muestra ampliada, a fin de tener
representatividad por entidad y a nivel nacional.
El otro cambio sustancial fue la preparacin y pre
sentacin del reporte nacional de resultados. Como
en su momento no fueron publicados los resultados
obtenidos en el ao 2000, se presentaron junto con
los de 2003. La presentacin pblica del reporte
nacional se efectu el mismo da en que se liber
el internacional, el 6 diciembre de 2004. El inee y la
representacin de la ocde en Mxico programaron
durante ese da tres reuniones para presentar los
resultados a diferentes pblicos: secretarios de edu
cacin de las 32 entidades, repre
sentantes de los medios de difu
sin e investigadores, acadmicos
y editorialistas con prestigio en
Mxico. El 7 de diciembre se rea
liz una mesa pblica de anlisis
con la presencia de cinco investi
gadores que comentaron el citado
informe. Durante 2005 se conti
nu con la actividad de difusin,
dirigida ahora a las autoridades
educativas de todos los estados.
Esta serie de presentaciones
demuestran el cambio que la par
ticipacin del inee trajo al proyec
to pisa. En el Instituto se tiene la
conviccin de que la difusin de los
resultados es el primer paso para
crear conciencia acerca de la importancia de participar
en proyectos internacionales. Tambin se cree que la
difusin sirve para promover una toma de decisiones
de poltica educativa ms informada, que paulatina
mente ayude a la mejora de la calidad educativa.
Dentro de las actividades de elaboracin de mate
riales de apoyo para los docentes, destaca de manera
especial la obra realizada para los maestros de secun
daria y de educacin media superior: pisa para docentes
(2005). Esta publicacin cont con un tiraje de 250 mil
ejemplares que se distribuyeron en las escuelas de di
chos niveles en todo el pas.
2006: la activa participacin del inee. Para pisa
2006, el inee tuvo la responsabilidad del ciclo com
pleto, es decir, desde la planeacin del piloto hasta la
preparacin del reporte de resultados. La experiencia
adquirida permiti aumentar el nivel de participacin
de Mxico dentro del proyecto, la cual se concret en
el mbito del diseo y planeacin. En ese momento, el
director en turno del inee funga como vicepresidente
del Grupo Estratgico de pisa. Este grupo, que ase
sora al pgb, se orienta a definir el diseo del estudio,
ocde,
as como de representantes de Brasil, Colombia,

Chile y Espaa, quienes fungieron como comentaristas.
En esta ocasin, los esfuerzos de difusin para
docentes se orientaron a disear un material que se
distanciara del uso de los reactivos y ms bien pro
moviera aprendizajes relevantes basados en el marco
conceptual de pisa . Se elabor la triloga pisa en el
Aula (2008), cuyo contenido se bas en estrategias
didcticas diseadas por especialistas para su aplica
cin en el saln de clases, con el fin de fomentar las
habilidades y procesos cognitivos de la prueba, y con
la ventaja de ser complementarios al nuevo currculo
de secundaria.
Otro acontecimiento relevante durante este ciclo
fue la creacin del Grupo Iberoamericano de pisa (gip),
promovido por Brasil, Espaa y Mxico. En una reu
nin celebrada en 2005 en Ro de Janeiro, el grupo se
constituy con los ocho pases de la regin que partici
paban en pisa 2006: Argentina, Brasil, Colombia, Chile,
Espaa, Mxico, Portugal y Uruguay. Despus de dos
ciclos de evaluacin se evidenciaba la necesidad de unir
esfuerzos, en lugar de trabajar por separado.
Adems de contribuir en la mejora de la capacidad
operativa, el gip tambin se estableci para propiciar
el trabajo de investigacin, los aspectos operativos y

financieros, entre otros asuntos; en suma, va ms all
de las tareas inmediatas y coyunturales, pues se encar
ga de establecer una amplia agenda analtica sobre el
futuro de pisa.
Una tarea indita para Mxico, respecto a los ciclos
anteriores, fue la elaboracin de reactivos de Ciencias,
rea de nfasis en ese ciclo, para su envo al Consorcio
de pisa. Para ello se capacit a 16 profesores de bachille
rato en el diseo de unidades de reactivos conforme a
los criterios definidos por pisa. Se elaboraron un total
de 51 unidades que comprendieron casi 200 reactivos.
Si bien ninguna unidad form parte de la prueba en
la aplicacin definitiva, lo cierto es que fue un primer
aprendizaje tanto en el dominio de los criterios para
el diseo de reactivos como en la capacitacin de do
centes. Como se ver ms adelante, este aprendizaje
rindi los frutos esperados.
En la traduccin y adaptacin de los instrumen
tos (la prueba y los cuestionarios), el inee no slo
cumpli estrictamente con los lineamientos estable
cidos (por ejemplo, la traduccin al espaol a partir
de dos fuentes: ingls y francs), sino que incorpor
un proceso novedoso dentro de una de sus etapas.
El objetivo era validar la traduccin y lograr que la
adaptacin al espaol fuera lo ms adecuada y accesi
ble a la poblacin a la que se dirige pisa , tanto en tr
minos de criterios lingsticos como disciplinares. El
proceso estuvo a cargo de un grupo conformado por
docentes de bachillerato del rea de Ciencias, una
especialista en Letras, una traductora y algunos alum
nos de ems; todos ellos coordinados por personal de
la dpie con una metodologa especialmente diseada
para este objetivo.
El trabajo mereci una felicitacin por parte de la
instancia responsable de autorizar las traducciones de
los pases participantes; esto llev a que Uruguay to
mara la versin mexicana como base para adaptar sus
propios instrumentos.
En ese ciclo se mantuvo la decisin de disponer
de una muestra ampliada de estudiantes de 15 aos
con una representatividad por entidad. Adems, se
aplic la prueba a una muestra de alumnos de grado
modal, es decir, al que concentra la mayor cantidad de
jvenes con esa edad (1er ao de ems). Se opt por esta
poblacin adicional para poder identificar la diferencia
de desempeo entre los estudiantes de 15 aos con
independencia del grado, y los inscritos en el grado
modal sin importar la edad. Esta muestra slo tuvo re
presentatividad nacional; sus resultados fueron objeto
de un reporte especial que se public en 2008.
La presentacin del informe nacional se realiz el
4 diciembre de 2007, al mismo tiempo en que la ocde
liber el internacional. La difusin de los resultados fue
tan amplia como en el ciclo anterior. Es de destacar que
para la presentacin pblica se cont con la participa
cin de Andreas Schleicher, Director de Educacin de la
75
una participacin ms activa en

materia de planeacin y diseo de
instrumentos, el anlisis de resulta
dos y el desarrollo de investigacin,
todo lo cual le da una razn de ser
ms relevante y prometedora.
Muestra de ello fue el reporte
Iberoamrica en pisa 2006: Informe
Regional, que consisti en el anlisis
de los resultados de los ocho pases
iberoamericanos que participaron
en esa ronda, as como de las diez
comunidades autnomas de Espa
a y los estados federales de Brasil
y Mxico, agrupados en cinco y sie
te regiones, respectivamente.
Asimismo, el gip ha promovido Reunin Internacional pisa, 2006.
la formacin y capacitacin de los
grupos tcnicos de los centros nacionales, en temas del ltimo ao de la ems; a esta evaluacin se le llam
como el anlisis de las bases de datos de pisa, el esca pisa Grado 12. Sus resultados fueron objeto de un in
lamiento y estimacin de modelos tri (Teora de Res forme que aparecer prximamente.
puesta al tem), el muestreo y el diseo de reportes
En relacin con el reporte nacional de resultados
de resultados.
correspondiente a los estudiantes de esa edad, el inee
2009: una experiencia fortalecida. Para el ciclo continu con la estrategia de los ciclos anteriores. El
2009, el saber adquirido ayud a tener una mayor informe se elabor y fue dado a conocer el 7 diciem
presencia y participacin. Ejemplo de ello fue la ges bre de 2010, al mismo tiempo que la ocde difundi el
tin realizada por el gip para que el Consejo Austra internacional. En esa ocasin se ampliaron los eventos
liano de Investigacin Educativa (acer) ofreciera un de difusin a diferentes audiencias, tales como legis
taller para elaborar reactivos de Lectura, rea princi ladores, organizaciones civiles, snte, investigadores y
pal de ese ao. Con ello se buscaba mejorar la calidad columnistas, y pblico en general.
tcnica de los reactivos y aumentar la probabilidad de
2012: qu sucede actualmente? La aplicacin de
que fueran aceptados y formaran parte de las prue pisa 2012 en Mxico se efectu en la segunda quincena
bas definitivas; esto dara lugar a que stas tuvieran un de marzo del presente ao, a una muestra ampliada
mejor balance cultural de sus contenidos y una mejor para la poblacin de 15 aos (pisa Clsico, denomina
proporcin de reactivos en cuanto al nivel de dificul cin acuada en la dpie), adems de la aplicacin a una
tad ms apropiado para la poblacin de estudiantes muestra de estudiantes del ltimo grado de ems. Cabe
de los pases del gip.
sealar que para hacer ms eficiente el proceso, la Di
El taller fue impartido por los propios responsables reccin de Informtica del inee desarroll un sistema
que estn al frente del grupo de expertos de lectu para la codificacin en computadora de los reactivos
ra de pisa, y los asistentes (especialistas en lectura de abiertos de la prueba, el cual se prob con xito en el
cada pas del gip) tuvieron la oportunidad de profun piloto y se usar con las pruebas aplicadas.
dizar en los aspectos tcnicos del diseo de reactivos.
Es importante mencionar que desde finales de 2011,
sta fue la primera ocasin en que se imparti ca la directora general del inee, Dra. Margarita Zorrilla,
pacitacin con estas caractersticas; como resultado, es miembro del Grupo Estratgico de pisa (sdg). Esta
una unidad de reactivos de Mxico form parte de la membresa se recupera despus de casi cinco aos en
prueba definitiva.
que el espacio fue ocupado por otro pas.
Otra accin amparada por el gip fue la colabora
cin para la traduccin de los materiales de pisa 2009. El proyecto regional del llece
Colombia y Espaa hicieron la traduccin de la fuente
francesa, en tanto que Chile y Mxico lo hicieron de El Laboratorio Latinoamericano de Evaluacin de la
la fuente inglesa; por su parte, Argentina tradujo los Calidad de la Educacin (llece) fue creado en 1994
manuales del Coordinador Escolar y del Aplicador. Para como una red de unidades de medicin y evaluacin
la adaptacin al espaol de Mxico, el inee sigui la me de la calidad de los sistemas educativos de Amrica
todologa descrita para pisa 2006 a fin de asegurar la Latina, y es coordinado por la Oficina Regional de Edu
validez de la traduccin.
cacin de la unesco para Amrica Latina y el Caribe
En el ciclo 2009, adems de evaluar a los estudian (orealc /unesco). Desde su inicio, el Laboratorio se
tes de 15 aos, se decidi aplicar la misma prueba a los constituy como un marco de concertacin y coo
76
En el Segundo Estudio Regional Comparativo

y Explicativo del Laboratorio Latinoamericano
para la Evaluacin de la Calidad de la
Educacin de la unesco (serce-llece)
de 2006, se aplicaron
9 578
pruebas a estudiantes de 3o y 6o de primaria.
reporte de resultados y lo difundi de manera amplia

en 2008, cuando el Laboratorio dio a conocer el infor
me regional.
Desafortunadamente, por la falta de
continuidad, el impacto de esta evaluacin
no ha causado el efecto meditico que per
mita su amplia difusin, tal como sucede
con pisa . No obstante, el inee ha cumplido
con el compromiso de dar a conocer los
resultados. Mxico es uno de los pases que
se ha mantenido desde el primer estudio
con una participacin activa, por ejemplo,
promoviendo la creacin del Consejo
Consultivo (rgano de apoyo tcnico es
pecializado) como una medida para la
mejora de la calidad tcnica de los estudios, lo que les
permitira consolidarse como referente en los anlisis
comparativos sobre calidad de la educacin a nivel pri
maria en la regin.
Qu sucede actualmente? El Tercer Estudio busca
superar los obstculos de los anteriores; este ao se
hizo la aplicacin piloto del terce y se tiene previsto
que la definitiva se lleve a cabo en 2014 para que, un
ao despus, se difunda el reporte regional de resulta
dos emitido por el llece, junto con el reporte nacional
que es responsabilidad del inee.
Aprendizajes obtenidos a lo largo de estos diez aos
1. Una de las ventajas indudables de participar en

distintos proyectos internacionales es que dentro
del inee se ha desarrollado una mejor y mayor
capacidad local en aspectos metodolgicos, tcni
cos, psicomtricos, de procesamiento y anlisis de
datos. Esto se ha conseguido, en buena medida,
gracias a las capacitaciones ofrecidas por los orga
nismos internacionales.
2. Se ha logrado un mayor intercambio de informa
cin tcnica mediante las interacciones con espe
cialistas internacionales, lo que ha hecho posible la
actualizacin y formacin de los equipos respon
sables de los proyectos.
3. Incorporarse a los planes internacionales ha signi
ficado aprender modelos de evaluacin ms inclu
yentes y complejos en su conceptualizacin y sus
peracin en el mbito de la evaluacin educativa. Su

principal virtud fue, y ha sido, ser un espacio de apo
yo profesional para la formacin y capacitacin de los
equipos tcnicos, sobre todo en aquellos pases con
incipiente experiencia en evaluacin y, en particular, en
las pruebas a gran escala.
El llece ha organizado y coordinado diversos es
tudios regionales que cambian su denominacin de
acuerdo con el nmero de aplicacin en cuestin.
As, se ha llamado perce al Primer Estudio Regional
Comparativo y Explicativo, serce al Segundo Estudio
y terce al Tercer Estudio.
Su propsito ha sido identificar los aprendizajes
de una muestra de estudiantes de primaria en las reas de
Lenguaje (lectura y escritura), Matemticas y Ciencias,
y se caracteriza por ser alineada al currculo comn de
los pases participantes; recolectan informacin de as
pectos de la escuela, del aula y del contexto, con los
que es posible explicar el rendimiento de los estudian
tes. Sus resultados contribuyen a tener una perspectiva
regional del nivel primaria para la definicin de planes
de accin que apuntalen la calidad educativa.
Estructura organizativa. La estructura organizativa
del llece ha ido cambiando; inicialmente const de una
Coordinacin Tcnica integrada por tres o cuatro per
sonas y el grupo de Coordinadores Nacionales de los
pases participantes. A pesar de estas condiciones, en
1997 el Laboratorio logr desarrollar el perce.
Para 2006, con el serce la estructura mejor; se
agregaron paneles de expertos de las reas de eva
luacin y se apoy en un Consejo Tcnico Consul
tivo. Una de las caractersticas prevalecientes en el
llece a lo largo de su historia ha sido la inestabilidad
en su estructura y la carencia de recursos para con
solidar el estudio regional. Para la puesta en marcha
del terce se propuso afianzar los aspectos tcnicos
y conseguir recursos financieros para funcionar de
manera adecuada.
Desde 2011, el llece ha establecido distintas alian
zas, por ejemplo, con el Centro de Medicin mide de
la Universidad Catlica de Chile para el diseo de las
pruebas y cuestionarios de contexto, as como para los
procedimientos necesarios en una aplicacin controla
da. Tambin se ha hecho acompaar de diversos gru
pos de expertos para el muestreo, el anlisis curricular,
el plan de anlisis, etctera.
En particular sobresalen dos hechos que segura
mente redundarn en beneficio de la calidad tcnica
del estudio: el haber fortalecido el Consejo Tcnico
Consultivo de Alto Nivel, dirigido a dar asesora tc
nica al estudio, y disponer de un Plan Estratgico cuyo
contenido abarca los aspectos metodolgicos, las l
neas de accin y la proyeccin hacia 2014.
Mxico en el llece. Como se mencion, el perce se
aplic en 1997, sin embargo los resultados de Mxico
no fueron publicados. El inee tuvo la responsabilidad
de coordinar el serce en 2006, por lo que prepar el
77
A la fecha se han llevado a cabo
46 levantamientos de informacin en los que se ha

llegado a 53 224 escuelas con una proporcin de
instrumentos aplicados entre 80 y 99%.
bases tcnicas de medicin y manejo de informa

cin, lo cual ha redundado de manera indirecta en
los proyectos nacionales de evaluacin.
4. El inee ha insistido en la necesidad de dar a cono
cer los resultados de tal manera que sirvan para la
toma de decisiones de diferentes actores. Esto ha
propiciado el aprendizaje de cmo mostrar los re
sultados de una forma clara y entendible, sin me
noscabo de la base estadstica que los sustentan, y
favoreciendo interpretaciones correctas y su uso
efectivo. En ese sentido, los reportes que se han
preparado incluyen elementos didcticos que ayu
dan a explicar la naturaleza de los resultados y de
las estadsticas empleadas. De manera paralela se
ha incidido en la cultura de la evaluacin al difun
dir los resultados a diferentes pblicos, mediante
folletos de divulgacin con temas variados.
5. Dada la vastedad de datos derivados de las eva
luaciones internacionales, el inee ha promovido
la realizacin de proyectos de investigacin con
el propsito de realizar an
lisis adicionales que permitan
profundizar las descripciones
y explicaciones en el contex
to nacional. Por supuesto, los
resultados indican fortalezas
y debilidades, sealan dife
rencias y magnitudes, y son
una fuente inagotable para
los investigadores.
6. Tambin se ha promovido el uso de las bases de
datos a disposicin del pblico en el portal del
inee mediante la imparticin de talleres ofrecidos
a investigadores e interesados en realizar estu
dios particulares.
7. Un proyecto de evaluacin se disea para cumplir
con un propsito definido y sus resultados sirven
para identificar las reas a fortalecer. Como parte
de ese proyecto hay componentes que presen
tan un alto potencial de utilidad. Por ejemplo, las
tareas incluidas en los reactivos permiten identi
ficar los procesos cognitivos que se deben refor
zar, y pueden ser un motivo de reflexin entre
docentes y estudiantes que ayuden a orientar el
aprendizaje. Los marcos tericos de los proyectos
pueden ser utilizados como referente curricular,
lo cual no significa que el currculo sea una copia
de ese marco, ms bien, los planes de estudio y
78
las prcticas docentes podran ser enriquecidas

y beneficiadas de los enfoques de enseanzaaprendizaje implcitos en los proyectos de eva
luacin. Tomando en cuenta lo anterior, el inee
ha preparado materiales de apoyo para los do
centes, que les ayuden a mejorar sus prcticas
y donde se promuevan aprendizajes relevantes,
adems de incitarlos a reflexionar sobre sus habi
lidades en el aula.
8. En el mbito regional, en especial por la partici
pacin en el llece, el inee ha logrado el recono
cimiento como una instancia tcnicamente slida
y ha sido un referente para la creacin o fortale
cimiento de reas de evaluacin que pretenden
seguir su trabajo. En este sentido se ha dado apo
yo a comisiones de Brasil, Costa Rica, Honduras,
Panam y El Salvador.
Desafos para el futuro
Si bien se ha ganado terreno, persisten retos quere

quieren de planeacin y voluntad para enfrentarlos.
El mayor de ellos es la evaluacin de pisa va compu
tadora. Desde el ciclo 2009, pisa incursion en la eva
luacin de la competencia lectora por computadora,
en la que cada pas poda optar por participar o
no con una submuestra de estudiantes. Se ha conti
nuado con esta vertiente en el ciclo 2012 en donde,
adems, se agreg la evaluacin a dos reas ms: Ma
temticas y Solucin de problemas.
Mxico no ha participado en esa
modalidad debido a que muchas de
las secundarias y de ems no cuentan
con la infraestructura computacional
y mucho menos con las caractersti
cas tcnicas necesarias. Se esperara
que para 2015 esta modalidad de
aplicacin sea obligatoria.
Otra rea de oportunidad es una mayor presencia
en los grupos de expertos de pisa en los temas de pla
neacin y diseo de las pruebas. Con la integracin de
Mxico en el gip se podra conseguir que especialistas
de Iberoamrica se ubicaran en esos grupos para dar
lugar a pruebas con un mejor balance cultural en cuan
to a sus contenidos y a una proporcin de reactivos
de dificultad ms adecuada para los estudiantes con
niveles bajos de desempeo.
Esta posibilidad cobra mayor importancia si se con
sidera la nueva generacin de pruebas por computa
dora, en las que se requiere de habilidades especficas
por parte de los jvenes, como saber navegar con efi
cacia y no distraerse, manejo de hipertextos e hiper
vnculos, uso de estrategias especficas para la bsque
da y seleccin pertinente de informacin conforme a la
tarea solicitada. Los jvenes estn habituados a utilizar
las tic para el ocio, pero no para uso escolar y mucho
menos para la evaluacin.
Quin necesita al inee?

Agustn Tristn Lpez
Planteemos las preguntas: necesitamos ese xito

nacional y ese tipo de calidad?, necesitamos com
pararnos con otros pases? Porque si es el caso y
creo que s lo es, entonces todos necesitamos al
inee, aunque no lo sepamos. El inee es como la voz
de nuestra conciencia: un da nos dice cmo estn
las competencias lectoras respecto de los estndares
internacionales. Otro da nos muestra qu pasa con
Mxico cuando compite en las ligas mayores de Asia
o de Latinoamrica y nos explica la forma de reportar
los indicadores socioeconmicos y de eficiencia educa
tiva respecto de pases europeos. Seguramente tendr
nuevas sorpresas maana. El inee proporciona la infor
macin que necesitamos urgentemente para progre
sar. Nos ensea que no se necesita explorar todo de
todo, sino contar con un buen diseo de evaluacin
y muestras de calidad, por ello es un detonador para
aumentar nuestra capacidad de asombro: necesita
mos resultados fidedignos? Los encontramos en sus
proyectos. Publicaciones de excelencia? Pocas institu
ciones en Mxico publican con esa profusin y calidad.
Informacin completa? Es parte de la profundidad de
los trabajos realizados. Compromiso con el desarrollo
nacional? Seguramente, al mostrarnos cmo nos ubi
camos respecto de otras naciones, en este sentido es
portavoz de una fifa en educacin.
Yo aplaudo y agradezco la idea que tuvo el gobier
no de Mxico de crear el inee y me gustara pensar que
el esfuerzo al participar en proyectos internacionales
es aprovechado por todos: autoridades, docentes, di
rectivos, padres, estudiantes. El Instituto, a travs de
estos proyectos nos incita a competir y a mejorar lo
que hacemos. Todos podemos aprender algo: desde
el estudiante objeto de los estudios, hasta el docente
usuario de los resultados y las autoridades que planean
los sistemas educativos nacional y estatales. La voz de
la conciencia que sale del corazn y del cerebro del
inee nos dice lo que no estamos haciendo bien y qu
camino debemos tomar para mejorar. Tambin nos da
buenas noticias y nos felicita, por lo cual nos sentimos
contentos. Por todo ello necesitamos al inee y a sus
proyectos internacionales como parte de la solucin de
la problemtica educativa nacional.
Felicitaciones al Instituto por los aos cumplidos y
felicidades anticipadas por lo que le falta y por todo lo
que nos tiene que decir. Invito a todos a continuar ne
cesitando a esta magnfica institucin, ejemplo nacional
y gua de muchos pases. Gracias por haberme permiti
do participar alguna vez en un trabajo de investigacin
con los datos de los proyectos internacionales y, sobre
todo, por darme la oportunidad de escribir estas pala
bras. Necesitaba decirlas.
Vivimos en la sociedad del conocimiento y la informa

cin y disponemos de tanta, que nos cuesta mucho
trabajo interpretarla, a tal grado que a veces desco
nocemos lo que acontece a nuestro alrededor. Cierto,
en la sociedad del conocimiento y de la informacin
se ha construido un mundo desinformado y descono
cido, por no decir, ignorante. Parecera que la solucin
es disponer de ms datos, asumiendo que dato es
sinnimo de informacin y de conocimiento (da
tos en la poca del constructivismo?). En esta sociedad
se ha optado por obtener la mayor cantidad posible
de datos, explorando la totalidad de conocimientos y
habilidades (dir competencias para estar al da) que
tiene, la totalidad de estudiantes de todos los grados
escolares en todas las escuelas del pas y, de preferen
cia, a la brevedad. Para garantizar que todos partici
pen y se interesen en el proceso, ofrecemos un pre
mio al mejor estudiante, otro al docente cuyo grupo
tuvo los mejores resultados y uno ms al plantel cuyos
estudiantes obtuvieron las mejores calificaciones. Y
una vez que tenemos esa cantidad de datos, nos da
mos cuenta que no conseguimos lo que esperbamos.
La razn es simple: no estamos evaluando el dominio
de las competencias de los estudiantes, sino generando
un esquema de premios e incentivos (conductismo en
la poca del constructivismo?) con el cual no sabemos si
los estudiantes tienen las competencias o si se les ense
a contestar pruebas para ganar el esperado premio.
Como padre de familia me gustara saber qu po
sicin ocupa mi hijo entre los 37 mil 500 estudiantes
de su grado de todo el pas, bien sea para invitarlo al
cine o para quitarle el postre del da, pero como pas lo
que necesitamos es otra cosa: conocer el rumbo que
debemos tomar a la brevedad posible, para que mi hijo
y los otros 37 mil 499 estudiantes puedan ser exitosos
en sus estudios y en su preparacin para la vida, tanto
si trabajan en Mxico o si se tienen que desarrollar en
otros pases. El mejor incentivo no es el premio indivi
dual, sino el xito nacional, cuyos atributos slo pue
den identificarse con instrumentos que sirven para ese
propsito, con la objetividad necesaria y con la mxima
confiabilidad posible.
Cmo vamos a saber qu pasa en Mxico respecto
del resto de pases y si los resultados de las pruebas son
fidedignos de lo que queremos dictaminar? Participar
en pruebas internacionales es equivalente a competir en
los juegos olmpicos o en el campeonato mundial de fut
bol. Para participar necesitamos instrumentos y mode
los de evaluacin que proporcionen las fotografas de
las competencias de los estudiantes, de los docentes,
del avance en los programas educativos o de la relacin
entre estatus socioeconmico y rendimiento escolar.
79
Mxico sin pisa

y Mxico con pisa
R afael Vidal Uribe
n Mxico, antes de 1980, simple y sencillamen

te no haba evaluacin educativa. Seguramente
existan evaluaciones de los estudiantes en to
das las escuelas del pas y calificaciones, y certificados,
y graduaciones y estudiantes aprobados y reprobados,
pero no haba manera de saber cul era el estado de la
educacin nacional. Sin duda, antes de ese ao se ha
ban hecho estudios sobre la educacin nacional, pero
no figuraban evaluaciones a gran escala ni mediciones
del estado de la educacin en funcin del logro de
los estudiantes. De igual manera, antes de 1970, prc
ticamente no haba datos sobre matrcula, desercin
escolar, transicin entre ciclos, eficiencia terminal, n
mero de escuelas y de maestros, equipamiento escolar,
etctera. Haba, eso s, muchas opiniones, cientos de
opiniones, pero muy pocos datos. La nica opcin para
saber cmo se encontraba la educacin era preguntar
le a un experto que, seguramente con muchas difi
cultades y sin datos duros de ningn tipo, poda emitir
un juicio fundamentalmente subjetivo acerca de la
situacin de la educacin nacional.
Sin embargo, hacia finales de los aos
ochenta y especialmente durante los no
venta, comenz a gestarse, aunque no
sin rechazos, jalones y refunfuones de mu
chos (autoridades, funcionarios, investigadores y
lderes de todo tipo), la idea de que la educacin no
slo poda, sino que deba de ser evaluada. Fue du
rante esos aos que surgieron las primeras instancias
evaluadoras con carcter nacional (el Sistema Nacional
de Investigadores, los Comits Interinstitucionales para
la Evaluacin de la Educacin Superior, el Ceneval) y
los primeros instrumentos de evaluacin (las pruebas
idanis, los Estndares Nacionales, los egel , entre otras).
Sin embargo, a pesar de esta creciente marea eva
luativa con nuevas instancias e instrumentos para la
medicin y evaluacin, y una paulatina aceptacin de
la evaluacin educativa (en la dcada de los noventa
se elaboraba ya un gran nmero de instrumentos y se
aplicaban por miles las pruebas objetivas de varios ti
pos), Mxico no era capaz todava de producir una ima
gen ms o menos clara de la situacin de la educacin
nacional en funcin de los logros en el aprendizaje.
En 1995, la International Association for the Eva
luation of Educational Achievement (iea) invit a Mxi
co a participar en la prueba internacional denominada
80
Tercer Estudio Internacional de Matemticas y Ciencias

(timss, por sus siglas en ingls) pero, como es sabido,
Mxico retir los resultados del informe final y no se
presentaron los datos de esa medicin, razn por la
cual se continu con la ausencia de una imagen ms o
menos clara de la situacin educativa nacional.
Luego, en 1997, la ocde decidi lanzar un progra
ma de evaluacin de estudiantes llamado Program for
International Student Assessment (pisa, por sus siglas
en ingls) destinado fundamentalmente a ofrecer un
panorama aproximado de la situacin educativa de los
pases que quisieran participar en el estudio; Mxico, en
su carcter de miembro de la ocde, fue incluido en el
grupo. En el ao 2000 se llev a cabo la primera me
dicin (aplicacin) de la prueba pisa; derivado de ella,
en 2001 se tuvo el primer reporte internacional de pisa
con informacin de los 32 pases participantes y, conse
cuentemente, por primera vez se tuvo un informe de la
situacin de la educacin en Mxico en funcin de los
logros en el aprendizaje.
Desde su inicio, el proyecto pisa ha estado des
tinado a ofrecer un panorama o corte de la situa
cin educativa de un pas al momento en el que las
personas estn por entrar a la vida productiva; por
ello, el programa pisa est dirigido exclusivamente
a estudiantes de 15 aos. Sin embargo, esa imagen
que pisa ofrece no abarca todos los aspectos de la
educacin de un pas, sino nicamente una especie
de fotografa instantnea del rendimiento de la pobla
cin de esa edad, en tres variables que se consideran
fundamentales para la educacin y la vida productiva
de los ciudadanos: competencia lectora, competencia
Felipe Martnez Rizo y Rafael Vidal Uribe.
matemtica y competencia cientfica. De hecho, este

panorama, corte o medida del rendimiento de esa
poblacin ocurre una vez cada tres aos (hasta el mo
mento, pisa ha hecho mediciones en los aos 2000,
2003, 2006, 2009 y 2012).
Mxico sin pisa y Mxico con pisa
Es esto suficiente?
Presentacin de los
resultados pisa, 2006.
Una cosa es decir que la educacin es un desastre

o de mala calidad y llenarse de juicios de valor con
eptetos de todo tipo y repartir culpas por doquier, y
otra cosa muy diferente es ofrecer mediciones y de
cir, por ejemplo, que slo 5% de los ciudadanos de un
pas estn debidamente calificados en matemticas al
cumplir 15 aos, que 44% tiene habilidades apenas
aceptables y que hay 51% de estudiantes con califica
ciones muy por debajo de lo aceptable para una vida
sana y productiva en la poca moderna (inee, 2010).
De igual manera, una cosa es tomar a los estudian
tes de una escuela pblica y una privada y aplicarles
cualquier examen de matemticas
para despus sacar conclusiones
arriesgadsimas y falaces sobre
la diferencia entre esos tipos de
educacin, y otra muy diferente es
que con una muestra debidamente hecha
y con un conjunto de instrumentos tcnicamen
te bien elaborados se pueda decir que nicamente
5% de los estudiantes de los sistemas pblicos y 12%
de los estudiantes de los sistemas privados alcanzan
los niveles 4 o superiores en la escala global de lec
tura de pisa (inee, 2010, op. cit.). Esos contrastes son
la diferencia que existe entre tener o no tener algo
como pisa .
En el Mxico sin pisa haba s, muchas opiniones (la

mayora no muy buenas) sobre la situacin de la edu
cacin en Mxico. En el Mxico con pisa adems de
las opiniones hay datos, hay medidas de la situacin
de la educacin.
En el Mxico sin pisa predominaba la corazona
da, la cual poda jugar un papel preponderante
en la toma de decisiones y no haba argumentos
para que fuera de otro modo. En el Mxico con
pisa hay datos para fijar metas e impactar la po
ltica educativa.
En el Mxico sin pisa las evaluaciones eran tcni
camente cuestionables. En el Mxico con pisa el
pas ha aprendido a realizar evaluaciones de alta
calidad tcnica.
En el Mxico sin pisa no se poda saber si se avan
zaba o se retroceda. En el Mxico con pisa hay
mediciones para conocer el nivel de avance/retro
ceso en la educacin.
La respuesta obvia es no, por dos

razones fundamentales:
Primera razn. pisa es una me
dicin muy limitada.
La medicin de la educacin no
puede ser slo pisa. No debe ser
slo pisa. De hecho, sta es una
excelente medicin de la educacin, pero a la vez es
muy limitada; mide solamente el desempeo de estu
diantes de 15 aos. En nuestro pas los alumnos de esa
edad estn predominantemente en tercero de secun
daria y primero de bachillerato. Pero, cmo estn los
81
estudiantes de los otros grados de secundaria?, cmo

estn los estudiantes de primaria en los seis grados?,
cmo estn los nios y nias de preescolar?, cmo
estn los estudiantes al concluir el bachillerato? Nada
de eso responde pisa. Claro, alguien dir, si as estn
a los 15 aos seguramente estn igual a los 14, 13, 12,
11, etc.. Pero, seguir esa lnea de razonamiento es re
gresar al Mxico sin pisa; es decir, regresar a la ausencia
de datos. Lo que es necesario es medir la situacin de
la educacin en cada grado y descubrir en dnde se
originan los problemas. Ms an, es necesario medir
En las cuatro aplicaciones de pisa en Mxico
han participado
5 975 escuelas.
cada subsistema, cada modalidad, cada tipo, cada for

ma de sostenimiento, cada estado o entidad federativa
y cada regin, y medirlas a fondo. Sin embargo, ni si
quiera as es suficiente. pisa slo mide el desempeo o
rendimiento escolar y no dice nada de la cobertura, de
la desercin, de la reprobacin, de la eficiencia terminal,
del equipamiento de los salones o de la preparacin de
los profesores. En conclusin, pisa no es la panacea
de los datos, ni aunque los medios de comunicacin
la magnifiquen. pisa es notoriamente insuficiente como
medicin de la educacin.
Debido a lo anterior, a la patente ausencia de datos
confiables sobre los mltiples aspectos de la educacin
mexicana, en el ao 2002, el gobierno mexicano de
cidi crear el Instituto Nacional para la Evaluacin de
la Educacin (inee) para dar respuesta cabal y tcnica
mente apropiada a todas las inquietudes de informa
cin esbozadas en el prrafo anterior. Desde entonces,
el Instituto es el encargado de realizar la prueba pisa
en Mxico y de producir todos los informes que esa
medicin genera. Sin embargo, el inee es mucho ms
que la prueba pisa.
Es una institucin tcnica que ofrece de manera
permanente una imagen de la situacin de la educacin
en Mxico. No es este el lugar para describir la enor
me cantidad de datos que ofrece a la sociedad mexi
cana sobre las diversas facetas de la educacin; basta
entrar a su pgina de Internet para ver que est llena
de informacin de libre acceso. El inee aplica ao con
ao la prueba denominada Excale que rinde abundan
te informacin sobre los diversos niveles y grados de
la educacin mexicana (no es nicamente un examen
para estudiantes de 15 aos de edad como pisa) y, ade
ms, ofrece numerosos indicadores de todo tipo sobre
desercin, eficiencia, transicin, cobertura, entre otros.
As, las autoridades educativas de todos los niveles y en
Referencia bibliogrfica
inee (2010). Mxico en pisa 2009. Mxico: inee.
82
tidades federativas, los funcionarios, los investigadores,

los miembros de las asociaciones civiles y centros de
investigacin, los estudiosos de la educacin, los estu
diantes y la sociedad en general son libres de informar
se con los datos y reportes del inee. Como se puede
observar, hemos avanzado mucho desde 1980, cuando
vivamos de la sospecha, la corazonada y la opinin.
Nuevamente, una cosa es exhibir la fotografa o el
video de una escuela o un grupo de alumnos a la som
bra de un rbol en una zona rural del pas y desgarrar
se por lo mal que est la educacin, y otra cosa muy
diferente es exponer una relacin del equipamiento
de las escuelas a nivel nacional (incluidas las que estn
a la sombra de un rbol). Eso es lo que ofrece el inee,
datos, datos duros sobre la educacin en Mxico; da
tos sobre escuelas bien y mal equipadas; datos sobre
buenos y malos rendimientos; datos sobre alta y baja
desercin, etctera. Son sin duda datos consistentes,
peridicos y comparables.
Son los datos suficientes para mejorar la educa
cin? Desde luego, la respuesta a esta pregunta es una
perogrullada: por supuesto que no.
Segunda razn. No son los datos sino las acciones,
las decisiones de poltica educativa, las que impactan a
la educacin del pas.
No hay duda que son las decisiones, las acciones
adecuadas las que harn que exista una mejor educa
cin en el pas; sin embargo, es la evaluacin la mejor
herramienta para tomarlas. Son los datos buenos, vli
dos, duros, confiables, los que pueden orientar la toma
de decisiones. Son los datos los que pueden ayudar a
saber si se avanza o se retrocede y son tambin los
datos los que pueden ayudar a juzgar a los polticos y
a los funcionarios de todos los niveles por sus malos o
magros resultados.
Comentario final
En 2012 el inee cumple diez aos. Gracias a la activi

dad permanente y profesional de este Instituto tam
bin se habrn realizado cinco mediciones de pisa con
pulcritud y apegadas a la mejor metodologa disponible
actualmente. pisa es sin duda la medicin ms famosa,
la ms llamativa y meditica porque compara al pas
con muchos otros, pero no es la nica; por ello, es ne
cesario mencionar que en 2012 se cumplen tambin
diez aos de muchas otras mediciones de la educacin
mexicana. Mediciones ms precisas, ms completas,
ms detalladas y tiles incluso que esta famosa y bien
ponderada prueba. Todos debemos de congratularnos
por contar con una institucin en la que la sociedad
mexicana puede confiar para saber cmo se encuentra
la educacin nacional. Enhorabuena.
Colaboracin en la
codificacin de pisa
he podido conocer y valorar la calidad del trabajo que

se realiza y su importancia a fin de mejorar la calidad
de la enseanza en nuestro pas.
Quiero concluir mencionando no slo la contri
bucin a mi desarrollo profesional, sino tambin el
ambiente en el que se desarrolla nuestro trabajo, y
que se fundamenta en el profesionalismo del perso
nal y el respeto en el trato para quienes somos cola
boradores externos a la Institucin, siempre hemos
encontrado apoyo para el desarrollo de nuestras ta
reas y una afectuosa camaradera, en un mbito de
respeto y responsabilidad.
Desde el ao 2003 tengo la satisfaccin de partici

par como consultora independiente en la revisin y
codificacin de la prueba pisa. Mi presencia en este
proyecto se dio de manera casual. Un amigo me infor
m que el Instituto Nacional para la Evaluacin de la
Educacin buscaba personal del rea de espaol para
participar en la codificacin de un examen internacio
nal que se aplicara ese ao en Mxico. Me present en
sus oficinas sin tener mucha informacin al respecto.
Fui aceptada despus de presentar mi currculo y de
entrevistarme con la directora del programa, quien
tiempo despus me propuso ser coordinadora de la co
dificacin, en razn de haber trabajado muchos aos en
planeacin acadmica y de tener alguna experiencia
en el campo de la evaluacin. La propuesta me pareci
interesante y acept con gusto; desde ese momento
he colaborado de manera continua con la Direccin
responsable de este trabajo.
A partir de mi incorporacin, fue evidente para m
la relevancia e incidencia que este tipo de evaluacin
tiene en la educacin y me interes sobremanera tan
to la propuesta de habilidades a evaluar como la for
ma en que se propona hacerlo, al considerar que era
inteligente y novedosa. De manera personal, el acer
camiento al proyecto ampli mi panorama y mi for
macin en evaluacin, producto de la interiorizacin
de la concepcin y los alcances que el examen tiene.
La visin de abordar las competencias indispensables
para que los jvenes se desempeen en la vida, en
lugar de contenidos programticos basados ms en la
memorizacin que en el desarrollo de habilidades es,
desde mi punto de vista, fundamental para el sistema
educativo en vas de lograr un desarrollo deseable y
ms armnico en los estudiantes; este objetivo debe
ser bsico en la enseanza, puesto que es claro que la
carencia en este aspecto limita el desempeo de las
nuevas generaciones.
Mi colaboracin en este proyecto a lo largo de sus
diferentes aplicaciones ha contribuido a ampliar y con
solidar mis conocimientos acerca de la evaluacin, a
travs de la comprensin de los objetivos de pisa y de
la forma en la que se proponen alcanzarlos. Tambin
83
La aportacin del inee al gip

y a la evaluacin
Enrique Roca Cobo
n la celebracin del dcimo aniversario del

inee, es de justicia resaltar que ha sido decisiva
su aportacin a la evaluacin en Iberoamrica,
al Grupo Iberoamericano de pisa. Adems, dejo cons
tancia de que el Instituto de Evaluacin de Espaa se
ha beneficiado enormemente de la colaboracin con
el fundador y primer director del inee, Felipe Martnez
Rizo, con el resto de los colegas del Instituto y, ms re
cientemente con su actual directora, Margarita Zorrilla.
El trabajo compartido ha sido siempre ocasin de
aprendizaje y enriquecimiento profesional.
El Grupo Iberoamericano de pisa (gip) naci en
2005, como fruto de la colaboracin de todos los pa
ses participantes en este proyecto de la ocde, y gracias
a la contribucin y empeo particular de los respon
sables de los institutos de evaluacin de Mxico y Es
paa. El gip naci con un primer propsito de facilitar
la cooperacin, la reflexin y la ayuda mutua entre los
pases iberoamericanos, para contribuir en la toma de
decisiones cientficas, tcnicas, enriquecer los anlisis y
los informes, y estimular la adopcin de po
lticas especficas de mejora en la educacin
a la luz de los resultados ofrecidos por pisa.
Desde el nacimiento del gip se celebra
ron encuentros y talleres formativos con una
participacin intensa de los pases, que entre
otros frutos permitieron la preparacin de
unidades de lectura para pisa 2009, cuyo uso
ha acercado ms el estudio a la sensibilidad
y los entornos educativos de nuestros alum
nos. Adems, los representantes del gip en
el Consejo de Gobierno de pisa apoyaron
decididamente la inclusin de unidades
especficas en las pruebas de 2009 que,
al garantizar que los resultados fueran
comparables con aplicaciones anteriores,
hicieron posible describir con mayor pre
cisin las competencias de los jvenes que no alcanzan el
nivel dos de rendimiento de pisa.
Por otra parte, la colaboracin en el gip posibilit
la elaboracin del primer informe regional de los re
sultados pisa 2006. En l se introdujeron ya las prime
ras y fundamentales consideraciones del Grupo acer
ca de los aspectos ms destacados que ofrecen los
resultados de pisa y las cautelas que deben adoptarse
ante el peligro de una visin simplificadora, basada en
84
el ordenamiento de los pases segn sus resultados

promedio como fuente esencial de valoracin de los
sistemas educativos.
Mxico ha participado en pisa desde el primer ejer
cicio, en el ao 2000. En la actualidad ms de la mitad
de los pases iberoamericanos preparan la aplicacin
pisa 2012, ellos forman hoy el grupo lingstico ms nu
meroso de pisa con una proporcin muy elevada de los
jvenes de 15 aos escolarizados en la regin.
El camino recorrido ha sido muy positivo. La par
ticipacin de los pases iberoamericanos en pisa 2000,
2003 y 2006, se atuvo a las condiciones cientficas y
tcnicas del estudio, definidas y acordadas por el Con
sejo de Gobierno de pisa, pero la contribucin ibe
roamericana a la preparacin y definicin del estudio
fue modesta, entre otras razones, debido, entre otras
razones, al parco desarrollo alcanzado por la regin en
materia de evaluacin educativa, particularmente en lo
relativo a la experiencia y la capacidad tcnica en prue
bas a gran escala.
Hay evaluaciones cuyos propsitos son certificar,
acreditar, seleccionar, ordenar, incentivar, sancionar o
rendir cuentas. En pisa el propsito esencial es y debe
ser a juicio del gip, precisamente, proporcionar un me
jor conocimiento del funcionamiento de los sistemas
educativos, el cual sirva para definir polticas educa
tivas de mejora. Los responsables de pisa consideran
que la evaluacin internacional comparada enriquece
los anlisis nacionales y ofrece informacin muy valiosa
acerca del rendimiento de los alumnos; ste es un as
pecto importante, pero parcial, del funcionamiento de
los sistemas educativos, que debe ser completado por
valoraciones del trabajo docente, de la organizacin es
colar y de las propias polticas educativas.
Los resultados de pisa deben ser considerados con
toda mesura y prudencia, minuciosamente contextuali
zados y contrastados, si de ellos se espera conocer con
mayor precisin la realidad educativa. La tabla con los
pases ordenados segn su promedio es, desgraciada
mente, la informacin ms difundida por los medios de
comunicacin, la ms conocida por el conjunto de los
ciudadanos y, lamentablemente, utilizada a veces por al
gunos de los propios responsables de las polticas edu
cativas con el objeto de descalificar sistemas y polticas
o para definir objetivos de logro. Es inadmisible que se
utilicen los resultados de pisa con la intencin primordial
a la diversidad de los alumnos y propiciar la mejora de

los niveles de rendimiento, tanto inferiores (afectados
en buena medida por la repeticin) como los superio
res (alumnos con especial capacidad). Asimismo, sera
prudente trabajar las dimensiones de las competencias
en las que los alumnos muestran mayores debilidades

y, como consecuencia, adoptar medidas pedaggicas
encaminadas a mejorar dichos resultados.
Merecen tambin cuidarse con mayor esmero
las actitudes e implicacin de alumnos y familias, as
como la corresponsabilidad de la comunidad educati
va, a partir de la elevada correlacin con los resulta
dos que unas y otras tienen.
El profesorado es el valor ms destacado de un sis
tema educativo; es fundamental, en consecuencia, que
ste reciba una buena preparacin, ayuda y estmulo
en su complejo trabajo, que su desempeo sea evalua
do con los medios e instrumentos adecuados, que sea
reconocido, y que su dedicacin sea gratificada como
corresponde. La evaluacin rigurosa del trabajo del
profesorado y de las escuelas no puede ser sustituida
por estudios estandarizados sobre el rendimiento de
los alumnos, por muy pertinentes y tiles que stos
sean para conocer aspectos esenciales del funciona
miento de los sistemas en cuestin.
Finalmente, debera convertirse en objetivo prio
ritario que al final de la educacin obligatoria todos
los alumnos tengan futuro formativo y una prepara
cin adecuada en todas las competencias necesarias
(no slo las medidas en pisa) para poder ejercer en la
vida laboral y social los derechos, libertades y respon
sabilidades que caracterizan a los ciudadanos de las
sociedades democrticas que deseamos, ciudadanos
que han aprendido, aplican lo aprendido, saben ser y
saben convivir.
Grupo Iberoamericano
pisa, 2011.
de ordenar sistemas educativos y valorar la calidad de la

educacin de pases o regiones en razn del orden en
que los colocan sus promedios globales.
pisa es una evaluacin normativa, pues considera
los promedios obtenidos por los alumnos, pero en la
medida que describe los niveles de
rendimiento alcanzados por ellos
es tambin una evaluacin criterial.
Una de las propuestas en las que
ha insistido el gip sobre el uso de
los resultados para hacer de pisa un
mejor instrumento para las polticas
educativas es mejorar la informa
cin sobre los niveles de rendimien
to. La contribucin del Grupo y,
particularmente, la del entonces di
rector del inee, fue decisiva para que
en pisa 2009 se establecieran siete
niveles de competencia en com
prensin lectora. Con esta iniciati
va se trat de conocer, con mayor
detalle del ofrecido hasta entonces,
qu son capaces de hacer los alum
nos que se encuentran en niveles de
rendimiento inferiores al 2, conside
rado por pisa como el mnimo que
garantiza una preparacin suficiente
de los alumnos para afrontar los re
tos educativos y acceder a la ciudadana activa.
En los niveles de rendimiento inferiores al 2, se si
ta un porcentaje muy considerable de alumnos de la
regin sobre cuyo dominio de las competencias bsi
cas, por modesto que fuera, pisa no ofreca datos sufi
cientes. Esta informacin es, a nuestro juicio, una de las
ms valiosas que ofrece y debe ofrecer pisa: la descrip
cin precisa de qu son capaces de hacer los alumnos,
particularmente los que alcanzan slo los niveles de
rendimiento ms modestos y, en consecuencia, en qu
aspectos puede centrarse el aprendizaje si se desea
mejorar dicho nivel de rendimiento.
Una segunda propuesta del gip dirigida a los res
ponsables educativos de la regin es que una vez con
firmado que pisa u otros estudios internacionales o
nacionales de evaluacin renen rigor y precisin, es
inaceptable que sus resultados no merezcan la consi
deracin debida a la hora de adoptar actuaciones o
polticas educativas de mejora.
El inee ha contribuido de modo decisivo a la re
flexin sobre cmo realizar la evaluacin y cmo be
neficiarse de la informacin que el trabajo evaluador
minucioso y contrastado ofrece. Para terminar, me per
mito aadir algunas propuestas sobre las actuaciones y
polticas de mejora, pensando en la educacin espao
la, pero que son fruto de los intercambios de opinin
y el estudio compartido con los compaeros del gip y,
particularmente, con los del inee.
Los responsables de las polticas educativas debe
ran impulsar las medidas relacionadas con la atencin
85
Implicaciones y desafos
de la participacin del inee en pruebas

y estudios internacionales
omo miembro de la ocde, Mxico fue el pri

mer pas latinoamericano en participar con ple
nitud de derechos en el rgano de Gobierno
de pisa (pisa Governing Board) desde sus inicios, antes de
la aplicacin del ao 2000. A partir de que la adminis
tracin de pisa se transfiri de la sep al inee en 2003, su
intervencin se ha destacado por la bsqueda de una
mejora en la calidad de las pruebas, no slo en lo relati
vo a su desarrollo y anlisis dentro de Mxico, sino en el
mbito internacional, a travs de su participacin en los
rganos colegiados. Asimismo, en el Segundo Estudio
Regional Comparativo y Explicativo (serce) del Labora
torio Latinoamericano de Evaluacin de la Calidad de la
Educacin que coordina la orealc-unesco, el inee dej
su sello de rigurosidad e inters cientfico.
Merece una mencin especial el inters del inee
por introducir en la prueba pisa un rango de pre
guntas que permitiera describir las competencias de
estudiantes con menor desempeo, lo cual ha fa
vorecido particularmente a los pases latinoa
mericanos que participan en el estudio;
los esfuerzos e insistencia de Felipe Mar
tnez Rizo fueron fundamentales en tal afn.
As tambin, son notables los aportes realizados por
Mara Antonieta Daz y de Margarita Zorrilla para
mejorar las caractersticas tcnicas del serce y el terce , respectivamente.
El inee fue tambin pionero en incluir muestras para
lograr representatividad del estudio pisa no slo en el
nivel nacional, sino en cada entidad. Por otra parte, la
aplicacin de la prueba en el grado 12 ha permitido
analizar cunto logra avanzar una cohorte en secunda
ria superior.
Tal vez lo ms loable sean los esfuerzos realizados
para acercar los aprendizajes de pisa al aula. El inee se
enfrent a este desafo antes que muchos otros pases
y con ello logr poner un certero foco de atencin en
la idea de que para mejorar los aprendizajes, lo im
portante es incidir en las prcticas docentes. En 2005
este esfuerzo se concretiz con el trabajo pisa para do
centes que coment y analiz reactivos liberados de la
prueba. Posteriormente, esta lnea fue complementada
y superada por la coleccin pisa en el Aula.
A lo anterior deben agregarse los oportunos e in
teresantes Informes de Resultados para serce y para
cada ciclo pisa, junto a los anlisis de factores asocia
86
dos y a los Breviarios de Poltica, Desafos Educativos,

basados en pisa.
El inee, a travs de la Direccin de Proyectos In
ternacionales y Especiales, ha enfrentado numerosos
retos y ha demostrado su competencia y capacidad
para seguir adelante con innovaciones y progresos; sin
embargo, resulta complejo demandar ms trabajo si
los recursos humanos y las condiciones presupuestales
son las mismas.
Uno de los desafos ms imperiosos es la partici
pacin de Mxico en las evaluaciones digitales. pisa
avanza rpido en este sentido y mientras que en 2006
slo tres pases participaron en la opcin de Ciencias
basada en computadora (cbas); de los 69 pases par
ticipantes en 2009, 19 lo hicieron en Lectura digital
(Electronic Reading Assessment, era). En 2012 pisa
incluy dos aplicaciones electrnicas: una opcional, Li
teracidad o Alfabetizacin en lectura y otra que forma
parte del ncleo de evaluacin pisa referida a la Resolu
cin de problemas. En la primera de stas, participaron
casi la mitad de los pases: 32 de 67, mientras que en
la segunda lo hicieron 44. Dado el tamao del pas y la
gran cantidad de poblacin, no sorprende que Mxico
se sustraiga a semejante desafo. La instauracin de las
pruebas electrnicas exige no slo sofisticados proce
dimientos y submuestreos, sino tambin disponibilidad
de computadoras con determinadas caractersticas en
todas las escuelas de la muestra.
A pesar de las dificultades, que son muchas y re
conocidas por todos, tambin hay argumentos que
justifican planear la aplicacin, aunque sea de mane
ra paulatina, de pruebas electrnicas. Por una parte,
stas representan un avance notable en trminos de
la evaluacin de aprendizajes en dos aspectos: uno
es que, luego de superados los inconvenientes de su
puesta en marcha, la correccin de preguntas y el
procesamiento de datos se agilizan y facilitan en for
ma sorprendente. No es difcil imaginar lo que signi
ficara para las evaluaciones nacionales la disminucin
del tiempo de procesamiento a cerca de la mitad y
la posibilidad de entregar resultados ms oportuna
mente. Otro aspecto muy importante a destacar es
que el medio electrnico permite someter a los estu
diantes a experiencias ms vvidas y reales a diferen
cia de las pruebas de papel y lpiz; la posibilidad de
hacer tareas con base en la simulacin y modelacin
de Formacin Cvica y Ciudadana no estuvo a cargo del

inee y, aunque se llev a cabo de muy buena manera,
no ha tenido difusin suficiente; es probable que dada
su experiencia, el Instituto podra haber desempeado
tal labor con menores esfuerzos. Otro desafo que me
parece de inters para el sistema mexicano es la incor
poracin a otra prueba internacional en primaria. Exis
ten argumentos poderosos en contra, como el hecho
de que Mxico participa ya en evaluaciones regionales
en 3 y 6 (los estudios del llece); no obstante, los
pases participantes no representan un verdadero reto
para el sistema mexicano, que aparece entre los prime
ros de la regin.
Es conveniente sealar aqu todo lo que se favo
receran los pases participantes en estudios interna
cionales, si el inee llevara a cabo una sistematizacin
evaluativa de lo que ha significado la experiencia de
aprovechar los resultados de pisa para mejorar las
prcticas docentes. Este trabajo pionero e importante
amerita que se le preste mayor atencin.
Como conclusin, se puede decir que pese a sus
grandes avances, el inee an tiene mucho que enfrentar
y para hacerlo con la eficiencia mostrada hasta ahora,
requerir de mayores recursos.
de situaciones reales es, en s misma, una oportuni

dad de aprendizaje.
Por otra parte, las evaluaciones electrnicas ponen
en evidencia la situacin de los estudiantes en cuan
to a sus competencias tecnolgicas e informticas.
Como se sabe, si estas habilidades no se desarrollan
en la escuela, su despliegue depender de las opor
tunidades de aprendizaje en el hogar y, por ende, del
nivel socioeconmico de las familias. De esta manera,
el conocimiento computacional, al igual que el de otros
lenguajes, puede ser un factor de desigualdad, pero
tambin una palanca para la equidad. Los sistemas edu
cacionales ponen resistencias al desarrollo informtico
en las escuelas, sea por las dificultades de contar con
los recursos econmicos o humanos con la capacidades
necesarias. Sin embargo, es importante ejercer algn
grado de presin al tiempo que se proporciona la evi
dencia necesaria para valorar la importancia de incluir
estas competencias como parte del currculo.
Hay otros desafos de menor magnitud, pero igual
mente importantes. Nos referimos, por ejemplo, a la ne
cesidad de aprovechar con mayor profundidad los datos
recogidos en estudios internacionales. La funcin del inee
en este aspecto sera fomentar y divulgar metodologas e
involucrar a las universidades y facultades de Educacin,
ya que no es posible pensar que por s mismo podra
abordar todos los anlisis que se requieren.
Existen retos, que si bien no dependen slo del
inee, s le ataen. ste es el caso de la unificacin de
las distintas evaluaciones internacionales bajo el mismo
alero, lo que produce una sinergia importante de apro
vechar. Por ejemplo, la prueba del Estudio Internacional
87
El desarrollo
e impacto de pisa
Andreas Shleicher
Introduccin
adres, estudiantes y quienes ensean y estn

a cargo de los sistemas educativos buscan in
formacin confiable acerca de la efectividad de
dichos sistemas al preparar a los alumnos para la vida.
Buenas evaluaciones de resultados de aprendizaje de
los estudiantes pueden proporcionar respuestas a esta
cuestin y una perspectiva nica sobre las competen
cias de los alumnos. La evaluacin tiene un importante
peso para la enseanza y para la gestin de los sistemas
escolares cuando sus resultados se presentan de mane
ra efectiva tanto a los profesores como a los adminis
tradores de las escuelas y del sistema educativo.
Hace una dcada, se cre en Mxico el Instituto
Nacional para la Evaluacin de la Educacin y des
de entonces ha avanzado rpidamente hacia la ins
tauracin de una slida cultura de la evaluacin y la
rendicin de cuentas en el pas. Meses antes de la fun
dacin del inee, la ocde haba publicado los primeros
resultados del Programa Internacional de Evaluacin de
Estudiantes (Programme for the International Student
Assessment, pisa) cuyo objetivo es ampliar y enrique
cer el panorama que
ofrecen las evalua
ciones nacionales,
proporcionando un
contexto ms amplio
para interpretar los
resultados. As, pisa
ha adquirido importancia rpidamente debido a que
los indicadores empleados para el diseo de las po
lticas pblicas en materia de educacin ya no son
exclusivamente objetivos o normas nacionales, sino
tambin y cada vez ms, reflejan el desempeo de
los sistemas educativos ms exitosos y de ms rpido
progreso a escala internacional.
Desde entonces, las pruebas pisa se han llevado a
cabo cada tres aos en materias fundamentales como
lectura, matemticas y ciencias, aunque tambin cu
bren reas transversales al currculum como la solucin
de problemas y la lectura digital, al igual que otros as
pectos no cognitivos. En este Programa, los estudiantes
tambin proporcionan informacin acerca de su con
texto socioeconmico, escuelas, actitudes y compro
miso con el aprendizaje; adems, recoge datos sobre
88
los padres, directores y lderes del sistema para obte

ner informacin sobre las polticas, prcticas, recursos
escolares y otros factores institucionales que ayudan a
explicar las diferencias de rendimiento. La prueba apli
cada en 2009 evalu a medio milln de estudiantes que
representaban a 20 millones de jvenes de 15 aos de
edad, en 60 pases que conforman cerca de 90% de la
economa mundial.
A pesar de su orientacin global, pisa no es una
creacin artificial para ser aplicada a nivel internacional.
Por el contrario, su xito se basa en la amplia colabora
cin de los pases participantes a travs de instituciones
y expertos de gran calidad tales como el inee en
la generacin colectiva de instrumentos y metodologas
de evaluacin eficaces, bajo la gua de los gobiernos
y con base en una poltica de intereses compartidos.
Asimismo, presta mucha atencin a la relevancia tras
nacional, a la pertinencia cultural y a la equivalencia lin
gstica de sus instrumentos de evaluacin, as como a
la capacidad de transferencia de las experiencias, re
sultado de las polticas. Sus referentes se basan en una
comprensin conceptual bien estructurada de las reas
de evaluacin y de los factores contextuales, al igual
que en la triangulacin entre las perspectivas de las
diferentes partes involucradas. Se utiliza, adems, una
variedad de herramientas y mtodos de investigacin
para medir adecuadamente los constructos propuestos
a diferentes escalas, con el objetivo de atender distintas
necesidades para la toma de decisiones y proporcionar
retroalimentacin productiva para impulsar el avance
en varios niveles. Entre los rasgos de pisa encontramos:
Orientacin a polticas, que relaciona la informa
cin sobre los resultados de aprendizaje de los
estudiantes con los datos acerca de su perfil y de
los factores que dan forma a su aprendizaje den
tro y fuera de la escuela, esto con el fin de atraer
la atencin hacia las diferencias en los patrones
de desempeo e identificar las caractersticas de
los alumnos, escuelas y sistemas educativos que
poseen estndares de alto desempeo.
Innovador concepto de alfabetizacin, que hace
referencia a la capacidad de los estudiantes para
aplicar su conocimiento y habilidades en materias
clave, y analizar, razonar y comunicarse efectiva

mente al plantear, interpretar y resolver proble
mas en una variedad de situaciones.
Relevancia en el aprendizaje permanente; esto
hace que pisa no se limite a evaluar las competen
cias de los estudiantes en materias escolares, sino
tambin que les solicite informacin sobre su pro
pia motivacin para aprender, sus opiniones sobre
s mismos y sus estrategias de aprendizaje.
Regularidad, lo cual hace posible que los pases
monitoreen su progreso en objetivos clave de
aprendizaje.
Amplitud de cobertura geogrfica y naturaleza
colaborativa: pisa 2009 abarca 75 economas.
Como en otros pases, las autoridades mexicanas y
partes involucradas han dado gran importancia a pisa.
Este inters se deriva de diversas consideraciones:
Revelar lo que es posible en educacin
El nivel de conciencia pblica causado por las compara

ciones ha creado en algunos pases un impulso poltico
importante e involucrado a las partes interesadas en
la educacin, incluyendo las organizaciones de maes
tros y de empleadores, en apoyo de la reforma poltica
(Hopkins, 2008). Las evaluaciones internacionales han
tenido un impacto significativo en pases que confron
taron sus resultados con la percepcin que tenan sobre
su desempeo educativo. En Alemania, por ejemplo,
la equidad en las oportunidades de educacin en las
escuelas era considerada como un hecho, ya que se ha
ban dedicado esfuerzos significativos para asegurar que
stas fuesen provistas de recursos de manera adecua
da y equitativa. Sin embargo, pisa 2000 revel grandes
disparidades socioeconmicas en los resultados educa
tivos obtenidos. Otros anlisis ligados a la equidad se
relacionaban con la heterogeneidad socioeconmica
Mesa pblica de anlisis

pisa 2006 en Mxico
y en el Mundo.
Al hacer notar lo que es posible en educacin en

trminos de los niveles de desempeo mostrados
en los pases con los ms altos puntajes, pisa ha
buscado mejorar la calidad de las polticas exis
tentes y tambin crear un debate sobre los para
digmas y creencias que sustentan a esas polticas.
Si bien pisa por s misma no puede identificar las
relaciones de causa-efecto entre datos, procesos y
resultados educativos, s arroja luz sobre los rasgos
clave en los que los sistemas educativos muestran
similitudes y diferencias, y los hace visibles a los
educadores, funcionarios y al pblico en general.
En pases como Mxico, pisa se ha utilizado tam
bin para fijar objetivos en trminos de metas me
dibles alcanzadas por otros sistemas, al igual que
ha ayudado a identificar los mecanismos polticos
y a establecer estrategias para la instrumentacin
de reformas educativas. Estos aspectos son exa
minados ms detenidamente a continuacin.
dentro de las escuelas y con la segregacin en este mis

mo sentido, en el sistema educativo, los cuales sugeran
que a los estudiantes alemanes de origen social privile
giado se les encaminaba a instituciones acadmicas ms
prestigiosas que producan resultados educativos supe
riores, mientras que los estudiantes menos privilegiados
asistan a escuelas vocacionales menos prestigiosas que
producan resultados inferiores, incluso cuando su des
empeo en pisa fuera similar.
Esto hizo surgir el fantasma
de que el sistema educativo ale
mn estaba reforzando, en lu
gar de moderar, los factores de
origen socioeconmico. Tales
resultados y un lgido debate
pblico inspiraron una amplia
variedad de esfuerzos de re
forma en Alemania, relaciona
dos con la equidad, algunos de
los cuales han cambiado por
completo el paradigma. stos
incluyen proporcionar a la edu
cacin preescolar que hasta
ahora haba sido considerada
en gran medida un aspecto de
la asistencia social una orien
tacin educativa y oficializar su
imparticin desde corta edad; reducir en algunas pro
vincias alemanas el grado de divisin de los estudiantes
en grupos, de acuerdo con el nivel acadmico; esta
blecer estndares educativos nacionales para todas las
escuelas en un pas donde la autonoma local y regional
haba sido por mucho tiempo el paradigma indiscutible;
introducir la escolarizacin de jornada completa en un
sistema donde la media jornada haba sido la norma
por siglos, as como mejorar el apoyo a los estudiantes
desfavorecidos, tales como los de familias inmigrantes.
Para muchos expertos y educadores alemanes, no
fueron novedad las disparidades socioeconmicas que
pisa revel; sin embargo, con frecuencia se consideraba
como un hecho ajeno al espectro de las polticas pbli
cas que los nios desfavorecidos tendran un desempe
o menor en sus estudios. El que pisa haya evidenciado
que el impacto del origen socioeconmico de los es
tudiantes en su desempeo escolar vara considerable
mente en cada pas, y que en algunos, las disparidades
socioeconmicas parecan moderarse de manera ms
eficiente, mostraba que era posible hacer mejoras y ello
dio un impulso al cambio en las polticas educativas.
Uno de los aspectos ms importantes de las eva
luaciones internacionales es mostrar que el progreso y
el desempeo educativo slidos son posibles. Ya sea en
Asia (China, Japn, Corea y Singapur), en Europa (Finlan
dia o en los Pases Bajos) o en Norteamrica (Canad),
muchos pases tienen un desempeo slido en pisa y, al
mismo tiempo, algunos de estos pases muestran que
un bajo desempeo en la escuela no es consecuencia
automtica de un origen socioeconmico desfavorable.
89
Finalmente, algunas naciones manifiestan que el xito

puede convertirse en resultado educativo consistente y
predecible: en Finlandia, por ejemplo el pas con los
resultados globales ms slidos en pisa, la variacin
entre escuelas en 2006 fue de slo 5% en trminos de
desempeo global de los estudiantes. As, los padres
pueden confiar en estndares altos y consistentes en
cualquier escuela que elijan para inscribir a sus hijos. Se
ha realizado una cantidad notable de investigaciones
acerca de los rasgos de estos sistemas educativos. En
algunos pases, los gobiernos han empleado el conoci
miento provisto por pisa como punto de arranque para
una revisin por pares que estudie las polticas y prcti
cas en pases que operan bajo un contexto similar, pero
que logran mejores resultados (Dbert et al., 2004).
Evaluar el ritmo de cambio

en el progreso educativo
Un tercer aspecto importante es que las comparacio

nes internacionales proporcionan un marco de refe
rencia para evaluar el ritmo en el progreso educativo.
Mientras un marco nacional permite que se evale
en trminos absolutos, una perspectiva internacional
mente comparativa contribuye en la realizacin de una
evaluacin acerca de si ese progreso se iguala con el
observado en otros lugares. De hecho, mientras todos
los sistemas educativos en el rea de la ocde han pre
sentado crecimiento cuantitativo en las dcadas pa
sadas, las comparaciones internacionales revelan que
el ritmo en el cambio de los resultados educativos ha
variado notablemente.
Una herramienta para la poltica
econmica de reforma
Presentacin de
Mxico en pisa, 2009.
Tales revisiones por pares, que dan por resultado una

serie de recomendaciones especficas en polticas para
mejoras educativas, tambin las lleva a cabo la ocde.
Colocar los objetivos nacionales
en una perspectiva ms amplia
ha jugado un papel importante al poner en pers

pectiva los objetivos de desempeo nacional. Los edu
cadores se enfrentan con frecuencia a un dilema: si a
nivel nacional aumenta el porcentaje de estudiantes que
logran buenas calificaciones en la escuela, algunos dirn
que el sistema escolar ha mejorado; otros sealarn que
los estndares deben haber sido rebajados; tras la sos
pecha de que mejores resultados reflejan estndares
inferiores, se encuentra a menudo la creencia de que el
desempeo global en la educacin no puede elevarse.
Las evaluaciones internacionales permiten que esas
percepciones se coloquen en un marco de referen
cia ms amplio, al hacer posible que las escuelas y los
sistemas educativos se comparen con los de otros
pases. Algunos de ellos han adoptado activamente
esta estrategia y han relacionado sistemticamente el
desempeo nacional con los estudios internacionales,
por ejemplo, integrando componentes de pisa a sus
evaluaciones nacionales.
pisa
90
A menudo pisa tambin ha desempeado un papel im

portante en apoyo al proceso de instrumentacin de
reformas. Mxico ofrece un buen ejemplo de esto: en
la encuesta nacional a padres en 2007, 77% de los en
trevistados report que la calidad de los servicios edu
cativos proporcionados por la escuela de sus hijos era
buena o muy buena. Sin embargo, en la evaluacin pisa
2006, cerca de la mitad de los estudiantes mexicanos
de quince aos mostraron un desempeo apenas a la
par o por debajo del nivel ms bajo de competencia
establecido por pisa (ifie-alducin, 2007; oecd, 2007).
Puede haber muchas razones para tal discrepancia en
tre la calidad educativa percibida y el desempeo en las
evaluaciones internacionales. Por ejemplo, esto puede
deberse, en parte, al hecho de que los servicios educa
tivos que reciben los nios mexicanos son significativa
mente mejores en calidad que la educacin que recibie
ron sus padres. No obstante, el punto es que el hecho
de justificar la inversin de recursos pblicos en reas
en las que no parece haber demanda de la ciudadana,
plantea grandes retos para la poltica econmica de la
reforma. Una respuesta reciente de la Presidencia de
la Repblica ha sido incluir un objetivo de desempeo
pisa en el nuevo plan de reforma educativa, que esti
pula que el promedio nacional del resultado pisa por
alcanzar ha de ser un combinado de 435 puntos en
lectura y matemticas para 2012 (sep, 2007), partiendo
de una base de referencia de 392 puntos, usando el
promedio redondeado de los resultados de Mxico en
lectura (399.72) y matemticas (385.22) obtenidos
en pisa 2003. Este objetivo de desempeo, basado en
el resultado de una evaluacin internacional, servir
para resaltar la brecha entre el desempeo nacional y
estndares internacionales y para monitorear cmo el
progreso educativo se extiende y cierra esta brecha. A
su vez, se asocia con la trayectoria de la reforma y una
cadena de suministro de sistemas de apoyo, con es
tructuras de incentivos, as como con un mejor acceso
al desarrollo profesional para ayudar a los profesores

y lderes de las escuelas a alcanzar el objetivo. Tales
reformas parten de la experiencia de otros pases.
Brasil ha tomado una ruta similar, proporcionando a
cada escuela secundaria la informacin sobre el nivel
de progreso que se necesita para tener un desempeo
al nivel promedio de la ocde en pisa 2021.
Japn es uno de los sistemas educativos con me
jor desempeo en las evaluaciones internacionales. Sin
embargo, pisa revel que mientras los estudiantes so
lan manejarse muy bien en tareas que requeran repro
ducir el contenido de una asignatura, no lo hacan tan
bien en tareas abiertas que requeran la demostracin
de su capacidad, para aplicar lo que saban en situacio
nes nuevas. Comunicar esto a los padres y al pblico
en general, acostumbrados a ciertos tipos de pruebas,
tambin plantea un desafo a la poltica. Una respuesta
de Japn ha sido incorporar las tareas abiertas tipo
pisa a la evaluacin nacional, con el propsito de que
las habilidades que se consideran importantes se vuel
van valiosas en el sistema educativo. De manera similar,
Corea ha incorporado recientemente tareas avanzadas
de alfabetizacin tipo pisa en sus exmenes de ingre
so a la universidad, para promover la excelencia en la
capacidad de sus estudiantes para acceder, administrar,
integrar y evaluar el material escrito. En ambos pases,
estos pasos representan un cambio transformacional,
que habra sido mucho ms difcil de imaginar sin los
desafos revelados por la citada prueba.
Conclusiones y camino por recorrer
En un mundo globalizado, los parmetros de las polticas

pblicas en educacin no se enfocan slo en metas y es
tndares nacionales sino, cada vez ms, en el desempeo
de los sistemas educativos ms exitosos a escala interna
cional. pisa se ha vuelto un poderoso instrumento para
las polticas de reforma, al permitir a los sistemas edu
cativos verse a s mismos a la luz de polticas planeadas,
instrumentadas y realizadas en otras partes. Ha demos
trado lo que es posible en la educacin, en trminos de
calidad, equidad y eficiencia en los servicios educativos,
y esto ha promovido un mejor entendimiento de cmo
sistemas educativos diferentes enfrentan problemas si
milares; aun ms importante, al ofrecer a los responsa
bles de las polticas y a los profesionistas la oportunidad
de mirar ms all de las experiencias evidentes en sus
propios sistemas y de reflexionar sobre algunos de los
paradigmas y creencias subyacentes a ellas, pisa mantiene
la promesa de un cambio radical y efectivo.
No obstante, el desarrollo de pisa contina siendo
una empresa desafiante. Las evaluaciones internacio
nales deben cumplir con demandas diferentes y, a ve
ces, contrarias: en primer lugar, necesi

tan enfocarse en las partes centrales y
constantes de los sistemas educativos
para cerciorarse de que son y conti
nan siendo relevantes. Slo eso pue
de asegurar que iniciativas de corto
plazo en las polticas no distorsionen
las prioridades y la operacin de las
instituciones educativas. Como segun
do punto, tambin deben relacionarse
con el desempeo y el comportamien
to que puede mejorarse por medio de
polticas y la prctica; y la perspectiva compara
tiva internacional debe ofrecer valor agregado
a lo que puede alcanzarse a travs del anlisis
nacional. En tercer lugar, mientras que las evaluacio
nes internacionales han de ser tan comparables como
sea posible, tambin han de ser tan especficas, como sea
necesario, para capturar la variacin histrica, sistmi
ca y cultural entre naciones. Por ltimo, las medidas de
desempeo resultantes deben ser tan sencillas como
para ser ampliamente entendidas, y a la vez seguir
siendo tan complejas como para reflejar las realidades
educativas multifacticas.
pisa ha logrado un avance significativo en la expan
sin del rango de competencias incorporadas en su
evaluacin, pero queda mucho por hacer. La evaluacin
de 2015 busca seguir por este camino y har el primer
intento de evaluar competencias interpersonales, con
sideradas por muchos como esenciales para el xito de
los estudiantes. Para ser ms til a los profesores, admi
nistradores y los encargados de las polticas, pisa busca
mejorar su poder analtico para explicar las diferencias
de desempeo observadas. El desarrollo de un equi
po docente y sus competencias y el establecimiento
de nexos efectivos con la Encuesta Internacional sobre
Docencia y Aprendizaje de la ocde (talis) son pasos
importantes hacia esta meta.
Mientras el desarrollo de evaluaciones sigue plagado
de dificultades y su comparabilidad contina abierta
a desafos, las diferencias entre individuos, institucio
nes y sistemas no deberan ser justificacin suficiente
para rechazar su uso, ya que el xito de individuos y
naciones depende en mayor medida de su competitivi
dad global. El mundo es indiferente a la tradicin y a la
reputacin, implacable con la flaqueza, e ignoran
te de las costumbres y prcticas. El xito ser de los
individuos, instituciones y pases que estn prestos a
adaptarse, renuentes a quejarse y abiertos al cambio.
La tarea de los gobiernos ser asegurarse de que sus
ciudadanos, instituciones y sistemas educativos enca
ren este reto. pisa busca proporcionarles instrumentos
tiles para este fin.
91
Captulo
La evaluacin de los recursos

y procesos escolares
R aquel Ahuja Snchez
esde que el INEE inici su trabajo, fue difcil delimitar el

objeto de estudio de la Direccin de Evaluacin de Escuelas
(DEE), probablemente y en parte por lo novedoso que resultaba la creacin de un rea que evaluara algo distinto a
los aprendizajes de los estudiantes y tambin por la manera
en que fue descrita su funcin dentro del Decreto de Creacin y el Estatuto Orgnico. En este ltimo documento, se le
atribuye a la DEE la tarea de participar en el diseo de metodologas para la evaluacin interna y externa de las escuelas,
cuya aplicacin estara a cargo de la Secretara de Educacin Pblica o de las entidades federativas. A diferencia de
las otras reas acadmicas del INEE, a sta no se le conferan
explcitamente funciones de implantacin de los diseos y desarrollos metodolgicos, no obstante que, paradjicamente,
era la nica direccin del INEE con la palabra evaluacin
en su nombre.
Adems de lo anterior, no se contaba con referentes para delimitar o

precisar la amplitud de sus mbitos de estudio, por lo que se tenan du
das respecto de si en las investigaciones deba considerarse a las escuelas
como sistemas o analizarse cada uno de sus componentes por separado
(docentes, directivos, programas, recursos, procesos), y si los estudios de
beran limitarse al contexto de la escuela o abrirse a la supervisin escolar
e, incluso, a los sistemas de gestin educativa regional o estatal, que eran
aspectos o niveles no abordados por las otras reas del inee. Como puede
advertirse, todo esto contribuy a que la dee tuviera un perfil ambiguo y
muchas veces ambicioso en relacin con sus metas por lograr.
94
1 El texto de Guadalupe Ruiz Cullar es muy exitoso en reflejar el camino

transitado por la dee en estos diez aos.
componentes del sistema educativo; por ello, los es

tudios acerca de los recursos y procesos de escuelas y
aulas resultaban muy pertinentes. Se comenz enton
ces con el anlisis de la informacin reunida median
te los cuestionarios de contexto aplicados junto con
los Excale, hecho que en su momento fue debatido a
causa de las limitaciones que derivan de la informacin
obtenida en una muestra representativa de alumnos,
pero no de escuelas y docentes. No obstante, consi
derando exclusivamente los datos ms robustos de los
que se dispona, se tom la decisin de elaborar, du
rante 2006, dos reportes de investigacin: uno sobre
infraestructura y equipamiento en escuelas primarias
y secundarias con base en la informacin derivada
de una gua de observacin en torno a estos aspectos,
diseada en la dee y otro sobre disciplina, violencia
y consumo de sustancias nocivas para la salud en las
escuelas de esos mismos niveles educativos, a partir de
preguntas propuestas por la dee para los cuestionarios
de contexto de alumnos y docentes. Estos dos repor
tes fueron altamente oportunos y pertinentes para las
autoridades educativas.
A partir de ah se han desarrollado diversos estudios
sobre condiciones y prcticas docentes, y oportunida
des de aprendizaje, tanto a pequea como a gran es
cala. La realizacin de este ltimo tipo de estudios, as
La trayectoria de trabajo de la dee en estos diez

aos ha sido un poco irregular1, pues se ha incursio
nado casi en cada uno de los escenarios descritos
anteriormente. Por ejemplo, uno de los primeros pro
yectos fue elaborar una batera de instrumentos para
medir distintos aspectos de la dinmica educativa y es
colar: desempeo de agentes educativos, uso de mate
riales didcticos, organizacin y funcionamiento de las
escuelas, evaluacin del proyecto escolar, autoevalua
cin de la prctica docente, clima escolar, participacin
de los padres de familia y funciones del director, entre
otros. El trabajo fue intenso, pues implic una profun
da revisin de literatura que incluy el anlisis de es
tudios donde se haban utilizado diversas herramientas
para medir dichos aspectos y la microaplicacin de
estas bateras para analizar la pertinencia de los tems.
Sin embargo, no se hizo una labor de promocin de su
uso ms all de publicarlos en la pgina web del Institu
to; tampoco se utilizaron en estudios propios.
Por otro lado, se particip en la capacitacin de equi
pos tcnicos estatales, desempeando un papel muy
importante en el desarrollo de un diplomado para la
elaboracin de diagnsticos estatales, apoyando el an
lisis e integracin de diversos resultados de evaluacin.
Tambin se incursion en la evaluacin de programas
con una metaevaluacin del Programa Escuelas de Ca
lidad, que en ese tiempo era el principal a nivel federal
y resultaba innovador al enfocarse en la gestin escolar.
Una expectativa del inee era, sin duda, generar in
formacin no slo de aprendizajes, sino sobre otros
95
El estudio de los recursos y procesos escolares
como el uso de metodologas cualitativas o mixtas, ha

sido motivo de reflexin dentro del inee. Sin embargo,
para profundizar en temas como los procesos escola
res y educativos, es necesario el uso de metodologas
alternativas a las que son el principal capital del inee,
perspectiva que en otros sistemas nacionales de eva
luacin educativa se desarrollan con varios propsitos:
hacer diagnsticos ms finos sobre las caractersticas
y procesos que tienen lugar al interior de las escue
las, lo que a su vez puede enriquecer los juicios sobre
la calidad del sistema que otros operativos permiten
formular; o bien, ofrecer un marco para la prueba de
instrumentos y la generacin de hiptesis a retomar en
los estudios a gran escala.
No es propsito de este texto hacer un recuento
de todos y cada uno de los proyectos realizados en la
dee, pero s mostrar que la trayectoria que ha tenido
a lo largo de esta dcada ha sido, como se mencion
al principio, un tanto errtica. Esto no slo ha guarda
do estrecha correspondencia con las dificultades que
ya se han planteado; tambin hubo otras limitaciones
para que el inee construyera, configurara y se apro
piara del quehacer de la dee. Por una parte, lo que
demanda el trabajo de evaluacin del logro en cada
vez ms niveles educativos y reas del currculo, en una
dcada de importantes reformas curriculares; la con
ceptualizacin, construccin y operacin de un sistema
de indicadores relevantes y pertinentes como el que
se ha alcanzado y sigue en desarrollo, y la participacin
en distintos y cada vez ms complejos proyectos inter
nacionales. Tambin, y no menos importante, fue que
la dee naci junto con la Direccin de Relaciones Na
cionales y Logstica, en la ciudad de Aguascalientes, lo
que sin duda dificult que pudieran dialogar ms cer
cana y cotidianamente con las otras reas del Instituto.
96
Desde inicios de 2012 la dee trabaja junto con las

dems reas del inee en la Ciudad de Mxico, esto ha
sido una gran oportunidad para cosechar el trabajo
que se ha apuntalado y madurar su identidad. Tene
mos claro que la contribucin de la dee a la misin
del inee es ofrecer informacin til y relevante sobre
los recursos y procesos escolares y educativos, tanto
por su relacin o impacto potencial en los resultados
de aprendizaje (perspectiva de eficacia escolar), como
porque representan la calidad con la que se imparte la
educacin en nuestro pas. Como sabemos, a travs
de los insumos y procesos que preferimos llamar
condiciones para la enseanza y para el aprendizaje
es que el Estado puede instrumentar medidas de equi
dad para crear condiciones de igualdad y garantizar el
ejercicio del derecho a la educacin.
Primera versin del Catlogo digital de publicaciones, 2005.
Colaboracin entre evaluadores
y tomadores de decisiones para el diseo y desarrollo

de polticas educativas ms pertinentes
las escuelas y en qu consisten las oportunidades de

aprendizaje a las que son expuestos los alumnos?,
cmo se reflejan los efectos de la obligatoriedad de
la educacin preescolar en el trabajo del aula?, qu
mecanismos y acciones emprender para atender con
calidad y equidad a nios y nias en condiciones de
vulnerabilidad?
Los estudios constituyen un aporte valioso al co
nocimiento; son tiles para quienes realizamos tareas
relativas al diseo y desarrollo del currculum, pero
este mbito no es el nico desde el cual se requie
ren acciones para la mejora en la calidad del servicio;
sta implica las condiciones de infraestructura, equi
pamiento y recursos humanos suficientes y profesio
nalmente competentes para brindar la atencin peda
ggica que requieren los nios desde los tres aos de
edad. Al respecto, el inee ha formulado recomenda
ciones que vale la pena analizar desde diversas instan
cias, no slo como resultados de lo que se investiga y
documenta, sino como objeto de definicin de polticas
pblicas enfocadas en atender las necesidades urgentes
en nuestro sistema educativo.
A casi diez aos de iniciada la reforma pedaggica en

la educacin preescolar, su finalidad (transformar las
prcticas educativas centrndolas en el desarrollo de
competencias en los nios) sigue siendo un gran de
safo. Y es que la aspiracin de que los fundamentos,
propsitos y orientaciones planteadas en el currculum,
se expresen en el trabajo cotidiano del aula y la escuela,
conlleva cambios en las formas de pensar respecto de
cmo son los nios, cmo aprenden, qu son capaces
de hacer y en relacin con ello, cul es el papel de la
educadora y de la escuela, y qu factores influyen en el
desarrollo del proceso educativo.
Dos estudios realizados por el inee1 documentan
resultados sobre asuntos siempre reconocidos como
importantes pero poco estudiados: la evaluacin de los
aprendizajes que logran los nios pequeos y las con
diciones en las que se ofrece la educacin preescolar.
La experiencia compartida entre investigadores del
inee, y quienes coordinamos la reforma de preescolar
en la sep, ha hecho posible focalizar los puntos clave
sobre los cuales indagar y contar con informacin que,
basada en estudios a gran escala, es valiosa para la de
finicin de acciones orientadas a mejorar la atencin
educativa que se ofrece a las nias y los nios que cur
san este nivel.
Muchas preguntas surgidas durante las acciones de
reforma han sido objeto de anlisis compartido con los
investigadores del Instituto en el proceso de construc
cin de los estudios mencionados:
Qu aporta la educacin preescolar a los nios y
las nias que la cursan, especialmente a quienes estn
en condiciones de mayor vulnerabilidad?, se puede
investigar el valor agregado al egreso de preescolar
respecto del ingreso?, es posible estudiar a profundi
dad en qu se concentran las actividades al interior de
Eva Moreno Snchez
inee (2008). El aprendizaje en tercero de preescolar en Mxico. Lenguaje y

comunicacin. Pensamiento matemtico; inee (2010) La educacin preescolar
en Mxico. Condiciones para la enseanza y el aprendizaje.
97
El estudio de las condiciones

de la oferta educativa
Guadalupe Ruiz Cullar
Introduccin
a presente colaboracin busca dar cuenta de

los principales logros y aprendizajes del Insti
tuto Nacional para la Evaluacin de la Educa
cin, a lo largo de la dcada transcurrida, en lo que se
refiere a la construccin de la nocin de condiciones
de la oferta educativa como un eje relevante de anli
sis, evaluacin y promocin de la mejora de la calidad
del sistema educativo.
Desde la creacin del inee, fue claro que la calidad
de la educacin no poda ser valorada solamente por
los resultados de aprendizaje de los alumnos atendi
dos por el sistema educativo mexicano; por ello, tanto
en el proyecto mismo como en los documentos fun
dacionales del Instituto, qued asentado que una par
te de su misin sera el desarrollo de modelos para la
evaluacin de los centros escolares y se previ, en
la estructura orgnica del nuevo organismo, un rea
que tendra la misin de llevar a cabo esta tarea: la
Direccin de Evaluacin de Escuelas (dee).
En estos diez aos, la delimitacin precisa de las
responsabilidades del rea fue materia permanente de
reflexin al interior de la Direccin misma, as como
de interaccin frecuente con el equipo directivo y los
miembros del Consejo Tcnico. Un proceso que re
present un ir y venir; avanzar hasta tener aparen
temente todo claro y retroceder para pensar de
nueva cuenta cul sera el aporte especfico
de la dee a la misin del inee.
En este proceso se parti, como se ha
dicho, de la idea contenida en el Decreto
de creacin sobre el desarrollo de mode
los para la autoevaluacin y la evaluacin
externa de centros escolares, que en tal
caso, seran aplicados por otras instancias;
posteriormente, se trabaj durante cier
to tiempo bajo la perspectiva de evaluar a
nivel sistmico, recursos y procesos escolares y de aula,
hasta llegar a la nocin que, al cabo de tantas vueltas,
termin siendo la ms satisfactoria: las condiciones de
la oferta educativa.
Las condiciones de la oferta educativa como
mbito de evaluacin y formulacin de polticas
Los sistemas nacionales de evaluacin, tambin lla

mados sistemas nacionales de medicin de la calidad
98
educativa, o evaluaciones estandarizadas y de apren

dizaje, son dispositivos institucionales tcnicamente
complejos que desarrollan acciones sistemticas y pe
ridicas; por lo general, inicialmente centradas en la me
dicin de los aprendizajes de los alumnos a gran escala
(Toranzos, s.f.).
En el origen de los sistemas nacionales compo
nente igualmente fundamental hoy en da destaca la
apuesta por las evaluaciones de aprendizaje: en todos
los casos en que se dispone de informacin, stos la
ponen en el centro (Schmelkes, 2002). La preocupa
cin por saber qu tanto aprenden los estudiantes en
su paso por el sistema educativo ha resultado de la
mayor relevancia en un mundo en que el conocimiento
y las capacidades de los individuos son cada vez ms
importantes, tanto para las oportunidades individuales
de vida como para las posibilidades de desarrollo de
los pases (Ravela, 2006).
La idea de determinar la calidad del sistema edu
cativo por medio de los resultados de aprendizaje
logrados por los educandos es correcta, pero insufi
ciente. Sobre todo si una aspiracin correlativa a esa
medicin es que las acciones aporten elementos para
la mejora del sistema. En buena medida ello ser posi
ble si se avanza en la comprensin de los factores que
explican los diferentes niveles de rendimiento que las
mediciones estandarizadas suelen identificar, adems
de saber en qu medida los alumnos aprenden lo que
se espera de ellos al finalizar ciertos ciclos o niveles, y
cul es el grado de equidad o inequidad en el logro de
dichos aprendizajes.
Por esta razn, la indagacin de los factores aso
ciados a los resultados escolares usualmente forma
parte de los operativos de medicin, incluidos los que
son atribuibles al propio origen social de los estudiantes
como ha demostrado ampliamente la investigacin,
stos contribuyen con el mayor peso explicativo
al igual que los intrnsecos, que remiten a la escuela y a
sus docentes.
Ahora bien, aun cuando el acercamiento a los facto
res explicativos de los resultados de aprendizaje pueda
ser tcnicamente correcto y estar fundamentado en los
aportes de la investigacin, el problema persistente es
que forma parte de operativos cuyo foco se ubica en la
medicin de resultados de aprendizaje, y es ah donde
probablemente estn concentrados los mayores esfuer
cursos y qu procesos considerar?, con qu criterios

determinarlos?, cmo hacer evaluaciones pertinentes
de aspectos significativos de la realidad educativa en
un nivel y momento determinados?, qu aspectos se
tendrn que considerar para hacer una evaluacin valiosa
de lo que el sistema educativo ofrece a sus educandos
y a la sociedad misma? A la vez, esta evaluacin ser
til para informar la toma de decisiones?
En realidad, logramos ciertos avances en la preci

sin de esos criterios; por ejemplo, considerar las expe
riencias internacionales en la materia, as como aportes
de campos tericos clave para la comprensin del fun
cionamiento de las escuelas y sus agentes, como son
los de eficacia escolar y docente, entre otros; atender
a los planteamientos normativos y de poltica educa
tiva que regulan la organizacin y funcionamiento del
sistema en el nivel de los centros escolares y las aulas,
por escasos que fueran, por cuanto pueden formular,
de alguna manera, estndares de una educacin de
buena calidad. Sin embargo, cuando en su momento
intentamos hacer el ejercicio para la evaluacin que se
avecinaba en el nivel primaria, no result tan sencillo
y al final optamos no por el grado de complejidad,
sino porque nos pareci sumamente relevante por un
estudio temtico sobre las prcticas de evaluacin del
aprendizaje dentro del aula. Esto dej ver un dilema que
supongo seguir presente: abordar la ms amplia va
riedad posible de condiciones de la oferta educativa o
enfocar la atencin en unos cuantos aspectos?
zos de diseo y conceptualizacin. Por lo dems, la ne

cesidad de cubrir una amplia gama de factores asociados
(extrnsecos e intrnsecos al sistema educativo) redunda,
la mayora de las veces, en un acercamiento ms super
ficial a los aspectos de inters desde la perspectiva de
la evaluacin de las condiciones de la oferta educativa.
Por ello, lo que constituye la razn de ser de la
dee es que la evaluacin de la calidad del sistema edu
cativo debe ampliar expresamente
sus alcances, a fin de incluir no slo
aquello que da cuenta de sus re
sultados (tan dependientes, por lo
dems, de factores externos), sino
de otros elementos igualmente
importantes y, en ltima instancia,
susceptibles en mayor medida a in
tervenciones de poltica educativa.
Oferta educativa es un concep
to de uso comn en estos sistemas,
aunque tiene diversas connotacio
nes; para una institucin de edu
cacin superior, por ejemplo, su
oferta est constituida por todos
los programas de estudio que pone
a disposicin de la poblacin de in
ters. En el marco del trabajo de
la dee, la nocin cobr significado
como un concepto aglutinador
que especific lo que se buscaba
evaluar, los recursos y los proce
sos educativos que tienen lugar en
distintos niveles de operacin y tambin como un con
cepto que lleva a evaluar su calidad, no slo por los re
sultados que alcanza, sino adems, por todos aquellos
elementos que pone en juego para que tenga lugar el
acto educativo; por los elementos que en ltima instan
cia configuran lo que ste ofrece a los alumnos, a sus fa
milias, a las comunidades donde se ubican los servicios
educativos y a la sociedad en general.
Una vez que se reconoci que este concepto podra
ser el eje organizador del trabajo de la dee, el primer
estudio bajo este enfoque fue el que llev por nom
bre Condiciones de la Oferta Educativa en Preescolar
(coep). coep es un buen ejemplo de las comprensio
nes que entonces tenamos en la dee: nos planteamos
un estudio de amplio espectro que incluyera variables
relativas a recursos y procesos escolares y de aula, y
que formulara, siempre que fuera posible, referentes
precisos para la evaluacin, tarea compleja por cuanto
no se contaba con definicin alguna de esa naturaleza,
salvo para muy escasas variables. Una dificultad adicio
nal, siempre presente, fue la de abordar, a travs de
acercamientos estructurados de gran escala, los pro
cesos educativos.
Con todo, sospecho que el desafo mayor es con
cretar, en cada nuevo estudio de la dee, el contenido
y alcance de la nocin de Condiciones de la oferta
educativa. Ante una exhaustividad imposible, qu re
Reflexiones finales
Sin desconocer el desafo que ha supuesto durante diez

aos construir el ser y quehacer de todas las reas del
inee, me queda claro que el caso de la dee ha sido sin
99
El serce (Segundo Estudio Regional Comparativo y Explicativo) genera

informacin til para desarrollar polticas educativas en los pases de la regin
para dar cuenta del desarrollo de la calidad de la educacin.
gular. Con muy escasos referentes en la ex

periencia internacional de los cuales echar
mano, como lo pudieron hacer otras reas,
ante una tarea realizada sin duda en la ma
yora de los sistemas educativos, no por organismos
de evaluacin a gran escala, sino por los inspectorados
y las supervisiones, con un acompaamiento siempre
generoso y exigente pero a veces un tanto errtico
por parte del Consejo Tcnico del inee. Finalmente,
con los alcances y las limitaciones de nuestras propias
comprensiones, creo que logramos un aprendizaje b
sico: en materia de evaluacin de escuelas, de los re

cursos y procesos del sistema, o de las condiciones de
la oferta educativa, como se le quiera decir, la tarea no
est definida de una vez y para siempre. Determinar
las caractersticas, cobertura y sentido de los estudios
de la dee seguir siendo un reto. Un reto que vale la
pena asumir si se comparte la idea de que, en educa
cin, cuenta tanto lo que se logra como la forma en la
que se hace, los resultados de aprendizaje, y tambin
los recursos y procesos que el sistema educativo pone
a disposicin de la formacin de sus alumnos.
Ravela, Pedro (2006). Fichas didcticas: para comprender las

evaluaciones educativas. Santiago de Chile: preal.
Ruiz, Guadalupe (2008). Reflexiones desde la experiencia
mexicana en evaluacin educativa. En Varios autores. Reflexiones en torno a la evaluacin de la calidad educativa
en Amrica Latina y el Caribe. Santiago: orealc-unesco
Santiago/llece, pp. 50-65.

Schmelkes, Sylvia (2002). Las necesidades de la evaluacin
del aprendizaje en educacin bsica en Mxico a la luz de
100
un anlisis comparativo. En Varios autores. La calidad de

la educacin en Mxico: perspectivas, anlisis y evaluacin.
Mxico: Miguel ngel Porra.
Toranzos (s.f.). Una visin latinoamericana de los sistemas
nacionales de evaluacin. Programa Calidad y Equidad de
la Educacin. Recuperado del sitio: http://www.oei.es/ca
lidad2/toranzos3.htm, el da 9 de enero de 2008.
Apoyando a la formacin
de los equipos tcnicos
no lo ms productivas posible, el grupo del inee cubri

durante el primer semestre del ao gran parte de los
materiales y lecturas correspondientes al curso doc
toral sobre el tema que imparto en la Universidad de
California, en Los Angeles. Esto evidencia la capacidad
tcnica de sus integrantes que ya manejaban aspectos
conceptuales y metodolgicos clave relacionados con la
medicin de la prctica docente, pero tambin e igual
mente importante, su compromiso personal con el pro
yecto, que implic para los asistentes leer docenas de
artculos y captulos de libros en su tiempo libre, al igual
que comentar y discutir los contenidos en equipo. Na
turalmente, durante el curso se evidenciaron limitacio
nes de los instrumentos y procedimientos desarrollados
previamente; inmediatamente los asistentes se involu
craron en un esfuerzo serio de anlisis para identificar
los cambios y mejoras especficas necesarias en el corto
plazo, y los aspectos sustantivos y tcnicos ms genera
les a abordar en los proyectos de la dee a futuro.
Con seriedad y un compromiso de este nivel, se
puede esperar que la segunda dcada del inee sea tan
productiva como la primera. Felicidades!
Es un gusto muy especial ser invitado a participar

en la construccin de este volumen para celebrar el
dcimo aniversario del inee. Desde la distancia geo
grfica, pero con la cercana de mi relacin personal,
segu muy de cerca la concepcin y planeacin inicial
del Instituto, sus primeras etapas de despegue y su
posterior consolidacin. El desarrollo que ha experi
mentado desde su fundacin resulta sencillamente es
pectacular para el ojo entrenado: el inee de 2012 es un
organismo lder, referencia en la evaluacin educativa
en hispanoamrica por su seriedad, solidez tcnica e
independencia. Esto refleja, por una parte, el empuje
visionario y apasionado de su director fundador y, des
de luego, la capacidad, entrega y esfuerzo del personal
en todos los niveles. Con este texto, pretendo resaltar
la profundidad del compromiso de quienes trabajan en
el inee, con base en mi experiencia reciente al impartir
un par de cursos sobre Medicin de la prctica do
cente y Teora de la Generalizabilidad a los integrantes
de la Direccin de Evaluacin de Escuelas (dee) en los
veranos de 2010 y 2011.
El objetivo de los cursos fue profundizar los co
nocimientos como parte de un plan para fortalecer
los instrumentos y procedimientos que se utilizan
para colectar datos sobre los procesos escolares y de
enseanza en aula. La descripcin de esos procesos
es clave para la misin del inee, y se vuelve an ms
crtica porque cada vez con mayor frecuencia se re
quiere no slo describir los productos de una educa
cin deficiente, sino ampliar y profundizar la oferta de
informacin relevante que permita mejorar la calidad
del sistema educativo.
Aunque de corta duracin, los cursos no se plantea
ron como introducciones elementales o cuasi-informales
al tema, sino como esfuerzos relativamente intensos que
facilitaran al personal iniciar un trabajo sostenido a futu
ro. Como preparacin y para hacer las sesiones de vera
101
La importancia de la evaluacin
de los recursos y procesos escolares
para la planeacin y el mejoramiento
de la calidad del sistema educativo
a expectativa de que la educacin contribuya

a impulsar avances significativos en el desarro
llo econmico, poltico y social de los pases ha
sido una constante en los discursos de polticos, educa
dores e investigadores que se ha enfatizado en reitera
das ocasiones durante la ltima dcada. Sin embargo,
para responder de manera decisiva a esta expectativa,
se requiere que la educacin sistematice y organice
esfuerzos y recursos para garantizar el cumplimiento
de sus metas y propsitos. Un mecanismo, que ha im
pulsado dicha sistematizacin en el mbito educativo,
ha sido el establecimiento de procesos orientados a
retroalimentar el desarrollo e impacto de las iniciativas
del propio sistema, as como aqullos dirigidos a rendir
cuentas a la sociedad en la que se encuentran insertos.
Los procedimientos de rendicin de cuentas consti
tuyen, en s mismos, una poderosa herramienta para
facilitar la evaluacin tanto de los recursos y agentes
como del desarrollo y resultados, es decir, del sistema
educativo en su conjunto.
En las propuestas de la reforma educativa, actual
mente en marcha, tanto en la educacin bsica como
en la media superior (sep, s.f.) se ha manifestado la
importancia de promover la evaluacin de todos los
actores y procesos involucrados a travs de la valora
cin del progreso en el logro de las metas propuestas
en el programa sectorial, as como del grado de apli
cacin de los mecanismos diseados para alcanzarlas
(inee, 2009, 2008).
En el contexto mexicano, los esfuerzos por con
solidar mecanismos de evaluacin eficientes recibieron
un impulso sustancial en 2002, a partir de la creacin
del Instituto Nacional para la Evaluacin de la Educa
cin, que estableci, como su propsito fundamental,
ofrecer a las autoridades educativas y al sector privado
herramientas idneas para la evaluacin de los sistemas
de educacin bsica (preescolar, primaria y secundaria)
y media superior.
Una manera lgica de contribuir con estos esfuer

zos y as responder a las necesidades y demandas ac
tuales en materia educativa, consiste en definir y po
ner en operacin sistemas de indicadores sobre la base
del modelo explcito o implcito del funcionamiento del
sistema educativo para realizar evaluaciones diversas
de componentes del sistema, o de ste en su conjunto
(Garca-Cabrero, 2010).
Desde la dcada de los ochenta, diversas institu
ciones y organismos se han dado a la tarea de disear
indicadores que ayuden a valorar al sistema educativo.
Es el caso de la ocde, que cuenta con 25 indicadores
agrupados en cuatro grandes categoras: 1) resultados e
impacto del aprendizaje; 2) recursos humanos y finan
cieros invertidos en educacin; 3) acceso a la educa
cin, participacin y progreso, y 4) ambiente de apren
dizaje y organizacin de las escuelas (ocde, 2009).
La construccin o seleccin de indicadores per se,
no necesariamente representa una solucin a la com
pleja tarea de la evaluacin. stos pueden constituirse
en herramientas altamente tiles para dar cuenta del
estado del sistema educativo, o pueden ser nicamente
elementos aislados que proporcionan informacin que
podra resultar intil. Para que los indicadores resulten
adecuados en funcin de los requerimientos de evalua
cin, ser necesario que stos se diseen y/o seleccio
nen con base en un marco de referencia slido. Este
marco lo constituyen los modelos de evaluacin.
La evaluacin del Sistema Educativo Nacional (sen)
generalmente se ha enfocado en analizar la relacin en
tre caractersticas socioeconmicas de los estudiantes
y los logros de aprendizaje alcanzados. La evaluacin de
recursos ha sido atendida en menor proporcin, pero
el aspecto que ha sido ms descuidado es la evalua
cin de los procesos escolares1. Estas deficiencias se
deben, en gran medida, al desconocimiento de meto
dologas para valorar los indicadores vinculados a los
costos de operacin de un sistema. Su aplicacin faci
litara la realizacin de evaluaciones costo-beneficio o
costo-efectividad, que son prcticamente inexistentes
en el contexto de la evaluacin del sen. En el caso de
los procesos, tambin existe un vaco, tanto por el uso
1 Vanse, por ejemplo, los reportes de resultados de la aplicacin de prue
bas nacionales e internacionales, enlace, Excale, pisa , timms (sep, s.f.; inee,
s.f., Fundacin Este Pas, 2011, Backhoff y Solano, 2003).
102
diseo de proyectos y es crucial en el desarrollo y me

joramiento de un sistema educativo. Se orienta no slo
a determinar qu recursos humanos y materiales se in
vertirn, sino a establecer la relacin entre estrategias
alternativas de inversin de recursos. Es aqu donde,
por ejemplo, debe decidirse si se invierte ms en edu
cacin inicial y preescolar para garantizar que los nios
adquieran las competencias mnimas y tengan una tra
yectoria acadmica exitosa, productiva y satisfactoria; y
tambin donde se decide si debe invertirse ms en la
formacin de los recursos humanos que participan en
el sistema, y en qu tipo de procesos: capacitacin, ac
tualizacin o desarrollo profesional. De igual manera se
toman decisiones de qu, dnde y cundo invertir en la
adecuada disposicin y mantenimiento de los espacios
fsicos de las escuelas, los materiales educativos o el
equipamiento tecnolgico.
Las evaluaciones de insumo implican el desarrollo
de estudios que analicen la relacin entre las inversio
nes y las tasas de retorno de las mismas, esto ayudar
a estimar los costos reales de operacin de un pro
yecto y los beneficios derivados. Estos pueden verse
reflejados en menores ndices de reprobacin, mayores
niveles de rendimiento acadmico, mayor satisfaccin
de los participantes, menores porcentajes de alumnos
enviados a programas remediales y mayor adaptacin
social, por citar algunos indicadores que debern esti
marse tambin en trminos econmicos para garanti
zar su comparabilidad.
La evaluacin de proceso involucra la toma de de
cisiones de aplicacin para controlar la operacin del
proyecto. sta facilita el monitoreo de la aplicacin y
la valoracin de las formas en que se aplican los m
todos instruccionales seleccionados; dichas formas son
poco generalizado de modelos de evaluacin y meto

dologas adecuadas, como por la dificultad que conlleva
valorar la complejidad de los mecanismos de gestin e
interaccin que ocurren al interior de las escuelas.
La evaluacin de los recursos y procesos escola
res se encuentra asociada con lo que Stufflebeam y
Shikfield (1987) denominaron: la evaluacin de in
sumo y de proceso y forman parte del modelo cipp
(Contexto, Insumo, Proceso y Producto), desarrollado
por Stufflebeam et al. (1971) y orientado a la toma
de decisiones que apoyan el control de la operacin de
determinado proyecto. Para Stufflebleam, la funcin de la
evaluacin consiste en proporcionar informacin que
facilite el control de la calidad y el mejoramiento de un
sistema, e implica la puesta en marcha de tres procesos:
delinear, obtener y proporcionar informacin; stos se
llevan a cabo de manera sistemtica en cada uno de
los tipos de evaluacin propuestos en el modelo cipp,
mismos que apoyan decisiones diversas.
Stufflebeam plantea que la evaluacin de contexto
se encuentra asociada con las decisiones de planeacin
para determinar los objetivos de una nueva propuesta
de intervencin o los de la adaptacin de una ya exis
tente. Estos objetivos pueden ser de cuatro tipos: 1) los
que reflejen un cambio homeosttico no profundo, con
el que sea posible mantener el equilibrio del sistema;
2) los dirigidos a un cambio incremental que permita el
desarrollo de nuevas actividades, mtodos, estrategias
o materiales para la mejora continua del sistema; 3) los
establecidos para introducir un cambio innovador con
el cual se resuelvan problemas significativos, y 4) los que
conllevan una verdadera transformacin del mismo.
La evaluacin de insumo, por su parte, se relacio
na con las decisiones de estructuracin para definir el
Mesa pblica La Calidad

de la Educacin Bsica
en Mxico, 2005.
103
influidas por las condiciones en que

se realiza, como contextos desfavo
recidos socioeconmicamente, en
trenamiento recibido por los profe
sores y directivos para la aplicacin
de la propuesta, espacios fsicos
acondicionados de acuerdo con los
requerimientos, tiempo efectivo y
rutinas escolares destinadas a la
instruccin, entre otros.
Finalmente, la evaluacin de
producto se asocia con decisiones
de reciclaje para valorar los logros del
programa. Durante el proceso de
aplicacin de una propuesta, se pue
den realizar evaluaciones de productos parciales (tal
como se puede observar en la figura 1) que ayudan a
detectar fallas, corregir rumbos o invertir ms recursos.
Tambin existe la posibilidad de una evaluacin sumati
va o de producto o impacto final, con la que es posible
decidir si la propuesta debe seguir instrumentndose
tal como se concibi, si se requieren cambios o dar por
terminada su aplicacin.
Desde 2006 se han distribuido ms de
121 400 folletos
con informacin para las escuelas, sobre las caractersticas

del levantamiento de datos.
Si bien cada uno de estos tipos de evaluacin aporta

informacin relevante acerca de un determinado siste
ma, programa o propuesta educativa, tanto la de insumo
como la de proceso, resultan de especial importancia
para valorar el funcionamiento del sen, y en caso de ser
necesario, intervenir y subsanar las posibles fallas; con ello
se lograrn mejoras que eleven la calidad de la educacin.
Evaluacin de insumo
Como se ha dicho, la evaluacin de insumo permite

obtener informacin para determinar cmo utilizar los
recursos para alcanzar las metas de un programa; as, es
posible identificar las capacidades relevantes de la insti
tucin, las estrategias para lograr las metas del progra
ma y los diseos para aplicar la estrategia seleccionada.
Con sta se podrn recabar datos para decidir si se
requiere asistencia del exterior para lograr los objeti
vos, qu estrategia general debe emplearse y qu di
seo o procedimiento es preciso utilizar para aplicar la
estrategia seleccionada; su funcin es determinar cmo
se lograrn mejor los objetivos. De all que la tarea de
evaluar los insumos es una estrategia que debe iniciarse
durante el proceso de planeacin de una propuesta,
ya que de esta manera se garantizar una adecuada
104
planificacin, ser posible ahorrar recursos materiales y

humanos, y se aprovecharn los existentes de manera
ptima (Garca-Cabrero, 1986).
Algunas de las preguntas que pueden responderse
mediante la evaluacin de insumo son:
1. Los objetivos de la aplicacin estn establecidos
de forma clara y es factible su logro?
2. Ha funcionado esta propuesta en el pasado, es
decir, existen experiencias similares que permitan
garantizar el xito de la implantacin?
3. La propuesta educativa que se ha diseado est
basada en principios tericos vlidos?
4. Cunto entrenamiento, y de qu tipo, requerir
el equipo de trabajo docente y directivo antes de
que pueda aplicar la propuesta de manera efectiva?
5. Cules son las actitudes de estudiantes, padres y
maestros hacia la propuesta diseada, y qu saben
respecto de ella?
6. Qu espacios fsicos se requieren, cul debe ser su
distribucin, el mobiliario y los materiales educati
vos para una adecuada aplicacin de la propuesta?
7. Qu tipo de diseos de evaluacin de proceso y
producto se requieren para lograr una estrategia
de aplicacin efectiva?
8. Despus de una prueba piloto, qu tan factible es
la institucionalizacin de la estrategia?
La valoracin de insumo ayuda a planificar una
propuesta de manera adecuada, pues a travs de ella
es posible realizar un anlisis para contrastar el nuevo
proyecto con otras propuestas, por ejemplo, median
te evaluaciones costo-beneficio o costo-efectividad.
Estos tipos de anlisis resultan particularmente tiles
para determinar los elementos que se requieren para
la puesta en marcha de un proyecto y valorar a priori
las posibilidades reales de un desarrollo exitoso. En el
contexto mexicano no slo existen pocos ejemplos de
evaluacin de insumo o recursos educativos sino que,
adems, se llevan a cabo una vez que se ha iniciado la
implantacin del programa, es decir, a posteriori.
Un ejemplo de este tipo de evaluacin es el estu
dio Condiciones de la Oferta Educativa en Educacin
Una de las funciones que cumplen los directores,

como parte del proceso de liderazgo distribuido, con
siste en la organizacin y promocin de actividades de
formacin continua de los profesores en servicio. La
realizacin de este tipo de actividades constituye uno
de los indicadores de insumo ms importantes para
garantizar la adecuada implantacin de una propuesta.
Evaluacin de procesos escolares
La valoracin de los procesos implica identificar y

monitorear continuamente la puesta en marcha de
un proyecto en relacin con los objetivos y perfil es
tablecidos inicialmente, as como las fuentes potencia
les de error o fallas en su desarrollo (Garca-Cabrero,
1986). Los objetivos que persigue la evaluacin de
proceso de acuerdo con Stufflebeam, Foley, Gephart,
Guba, Hammond, Merriman y Provus (1971) son:
1) detectar o predecir defectos en el diseo de pro
2 Algunos indicadores de financiamiento pueden verse en los Panoramas
Educativos del propio inee y en publicaciones de la ocde.
cedimientos o en su operacin durante la fase de

aplicacin; 2) proporcionar informacin para apoyar
la toma de decisiones programadas, y 3) mantener
un registro de cmo se desarrolla la aplicacin de la
propuesta educativa y de los resultados logrados a lo
largo de su instrumentacin.
Lo anterior se traduce en la identificacin y mo
nitoreo de aspectos tales como el acuerdo entre
participantes sobre los propsitos del programa, las
relaciones interpersonales entre los agentes educa
tivos, los canales de comunicacin, la logstica, y la
adecuacin de los recursos, instalaciones y equipo.
Adems implica valorar la relacin entre el tiempo
programado y el dedicado efectivamente a las di
versas actividades consideradas, as como el manejo
adecuado de los contenidos del programa y la realiza
cin de evaluaciones formativas y sumativas durante
el proceso de enseanza-aprendizaje. Una estrategia
para llevar a cabo este tipo de evaluacin consiste en
sealar las caractersticas principales de la propuesta
educativa: contenidos escolares (currculo y materia
les educativos), tipo de interaccio
nes esperadas entre profesores y
contenidos, alumnos y contenidos,
profesores y alumnos, o entre los
propios alumnos; es decir, cual
quier aspecto que permita descri
bir lo que ocurre realmente como
parte de los procesos escolares.
Un aspecto que debe tomarse
en cuenta para la evaluacin de los
procesos es la valoracin del grado
de fidelidad en la ejecucin de las
caractersticas esperadas de la pro
puesta educativa. La Evaluacin de
la fidelidad en la implementacin
(efi) constituye una estrategia a travs de la cual pue
de entenderse el vnculo que existe entre las formas y
grados de ejecucin de un programa, y el impacto que
stas tienen en el logro de metas y objetivos. Primo
(2006) plantea que, al utilizar este tipo de evaluacin,
es posible obtener informacin valiosa para aplicar me
joras y tambin difundir los programas y proyectos a
escalas mayores. En la descripcin de los componentes
estratgicos y logsticos de la ejecucin, la evaluacin
del proceso identifica los mtodos que funcionan con
eficacia, adems de destacar las mejoras que requieren.
El proceso de evaluacin proporciona informacin que
afecta directamente en su posibilidad de replicacin.
Realizar una evaluacin centrada en la fidelidad de
la implantacin permite determinar con bastante exac
titud si los resultados obtenidos estn relacionados con
un determinado porcentaje de aplicacin del progra
ma, o si existen desviaciones o distancias importantes
entre lo propuesto y lo aplicado.
De acuerdo con Dan y Schneider (1998), algunos
de los aspectos que deben considerarse para evaluar
la fidelidad en la ejecucin son: 1) Adherencia: se refie
Preescolar en Mxico (coep) realizado por el inee en

2008 (Prez-Martnez, 2010), en el cual los recursos
econmicos se valoran a travs de las contribuciones
de los actores que participan en el financiamiento de
las escuelas pblicas y de las contribuciones econmi
cas de los padres de familia. El tema del financiamiento
es un aspecto importante en la evaluacin de los siste
mas educativos2. Por otro lado, puesto que los recursos
humanos juegan un papel fundamental en el adecuado
desarrollo de la vida escolar, el coep valor si los profe
sores contaban con capacitacin y experiencia acordes
con la propuesta curricular en operacin. Asimismo,
consider si los directores haban sido capacitados y
tenan experiencia. Chenoweth y Theokas (2011) se
alan la importancia que reviste el desempeo de los
directores para influir en los resultados de aprendizaje
de los alumnos. Proponen la utilizacin del trmino
liderazgo distribuido para sealar que este recurso
no debe ser privativo del director de la escuela y que
las funciones de liderazgo se compartan con los admi
nistradores y profesores.
105
re a si el programa o intervencin est implantado tal

como fue diseado, es decir, si todos los componen
tes esenciales estn siendo entregados a la poblacin
adecuada, a travs de personal debidamente capaci
tado, utilizando los protocolos, tcnicas y materiales
apropiados, y en los lugares o contextos prescritos.
2) Exposicin: valora la cantidad de actividades y con
tenidos del programa que han recibido los participan
tes e incluye cualquiera de los siguientes aspectos: el
nmero de sesiones de prctica, la duracin de cada
sesin o la frecuencia con la que las tcnicas del pro
grama se llevaron a cabo. 3) Calidad en la ejecucin:
es la manera en la que los maestros, voluntarios o el
personal ofrecen un cierto programa (por ejemplo, la
habilidad en el uso de las tcnicas o mtodos estable
cidos, el entusiasmo, la preparacin y la actitud, entre
otros, mostrados por los aplicadores). 4) Capacidad de
respuesta de los estudiantes: es el grado en el que los
participantes se encuentran comprometidos e involu
crados en las actividades y contenidos del programa.
5) Diferenciacin del programa: identifica las caracte
rsticas nicas de los diferentes componentes o pro
gramas para diferenciarlos.
La evaluacin de recursos resulta de vital importan
cia para realizar anlisis de costo-beneficio o costo-efec
tividad (Mackay, 2010; Philips y Thompson, 2009). As se
determina la conveniencia de un proyecto mediante la
enumeracin y valoracin en trminos monetarios de
todos los costos y beneficios derivados directa e indi
rectamente. Tambin permite valorar la efectividad de
proyectos pblicos, lo que implica medir el logro de re
sultados y su relacin con los costos de intervencin,
utilizando las mismas unidades en todos los proyectos,
de manera que sea posible tener una perspectiva co
mn para juzgarlos.
Para Mackay (2010), este tipo de evaluaciones resul
tan primordiales, ya que contribuyen al adecuado mo
nitoreo del sistema educativo. A travs de ellas, se pue
den optimizar los recursos disponibles y respaldar o no
las polticas educativas vigentes, y a la vez planificar los
recursos y procesos educativos con base en prioridades
y demandas competitivas de los ciudadanos y sociedad
en general. Ms an, constituyen un vehculo efectivo
para amplificar la voz de la sociedad civil y promover
que el gobierno alcance mayores niveles de desempeo
en el mbito educativo.
Al centrarse en la evaluacin de la fidelidad de la
implantacin, las evaluaciones que se realicen sobre el
sistema educativo considerarn los resultados obteni
dos en un determinado centro escolar, zona, regin, et
ctera y los contrastarn con los perfiles o estndares
de las innovaciones que se pretenden introducir. De all
surge la necesidad de contar con parmetros claros de
cmo deben verse las aulas, las escuelas, los procesos
de formacin docente, las rutinas diarias, la participa
cin de los padres y las clases que se imparten, entre
otros aspectos. De acuerdo con lo establecido en los
estndares, cada uno de los agentes educativos involu
106
crados puede orientar adecuadamente sus acciones al

logro del perfil deseado, siempre con cierta flexibilidad
en la adopcin/adaptacin de las innovaciones, pero
tambin con fidelidad, de tal manera que se garantice
un grado de aplicacin mnimo y puedan compararse
los logros alcanzados en diversos escenarios (GarcaCabrero, en prensa).
Comentarios finales
Evaluar lo que se invierte en educacin y la forma

como se distribuye el gasto es un aspecto que debe
importar ms a los planificadores e investigadores de
la educacin y que, por tanto, deber recibir un im
pulso ms decidido tanto en la agenda pblica como
en la de los estudiosos del campo educativo. Su im
portancia radica no slo en lograr inversiones pro
ductivas, redituables al corto, mediano y largo plazos,
sino en destacar su carcter estratgico en el mejo
ramiento de aspectos tales como la infraestructura
fsica, los arreglos espaciales, el mobiliario y equipa
miento de las aulas y escuelas, as como los materiales
educativos, entre otros.
La inversin en la formacin de recursos humanos
con un nivel ms alto de profesionalismo es una asig
natura pendiente del Sistema Educativo Nacional. Aun
cuando se reconoce que se realizan esfuerzos soste
nidos en este sentido, stos no han logrado impactar
significativamente en la formacin de los maestros.
Existen excepciones valiosas que deben reconocerse,
estimularse y difundirse para que sirvan como ejemplo
de buenas prcticas que puedan ser emuladas por pro
fesores, colectivos de escuelas o por todo el conjunto
del sistema. En estas prcticas seguramente estarn
presentes cualidades y formacin profesional de direc
tivos y maestros que en gran medida son producto de
iniciativas individuales y aisladas, las cuales deben ser
documentadas para poder analizarse cuidadosamente
y determinar las condiciones en que es posible genera
lizar su aplicacin en contextos especficos.
Por otra parte, se requiere pensar ms a fondo so
bre el uso de metodologas para la evaluacin de los
procesos de implantacin y, por tanto, de validacin
de propuestas educativas. La alternativa de evaluacin de
la fidelidad en la implantacin de una innovacin puede
ser una opcin que le permita al sen avanzar con pasos
ms firmes en la aplicacin de las transformaciones que
requiere. La evaluacin de los procesos escolares debe
permitir capturar la complejidad de la puesta en mar
cha de una innovacin, ya que sta modifica los tipos de
gestin, interaccin e interactividad educativas. Es una
tarea que requiere tomar en cuenta diversos planos de
la adopcin, adaptacin y diseminacin de las iniciativas
de mejoramiento de la calidad educativa y que deber
estar slidamente fundamentada en las aportaciones
ms efectivas de las metodologas del cambio, as como
en las aportaciones de diversas disciplinas sociopsico
pedaggicas que tomen en cuenta las dimensiones
cognitivas, sociales y afectivas involucradas en lograr los

cambios propuestos.
El desarrollo de sistemas de indicadores vlidos
y confiables, vinculados con los recursos y procesos,
constituye una tarea fundamental y prioritaria a la
que debern dedicarse esfuerzos sostenidos en el
contexto de la evaluacin del sen, ya que a travs de
ellos ser posible construir mejores objetivos, pre
guntas y diseos de intervencin y evaluacin. Los
esfuerzos realizados por el inee durante los pasados

diez aos, para consolidar un sistema de indicadores
adecuado para la evaluacin del Sistema Educativo
Nacional, constituyen en s mismos experiencias en
riquecedoras a travs de las cuales ha sido posible el
logro del propsito fundamental del Instituto: ofre
cer a las autoridades y al sector privado herramientas
idneas para la evaluacin de la educacin bsica y
media superior.
inee (s.f.). Explorador Excale. Disponible en: http://www.inee.
edu.mx/explorador/queSonExcale.php
Mackay, K. (2010). Building, monitoring and evaluation sys
tems to improve government performance. En M. Se
gone (Ed.), Country-led monitoring and evaluation systems.
Better evidence, better policies, better development results.
Nueva York: unicef.
ocde (2009). Education at glance. oecd Publishing. Disponi
ble en: http://www.oecd.org/dataoecd/41/25/43636332.pdf
Prez-Martnez, M. G. (Coord.) (2010). La educacin preescolar en Mxico. Condiciones para la enseanza y el aprendizaje. Mxico: inee.
Primo, M.A. (2006). A Multi-method and multi-sourced
approach for studying fidelity of implementation. cse Report
677. California: The Regents of the University of California.
sep (s.f.). Qu es enlace? Disponible en: http://www.enlace.
sep.gob.mx/
sep (s.f.). Reforma Integral de la Educacin Bsica. Disponible
en: http://basica.sep.gob.mx/reformaintegral/sitio/index.
php?act=rieb
Stufflebeam, D., Foley, W., Gephart, W., Guba, E., Hammond,
R., Merriman, H. y Provus, M. (1971). Educational evaluation and decision making. Itasca, I11: Peacock Publishers.
Stufflebeam, D.L. y Shikfield, A.J. (1987). Evaluacin sistemtica. Gua terica y prctica. Barcelona: Centro de Publica
ciones del mec /Paids.
Backhoff, E. y Solano, G. (2003). Tercer Estudio Internacional

de Matemticas y Ciencias Naturales (timss): Resultados de
Mxico en 1995 y 2000. Coleccin Cuadernos de Inves
tigacin: Cuaderno Nm. 4. Mxico: inee.
Chenoweth, K. y Theokas, C.(2011). Getting it done. Leading
academic success in unexpected schools. Cambridge, ma:
Harvard Education Press.
Garca-Cabrero, B. (1986). Evaluacin de un programa de
educacin preescolar con orientacin cognoscitiva. Tesis de
Maestra en Psicologa Educativa. Facultad de Psicologa,
Universidad Nacional Autnoma de Mxico.
Garca-Cabrero, B. (2010). Modelos tericos e indicadores
de evaluacin educativa. Revista Sinctica, Num. 35, 1-21.
Disponible en: http://www.sinectica.iteso.mx/articulos/
sin35/art35_06/35_06.pdf
Garca-Cabrero, B. (en prensa). Hacia la mejora de la edu
cacin: cambios necesarios y horizontes futuros. En M.
Robles (Comp.), Los retos fundamentales de Mxico: Construyendo una agenda para el siglo xxi. Mxico: Escuela de
Administracin Pblica del Distrito Federal.
Fundacin Este Pas (2011). Resultados de la prueba pisa de la
ocde. Competencias en lectura, matemticas y ciencias.
Este Pas, 237, enero, 61-64.
inee (2008). Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2008. Mxico: inee.
inee (2009). Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2009. Mxico: inee
107
La revolucin
de la evaluacin
Gilberto Guevar a Niebla

Dicha cada fue un hecho mundial: lo mismo ocurri
en Estados Unidos que en Gran Bretaa, como en
la Unin Sovitica. El reconocimiento de la crisis de la
educacin lo hizo tempranamente Coombs en 1968.
En Mxico, las primeras evaluaciones nacionales que
evidenciaron esa crisis se realizaron en los aos ochen
ta y noventa y causaron escndalo. Las autoridades,
sensibles ante lo ocurrido, reaccionaron rpidamente
y, para el efecto, crearon el Instituto Nacional para la
Evaluacin de la Educacin (inee) en el ao 2002.
El inee es una institucin que naci como un ges
to de honestidad de las autoridades. No a los enga
os. Escuela no significa educacin. El Instituto debe
transparentar los procesos de enseanza-aprendiza
je no para sancionar, sino para corregir los errores
y conducir la educacin por las rutas que sean ms
productivas y prometedoras. Con el inee, los mexi
canos hemos aprendido a ver objetivamente nuestra
realidad educativa y a prepararnos para mejorarla.
Es, por eso, una de las instituciones con mayor fuer
za moral de Mxico. Ojal y pronto logre su cabal
autonoma.
Mxico experiment una gigantesca expansin escolar

a partir del Plan de Once Aos (1960). Concebido por
don Jaime Torres Bodet y el presidente Adolfo Lpez
Mateos, se propona ofrecer escuela elemental a todos
los nios en edad de cursarla en un plazo de 11 aos.
A partir de entonces, el crecimiento de la cobertura
escolar fue acelerado y guiado en muchos casos por la
improvisacin y los tropiezos propios de la velocidad del
cambio. Mxico pas de tener 3 millones de alumnos en
1950, a registrar casi 30 millones en el ao 2000.
En su obra, La crisis mundial de la educacin (1968),
Phillipe H. Coombs analiz la expansin que durante la
postguerra experimentaron la mayora de los sistemas
educativos de Occidente y concluy que en ese pro
ceso las metas cuantitativas haban opacado los facto
res cualitativos. En aras de la expansin, se sacrificaron
elementos como la renovacin curricular, la investiga
cin educativa, los mtodos de enseanza, la formacin
y actualizacin de docentes, la evaluacin, etctera.
Tal desencuentro entre lo cuantitativo y lo cualitativo
produjo un sorpresivo fenmeno de derrumbe del
aprovechamiento (aprendizajes).
108
Captulo
El vnculo con las
reas Estatales de Evaluacin y el proceso

de recoleccin de informacin
esde la creacin del Instituto Nacional para la Evaluacin

de la Educacin se vislumbr la necesidad de establecer un
acercamiento formal con las autoridades educativas de todas
las entidades federativas del pas, en particular con las reas
Estatales de Evaluacin (AEEs). Estas unidades de trabajo, inscritas dentro de las secretaras estatales de educacin o sus
equivalentes, comenzaron su integracin y funcionamiento en
1996 por iniciativa de la Secretara de Educacin Pblica (SEP).
Se caracterizan por ser heterogneas en cuanto a su tamao y
su ubicacin dentro de la estructura educativa, as como por
los recursos materiales con los que cuentan y los proyectos
a los que se avocan. Sin embargo, todas comparten el comn
denominador de participar en la recoleccin de informacin
de las evaluaciones federales y en algunos casos, locales.
Para garantizar el acercamiento con las aees, el Decreto de Creacin

del inee estableci una instancia formal denominada Consejo Consultivo, el
cual est integrado por los titulares de dichas unidades en las 32 entidades
federativas del pas y cuyo secretariado tcnico recae en el titular de la
Direccin General de Evaluacin de Polticas de la sep.
A lo largo de estos diez aos, el Consejo Consultivo se ha constituido
como un espacio de vinculacin para la expresin de los participantes en
torno a algunos de los proyectos que realiza el inee, y que estn relaciona
dos tanto con la formacin del personal de las aees como con la construc
cin de indicadores educativos, la medicin del logro de aprendizaje de
los estudiantes y la indagacin de las condiciones en las cuales se ofrece el
servicio educativo en Mxico.
La relacin con las aees ha tenido nfasis en la etapa de recoleccin
de informacin de los estudios sobre logro educativo de los estudiantes
112
De acuerdo con el Estatuto Orgnico del inee, el Consejo

Consultivo sesiona dos veces al ao. La primera sesin se
celebr en mayo de
2003 y a la fecha se han celebrado
25 sesiones ordinarias.
normalizada de instrumentos; respeto a las personas

y a la organizacin escolar; informacin suficiente y
oportuna; seguridad en el resguardo de los materiales;
mantener un porcentaje mnimo de irregularidades y
asegurar eficiencia en los procesos.
Cada proceso de recoleccin de informacin im
plica el cumplimiento de estndares tcnicos para ase
gurar la calidad. Por lo que se refiere a los recursos
necesarios para su organizacin y ejecucin, se ponen
en juego diversos aspectos formales e informales de
trabajo, por ejemplo:
y condiciones de la oferta educativa. En el Consejo,

las entidades conocen los resultados de cada proceso
de aplicacin de instrumentos que se ha realizado con
su apoyo, expresan sus necesidades de formacin so
bre evaluacin educativa, y se informan y acuerdan
sobre el programa de levantamiento de datos que se
efectuar cada ao en el pas.
El vnculo del inee con las aees inici con la oferta
de un diplomado dirigido a la formacin de los equipos
tcnicos, pero pronto se traslad al campo de los pro
cesos de recoleccin de informacin con la aplicacin,
en 2004, de las Pruebas de Estndares Nacionales y, al
ao siguiente, con la de los Exmenes de la Calidad y
Logro Educativos (Excale). Estas pruebas representa
ron un avance en el desarrollo de las evaluaciones a
gran escala y en el diseo de los mecanismos de vincu
lacin para que la aplicacin de instrumentos se realiza
ra con la calidad requerida.
El desarrollo del levantamiento de datos fue todo
un reto. El Instituto se vio obligado a conocer la di
versidad de condiciones en las que operan las aees y
sus posibilidades reales de colaboracin y, con base
en esta informacin, establecer pautas de organizacin
adecuadas que consideraran los contextos y no afec
taran la calidad tcnica de la aplicacin de los instru
mentos. Se decidi entonces establecer, con la mayor
precisin posible, los tiempos de las distintas etapas
del proceso, los procedimientos para disminuir errores
en el envo de materiales y para enriquecer la capacita
cin de los participantes.
Estas iniciativas condujeron a la construccin de un
proceso estandarizado de aplicacin con normas claras
y principios de accin que an estn vigentes: aplicacin
a) la experiencia de gestin de cada participante;

b) el diseo y desarrollo de la logstica de operacin
de todo el levantamiento con su correspondiente
flujo de envo y devolucin de informacin, mate
riales y recursos;
c) el modelo de capacitacin para todo el personal
involucrado, y
d) la aplicacin simultnea de los instrumentos en
todo el pas con el apoyo de aplicadores volunta
rios entre 2 mil 500 y 5 mil, que son invitados
a participar en cada entidad.
113
El vnculo con las reas estatales y el proceso de recoleccin de informacin
El desarrollo de esta tarea y, por supuesto, sus

resultados, implican el conocimiento, experiencia y
esfuerzo de cada una de las partes: por un lado, del
Instituto en cuanto al diseo de la logstica y la coordi
nacin nacional de los procesos y, por otro, de las aees
en lo que se refiere a la gestin local de la informacin,
los mecanismos de comunicacin y la aplicacin de los
instrumentos en las escuelas.
En cada proceso, el responsable de las aees nombra
a un coordinador estatal, quien desplegar en la enti
dad todas las actividades necesarias para llevar a cabo
la aplicacin de los instrumentos en la escuela. El inee, a
su vez, cuida que dicho coordinador cuente con todos
los insumos requeridos para el logro de los objetivos.
Por otra parte, y con el propsito de facilitar la in
terlocucin entre las partes y reflexionar sobre situa
ciones de inters, en el marco del Consejo Consultivo
se integraron, a partir de 2008, tres grupos de trabajo
especiales sobre difusin de resultados, logstica y for
macin. Estos grupos propiciaron la construccin de
propuestas enfocadas en la mejora de ciertas etapas
de los levantamientos de datos y en la construccin de
ofertas especficas de formacin de los equipos tcni
cos en las entidades.
El grupo de difusin de resultados ha insistido en la
importancia de esa labor y ha presentado experiencias
locales sobre este aspecto.
El de trabajo de logstica ha realizado aportaciones
importantes sobre la necesidad de producir material
informativo para los alumnos, docentes, directores y
padres de familia participantes en las evaluaciones; tam
bin ha revisado las distintas etapas del proceso y el
papel de los participantes.
Por ltimo, el de trabajo sobre formacin ha insis
tido en conservar una oferta permanente de capaci
tacin y en disear y constituir un espacio virtual para
Consejo
Consultivo, 2009.
114
mantener contacto y comunicacin, hecho que dio

origen a la Comunidad virtual del Consejo Consulti
vo. En este espacio los miembros del Consejo pueden
estar en comunicacin con sus pares para consultarlos
o intercambiar opiniones en torno a la manera de en
frentar las tareas inherentes al proceso de recoleccin
de informacin en los estudios que el inee promueve.
En cuanto a los cursos ofrecidos, se abarcan tem
ticas que van desde aspectos tcnicos, tales como el
diseo de indicadores educativos y anlisis estadsticos,
hasta la difusin y el uso de resultados.
El Consejo Consultivo se ha esforzado por favore
cer la profesionalizacin de los instructores que capa
citan a los aplicadores; en este sentido, el programa de
trabajo para cada proceso de recoleccin de informa
cin ha logrado explicitar, cada vez con ms acierto, el
contenido y la metodologa en la cual se fundamenta la
formacin. Las personas que colaboran como instruc
Se han impartido
30 cursos o talleres
para la formacin en evaluacin educativa, en los que han

participado
921 integrantes de las reas estatales
de evaluacin.
tores disponen de todos los materiales para realizar las

sesiones de capacitacin con base en guas didcticas;
la duracin es de cinco horas, aproximadamente.
Otra iniciativa importante de vinculacin es el di
seo y organizacin de la Comunidad virtual de ins
tructores, cuyo propsito es generar el dilogo sobre
distintos temas de inters y ser un mecanismo de co
municacin y aprendizaje horizontal entre pares.
El funcionamiento de los grupos de trabajo se ha
constituido en un mecanismo eficiente para el logro
de acuerdos y propuestas, que en cada caso se pre
sentan a consideracin y aprobacin del pleno del
Consejo Consultivo; con ello se enriquece la visin
de la diversidad de las realidades locales para mejorar
las condiciones en las cuales se efecta la recoleccin
de informacin.
Las relaciones del inee con las entidades del pas
durante estos diez aos han representado, en primer
trmino, un elemento imprescindible para llegar a las
escuelas y obtener informacin de

calidad para las evaluaciones que
el Instituto realiza; en un segundo
plano y ms all del aspecto tc
nico, tambin ha significado una
experiencia de aprendizaje social
plasmada en el intento de construir
autnticos equipos de trabajo en
las tareas de la evaluacin educativa
y, en particular, en lo que se refiere
a la recoleccin de informacin.
No obstante, es preciso im
pulsar una mayor colegialidad con
objeto de mejorar los procesos de
trabajo y analizar la pertinencia
de las fechas de aplicacin de los
proyectos de evaluacin, sean del
inee, de la sep o locales.
Asimismo, es conveniente con
tactar a otros grupos dentro de las
secretaras estatales de educacin,
como por ejemplo, los equipos tcnicos de formacin de
docentes en servicio o los dedicados a la planeacin
y a la produccin de informacin, para compartir los
resultados de los estudios del inee e invitarlos a par
ticipar en proyectos distintos a los de recoleccin de
informacin, que tambin resulten de su inters, para
que tanto estos grupos como el Instituto enriquezcan
su experiencia y profundicen en el conocimiento de la
educacin nacional.
En resumen, la colaboracin de las aees en el de
sarrollo de los levantamientos de datos que el inee
coordina es un factor clave para la recoleccin de in
formacin y contribuye a fortalecer las capacidades
tcnicas de estas reas y del mismo Instituto. Por
tanto, es muy importante conservar y fortalecer este
espacio comn de trabajo, proponiendo, quizs, otras
formas de vinculacin con nuevos propsitos, pero
siempre con miras a mejorar la tarea de evaluar el
Sistema Educativo Nacional.
115
El inee y las reas Estatales

de Evaluacin
Mara Guadalupe Beltr n Medina
116
diez aos de la creacin del Instituto Na

cional para la Evaluacin de la Educacin, es
relevante considerar las expectativas que
justificaron su existencia. El Programa Nacional de
Educacin 2001-2006 apunta en la seccin denomina
da La complejidad del cambio educativo, la necesidad
de tener informacin objetiva sobre los logros que se
alcanzan en materia educativa y sobre los insuficiente
mente alcanzados; comparar resultados en el tiempo
y entre modalidades o tipos educativos y entre po
blaciones; relacionar los resultados con los recursos
(sep, 2001: 54) en una visin crtica de los avances para
retroalimentar, de manera pertinente y oportuna, los
procesos de cambio.
Complementa que la evaluacin permanente y
sistemtica, que combina la participacin de instancias
externas e internas, es un importante instrumento de
gestin (sep, 2001: 54) tanto para contar con infor
macin que derive en acciones de mejora como para
rendir cuentas a la sociedad.
Con el fin de consolidar el Sistema Nacional
de Evaluacin Educativa, la lnea de accin fue crear
el inee, con funciones articuladas a la evaluacin de la
sep y de las entidades federativas, as como establecer
lineamientos para asegurar la calidad de las evaluacio
nes, su adecuada utilizacin y evitar efectos contrarios
a la equidad. La meta: crearlo en 2002 (sep, 2001: 100).
Las tres lneas sustantivas de trabajo y las de apoyo
establecidas por el Instituto han sido puntuales para
responder a dichas expectativas. La lnea fundamental
es evaluar la calidad del sistema educativo en la educa
cin bsica y media superior. La conciencia de que esta
accin no basta para transformar la educacin pues
slo tiene sentido en la medida en que contribuya
a la mejora de la calidad, estableci una segunda
lnea, de tanta importancia como la primera: la difu
sin de los resultados de la evaluacin1. La tercera lnea
corresponde a investigacin y formacin de recursos
humanos especializados. En el marco de la operacin
de estas tres lneas sustantivas, perfil tambin sus re
laciones con las reas estatales de evaluacin.
El 8 de mayo de 2003 (inee , s.f.a: 1) se convoc a la

instalacin del Consejo Consultivo como el enlace
para fortalecer la colaboracin entre las autoridad es
educ ativas federal y locales en materia de evalua
cin educ ativa (www.inee.edu.mx). Se integr con
la pertenencia honoraria de los responsables del
rea de Evaluacin Educativa (aee) de las 32 en
tidades federativas y por el titular de la Direccin
General de Evaluacin de Polticas de la sep.
El posicionamiento del inee al orientar la evaluacin
bajo slidos planteamientos terico-polticos, ha dado
al Consejo Consultivo un marco de referencia para la
reflexin conjunta y la toma de decisiones acerca de
los procesos de evaluacin educativa en el pas. Estas
consideraciones trascienden la operacin de aquellos
que tienen origen en el inee y permean a los que se de
sarrollan bajo la coordinacin de la sep y de las mismas
entidades federativas.
La operacin de las tres lneas sustantivas de
trabajo del inee ha dado forma a las relaciones que
se establecen con las reas estatales. En la lnea
de evaluacin de la calidad del sistema educativo en
la educacin bsica y media superior, se han desarro
llado con el Consejo Consultivo sesiones informati
vas2 que perfilan el marco terico y tcnico en que
se sustentan los diversos instrumentos. Se ha acor
dado la participacin de las entidades federativas en
el proceso de formulacin de los instrumentos de
evaluacin, con la invitacin de maestros a sesiones
de trabajo en las que, con manuales tcnicos detalla
dos, e incluso a travs de una plataforma web, apoyan
la construccin y validacin de reactivos. La sistemati
zacin de protocolos da formalidad a la participacin
y al establecimiento de acuerdos bajo referentes tc
nicos precisos.
Con relacin a los levantamientos de datos, la cali
dad en la coordinacin nacional en la cual prevalece
la planeacin, el diseo de herramientas sistemticas, la
definicin de figuras y la conformacin de equipos es
1 Se especifica la relevancia de esta lnea en el Plan Maestro de Desarrollo

2004-2012 (inee s.f.b: 158). Se reitera y ampla en el Plan Maestro de
Desarrollo 2007-2014 (inee, 2006: 36).
2 De la misma manera que se realiza la exposicin de los procesos de eva

luacin a cargo del inee, en cada sesin del Consejo Consultivo se dedica
un espacio en la agenda a la presentacin de alguna experiencia de las reas
estatales, tanto en la instrumentacin de evaluaciones como de acciones de
difusin de resultados.
Instalacin del Consejo Consultivo del inee
Educativos. El orden de las publicaciones evidencia que

la difusin de resultados es mucho ms que las califi
caciones obtenidas en las evaluaciones; el resultado es
un marco terico, poltico, protocolos de formulacin
Capacitacin a aees
en Coahuila, 2004.
Comunidad del
Consejo Consultivo
en el portal del inee.
y calificacin de instrumentos, un levantamiento de

datos documentado, la vinculacin de las calificacio
nes con las condiciones de la oferta, con numerosos
factores del ambiente escolar y social, as como con el
sistema de indicadores educativos que ofrecen refe
rentes de la evolucin educativa en las entidades y en
el orden nacional.
Muy destacable es la relacin con el inee en la lnea
de formacin de recursos humanos para la evaluacin.
La consolidacin de cuadros tcnicos ha sido una prio
ridad, pues ha generado una oferta amplia y pertinente
de capacitacin, dirigida al personal de las reas esta
tales de evaluacin, y a la vez ha tomado en cuenta la
diversidad y demanda de las 32 reas estatales.
Sera conveniente sugerir la adopcin de un papel
ms dinmico del Instituto en la certificacin de los
instrumentos de evaluacin que desarrollan las reas
de evaluacin en las entidades. Tal vez a partir de
este proceso, podra generarse un involucramiento
ms activo entre las reas de planeacin estatales y
el propio inee.
tatales de instructores, ha sido esclarecedora para

las reas estatales de evaluacin. Un ejemplo de esto
es la documentacin detallada de la experiencia ope
rativa, vista como una oportunidad de aprendizaje,
que se sistematiz en el cuaderno
de investigacin Estndares tcni
cos para asegurar la calidad en los
levantamientos de datos. Este ma
terial novedoso, que propone diez
estndares que derivan en 44 indi
cadores desde 2007, es para Jalisco
y entiendo que tambin para otras
entidades, un referente indispensa
ble en el programa interno de for
macin de los tcnicos en evalua
cin y en la definicin de estrategias
de trabajo.
El inters del Instituto en la difu
sin de resultados est presente en
la lnea de formacin de recursos
humanos para la evaluacin. Entre
marzo y octubre de 2004, el inee
ofert el curso-taller Estrategias
bsicas para el anlisis, difusin y
uso de resultados de evaluacin en
el cual, a partir del anlisis de infor
macin derivada de las evaluacio
nes, de conceptos bsicos de eva
luacin y de una metodologa para
la construccin conjunta con reas
de planeacin y estadstica, se formularon diagnsticos
de la educacin bsica por entidad. Entre los aspectos
ms relevantes de esta experiencia, adems de los ma
teriales tcnicos, est la importancia de contextualizar
los resultados de las evaluaciones en el marco del con
texto educativo de la entidad y de los indicadores que
se proveen de manera sistemtica por otras reas.
Quizs el primer aspecto, que parece obvio, es
aceptar y profundizar la idea de que para difundir los
resultados de la evaluacin y para orientarlos en tr
minos pedaggicos y polticos hacia la mejora educa
tiva, se requiere una capacitacin mnima, tanto de
los responsables de la evaluacin como de los medios
de comunicacin.
Un indicador de la importancia que la difusin de
resultados tiene para el inee es la cantidad de publica
ciones de libre acceso que hay en la pgina www.inee.
edu.mx; desde documentos institucionales, informes
y panoramas educativos, cuadernos de investigacin,
manuales tcnicos, materiales para los docentes, hasta
plataformas web de Excale y del Banco de Indicadores
inee (s.f.a). Avances del inee durante su primer ao de activida
des. Consultado en febrero de 2012 en www.inee.edu.mx

inee, (s.f.b). Documentos institucionales. Consultado en fe
brero de 2012 en www.inee.edu.mx
inee, (2006). Plan Maestro de Desarrollo 2007-2014. Mxico: au
tor. Consultado en febrero de 2012 en www.inee.edu.mx

sep (2001). Programa Nacional de Educacin 2001-2006. Go-
bierno de la Repblica. Mxico: sep.

117
La aplicacin de instrumentos
de evaluacin y sus procesos asociados:
en qu estamos y para dnde vamos?
Fr ancisco Ernesto Reyes Jimnez
118
Mencin especial merece la aplicacin censal dirigida a

estudiantes de 3, 5 y 9 grados (Pruebas Saber), que
tendr lugar el mes de octubre y llegar a ms de 2.5
millones de nios en todo el territorio nacional. Este
ser el operativo ms grande en la historia del icfes
con ms de un ao de planeacin, nos enfrentar
a mltiples retos y har necesarias diversas medidas de
control adicionales a las ya existentes, con el propsito
de asegurar la calidad en el desarrollo del proyecto, de
manera que el procesamiento y la entrega de resulta
dos se puedan llevar a cabo en los trminos previstos.
En suma, durante el ao se aplicarn alrededor
de cuatro millones de exmenes dirigidos a pobla
ciones cuyas edades abarcan entre los 8 y ms all
de los 25 aos, en todo el territorio nacional (adi
cionalmente Saber Pro se aplicar en alrededor de
30 pases a estudiantes que estn culminando sus
estudios fuera de Colombia, ya que la presentacin
de este examen es requisito de grado), lo cual de
mandar esfuerzos en diversos frentes, antes, du
rante y despus de las aplicaciones.
Para abordar el reto de atender apropiadamente a
las poblaciones objetivo de las diferentes evaluaciones
a cargo del icfes, es necesario contar con mecanismos
giles para recaudo, inscripcin y citacin (utilizados por
Archivo Iconogrfico dgm/sep.
esde inicios de la dcada, el hoy Instituto

Colombiano de Evaluacin de la Educacin
(icfes) ha desarrollado acciones tendientes a
hacer ms eficiente su operacin. Entre 2003 y 2005,
se inici la transformacin operativa de este Instituto
mediante la sustitucin de trmites en papel por servi
cios en lnea, en especial, recaudo, inscripcin, citacin
y publicacin de resultados va internet, que promo
vieron el uso intensivo de la tecnologa y la banca por
parte de poblaciones heterogneas y dispersas en todo
el territorio nacional. La diversificacin de las evaluacio
nes y los requerimientos de los distintos proyectos obli
garon a la organizacin a profundizar la modernizacin
de los procesos asociados con las aplicaciones.
Desde 2006 y en respuesta a la dinmica de la
institucin, se han identificado y capitalizado diversas
oportunidades de mejora de los procesos que se llevan
a cabo al interior y exterior del icfes. En la actualidad se
disea una nueva generacin de servicios tecnolgicos
y operativos, como respuesta a la evolucin en el dise
o y la construccin de las pruebas y como soporte al
crecimiento futuro del instituto.
En 2009, el icfes se convirti en una empresa es
tatal de carcter social vinculada al Ministerio de Edu
cacin Nacional, con personalidad jurdica, autonoma
administrativa y presupuestal, as como patrimonio
propio, que tiene a su cargo las evaluaciones naciona
les, los exmenes de Estado de ingreso y egreso de la
educacin superior y la representacin de Colombia en
los estudios internacionales. Tambin disea y adminis
tra una prueba de seleccin para el ingreso a la carrera
docente. Sus principales recursos provienen de tarifas
por concepto de pruebas, de proyectos nacionales de
evaluacin y, en menor escala, de servicios que se pres
tan a gobiernos locales. Cuenta con un fondo patri
monial cuyos rendimientos financieros se invierten en
investigacin y desarrollo, as como en estudios sobre
la calidad de la educacin en el pas.
En 2012, adems de los exmenes de Estado de
la educacin media (Saber 11) y superior (Saber Pro,
en los que se incorporan pruebas especficas acordes
con los respectivos programas acadmicos), se llevar
a cabo la tercera aplicacin de pisa (incluido su compo
nente electrnico, en el que ya se particip en 2009), y
de los pilotos de ahelo y terce, igualmente, est pre
visto un concurso de ingreso al servicio docente.
la tecnologa para la seleccin, capacitacin y control

de los aplicadores, gestionar la relacin con los diver
sos proveedores de servicios requeridos para llevar a
cabo las aplicaciones (personal, impresin, logstica y
sitios de aplicacin, entre otros), empoderarlos cada
vez ms de su papel, para concentrarse al interior del
Instituto en el diseo, gestin, innovacin y control de
las aplicaciones, y en mayor medida con el apoyo en
operadores externos para las labores de campo.
Lo logrado hasta el momento en materia de aplica
cin de exmenes, sus procesos previos y posteriores,
ha sido posible gracias al permanente fortalecimiento
de la organizacin, el control de los ingresos y costos
y la optimizacin de los procesos, todo con el prop
sito de asegurar que los operativos permitan levan
tar la informacin especificada en la fase de diseo y
construccin de las pruebas, generar excedentes que
se destinarn a su mejoramiento, as como a financiar
proyectos de investigacin, a partir de lo cual el icfes
pueda mantenerse en la vanguardia de su mbito de
competencia y continuar siendo fuente vlida de infor
macin y conocimiento, indispensables en la formula
cin de planes de mejoramiento continuo y poltica
pblica sobre la calidad de la educacin y formacin
del talento humano en el pas, tal como est plasmado
en su visin.
Puesto que se trata de instituciones con cometidos
y naturaleza semejantes, estoy seguro de que los desa
fos que enfrenta el icfes son consonantes con los que
el inee se plantea al cumplir sus primeros diez aos. En el
futuro cercano, ser interesante intercambiar apren
dizajes y visiones, y emprender una colaboracin que
enriquezca a ambos.
ms de 12 mil instituciones de educacin media, ms de

300 de educacin superior; ms de 800 mil estudiantes
y ms de 100 mil particulares al ao en promedio), se
leccionar y entrenar aplicadores (se requieren alrede
dor de 60 mil al ao), desarrollar y actualizar manuales y
formatos (con particularidades dadas por el respectivo
proyecto nacional o internacional), controlar los pro
cesos de impresin (incluyendo multiplicidad de tipos,
tamaos, papeles y tintas), empaque y distribucin que
aseguren la cadena de custodia de los materiales de
evaluacin, reforzar la gestin en los sitios de aplicacin
(alrededor de mil 500, controlados por el icfes simult
neamente) y los procesos posteriores a ella, tales como
la recoleccin y lectura ptica de hojas de respuesta
(este ao se procesarn alrededor de siete millones de
documentos). Todo lo anterior apoyado en un proceso
de atencin al usuario, con mltiples canales de servicio
para responder las consultas de la comunidad educati
va y el pblico en general.
Ahora bien, preparndose para el futuro, durante
los ltimos aos el icfes ha efectuado algunas aplica
ciones nacionales e internacionales en formato electr
nico, incluidas pruebas almacenadas en medios fsicos
(memorias usb y cds) y con acceso en lnea. Adicional
mente, para este ao est previsto pilotear una plata
forma para la presentacin de exmenes en red local.
Con esto se pretende ganar experiencia en la materia,
comparar diversas alternativas y disponer de ellas se
gn las necesidades de un determinado proyecto y de
acuerdo con las prioridades del Instituto.
De seguro, las evaluaciones en formato electrnico
se masificarn paulatinamente en Colombia, siguiendo
la tendencia internacional, con lo cual se har necesa
rio aumentar la frecuencia de las aplicaciones a partir
de los requerimientos de hardware, software y conec
tividad necesarios para operativos a gran escala. Ello
demandar disponer de recursos humanos y tcnicos
acordes con las caractersticas de tales proyectos.
En la actualidad se aplican fundamentalmente cua
dernillos conformados por tems de seleccin mlti
ple, respondidos en hoja de respuesta externa para
lectura ptica; igualmente, se aplican cuadernillos
para la captura directa de respuestas mediante es
cner, tems de respuesta abierta corta y ensayos; a
corto o mediano plazo se incorporarn ms tems de
respuesta abierta en las evaluaciones, con lo cual el
requerimiento de operaciones de calificacin crecer
de manera importante. La ampliacin de la cobertura de
este tipo de pruebas har necesario contar con he
rramientas tecnolgicas apropiadas para las nuevas y
crecientes demandas.
Si bien las pruebas electrnicas entrarn en auge,
la aplicacin de instrumentos de evaluacin en forma
to impreso seguir siendo preponderante en el pas
por un buen tiempo; por ello, se requerir seguir re
forzando todos los procesos y procedimientos, docu
mentarlos y estandarizarlos, mantener actualizados los
manuales y formatos de control, aumentar el uso de
119
Contribuciones del inee
al proceso de levantamiento de datos
Introduccin
esde su creacin, el Instituto Nacional para

la Evaluacin de la Educacin (inee) se traz la
meta de realizar sus funciones con criterios de
calidad y alto rigor tcnico, as como con prcticas com
parables a las seguidas por las instituciones de vanguar
dia en el mundo. Esto se observa no slo en su Misin
y Plan Maestro de Desarrollo, en las orientaciones que
guan su trabajo y en sus procedimientos, sino tambin
en los resultados que ha logrado y que se reflejan en
sus mltiples publicaciones.
El inee ha sido factor decisivo para posicionar en
la agenda de los evaluadores, los investigadores y los
formuladores de polticas educativas, temas como la
equiparabilidad, el error estndar, la realizacin de eva
luaciones muestrales en ciclos multianuales, la relacin
entre propsito y tipo de evaluacin, al igual que la difu
sin de resultados y su uso para la toma de decisiones.
En el marco del dcimo aniversario del Instituto,
enfocar esta colaboracin en mencionar cules son,
desde mi punto de vista, las aportaciones que esta ins
titucin ha hecho para mejorar el proceso de levan
tamiento de datos. Siendo este un tema opaco, quiz
por ser de ndole eminentemente prctica, en el que
hay menos interesados y que despierta menos pasio
nes que las cuestiones antes mencionadas, no deja de
ser importante en el proceso general de la evaluacin y
debe regirse, igualmente, por un alto nivel de exigencia
tcnica y realizarse buscando siempre la calidad.
Antes de abordar el tema, debo sealar que for

m parte de la estructura del Instituto por un periodo
de casi siete aos, cinco de los cuales me desempe
como responsable de la Subdireccin de Logstica, rea
encargada de coordinar la aplicacin de los instrumen
tos de evaluacin. Conviene advertir la doble situacin
que se presenta al hablar de aqullo de lo que uno fue
parte: por un lado, las ventajas derivadas del conoci
miento de causa y la vivencia personal, pero por otro,
el riesgo de ser parcial en las apreciaciones y juicios
expresados sobre el tema.
El punto de partida
En su Decreto de Creacin y Estatuto Orgnico se es

tablece que al inee le corresponde contribuir a la eva
luacin del sistema educativo nacional y los estatales
a travs de: 1) un sistema de indicadores; 2) evaluar
aprendizajes, y 3) evaluar recursos y procesos escola
res; cada una de estas lneas de evaluacin requiere
recoleccin de datos.
Asimismo, estos ordenamientos normativos esta
blecen que el Instituto buscar alcanzar la mayor ca
lidad en el desarrollo de modelos e instrumentos de
evaluacin, atendiendo la confiabilidad y la validez en
todas sus dimensiones.
La calidad de la evaluacin depende de que, en cada
una de sus etapas, se tengan altas exigencias tcnicas;
el diseo de instrumentos, el procesamiento y anlisis
de la informacin son importantes, pero igualmente lo
debe ser el proceso de levantamiento de datos.
Segn Martnez Rizo (2005), en los albores del nue
vo siglo, la evaluacin de la educacin bsica en Mxico
se caracterizaba por:
Un aumento progresivo en el volumen de las apli
caciones, que le agregaba complejidad a la tarea
de levantamiento de datos.
La necesidad de planear operativos de campo con
ms variantes que respondieran a las exigencias de
nuevos diseos de muestras ms estructurados,
con ms estratos y niveles de representatividad.
120
El camino recorrido
El inee incursion en el proceso de levantamiento de

datos fundamentalmente a partir del conocimiento y
la experiencia que le fueron transferidos por los equi
pos responsables de estas actividades en la entonces
llamada Direccin General de Evaluacin Educativa de
la sep; adicionalmente, aunque en menor medida, se
nutri de las prcticas en este quehacer del Ceneval,
de la Universidad Autnoma de Aguascalientes y de
la Universidad Autnoma de Baja California, debido a
que al Instituto se incorpor personal proveniente de
estas instituciones.
Con base en la descripcin que el mismo Martnez
Rizo (2008) hace respecto de la trayectoria seguida
por el inee en materia de coordinacin de operativos
para la aplicacin de instrumentos de evaluacin y la
conformacin de equipos especializados en el tema, es
posible sealar que se transit por cuatro etapas:
I. Apropiacin y aprendizaje de los procedimien
tos. En 2003, los procesos de aplicacin tuvieron
Entrega y revisin de
cuestionarios aplicados.
que ser asumidos por la sep, ya que el inee toda

va no tena los elementos para hacerse cargo de
los complejos operativos de campo que implican
las evaluaciones. Para 2004, se llevaron a cabo las
primeras experiencias de manejo de operativos
por parte del Instituto, las cuales dieron lugar a
aprendizajes muy profusos.
II. Consolidacin inicial. A partir de 2005, el Instituto
asumi plenamente el desarrollo de los levanta
mientos de datos, primero a partir de la metodo
loga heredada, y luego incorporando pequeos
cambios y algunas mejoras al proceso. Se realiza
ron ciertos ajustes en las acciones de capacitacin
del personal de la estructura operativa, en los
manuales y materiales de control, en la entrega
y revisin de materiales, as como en los apoyos
a los coordinadores de los estados. En esta etapa
se inici un monitoreo de la calidad de la apli
cacin de los instrumentos como un mecanismo
interno para disponer de informacin acerca de
la estandarizacin del proceso y la calidad de los
datos recabados.
III. Documentacin y sistematizacin. El avance ms
importante se dio en esta etapa. A partir de 2006,
el inters se concentr en sistematizar y docu
mentar el proceso y sus procedimientos, as como
en explicitar los estndares de calidad para cada
Aplicaciones anuales en varios o todos los grados,

que implicaba operativos de campo pesados, cos
tosos y no indispensables.
Variabilidad e improvisacin en el tiempo y la for
ma de aplicar las evaluaciones, debido principal
mente a determinantes administrativos.
La escasez de especialistas y la falta de experiencia
de los responsables de coordinar las aplicaciones de
instrumentos, quienes aprendan sobre la marcha.
La falta de evidencia suficiente de la calidad de las
aplicaciones.
121
fase. Adems se defini y robusteci la estructura

operativa, lo cual permiti mejorar los manuales
que orientan sus actividades (como aplicadores,
coordinadores estatales, capacitadores, represen
tantes y monitores).
IV. Inicio de la mejora continua. En 2007, se adop
taron nuevos modelos de aplicacin con el pro
psito de mejorar la calidad de la informacin
recogida; en particular, se esperaba reducir de
manera significativa la proporcin de no res
puestas y avanzar en la estandarizacin.
En 2008, se realiz por primera vez
una evaluacin de la calidad de las
aplicaciones, hecha por perso
nal externo tanto a las reas
Estatales de Evaluacin como
al inee. Si bien se detectaron
fallas significativas en esta pri
mera ocasin, se consider
importante mantener el crite
rio de una evaluacin externa; no
obstante, por dificultades presupues
tarias esto no se pudo llevar a cabo. A
partir de 2009 se inici un proceso de mejora
continua de los materiales y procedimientos.
Las aportaciones del inee al proceso
de levantamiento de datos
A continuacin mencionar slo algunos de los apor

tes que, desde mi punto de vista, el inee ha hecho al
cuerpo de saberes relacionados con la aplicacin de
instrumentos de evaluacin.
1. Sistematizacin y documentacin del proceso
En la literatura especializada sobre evaluacin educa

tiva, generalmente el tema de recoleccin de datos se
aborda muy superficialmente o est ausente. Al buscar
informacin concreta acerca de la recoleccin de datos,
ms bien se dispone de manuales especficos para per
sonas que participan en las evaluaciones, como aplica
dores, coordinadores, directores, etctera.
Por lo anterior, el inee puso el foco de atencin en
la sistematizacin y documentacin de las tareas reali
zadas para la aplicacin de los instrumentos; ello deriv
en la creacin de un documento base que articula las
actividades en siete grandes fases y 18 procedimientos,
que involucran a las reas de evaluacin de los Sistemas
Educativos Estatales1, como lo muestra el cuadro que
se presenta enseguida, y que se public bajo el ttulo
de Proceso general de levantamiento de datos para la
evaluacin a gran escala.
2. Definicin de estndares
En febrero de 2007, el inee public el documento ti

tulado Estndares tcnicos para asegurar la calidad de
los levantamientos de datos, como parte de la coleccin
Cuadernos de investigacin. En este documento se
establecen los criterios para una aplicacin de cali
1 Por las caractersticas del Sistema Educativo Nacional, la coordinacin del
trabajo de campo para el levantamiento de datos descansa en las reas de
evaluacin de las entidades federativas, que nombran a un Coordinador
Estatal, quien generalmente se apoya en coordinadores regionales que
reclutan, capacitan y coordinan a las personas que administran finalmente
los instrumentos de evaluacin en las escuelas.
Fase
Procedimiento
Planeacin del operativo
Diseo del operativo

Elaboracin del material de apoyo
Gestin del material de aplicacin
Reproduccin y empaquetado de materiales

Envo y recoleccin de materiales
Gestin de recursos econmicos para la aplicacin
Tramitacin de presupuestos y seguimiento de la comprobacin

Presupuestacin, ejercicio y comprobacin de recursos
Informacin a las escuelas participantes
Validacin de la muestra
Notificacin a las escuelas
Reclutamiento y capacitacin del personal participante
Coordinacin de los representantes

Capacitacin de coordinaciones estatales y representantes
Capacitacin de instructores
Seleccin, capacitacin y coordinacin de aplicadores
Realizacin de la aplicacin
Elaboracin de insumos para los aplicadores

Entrega y recuperacin del material de aplicacin
La aplicacin
Elaboracin del informe de aplicacin
Monitoreo de la capacitacin y la aplicacin

Elaboracin del informe de aplicacin por entidad
Elaboracin del reporte tcnico
122
dad, entre los que destacan que debe realizarse con

procedimientos estandarizados en todas las escuelas
participantes; brindar informacin suficiente y opor
tuna a los involucrados; incluir medidas de seguridad
para resguardar la integridad y confidencialidad del
material, y minimizar la ocurrencia de irregularidades.
A partir de esta nocin se definieron 44 es
tndares de calidad agrupados en dos categoras:
1) estndares de calidad de observacin obligatoria, y
2) estndares de soporte, que tienen ms un carcter
de recomendacin.
3. Definicin de referentes conceptuales
Durante el desarrollo de los procesos antes descri

tos, resultaba evidente la necesidad de disponer de
algunos referentes conceptuales que dieran orden a
las actividades y alinearan la intervencin de los dife
rentes participantes. Entre los referentes generados
estn los relacionados con la logstica de una aplica
cin y sus propsitos, el levantamiento de datos y los
factores que determinan el diseo de un operativo,
entre otros.
Conclusiones y desafos
El inee ha realizado una labor importante en trminos

del aseguramiento de la calidad de sus evaluaciones,
en donde la logstica para la aplicacin de instrumentos
no es la excepcin. Muestra de ello es la sistemati
zacin y documentacin del proceso, la definicin de
estndares tcnicos y las acciones de mejora continua
que ha llevado a cabo.
Sin embargo, a manera de colofn, quiero dejar se
alados algunos desafos que, en mi opinin, an que
dan por atender:
1. Revisar los estndares, actualizarlos y definir in
dicadores que faciliten la valoracin de la calidad
del proceso.
2. La estructura operativa es muy grande, tiene di

ferentes funciones y, por ser eventual, est sujeta
a una alta rotacin; por ello, convendra profesio
nalizar a los participantes a partir de un proceso
de certificacin.
3. Un asunto que rebasa al tema de los levantamien
tos de datos, pero que le afecta directamente, es
la concurrencia de diversas evaluaciones a la mis
ma poblacin objetivo y en periodos de tiempo
muy cercanos o empalmados.
4. Finalmente, un desafo maysculo es la adminis
tracin de instrumentos de evaluacin en forma
electrnica. Existen ya experiencias al respecto en
algunos pases que cuentan con sistemas de eva
luacin ms desarrollados. Convendra que el inee
incursionara en esta modalidad de recoleccin
de datos.
Proceso de
codificacin, 2008.
Camacho, G. J. C., M. de la L. Ortiz G, J. Sotelo C. y M. de

la L. Zaraza M. (2009). El proceso general de levantamiento de datos para la evaluacin en gran escala. Co
leccin de cuadernos de investigacin. Cuaderno Nm.
33. Mxico: inee.
Camacho G. J. C., J. Sotelo C. y M. L. Zaraza (2006). Estndares tcnicos para asegurar la calidad en los levantamientos de datos. Coleccin de cuadernos de investigacin.
Cuaderno Nm. 24. Mxico: inee.
inee. Estatuto Orgnico, publicado en el Diario Oficial de la
Federacin el 4 de agosto de 2003.

inee. Decreto de Creacin, publicado en el Diario Oficial de la
Federacin el 8 de agosto de 2002.
Martnez Rizo F. (2005). La evaluacin educativa en Mxico.
Mimeo.
Martnez Rizo F. (2008). El inee de 2002 a 2008: Una autoevaluacin. Coleccin de cuadernos de investigacin.
Cuaderno Nm. 21. Mxico: inee.
123
Promover un mayor uso de los

resultados de las evaluaciones
Ana Isabel Br avo Fuerte
Durante seis aos he colaborado con el inee como re

presentante en los procesos de levantamiento de da
tos; esta figura tiene entre sus principales funciones ser
un enlace entre las oficinas estatales de evaluacin de
la sep, la Direccin de Relaciones Nacionales y Logstica
del inee y el rea de recursos financieros.
Durante este tiempo he observado algunos cam

bios significativos, entre ellos la construccin y consoli
dacin de los estndares tcnicos para asegurar la cali
dad de los levantamientos de datos; esto ha provocado
la generacin de informacin confiable acerca de los
aprendizajes adquiridos por los alumnos (partiendo del
currculo), sobre su contexto (mbito escolar y familiar),
sobre los recursos que se utilizan y, al mismo tiempo
realizar un comparativo entre una evaluacin y otra;
todo con la finalidad de que la sociedad en general est
informada y las diferentes instancias que tienen la ca
pacidad de tomar decisiones puedan utilizar tales datos
para el mejoramiento de la calidad educativa.
Dicha informacin es difundida por el inee en su
pgina de internet y en materiales impresos, adems de
tener reuniones con autoridades educativas para dar
a conocer los resultados, pero los directores y docen
tes conocen esta informacin?, saben qu hacer con ella
y cmo utilizarla para mejorar su labor educativa?
124
Por lo que s, no es as; en su mayora la descono

cen o, si la conocen, no saben qu hacer con ella, por
lo que considero que es un gran reto para el inee y
para las reas de evaluacin de los estados, difundir y
buscar mecanismos para que estos resultados lleguen
a las figuras principales del proceso: directores, do
centes, alumnos y padres de familia, con la finalidad de
que conozcan cul es su responsabilidad y participa
cin en la calidad educativa desde el papel que juegan
cada uno de ellos.
Por tal motivo, considero prioritario incluir en la
formacin docente un programa informativo, de an
lisis de resultados y de retroalimentacin, con el pro
psito de disear estrategias didcticas y atender las
debilidades en el aprendizaje de los alumnos.
Falta mucho por hacer, no somos una sociedad
acostumbrada a las evaluaciones y, mucho menos, a
saber en qu estamos fallando para corregir o par
ticipar activamente en la solucin de las debilidades.
Es fundamental realizar campaas de sensibilizacin,
pues sabemos que en este proceso intervenimos
todos, pero un factor determinante es que desco
nocemos cmo participar para garantizar la calidad
en la educacin.
Experiencia en los procesos de

levantamiento de datos del INEE
de la evaluacin, adems de brindarnos el apoyo para

concentrar y ubicar a los alumnos seleccionados, mo
tivndolos a dar el mejor esfuerzo en la realizacin de
su examen.
La confianza que tienen en el inee los responsa
bles de encauzar las labores en los centros escolares
se debe a que se publican los resultados de manera
general, es decir, sin puntualizar ni hacer nfasis en de
terminada escuela; he percibido que al no evidenciar
el resultado de su plantel, los directivos cooperan de
manera ms abierta y se arrojan resultados ms reales;
como ejemplo podemos mencionar que la evaluacin
de la Comprensin Lectora ha originado que hoy en da
se hable de la importancia de la lectura como pilar de la
educacin, brindndole mayor tiempo y dedicacin en
todos los niveles.
Cabe enfatizar que desde mi posicin, he sentido la
enorme responsabilidad que tiene este rgano consul
tivo en la vida de nuestra nacin, porque su papel nos
deja saber si vamos o no por buen camino en la incor
poracin a la sociedad del conocimiento. Todos, como
un gran equipo nacional que suma sus voluntades en
pro del crecimiento de nuestro pas, vemos reflejada
en la estadstica su noble labor.
Compartimos la pasin por otorgar una educacin
de calidad que sea eficiente y equitativa; agradezco infi
nitamente su consideracin para participar de tan me
recida celebracin. Reciban mis felicitaciones por estos
primeros diez aos de tan loable tarea.
Me complace ser partcipe en la celebracin del d

cimo aniversario del inee, y manifestar mi experiencia
referente a los procesos de evaluacin llevados a cabo
por tan reconocida institucin que, como un organis
mo serio y comprometido, prepara al personal con
capacitacin meticulosa y les otorga, adems, las he
rramientas necesarias a fin de que los actores invo
lucrados obtengan informacin verdica. Todo, con el
objetivo de mejorar la educacin en Mxico.
Dichas capacitaciones contemplan la formacin
de grupos pequeos, en los cuales se puede trabajar
y hacer ejercicios prcticos como si se estuviera en la
escuela; hacemos aportaciones de situaciones vividas a
lo largo de nuestra experiencia como aplicadores; por
ejemplo, para realizar la seleccin de alumnos, en al
gunas ocasiones los profesores o personal de apoyo
nos dan incorrectamente registrada la asistencia, por
lo que debemos poner especial cuidado, para no tener
errores o variaciones en la seleccin correcta de los
alumnos a evaluar. Otro ejemplo es no dar por hecho
que los alumnos leern las instrucciones del examen,
pues en los manuales y en la capacitacin se nos hace nfa
sis en la lectura en voz alta junto con ellos, detalles que
parecieran ser obvios, pero en la realidad no lo son.
Es donde cobra importancia nuestro trabajo, ya que el
levantamiento de datos implica una gran responsabili
dad y profesionalismo para cumplir con los lineamien
tos establecidos en cada una de las evaluaciones: pisa,
Comprensin lectora y Excale, por mencionar algunos.
Recae en nuestra labor el esfuerzo de toda una
estructura de trabajo, al depositar en nosotros la con
fianza en la habilidad que tengamos para acercarnos a
directivos, docentes y alumnos, cuya informacin es de
vital importancia, pues sirve como marco de referen
cia para la toma de decisiones de quienes se desem
pean en la docencia y as elevar el nivel educativo de
los estudiantes.
De tal suerte que conocer directamente el entorno
escolar, las condiciones laborales y la infraestructura de
los planteles, nos permite tomar conciencia del enorme
empeo que los directivos, su personal docente y los
alumnos ponen para que los proyectos se lleven a cabo,
al facilitarnos el espacio para la organizacin logstica
y desarrollo de todos y cada uno de los lineamientos
125
Captulo
La difusin de resultados:
un desafo de la evaluacin educativa
Annette Santos y Alejandr a Delgado
esde su creacin, el INEE ha sostenido que la evaluacin no

tiene sentido por s misma, sino que lo adquiere en la medida
en que sirve para mejorar la calidad de la educacin. Lograr
esto supone al menos dos cosas: que los resultados se den a
conocer en forma tal que se entiendan correctamente, y que
sean utilizados para sustentar decisiones que lleven a la mejora. Para cumplir a cabalidad con la misin que le ha sido
encomendada, el inee se ha preocupado por atender no slo
al diseo y desarrollo de las evaluaciones, sino a la difusin
de sus resultados y la promocin de su uso.
No debe perderse de vista que el Instituto surge en un
momento en que haba ya una cantidad importante de evaluaciones en marcha, pero cuyo uso e impacto en la toma de
decisiones era bastante limitado, entre otras razones, debido
a: i) fallas tcnicas tanto en su construccin como en los
procesos de aplicacin y anlisis, y ii) falta de difusin de sus
resultados, que en muchas ocasiones se consideraban material confidencial.
Como se ha visto en los apartados anteriores, a lo largo de esta prime

ra dcada, el inee ha alcanzado un adecuado dominio de la metodologa y
tcnicas, propias de la evaluacin a gran escala aplicada a la educacin,
y ha avanzado de manera importante en el desarrollo de mediciones v
lidas y confiables de diferentes componentes del sistema educativo. Res
pecto de la difusin de los resultados, el recorrido en estos aos no ha sido
lineal y, aunque la bsqueda ha sido tenaz y sistemtica, no ha ido siempre
en una misma direccin ni ha rendido los mismos frutos. En las siguientes
pginas se hace un recuento de algunos de los esfuerzos que se han llevado
128
Para las autoridades federales y estatales, los re

sultados de las evaluaciones habran de orientar
el diseo de polticas educativas y constituirse
en insumos que favorecieran el monitoreo de su
puesta en marcha.
Para los maestros y directivos escolares, habran
de traducirse en herramientas de reflexin y an
lisis para el mejoramiento de las prcticas pedag
gicas y de gestin en las escuelas.
Para los acadmicos, tendran que apoyar el de
sarrollo de estudios que contribuyeran a una me
jor explicacin y comprensin de la situacin que
guarda la educacin en nuestro pas.
Para la sociedad en su conjunto, habran de servir
para su empoderamiento, al fortalecer la cultura
de la evaluacin y de rendicin de cuentas.
A pesar de que se reconocan distintas audiencias y
usos, la mayora de los informes de resultados iniciales
correspondieron con el perfil de los acadmicos, en
tanto describan con detalle aspectos tales como la me
todologa e instrumentos empleados, y el procesamien
to y anlisis de los datos. Si bien este tipo de informa

cin era relevante para los especialistas, poda ser poco
pertinente para otros pblicos. Es probable que esta
situacin estuviera asociada con la necesidad del inee
de hacer patente que sus evaluaciones eran tcnica
mente rigurosas y/o con el perfil de sus propios evalua
dores, para quienes era ms fcil comunicarse con sus
pares. Como bien seala Pedro Ravela en este mismo
volumen: los evaluadores producen informacin pen
sando casi exclusivamente en la lgica de la psicometra
y la estadstica [...procesan los datos teniendo] en men
te, sobre todo, el juicio que sus pares especializados
en evaluacin podran hacer de su trabajo, por lo cual
buscan atenerse a las mejores prcticas de medicin y
procesamiento de datos, y documentar lo hecho.
Entre los informes que se han producido con regu
laridad, destacan el Panorama Educativo de Mxico, los
informes de resultados de las pruebas Excale y pisa, as
como los que refieren a algunas caractersticas de las
escuelas. Cada uno de estos documentos est a cargo
de un rea distinta dentro del Instituto y recoge los
resultados de su trabajo, sea ste el desarrollo de indi
cadores, la evaluacin de los aprendizajes o el estudio
de las condiciones de la oferta educativa.
En 2003, 2004 y 2005, el inee produjo Informes
anuales que buscaban recoger y sintetizar los princi
pales elementos derivados del trabajo que sus cuatro
reas tcnicas1 haban desarrollado durante cada uno
de esos aos, sin que necesariamente abordaran un
tema comn. En 2006, por la coincidencia con el final
a cabo para acercar los resultados de las evaluaciones

a distintas audiencias, as como de los aprendizajes que
como institucin hemos tenido y las perspectivas de
trabajo futuro.
Durante esta dcada, el inee ha emprendido una di
versidad de tareas y elaborado una cantidad importan
te de documentos para difundir los resultados de sus
evaluaciones. Desde el comienzo qued establecido
que para promover usos adecuados de los resultados,
su difusin deba estar atenta a distintos destinatarios:
1 Las direcciones de Pruebas y Medicin, Proyectos Internacionales y Espe

ciales, Evaluacin de Escuelas e Indicadores Educativos.
129
La difusin de resultados: un desafo de la evaluacin educativa
de una administracin federal, el informe anual busc

comparar la situacin de la educacin que prevaleca
en el ao 2000 con la que se presentaba a fines del
sexenio. A partir de 2007, los informes comenzaron
a elaborarse en torno a temas especficos relevantes
para la poltica educativa y para ello aprovecharon los
datos producidos por las distintas reas. Esta iniciativa
coincide con el empeo del Instituto por lograr dos
cometidos establecidos desde su creacin: desarrollar
evaluaciones integrales de la calidad del sistema edu
cativo y generar informacin sobre temas especficos,
que fuese til para la toma de decisiones de poltica
pblica. El primero de este tipo de informes se dedic
a dar cuenta de los servicios educativos que atienden
a los estudiantes que viven en condiciones de pobreza
y a la vez reflexiona sobre la problemtica de la de
sigualdad; el correspondiente a 2008 ofreci un anlisis
de las tendencias y perspectivas de la educacin bsica
en Mxico, mientras que el de 2009 focaliz su aten
cin en el tema del derecho a la educacin. El siguiente
busc aportar elementos para la reflexin sobre las im
plicaciones de la obligatoriedad de la educacin media
superior en nuestro pas.
130
En los primeros aos, el inee tuvo oportunidad de

establecer una interlocucin con autoridades del ms
alto nivel, al presentarles de manera directa los resul
tados de sus evaluaciones. Pero la presencia del Insti
tuto en espacios de discusin, como el Conaedu, se
perdi paulatinamente y fue entonces que comenz a
desarrollar un conjunto de iniciativas para lograr co
municaciones efectivas con tomadores de decisiones.
Algunas de esas iniciativas, como los Informes tem
ticos que recin se han comentado, fueron atinadas
e inclusive provocaron un impacto mayor al previsto,
tal como lo relata Dalila Lpez en este mismo libro, al
dar cuenta de los esfuerzos realizados por su equipo
para disminuir la vulnerabilidad a la exclusin educati
va. Sin embargo, en otras ocasiones los esfuerzos del
Instituto por informar la poltica fueron infructuosos.
Por ejemplo, en 2007 se invit a un pequeo grupo
de exfuncionarios para producir materiales dirigidos a
autoridades educativas. Los resultados no fueron satis
factorios, probablemente debido a dos razones: una,
que no se tena suficiente claridad sobre el producto que
se requera, y dos, se supuso que por el solo hecho de
haber ocupado un puesto en la administracin pblica,
nuestros colaboradores podran identificar con facili
dad informaciones relevantes para la poltica educativa
y disear maneras efectivas de comunicarlas.
Paralelamente, fuimos ganando claridad respecto
de que, si bien las evaluaciones de aprendizaje que
realiza el inee no brindan informacin sobre estudian
tes o escuelas individuales, s producen resultados que
pueden dar lugar a orientaciones para mejorar la en
seanza en las aulas y, por tanto, ser de utilidad para
los maestros. A partir de 2005, se hicieron esfuerzos
puntuales para disear materiales y estrategias de di
fusin que promovieran el uso de los resultados para
la mejora de la calidad educativa desde las escuelas y
por parte de sus actores principales. pisa para Docentes
constituy el primero de estos esfuerzos con un tiraje
de 250 mil ejemplares; esta obra se propuso invitar a
los maestros a adentrarse en los aspectos conceptuales
de pisa, as como a utilizar las preguntas de la prueba
como oportunidades de aprendizaje.
En 2008, se publicaron tres volmenes de una nue
va serie llamada pisa en el Aula, dirigida a profesores y
formadores de docentes de secundaria. Estos textos
ofrecen propuestas didcticas diseadas por especia
listas de las reas de lectura, matemticas y ciencias,
para que los estudiantes sean capaces de resolver
problemas de la vida real a partir de situaciones del
mbito escolar.
Al buscar que los Excale tambin ofrecieran infor
macin valiosa a los profesores, se echaron a andar dos
estrategias complementarias. En 2006, se dise una
herramienta electrnica para que los docentes pudie
ran tener acceso a los resultados de las pruebas, al tipo
de habilidades y conocimientos que evalan y al lugar
Presupuesto ejercido por el inee 2003-2011

Millones de pesos
180
175,912,417
158,542,300 155,136,510
2010
2011
160
que stos ocupan en el currculo
147,672,282
143,065,937
nacional, as como al tipo de pre
140
guntas utilizadas y la dificultad de
127,139,465
122,869,101
los contenidos para distintos gru
120
113,900,805
pos de estudiantes. El lanzamiento
100
del Explorador Excale aument
de manera notable el nmero de
77, 872,417
80
visitas a la pgina del inee. A los
pocos meses de su publicacin, se
60
organiz un concurso dirigido a do
centes, directores y supervisores
40
invitndoles a que presentaran es
20
trategias y/o acciones originales de
mejora educativa en las escuelas,
aprovechando de manera creativa
2003 2004 2005 2006 2007 2008 2009
la informacin del sitio. La convoca
toria fue suscrita por el inee, la Fun
dacin para la Cultura del Maestro, la Subsecretara de
Un taller sobre difusin de resultados, en el que
Educacin Bsica y la Universidad Pedaggica Nacional. particip personal de varias reas del inee, dio origen a
Participaron 315 docentes y directivos escolares de 27 la segunda estrategia; sta consisti en elaborar mate
entidades federativas, y se recibieron un total de 199 riales que trataran algunos de los problemas identifica
propuestas. Los ganadores acudieron a una ceremonia dos por los Excale, a la vez que ofrecieran a los maes
de premiacin en la Ciudad de Mxico y sus trabajos tros formas novedosas de atenderlos y reflexionar
dieron lugar a cuatro antologas que pueden consultar sobre stos. Para ello, en 2007 se busc la colaboracin
se en http://www.inee.edu.mx/index.php/explorador
de especialistas que, adems de un adecuado do
minio de su disciplina, tuvieran
conocimiento cercano del queha
cer docente en escuelas de edu
cacin bsica. Asimismo, se invit
a grupos de profesores en servi
cio a que probaran los materiales
con sus estudiantes y, a partir de
ello, hicieran recomendaciones a
los autores. La primera coleccin
de los Materiales para Apoyar la
Prctica Educativa (mape) qued
conformada por dos textos sobre
escritura y dos sobre matemticas.
La impresin y distribucin de los
primeros libros rebas de manera
extraordinaria el tiraje usual de las
publicaciones del Instituto, pues la
sep manifest inters en incorporar
42 mil ejemplares a los procesos de formacin conti
nua de los maestros que laboraban en Escuelas de
tiempo completo y las entonces llamadas Escuelas
en contextos vulnerables.
El buen recibimiento de los mape nos motiv a pro
mover en 2010 la elaboracin de nuevos materiales, en
esta ocasin para trabajar temas de ciencias. Se prev
que pronto se publicar un texto sobre el cuidado del
ambiente y otro relacionado con la nutricin. En este
ao comenzarn a elaborarse otros mape que confor
marn la tercera coleccin. En paralelo, continuar im
pulsndose una estrategia de seguimiento que surgi
junto con la primera coleccin para documentar y pro
131
mover el uso de estos materiales. La Comunidad mape

sitio en la pgina web del inee pretende ayudar a
los docentes a sistematizar su experiencia de uso para
compartirla con otros profesores.
Preocupados por aprovechar de mejor manera la in
formacin que produce el Instituto, nos dimos cuenta de
que las pruebas Excale de escritura ofrecan un material
de incalculable valor para los especialistas y acadmicos
interesados en el anlisis de textos. El Corpus Excale de
escritura es una herramienta informtica que rene los
textos producidos por estudiantes que participan en las
evaluaciones que realiza el inee, as como informacin
sobre sus caractersticas demogrficas y socioculturales,
las cuales pueden usarse como criterios para hacer con
Premiacin Concurso
Explorador Excale, 2008.
132
sultas especficas. Actualmente este micrositio integra

ms de 65 mil producciones originales de alumnos de
tercero y sexto de primaria, de tercero de secundaria y
del ltimo grado de educacin media superior.
Vale la pena comentar que el desarrollo de estas
herramientas electrnicas no hubiera sido posible
sin la colaboracin de la Direccin de Informtica,
que con su creatividad e ingenio concretiz las aspi
raciones del Instituto para promover el uso de sus
evaluaciones.
Tradicionalmente, el inee ha hecho pblicas las ba
ses de datos que produce; en 2010 se inici un esfuerzo
sistemtico para promover su uso entre acadmicos e
investigadores de todo el pas, a travs de la realizacin
de Talleres de capacitacin para el manejo y anlisis de
dicha informacin. Esta estrategia ha sido bien valorada
por los participantes. Actualmente se intenta articular
una red de investigadores en torno a una agenda co
mn aprovechando las bases de datos existentes. De
hecho, uno de los requisitos para acceder a recursos
del Fondo de investigacin para la evaluacin de la edu
cacin (sep-inee-Conacyt), es precisamente desarrollar
estudios que analicen informacin ya disponible en el
sector pblico. Nuestra aspiracin es que las evaluacio
nes aporten cada vez ms y mejores evidencias acerca

de la calidad de la educacin.
Hasta aqu se han mencionado algunas de las ac
ciones de difusin que el inee ha impulsado con la ex
pectativa de que la evaluacin contribuya a sustentar
acciones de mejora. Hay, sin embargo, otra tarea igual
mente importante para cumplir con la misin que nos
ha sido encomendada: aportar elementos para desa
rrollar una slida cultura de la evaluacin, lo que supo
ne, entre otras cosas, desplegar la capacidad de la so
ciedad para exigir buena educacin. En la construccin
de esta cultura, los medios de comunicacin juegan
un papel fundamental, pues es a travs de ellos que
la sociedad recibe informacin. La manera en que los
medios analizan y colocan los datos
ante la opinin pblica tiene efec
tos en la interpretacin que sta
hace de la situacin que guarda la
educacin en nuestro pas, a la vez
que influye en la configuracin de
las exigencias que, a la postre, po
dra plantear al sistema educativo.
Reconociendo la relevancia de
los medios, entre 2003 y 2007, el
inee ofreci talleres para periodis
tas con la intencin de familiari
zarlos con la temtica propia de la
evaluacin y ayudarles a interpre
tar adecuadamente sus resultados.
Nuestra valoracin es que esos talleres fueron una es
trategia poderosa de formacin y dilogo, y que reto
marlos contribuir a que los medios participen acerta
damente en el empoderamiento de la sociedad.
Despus de una dcada, sabemos que la simple ge
neracin de informacin por ms vlida y confiable
que sea no impacta la calidad de la educacin. Con
tinuamos buscando maneras eficaces de comunicar y
promover el uso de los resultados de las evaluaciones
del inee. En el camino hemos aprendido cosas como
las siguientes:
Mejorar nuestra capacidad de difusin implica,
entre otras cuestiones, un trabajo ms articula
do entre las distintas reas tcnicas del Instituto,
precisando cmo ayuda cada una a responder a la
pregunta sobre qu necesita saber el sistema edu
cativo para garantizar el derecho de todos a una
educacin de calidad.
Necesitamos construir fotografas ms completas
de la situacin que guarda la educacin en el pas,
enfocando aquellos aspectos donde la interven
cin de la poltica pblica es ms apremiante. Esto
implica revisar lo que hemos estado haciendo y
Hay dos asuntos ms que no quisiramos dejar

de comentar. El primero radica en la necesidad de
2 Tal es el sentido de un estudio de seguimiento que hemos encargado a
investigadores externos y cuyos resultados estarn listos este ao.
publicar con mayor oportunidad los resultados del

trabajo que realizamos. Para lograrlo, el estableci
miento de formatos de comunicacin ms sencillos
y breves constituye un primer paso. A la par, habr
que cuidar que otros actores externos al Instituto
puedan asumir anlisis ms profundos y comple
mentarios de la informacin, cuya realizacin implica
tiempos ms largos.
Por otro lado, para avanzar hacia la consolidacin
de un modelo interactivo de diseminacin como el
que describe Pedro Flores en este mismo volumen,
el inee necesita contar con mecanismos formales de in
terlocucin con autoridades educativas, as como con
otros actores involucrados en la toma de decisiones
de poltica pblica, como los legisladores. Se trata de
crear espacios donde se presenten, analicen y discutan
los resultados de las evaluaciones, para definir mane
ras de atender los problemas identificados y fortalecer
aquellas acciones que demuestran su eficacia. La cons
truccin de estos mecanismos exige la confluencia de
muchas voluntades.
Finalmente, queremos decir que el dcimo aniver
sario del inee es una buena excusa para reflexionar
sobre lo que nos falta por hacer pero, a la vez, para
cobrar conciencia sobre el privilegio que ha represen
tado para nosotras trabajar en la Direccin General
Adjunta. Este espacio nos ha permitido una enrique
cedora interaccin con todas las reas del Instituto
para impulsar formas creativas de generar y difundir
informacin. Enhorabuena al inee y que fructifiquen
sus esfuerzos por hacer de la evaluacin educativa una
herramienta de mejora.
redefinir, por ejemplo, los gru

pos poblacionales y tipos de
escuelas sobre los que el inee
debe ofrecer informacin sis
temticamente, para presen
tar una imagen ms detallada
y ntida.
La difusin no debe entender
se como el ltimo eslabn de
una cadena productiva; desde
el diseo de las evaluaciones,
sus usuarios potenciales deben
estar presentes no slo para
definir cul es la informacin
que requieren, sino para cla
rificar qu harn con ella una
vez que la tengan. Aunque no
hay recetas infalibles para una
buena difusin, nos parece
que stos son dos ingredien
tes fundamentales. A manera
de ejemplo, vale la pena comentar que en la de
finicin y desarrollo de los dos ltimos estudios
sobre las condiciones de la oferta educativa en
preescolar y secundaria, los equipos responsables
de las reformas en esos niveles han participado de
manera cercana.
Respecto del alcance de nuestro trabajo y el cues
tionamiento de si el inee debe hacerse cargo de
plantear soluciones a los problemas que identifi
ca, consideramos que es responsabilidad del Ins
tituto ofrecer diagnsticos confiables del estado
que guarda la educacin, colocar sus resultados
de tal modo que se eviten lecturas simplistas y
usos incorrectos, y fortalecer las capacidades
de otros para analizar e interpretar la informacin de
manera adecuada. Pero, para que las evaluacio
nes impacten en el mejoramiento de la calidad de
la educacin, son los actores responsables de la
operacin del sistema quienes han de usar la in
formacin y actuar en consecuencia.
No obstante, para asegurar la pertinencia de la
informacin que ofrece, el Instituto debe preocu
parse por conocer de manera regular el uso que
estos actores hacen de los resultados de sus eva
luaciones y el impacto que estn teniendo en la
mejora de la calidad2.
133
La experiencia del inee

en la difusin de resultados
para docentes
Pedro R avela Casamayou
a difusin de resultados de las evaluaciones

educativas a gran escala puede ser concebida y
realizada a partir de dos enfoques diferentes, a
los que denominar data-cntrico y agere-cntrico,
segn donde colocan el eje en torno al cual se articulan
sus acciones.
En el primer enfoque, el eje de la evaluacin son
los datos. Los evaluadores producen informacin
pensando casi exclusivamente en la lgica de la psico
metra y la estadstica. Una vez aplicadas las pruebas,
procesan sus datos y producen sus informes de acuer
do con su mejor saber y comprensin acerca de los
cnones de la medicin de aprendizajes. Durante este
proceso, tienen en mente, sobre todo, el juicio que
sus pares especializados en evaluacin podran hacer
de su trabajo, por lo cual buscan atenerse a las mejo
res prcticas de medicin y procesamiento de datos,
y documentar lo hecho.
En un segundo momento, se plantean cmo co
municar esos datos a otras audiencias; en tal caso, el
desafo se convierte en cmo explicar y presentar in
formacin compleja, en forma simple y comprensible a
docentes, padres, prensa, autoridades y tomadores de
decisiones. Se da por sentado que, una vez que com
prendan la informacin, estos actores podrn usarla de
algn modo para tomar decisiones que contribuyan a
mejorar la educacin.
Desde este enfoque, el trmino clave es difusin
y no tanto uso. El problema del evaluador es la difu
sin. El uso es problema de los otros actores.
134
Este modo de proceder presupone: a) que la in

formacin estadstica compleja puede ser comprendida
por todos los actores; b) que dicha informacin puede
ser til para la toma de decisiones; c) que los actores
tienen la motivacin y los incentivos para utilizar la in
formacin, y d) que sabrn cmo usarla.
La cuestin de cul es el tipo de informacin rele
vante y til para la accin de agentes especficos no es
problematizada, es algo que se da por sentado. Tampo
co se plantea la pregunta por el tipo de insercin que
cada actor tiene en el sistema educativo, ni por la lgica
y estrategias desde las cules acta y toma decisiones.
Sin embargo, es posible pensar y proceder desde un
enfoque diferente, que denominar agere-cntrico.
El trmino agere es la base latina del trmino agente
que, de acuerdo con el diccionario de la Real Academia
Espaola, es aquel que tiene la virtud de obrar, de
hacer, es la persona que produce un efecto.
Un enfoque centrado en los agentes implica ope
rar de una manera distinta a la recin descrita. Si la
intencin de la evaluacin es lograr que ciertos agen
tes obren, acten, hagan cosas y produzcan efectos
de mejora en la educacin, lo primero que debera
hacerse es reconocer a esos agentes (maestros,
estudiantes, padres y madres de familia, autorida
des, tomadores de decisiones) y conocer sus modos
de actuar en relacin con la educacin, sus percepcio
nes sobre la misma, sus intereses y el tipo de decisiones
que estn en condiciones de tomar, para luego pensar
la evaluacin y el tratamiento de los resultados desde la
perspectiva de los usos que aqullos podrn y querrn
darle a la informacin.
Adoptar un enfoque centrado en los agentes su
pone un giro copernicano en evaluacin educativa.
Ya no se tratara de lograr que los destinatarios usen la
informacin que los evaluadores producimos sino que,
a la inversa, los evaluadores deberamos preocuparnos
por producir informacin que pueda resultar relevante
para los distintos tipos de acciones y decisiones que los
actores toman normalmente, en el marco de su agen
cia en el sistema educativo.
Este cambio de perspectiva desplaza del centro la
preocupacin por la difusin, como explicacin ms
o menos asequible de algo en s mismo complejo y
propio de especialistas, y pone en su lugar el uso.
El problema principal no es cmo explicar informacin
Reunin con responsables

de educacin secundaria
en los estados.
dades para utilizarlos en las situaciones propias de la

vida social, poltica, laboral y personal. La mejora en los
puntajes vendr por aadidura, si la enseanza y el
aprendizaje mejoran.
Qu hacer entonces con los resultados de las eva
luaciones en relacin con los docentes? De acuerdo
con los resultados de un estudio sobre el modo en que
las evaluaciones externas pueden enriquecer el trabajo
de los maestros, hay dos cuestiones esenciales: ayudar
a tomar conciencia acerca de la importancia de ciertos
temas y capacidades que todos los nios y nias de
beran adquirir y desarrollar, que no siempre estn en
el horizonte conceptual dentro del cual los maestros
organizan su enseanza, y propiciar una apertura del
maestro a nuevos horizontes conceptuales en relacin
con la didctica y las formas de evaluar a los alumnos1.
Durante estos diez aos, la produccin de materia
les apropiados para los docentes, que no se limiten a
explicar los datos estadsticos, ha sido una de las preo
cupaciones centrales, presentes siempre en las reunio
nes del Consejo Tcnico del inee. Tarea nada sencilla
para una Institucin cuya misin principal es producir
compleja a potenciales usuarios, sino qu tipo de infor

macin puede resultar de utilidad a distintos agentes
para tomar decisiones y acciones concretas, dentro de su
mbito de responsabilidad y de sus posibilidades reales.
En el caso concreto de los docentes, lo dicho has
ta aqu implica poner en duda el supuesto de que la
comparacin de resultados con otras escuelas o con
otros pases (en el caso de las evaluaciones interna
cionales) puede resultar motivante para ellos: implica
tambin poner en duda que lo ms importante es
lograr que los docentes comprendan cuestiones tales
como la Teora de respuesta al tem (itr) y el significado
de las puntuaciones que genera.
Desde un enfoque centrado en los agentes, los
evaluadores deberan preocuparse por conocer mejor
cmo toman decisiones los docentes durante la ense
anza y qu necesitan para mejorar el trabajo con sus
alumnos. En este sentido, es necesario destacar que lo
ms importante es que los profesores comprendan los
marcos conceptuales de las evaluaciones y sus impli
cancias didcticas para la enseanza, ms que los datos.
Conocer las preguntas de una prueba puede ayu
dar a ilustrar el marco conceptual, pero el indicador no
debe ser confundido con la meta. Como dice el pro
verbio chino, cuando el sabio seala la luna, el tonto
se queda mirando el dedo, esto hacemos en muchos
de los pases de la regin: creemos que promoviendo
que los alumnos y maestros practiquen con las pruebas
pisa (el indicador) vamos a mejorar las competencias y
capacidades de nuestra juventud (la meta).
Las metas para Mxico no deberan ser mejorar
los puntajes de pisa, Excale o enlace, sino lograr que los
estudiantes desarrollen sus conocimientos y capaci
1 Ravela, P. (2010), Qu pueden aportar las evaluaciones estandarizadas a

la evaluacin en el aula? preal , Documento de Trabajo Nm. 40, Santiago
de Chile.
135
que van ms all de la difusin de datos estadsticos o

tems para su aplicacin en el aula. Estos se orientan a
tres objetivos fundamentales:
El Instituto Nacional para la
Evaluacin de la Educacin ha editado
236 publicaciones.
informacin cuantitativa confiable. Finalmente, en ju

lio de 2007, la Direccin General Adjunta tom una
iniciativa audaz: ofrecer un taller (para cuya organiza
cin y coordinacin fui invitado) para el personal de las
distintas direcciones del inee, centrado en este tema.
Lo interesante del taller fue que, sin previo aviso a los
participantes, se convoc a un grupo de maestros de
aula, a quienes se les entregaron distintos captulos
de informes producidos por el inee; se les invit a leer,
subrayar y escribir todo lo que no comprendan o no
les resultaba de mayor inters, formular preguntas y su
gerir tipos de materiales e informacin que les pudieran
ser de utilidad para su trabajo.
El taller comenz con la sbita aparicin en esce
na de los maestros, que expusieron durante toda una
maana ante los tcnicos del inee sus impresiones so
bre los informes. La experiencia result removedora
y dio lugar, entre otras cosas, a los denominados mape
(Materiales para Apoyar la Prctica Educativa, elabora
dos a partir de los resultados de las pruebas Excale) y
a las publicaciones llamadas pisa en el Aula (derivadas de
las pruebas pisa).
Los primeros cuatro mape (uno sobre decimales,
otro sobre geometra y dos sobre expresin escrita)
fueron publicados en 2008. Se trata de materiales muy
cuidados, tanto desde el punto de vista pedaggico
como de la esttica. Fueron elaborados por especia
listas en didctica, con experiencia en trabajo escolar,
a partir de la premisa: cmo los maestros podran en
riquecer su prctica en aula en temas que emergen
como centrales en las pruebas Excale. Un esfuerzo si
milar se hizo en relacin con las pruebas pisa.
Cabe mencionar que en este momento estn por
ser publicados dos nuevos mape sobre ciencias, uno
para preescolar y otro para primaria; otros tres tex
tos estn en proceso inicial de elaboracin. Asimis
mo, en el sitio web del inee se ha creado un espacio
denominado Comunidad mape para que los profe
sores coloquen sus experiencias de uso de estos ma
teriales y las compartan con otros colegas. Se trata
de un esfuerzo incipiente por construir una comuni
dad de aprendizaje en torno a estos materiales y a las
prcticas de enseanza.
Este tipo de publicaciones representa un esfuerzo
innovador en cuanto a la produccin de materiales para
docentes a partir de las evaluaciones de gran escala, ya
136
a) propiciar que los docentes comprendan el marco

conceptual ms amplio de lo que busca evaluar la
prueba;
b) ayudarles a reflexionar sobre las implicancias que
dicho marco conceptual tiene para la didctica y
las formas de trabajo en el aula;
c) compartir ideas sobre estos asuntos, elaboradas
por otros docentes y especialistas en didctica.
Las propuestas no pretenden entregar recetas ni
modos predefinidos acerca de cmo ensear deter
minados temas en el saln de clases, sino aportar a
un intercambio profesional profuso y centrado en las
prcticas en el aula (por oposicin a los discursos ex
clusivamente tericos).
Ms all de la excelente calidad de estas publicacio
nes, un aspecto queda pendiente, aunque excede las
responsabilidades directas de una institucin como el
inee: el desarrollo de una estrategia para posibilitar que
los profesores interacten cara a cara, en las escuelas,
en torno a estos materiales. Para incidir sobre las prc
ticas de enseanza en las aulas, no basta con producir

buenos materiales; stos pueden tener una influencia
positiva para muchos maestros, pero el desafo funda
mental para los sistemas educativos es cmo crear las
condiciones para que los maestros puedan estudiar y
discutir las propuestas, apropiarse de ellas e incorporar
a su horizonte conceptual nuevas formas de trabajar
en el aula. Esto requiere, adems de la lectura en
solitario de un buen texto, de tiempo y procesos
de trabajo colectivo sistemtico, que involucren la
apertura de lo que ocurre dentro del aula a la mira
da de los colegas. ste es un desafo para las polticas
educativas en la mayor parte de Amrica Latina.
No obstante lo dicho en el prrafo anterior, quiero
terminar estas lneas felicitando al equipo del inee por
sus iniciativas para producir materiales que sean signifi
cativos y relevantes para el trabajo en el aula. Esta lnea
de trabajo marca un rumbo a seguir. Ojal que esa pro
duccin contine, se diversifique y que la comunidad
en la web crezca.
Los mape de geometra

y decimales: un granito de arena
Silvia Garca Pea
tarea de ensear un contenido que no les fue ensea

do en su educacin bsica y, posiblemente, tampoco
en su formacin normalista?
En los mismos programas de los aos setenta, la
propuesta para geometra, tanto en el contenido disci
plinario como en su didctica, era muy diferente a la
que los docentes tenan que aplicar a partir del pro
grama de 1993; cmo asumen ellos estos cambios
de paradigmas?, qu dificultades enfrentan al tratar de
ensear de una manera muy diferente de la que les
ensearon a ellos?
Lo anterior es un ejemplo de que, en muchas oca
siones, los docentes requieren una continua actualiza
cin, ya que algunas reformas educativas demandan
de ellos algo muy diferente a lo que conocen. A eso
hay que agregar que las condiciones en las que laboran
y los recursos con los que cuentan para desarrollar su
trabajo desafortunadamente no son, en muchos ca
sos, las apropiadas.
El propsito de es
cribir un mape sobre los
nmeros decimales con
Alicia vila, y otro sobre
geometra con Olga L
pez, fue cooperar con un
granito de arena en este
apoyo que necesitan los
maestros. Signific com
partir con ellos algo de lo
que sabemos, de lo que
conocemos, algo sobre lo que hemos reflexionado.
Intentamos poner a su disposicin otras alternativas
para que tengan una variedad ms amplia que les per
mita tomar decisiones informadas; poner en la mesa
de discusin saberes, conocimientos, ideas y reflexio
nes. Fue una buena experiencia poner al alcance de
los docentes informacin til para realizar su tarea,
materiales que pensamos pueden ayudarlos al abor
dar temas en los que tienen dificultades o dudas y en
los que la bibliografa a la que se puede acceder es
muy escasa.
Esperamos que el inee siga promoviendo este tipo
de acciones en beneficio de nuestros maestros y, por
consiguiente, de nuestros alumnos.
Los Exmenes de la Calidad y el Logro Educativos

evalan al Sistema Educativo Nacional en su conjun
to, sin usar el dedo ndice para sealar a un alumno,
a un maestro o a una escuela. El Instituto Nacional para
la Evaluacin de la Educacin, adems de aplicar estos
exmenes y publicar sus resultados, se ha preocupado
por utilizarlos para llevar a cabo acciones en beneficio
de nuestros maestros y alumnos. Una de esas acciones
es la elaboracin de los Materiales para Apoyar la Prc
tica Educativa (mape), una serie de textos dedicados a
los docentes.
Los maestros son un pieza fundamental en el an
damiaje del proceso de enseanza y aprendizaje; por
ello, es importante acompaarlos en la responsabilidad
que tienen, ofrecerles apoyo y poner a su disposicin
diversas herramientas que favorezcan y faciliten su ta
rea. Producir los mape es imprescindible y, para quienes
participamos en su elaboracin, result una tarea inte
resante y formativa.
Los resultados de los
Excale nos dieron la pauta
para elegir contenidos en
los que notamos que se
requera trabajo. Ms de la
mitad de los estudiantes
tenan serios problemas
con reactivos que eva
luaban su comprensin
sobre los nmeros deci
males. Los reactivos sobre
contenidos geomtricos tambin resultaron difciles
para los sustentantes.
Entre los contenidos que Alicia vila y yo quisimos
incluir en el libro Los decimales, algo ms que una escritura, estaban algunos relativos a los programas de
educacin bsica, desde la creacin de la sep hasta el
ao 2006, momento en que entraron en vigor nue
vos programas de secundaria. Al revisar los programas
de los aos setenta que estuvieron vigentes poco ms de
20 aos!, nos sorprendimos al advertir que los nme
ros decimales eran un contenido casi invisible. Eso nos
llev a preguntar: cuntos maestros de educacin pri
maria y secundaria se formaron en educacin bsica
con estos programas?, cmo viven estos maestros la
137
Uso y diseminacin
de la informacin
Logros y retos del inee
Pedro Flores Crespo
esde su creacin, el Instituto Nacional de Eva

luacin para la Educacin (inee) ha enfrentando
el reto de difundir y diseminar la informacin
que genera. Para ello, ha desarrollado diversas estra
tegias de comunicacin. El sitio electrnico del inee se
actualiza constantemente y las publicaciones que ah
se difunden son de libre acceso. Asimismo, el inee em
pez a organizar mesas pblicas de discusin, talleres
con periodistas y maestros con el propsito de dar
a conocer los resultados de su trabajo, pero sobre
todo, de propiciar que las autoridades federales, es
tatales, maestros, especialistas y periodistas utilicen
el valioso material que genera. En diez aos se han
publicado 28 Informes, nueve Panoramas Educativos,
35 Cuadernos de investigacin y ocho libros para do
centes, entre otras publicaciones.
Sin embargo, la capacidad para generar datos, infor
macin y evidencia cientfica no siempre est directa
y proporcionalmente ligada al nivel de utilizacin. Es
decir, no por generar un cmulo de informacin con
siderable, sta se utiliza profusa e invariablemen
te por los tomadores de decisiones, docentes y
especialistas. Si esto es verdad, habr entonces
que pensar en los factores que median la relacin
entre la disposicin de informacin y su efectiva
utilizacin y, sobre todo, en cmo desarrollar estrate
gias para que la informacin sea tomada en cuenta por
los distintos actores que toman decisiones polticas y
que estn involucrados en la prctica escolar.
Modelos para el uso de informacin
Isabel Walter, Sandra Nutley y Huw Davies (2005)

describen y evalan cinco mecanismos que sustentan
la promocin del uso de la investigacin en la prc
tica. Aunque la informacin que genera el inee no
es slo y meramente producto de la investigacin,
sino de la construccin de indicadores, la evaluacin
del logro acadmico e informes sobre la problemti
ca educativa; la tipologa descrita por Walter y et al.
(2005) es til para reflexionar en cmo mejorar la
presencia del trabajo del inee en los crculos polticos
y escolares.
Segn estos autores, los cinco tipos de mecanis
mos para promover el uso de la investigacin en la
prctica son:
138
1. Diseminador. Se refiere a la mera circulacin o pre

sentacin de hallazgos para usuarios potenciales.
Esta informacin se ofrece de distinta manera y a
travs de formatos hechos a la medida. Con esta
estrategia se enfatiza el papel del diseminador y se
asume que existe una apertura y motivacin invaria
ble del receptor para utilizar la informacin. Al hacer
una revisin de la efectividad de este mecanismo, se
observa que la simple diseminacin no es efectiva
para modificar la conducta del usuario; sin embargo,
la diseminacin hecha a la medida s puede promo
ver un uso conceptual de la investigacin, es decir,
puede haber un cambio en el estudio, comprensin,
conciencia y percepcin del problema a partir de la
investigacin realizada. En otras palabras, se logra
un efecto iluminativo (Carol Weiss, 1979).
2. Interactivo. Consiste en desarrollar vnculos y co
laboraciones ms estrechas entre las comunida
des acadmicas o de investigacin, los hacedores
de polticas y los de los practicantes. En el Reino
Unido se puso en marcha la School-Based Research
Consortium Initiative, que aglutin a escuelas, auto
ridades municipales y universidades con el prop
sito de que los maestros utilizaran los resultados
de las investigaciones. Este ejercicio arroj que los
maestros negocian el significado de la investiga
cin dentro de sus salones de clase. Adems, se
observ que este tipo de mecanismos interactivos
impulsan tanto el uso conceptual de la investiga
cin como el instrumental. El modelo interactivo
toma importancia en Mxico en virtud de que
los maestros de la educacin bsica permanecen
fuera del sistema de generacin de conocimiento
(ceri-ocde, 2004).
3. Socialmente influyente. Este mecanismo es ms
amplio que el de la interaccin, pues consiste en
depositar la informacin en el papel desempea
do por ciertos personajes altamente influyentes.
El rea a intervenir son los contextos en que se
desenvuelve la poltica y la prctica en lugar de
las personas, y el propsito es alterar valores y
normas sociales. Segn Walter et al. los efectos de
este mecanismo son combinados (mixed) e inclu
so, limitados.
4. Facilitador. Consiste en habilitar el uso de la in
vestigacin por medio de apoyos de tipo tcni
En qu podra contribuir la tipologa antes descrita

al inee, en su constante inters por apoyar, con su tra
bajo independiente, la decisin poltica y la mejora es
colar? A continuacin se da respuesta a esta pregunta.
Mejorar la prctica escolar y los procesos
de poltica con informacin confiable
Los modelos para el uso de la informacin descritos

por Walter et al. pueden ser tiles a medida que in
centivan la reflexin en por lo menos cuatro aspectos:
1. Hacen ver que para aumentar la diseminacin
y uso de la informacin se deben echar a andar
mecanismos que busquen modificar la conducta
de los posibles demandantes de informacin. Los
modelos interactivo, facilitador y reforzador se ca
racterizan precisamente por poner en marcha es
trategias de intervencin directa para influir en los
procesos de poltica y, sobre todo, en la prctica
escolar. En este sentido, la iniciativa para que los
maestros de las escuelas de educacin bsica en
Inglaterra utilizaran la investigacin generada por

las universidades, es de alta relevancia para Mxico.
2. Resaltan el hecho de que no hay modelos nicos o
lineales para hacer que el funcionario y el docente
utilicen los recursos informativos que el inee po
dra producir. El modelo diseminador, por ejemplo,
quiz deje la utilizacin del material bibliogrfico
a expensas de los intereses y motivaciones de
la demanda, pero no por ello deja de obtener
un beneficio o impacto. Walter et al. hacen bien en
resaltar que por medio de este modelo se pueden
generar efectos iluminativos para tratar temas y
problemas de manera distinta. En el caso del inee,
esto es particularmente cierto, al haber creado
indicadores sobre acceso y trayectoria que cen
tran su atencin en el ingreso oportuno de los
nios a la escuela, la extraedad por grado escolar
y la relacin entre abandono y repeticin de una
cohorte. Con estos datos se enriquecen en algn
sentido las nociones tradicionales de cobertura y
desercin del Sistema Educativo Nacional.
3. Propician una reflexin sobre la forma y efecti
vidad de la manera en que el inee ha intentado
diseminar su trabajo para aumentar el uso de la
informacin que genera. De 2004 a 2011, ha orga
nizado 40 mesas pblicas de discusin, tres talleres
con periodistas y uno con maestros; de este lti
mo se desprendi la elaboracin de los Materiales
para Apoyar la Prctica Educativa (mape), como lo
refiere Pedro Ravela en su texto includo en este
volumen. En este sentido, es necesario destacar
que el modelo interactivo ha estado presente en
distintos grados en la historia del inee. Los directo
res generales que este Instituto ha tenido, poseen
una identidad mltiple (Sen, 1998), ya que han
incursionado en la arena acadmica, universitaria y
poltica; ambos han sido parte de los consejos de
especialistas que la Secretara de Educacin Pblica
(sep) ha creado para tratar de estrechar la relacin
entre la comunidad de investigadores y la de los
tomadores de decisin poltica.
4. Motivan a pensar que, dependiendo del tipo de
informacin que se produce, es posible elegir me
jor el mecanismo de diseminacin. Un reporte
de indicadores, posiblemente por su naturaleza,
co, financiero, organizacional

o incluso emocional. Este
mecanismo, a mi juicio, con
trasta claramente con los
esquemas de diseminacin
lineal, porque echa mano de
estrategias de intervencin
para posibilitar el uso de la
investigacin en la prctica.
Ejemplo de ello es el FrontLine Evidence-Based Medicine
Project del Servicio de Salud
Britnico del norte de Lon
dres, que propuso que los doctores utilizaran
la evidencia cientfica en su prctica diaria. Para
ello, se les ofreci apoyo para consultar bases de
informacin cientfica. Walter et al. (2005) ase
guran que para que los mecanismos facilitadores
operen correctamente, se necesita, adems de
la iniciativa, recursos tales como la capacitacin,
personal habilitado, dinero, tiempo y un apoyo
continuo. Esto, sin duda alguna, puede elevar los
costos de la diseminacin de informacin consi
derablemente.
5. Reforzador. Por medio de este mecanismo se
ofrecen recompensas o incentivos para que el
usuario utilice los resultados de la investigacin. La
caracterstica principal de este tipo de mecanis
mos es que es coercitivo y se sustenta en la teora
conductista. En la revisin que hacen los autores
de este tipo de intervenciones se observan cosas
interesantes: 1) se utilizan frecuentemente en el
rea mdica, y 2) la evidencia de su efectividad no
es tan conclusiva como para generalizar su uso y
defender su efectividad.
139
De 2008 a 2012, el inee ha organizado
3 cursos para periodistas y

15 ruedas de prensa.
quiz no logre cambios significativos en la prcti

ca de los docentes, pero s entre las autoridades
federales y estatales. Los autores citados hablan
exclusivamente de la evidencia cientfica generada
por los especialistas; sin embargo, el inee no slo
genera informacin producto de la investigacin,
sino que, como se seal antes, produce indica
dores y resultados de aprendizajes. Las mltiples
formas de diseminacin, por lo tanto, podran es
tar sujetas a la pluralidad de informacin que se
genera. En este sentido, ha sido un acierto del inee
publicar el libro pisa para docentes e implementar
el micrositio Explorador Excale.
Los modelos descritos por Walter et al. para dise
minar y utilizar la informacin ofrecen elementos tiles
para afinar y complementar las estrategias de comu
nicacin social que el inee ha emprendido a lo largo
de su corta pero fructfera historia. Tal tipologa da
la pauta para preguntar si sera recomendable que el
gobierno federal y gobiernos estatales usaran, por me
dio de ciertos incentivos, los indicadores del inee para
elaborar sus planes de educacin y, entonces, pasar
de un modelo de simple diseminacin a uno reforza
dor; o si el modelo interactivo que es comn en
Mxico puede complementarse con esfuerzos ms
impersonales tales como el esquema basado en la in
fluencia social. Inclusive a las secretarias de educacin
(federal y estatales) les podra interesar desarrollar, en
conjunto con el inee, un modelo facilitador de uso
de la informacin.
En una democracia, a todos nos conviene que las
decisiones educativas estn mejor fundamentadas y el
inee, dentro de este contexto poltico, ha sido una pie
za primordial. Por ello, habr que seguir impulsando su
independencia tcnica y apertura para dar a conocer
cmo funciona realmente el sistema educativo nacional.
ocde (2004). Revisin nacional de investigacin y desarrollo
educativo. Reporte de los examinadores sobre Mxico.

Pars: ocde: ceri.
Sen, A. (1998) Reason before identity. The Romanes Lecture.
Oxford: oup.
140
Walter, I.; Nutley, S.; Davies, H. (2005). What works to pro

mote evidence-based practice? A cross sector review,
Journal of Evidence and Policy, vol. I, Nm. 3, pp. 335-363.
Weiss, C. H (1979). The many meanings of research utili
zation. Public Administration Review, vol. 39, Nm. 5,
pp. 426-431.
A desevaluar!
As como enlace ha sustituido al currculo en la edu

cacin bsica, por ser una evaluacin? de alto impacto
y pauprrima en calidad, el fetiche de la evaluacin (sus
resultados) que como fantasma recorre aulas, des
pachos y mentes educativas ha desplazado la gene
racin de un proyecto educativo para el pas. Para qu
construir un acuerdo social de horizonte formativo, si
es ms fcil proponer una cantidad media de aciertos?
Desevaluar no es, ni de lejos, una propuesta que
procure la desaparicin de la evaluacin del sistema
educativo. Es demasiado importante evaluar para se
guir haciendo tanto dao en su nombre. Desevaluar,
en su acepcin creativa, sera uno de los frutos ms
relevantes al conmemorar el nacimiento del inee: que
el Instituto insista, grite, no ceje en sostener que la bue
na evaluacin no es trivial; que requiere saberes finos,
plazos y tiempos; que no por ser inclemente en sus
modalidades, e incesante, es mejor; que sin la crtica
fundada a la construccin de los instrumentos y su sen
tido, resulta aberrante, y que, sin un rumbo educativo
para el que la evaluacin sea un proceso que nos gue,
evaluar por evaluar para evaluar sin evaluar la manera
en que se sobre evala, nos lleva al despeadero. A la
prdida, paradjica, de su relevancia. A desevaluar, en
tonces, para retomar el camino que pareca hace diez
aos, y es hoy, tan necesario.
Ahtos. Repletos. Hastiados. Confundidos pues la canti

dad de evaluaciones, resultados, porcentajes, medidas:
media, moda y mudanza, la ubicacin en los lugares en
la tabla de posiciones de la ignominia, o la demagogia,
parece no tener fin. Pasamos, entre siglos, de la ausen
cia quiz no de evaluacin, sino de publicidad sobre la
misma, al polo contrario: la epidemia, plaga reactivos
en lugar de las langostas que acaban con el trigo segn
el viejo relato atiborramiento de procesos de eva
luacin y reportes al por mayor? Tal vez, y es (al menos)
tan daina la primera situacin como la segunda.
Requerimos un centro de desintoxicacin de eva
luaciones. Tanto para los creyentes como para los ag
nsticos: Me llamo Manuel, soy evaluafbico me
llamo Eusebio, soy evaluaflico.... Y ha de ser grande.
Lo necesitamos muchos miles: profesores, periodistas,
todlogos, padres y madres de familia, alumnos, funcio
narios, investigadores, polticos en funciones y aspiran
tes variopintos; tambin los dizque o reales expertos,
tcnicos y hasta, para no fundirse y ahorrar energa, los
inocentes lectores pticos. Urge.
Es cierto que slo lo que se evala se puede me
jorar, pero tan verdad como que lo que se evala mal
no tiene ms remedio que empeorar y, adems, que
lo que se sobre evala, trivializa al proceso que ha de
ser medio, y destruye el fin que le es propio. Por eso,
a diez aos de contar con el inee, la consigna que este
escribidor propone es: a desevaluar!
Un sistema educativo sin evaluacin est ciego; si se
le atosiga sin miramientos resulta deslumbrado y tam
poco puede verse y ver para avanzar. Si volvemos la
mirada a los documentos de creacin del inee queda
claro que se concibi como parte central de un Siste
ma Nacional de Evaluacin. Una dcada despus no lo
tenemos: hay una aglomeracin de iniciativas sin con
cierto, ayunas de ritmo y coordinacin. En los conside
randos de su creacin queda claro que evaluar es un
instrumento, no una finalidad. Dos lustros despus, se
ha convertido en fin cuasi absoluto, hasta el punto que
la primera meta del Plan Sectorial de Educacin pro
pone sacar equis puntos en pisa promediando (sic)
espaol y matemticas.
Manuel Gil Antn
141
Aportes del inee a las
polticas educativas para disminuir

la vulnerabilidad a la exclusin educativa
Dalila Lpez Salmor n
Introduccin
a contribucin del inee, para el desarrollo de

polticas encaminadas a la atencin de la po
blacin que se encuentra en desventaja para
concluir y lograr los aprendizajes comprometidos en
la educacin bsica, puede identificarse en tres lneas:
a) el aporte de informacin, la cual ha permitido di
mensionar situaciones que pudieran parecer ocasio
nales en la prestacin del servicio educativo y por ese
motivo han carecido de atencin en las agendas de la
poltica educativa; b) brindar referentes conceptuales y
tcnicos que permiten ordenar la comprensin del
sistema educativo, particularmente respecto al bino
mio calidad-equidad, tanto de procesos como de re
sultados, y c) identificar reas de riesgo para poder
cumplir con el derecho a la educacin bsica.
Esas tres lneas han impactado en el desarrollo de
reas creadas para atender el riesgo de exclusin edu
cativa y garantizar el logro en ese campo, como ha sido
el caso del Programa de Atencin a Grupos en Situa
cin Vulnerable, primero, y la Coordinacin Nacional
para el Fortalecimiento del Logro Educativo, posterior
mente. Desde esta reflexin sobre el impacto del inee
en la disminucin del riesgo de exclusin educativa, se
presentan los siguientes ejemplos, emblemticos de las
lneas de aporte mencionadas.
Visibilizar la vulnerabilidad
a la exclusin en educacin bsica
En 2007 se cre en la Subsecretara de Educacin Bsica

un rea encargada de desarrollar modelos de atencin
para grupos vulnerables a la exclusin educativa, en
tendiendo la vulnerabilidad como las dificultades para
acceder, permanecer y concluir la educacin bsica, de
bido a que la escuela no responde pertinentemente
ante situaciones atpicas o diversas. Estas condiciones
pueden ser socioculturales, como el gnero, la lengua
o la edad; estructurales, como la pobreza, la disper
sin geogrfica y la migracin; o coyunturales, como
un embarazo adolescente o enfermedad prolongada.
La falta de pertinencia de la escuela se debe al carcter
homogneo de operacin del servicio, en cuanto a ca
lendarios, espacios y tiempos, entre otros. La Subsecre
tara requera, primero, generar estrategias para que la
142
poblacin vulnerable fuera reconocida o visibilizada y,

luego, desarrollar formas de atencin especfica en las
escuelas a las que dicha poblacin asiste.
Una de estas poblaciones es la compuesta por es
tudiantes cuya edad es mayor a la de sus compaeros,
lo que significa para ellos, al menos, experiencias de
rezago escolar y la convivencia con una generacin
de pares a la que no corresponden, con todo lo que
esto implica en trminos psicosociales. Estos estudian
tes rezagados prcticamente existen en todas las
escuelas, pero dada la dimensin de nuestro sistema
educativo, su presencia pareca no ser notable, aunque
s el conocimiento comn de que su situacin regular
mente deriva en el abandono de la escuela. Hasta ese
momento se haban generado algunas acciones para
prevenir la reprobacin; sin embargo, el Panorama Educativo 2007 (inee: 2007) permiti argumentar que un
milln de estudiantes con extraedad en primaria ame
ritaba impulsar acciones remediales en todo el pas,
sobre todo en las entidades donde el porcentaje de
matrcula con extraedad era el doble que el promedio
nacional. As, con base en la informacin producida por
el inee, se establecieron metas de atencin y recursos
proporcionales a la matrcula en extraedad de cada
entidad federativa, a fin de desarrollar acciones para
que esta poblacin, a travs de un proceso de evalua
cin acadmica, pudiera avanzar dos grados en el mis
mo ciclo escolar, conforme la posibilidad que otorgaba
la norma nacional de control escolar.
Sumado a lo anterior, posteriores anlisis, como el
realizado en el informe El aprendizaje en tercero de secundaria en Mxico (inee: 2009), que mostraba la rela
cin entre la condicin de extraedad y el logro en los
aprendizajes, han permitido argumentar que retener
en el mismo grado a los estudiantes durante ms de
una ocasin (repeticin) no tiene los efectos espera
dos y que, al contrario, puede generar abandono. Este
argumento ha sido fundamental para lograr que se im
pulsen normas de control escolar ms inclusivas que
las de 2007 y se plantee que la promocin de grado
en el mismo ciclo escolar no est condicionada a una
evaluacin previa, sino que tenga un propsito diagns
tico, ya que de no hacerlo se excluye a los menores
en situacin de extraedad de la posibilidad de disfrutar
Ampliar el concepto de logro educativo
En 2010, dos aos despus del inicio de las acciones

para atender a los grupos en situacin vulnerable, se
valoraron un par de lecciones sobre la eficacia y efi
ciencia de las mismas. La primera fue reconocer que,
identificar a las poblaciones vulnerables no significa que
stas se encuentren agrupadas homogneamente ni
que la pertenencia a ellas sea dinmica (nios en riesgo
de calle que en una etapa de su vida son migrantes y
tienen una condicin de extraedad, por ejemplo). Por
ello, para brindarles atencin se requiere asumir que
los nios y nias, pertenecientes a la poblacin vulne
rable, conviven en las aulas con los dems estudiantes y
enfrentan diversos riesgos de exclusin en su trayecto
ria educativa. La segunda leccin consisti en recono
cer que, si bien la distincin de los grupos vulnerables
haba sido necesaria para visibilizarlos y dar cuenta de
los factores escolares que los excluyen, no era eficien
te el desarrollo de modelos de atencin que los se
pararan an ms de su posibilidad de insercin en la
escuela convencional, donde en algn momento de su
trayectoria estaran incorporados; entonces, si se que
ra romper el crculo de riesgo a la exclusin, lo que se

necesitaba era transformar a la escuela misma. Adicio
nal a ello, se haba identificado que para las escuelas, el
referente de logro educativo se restringa a los resulta
dos de las pruebas estandarizadas, lo que obstaculizaba
priorizar otros aspectos como la desercin (indicador
ms claramente relacionado con el riesgo de exclusin
en la cultura escolar).
Lo anterior plante la necesidad de revisar la estra
tegia con la que se estaba impulsando la poltica para
disminuir la exclusin educativa y establecer otra de
carcter pedaggico que favoreciera la atencin a cual
quier riesgo de exclusin que se identificara en las es
cuelas; tambin permiti establecer indicadores con los
que poda valorarse la responsabilidad de los centros
escolares por la permanencia y la continuidad educa
tiva de todos sus integrantes (y evitar la restriccin a
los resultados en las pruebas estandarizadas de logro
escolar). La claridad para reorganizar las acciones con
forme estos desafos la aport el informe El derecho a
la educacin en Mxico, publicado por el inee en 2009.
Este informe permiti vincular los principales indica
dores de las escuelas, como los de permanencia, logro
en los aprendizajes y continuidad entre grados y nive
les, con el modelo de escuela que se quera promover;
oportunamente, en igualdad de circunstancias con los

dems nios, del derecho que tienen a la educacin
bsica [...por lo que] el director del plantel deber efec
tuar la inscripcin del aspirante en el grado que por
edad le corresponda [y] el maestro de grupo disear
una estrategia de atencin y seguimiento mediante la
cual, el estudiante desarrolle las habilidades y compe
tencias necesarias del ciclo en el que se le ubique y que
le permita cursar el siguiente ciclo (sep-dgair : 2011).
143
esto es, una escuela que atiende las necesidades espe

cficas de aprendizaje de cada uno de sus estudiantes
para que desarrollen competencias bsicas; recibe ase
sora y acompaamiento pertinente a las necesidades
de una prctica docente cotidiana que busca mejorar
el logro; desarrolla acciones remediales para atender
y prevenir el rezago, y se constituye en comunidad de
aprendizaje, involucrando a los padres de familia y la so
ciedad para impulsar estrategias que mejoren el logro
educativo de todos.
En esa lnea, se inici un proceso de difusin en
las entidades federativas que sealaba, sintetizando
el planteamiento del informe del inee, que al hablar de
logro educativo de las escuelas, se debera aludir al con
junto de variables que dan cuenta de las probabilida
des que tienen las nias, los nios y los jvenes para:
a) permanecer en la escuela; b) lograr los aprendizajes
esperados, y c) realizar trayectorias escolares continuas y
completas; agregando que, detrs de estos indicadores,
estn la autopercepcin y expectativas que los alumnos
y sus familias tienen sobre la relevancia del aprendizaje y
su capacidad para apropirselo (sep-seb: 2011).
El modelo propuesto por el inee vincula el derecho
a la educacin con los procesos que genera la escuela
y permite afirmar que el logro educativo depende de
la interaccin entre las caractersticas contextuales
de los estudiantes y las condiciones que se ofrecen en
el centro educativo pues ste puede contribuir positiva
144
o negativamente a reforzar los factores del contexto; el

modelo tambin permiti clarificar que: a) el esfuerzo
haba de concentrarse en la escuela; b) la estrategia de
atencin comn deba centrarse en la promocin de
relaciones educativas acadmicamente satisfactorias
para los estudiantes, particularmente para quienes re
presentaban a los grupos ms vulnerables a la exclu
sin educativa, y c) los indicadores bsicos para valorar
los resultados de las escuelas eran los de aprendizaje,
permanencia y trnsito entre grados y niveles. La va
loracin del informe El derecho a la Educacin, en este
marco, es que propuso un modelo de referencia para
pensar en los atributos que deban tener los centros
escolares, desde una lectura de sus indicadores en inte
raccin. Este nuevo ordenamiento permiti que en las
acciones para disminuir el riesgo de exclusin, se foca
lizara a las escuelas ms necesitadas de apoyo, a partir
del anlisis conjunto de, al menos, los ndices de de
sercin y los resultados en las pruebas estandarizadas1.
Los dos ejemplos anteriores muestran cmo la in
formacin generada por el inee, adems de apoyar las
decisiones, ha propuesto modelos de ordenamiento
de las polticas pblicas, los cuales han servido tambin
para mostrar reas no atendidas, como es el caso del
1 Por ejemplo, este referente se us para priorizar la atencin a las escuelas

en Ciudad Jurez, en el marco de la Estrategia Todos Somos Jurez.
comportamiento de las generaciones escolares en su

trayecto por la educacin bsica.
2 En 2010, organizaciones de la sociedad civil impulsaron un proyecto en

Ciudad Jurez, consistente en apoyar la transicin de los estudiantes de
primaria para ingresar a la secundaria, all se pudo diagnosticar que el fac
tor de abandono durante la transicin no es slo el econmico, sino la
irrelevancia de la escuela.
3 En 2011, participaron 262 voluntarios de diversas instituciones de nivel

medio superior y superior como tutores de los estudiantes.
Revelar puntos crticos para impulsar

trayectorias educativas continuas
La revisin de la estrategia de atencin a grupos en

situacin vulnerable, con el apoyo del modelo basado
en el derecho a la educacin planteado por el inee, tuvo
como resultado la creacin de la Coordinacin Nacio
nal para el Fortalecimiento del Logro Educativo. En este
marco y a raz del impacto que caus la informacin
de las trayectorias educativas en primaria y secundaria
a partir del modelo de cohortes generacionales se
cre el proyecto Transicin Primaria Secundaria. Para
una estrategia que consideraba que, atendiendo los
aprendizajes de las poblaciones focalizadas se lograra
garantizar el derecho a la educacin, fue preocupante
descubrir que slo 66% de los integrantes de una ge
neracin logra concluir, en el tiempo terico estableci
do, la educacin bsica; lo fue tambin saber que 3%
interrumpe su trayectoria en el trnsito de primaria a
secundaria, precisamente en un momento en el que
no hay proteccin de la escuela, dada la desarticulacin
entre los niveles educativos. Esta informacin se hizo
ms relevante en un contexto social que destaca el in
volucramiento de los jvenes en redes de delincuencia,
pero que a la vez reconoce a la escuela como espacio
desde donde se pueden hacer llegar de manera eficaz
acciones de desarrollo humano, difciles de proveer a
travs de otros espacios2.
A partir del modelo de anlisis construido por el
inee, se hicieron las estimaciones con los datos de los
estudiantes que egresaran de primaria en el ciclo 20102011 y se calcul que 19 mil jvenes no ingresaran
a secundaria. Ello deriv en un proyecto nacional para
identificar a los estudiantes que no se preinscriben a
secundaria, establecer contacto con ellos para averi

guar las razones por las que interrumpen la trayecto
ria, resolver las cuestiones relacionadas con aspectos
administrativos y atender durante el verano a los que
tomaron la decisin de abandonar la educacin bsica.
En 2011, las entidades federativas identificaron a 17 mil
jvenes; de ellos, debido al carcter piloto del proyec
to, se atendi a 3 mil 300 y se logr que 85% recon
siderara su decisin y se inscribiera a secundaria. As,
2012 ser el segundo ao de operacin de este pro
yecto que ha tenido alta aceptacin por autoridades y
sociedad en general, y ha permitido generar redes de
colaboracin voluntaria para lograr que menos jvenes
abandonen la escuela3. En algunas entidades, el proyec
to forma parte de las acciones prioritarias de gobierno
encaminadas a reestructurar el tejido social.
A modo de reflexin final, me gustara comentar
que desde el comienzo de la aplicacin de las accio
nes para evitar la exclusin educativa, tuvimos claro
que un principio fundamental en la toma de decisiones
de poltica era reconocer y asumir la responsabilidad
sobre el impacto que stas tienen en los sujetos con
cretos a quienes van dirigidas, principio muchas veces
obvio en el discurso, pero frecuentemente ausente en
su concrecin. Otro principio igualmente importante
es la contextualizacin de las decisiones, no slo res
pecto al reconocimiento de su dimensin sino, sobre
todo, respecto al modelo o enfoque poltico de la edu
cacin sobre las que se construyen. Atendiendo este
segundo principio, se agradece el aporte del inee para
mostrar en dnde existe y dnde hace falta la inter
vencin de la poltica pblica, pero ms se agradece a
las personas concretas que trabajan en el Instituto por
su rigor y congruencia para elegir los indicadores y rea
lizar los anlisis que han permitido impulsar un sistema
educativo donde la equidad forme parte importante
de la calidad.
inee (2009). Panorama Educativo 2009. Mxico: inee.
inee (2009). El Aprendizaje en tercero de secundaria en Mxi-
co. Informe sobre los resultados de Excale 09, aplicacin

2008. Mxico: inee.
inee (2009). El derecho a la educacin en Mxico. Informe
2009. Mxico: inee.
sep-dgair . Normas de Control Escolar Relativas a la Inscrip
cin, Reinscripcin, Acreditacin, Regularizacin y Cer
tificacin en la Educacin Bsica oficiales y particulares

incorporadas al Sistema Educativo Nacional, periodo
escolar 2009-2010. www.seslp.gob.mx/descargas/s.pdf
sep-seb. Blog de la Subsecretara de Educacin Bsica. Recu
perado de: http://canalseb.wordpress.com/2011/04/30/
el-concepto-de-logro-educativo-en-sentido-amplio/
145
Hacia un mejor uso
de la evaluacin educativa en Mxico:

no basta saber dnde est el tesoro...
n poco ms de tres dcadas, la evaluacin edu

cativa a gran escala en Mxico ha logrado cons
tituirse como una actividad consolidada, fincada
en un firme sustento tcnico y conceptual. En este lapso
aumentaron tanto las instancias evaluadoras como los
mbitos de su aplicacin (alumnos, docentes, progra
mas educativos, por ejemplo). Asimismo, se vencieron
las reticencias iniciales a ser evaluados y se comenz a
reconocer la utilidad de la evaluacin para mejorar el
sistema educativo, lo cual puede considerarse como un
importante avance en lo que se denota como cultura
de la evaluacin.
Sin embargo, conjuntamente con el aumento de
los costos y los procesos burocrticos inherentes al
desarrollo de esta actividad, todava existen diversos
obstculos en el uso correcto de la evaluacin para me
jorar el funcionamiento del sistema educativo; tres de
los principales problemas son: a) el rol ambivalente que
juegan las altas autoridades educativas ante los resulta
dos de las evaluaciones; b) la dificultad para transmitir
adecuadamente dichos resultados y sus implicaciones a
pblicos diversos, y c) la carencia de mecanismos para
que stos se traduzcan en mejoras educativas al inte
rior de las aulas1.
En la literatura sobre el tema se seala que mientras
persistan los problemas descritos, probablemente los
recursos y esfuerzos destinados al desarrollo de la eva
luacin educativa sern un tanto vanos. De esta forma,
como indica la frase de Francisco de Quevedo, no basta
saber dnde est el tesoro, hace falta trabajar y sacarlo,
pareciera que mientras no se trabaje para encontrar una
solucin, difcilmente se podrn obtener los beneficios
derivados de la evaluacin educativa a gran escala.
Considerando lo anterior, a continuacin se plantean
tres propuestas orientadas a superar estos obstculos.
En contra de lo que se podra esperar, el principal
obstculo para brindar un uso adecuado a los resulta
dos de la evaluacin no estriba en la dificultad de com
prenderlos, sino en el doble papel que desempean las
altas autoridades educativas con respecto a la evalua
cin. Por un lado, son sus principales promotores y fi
nanciadores y, por el otro, al formar parte del gobierno
1 En la literatura sobre el tema, frecuentemente se alude que estos tres

problemas u obstculos afectan de manera general a diversos pases, inde
pendientemente de su nivel de desarrollo.
146
en turno, asumen una postura defensiva al concebirse

como responsables del funcionamiento del sistema
educativo. Por ello, no resulta extrao que tiendan a
minimizar o, incluso, a descalificar los resultados cuando
consideran que stos no son favorables a la frmula
poltica que representan y/o que sean propensos a re
saltar aqullos que perciben como positivos (aunque
no sean significativos); posturas ambivalentes que son
claras en lo que se refiere a los datos obtenidos en las
pruebas internaciones (pisa, por ejemplo).
Otro problema que se deriva de lo anterior es que
su postura poltica los predispone a dar un uso mediti
co e inmediatista a las conclusiones de las evaluaciones,
lo que frecuentemente se traduce en la adopcin de
medidas fincadas en premios y/o castigos, ello a pesar
de las evidencias que reporta la literatura internacio
nal acerca de los efectos negativos que provocan estas
prcticas en el funcionamiento del sistema educativo.
Para superar este obstculo, la primera medida
estriba en reconocer que las autoridades educativas
no pueden fungir como juez y parte de los procesos
de evaluacin. Sera necesario que delegaran su autori
dad y brindaran el respaldo necesario para que otra en
tidad se constituyera como el rgano oficial de difusin
de los resultados de las evaluaciones, de su discusin
pblica y de la estructuracin de los cambios que se
consideren necesarios para mejorar el desempeo del
sistema educativo. Tomando en cuenta el reconocimien
to que diversos sectores del pas han expresado acerca
del inee, sera factible que ste pudiera constituirse como
el receptculo donde las autoridades educativas delega
ran estas funciones relacionadas con la evaluacin.
El segundo obstculo es la incapacidad que se ha
tenido para transmitir de manera comprensible los
resultados de las evaluaciones y sus implicaciones a
pblicos diversos, entre los que se encuentran los fun
cionarios educativos, directivos y maestros, y la ciu
dadana, en general. Si bien las instancias evaluadoras
han realizado esfuerzos y desarrollado medidas para
hacer ms comprensibles sus resultados, usualmente
el diseo de estos mecanismos de difusin ha recado
en ellos mismos, y han atribuido la escasa respuesta
a la falta de formacin y/o inters de sus interlocuto
res. No obstante, cabe reconocer que las instancias
evaluadoras han centrado principalmente su atencin
en la preparacin de cuadros tcnicos y de expertos
por ese motivo, sera pertinente crear instancias donde

conjuntamente funcionarios, responsables de la evalua
cin (donde el inee, en su nuevo papel ocupara una po
sicin central) y maestros (directamente vinculados a
las tareas educativas) se dedicaran a generar y gestionar
alternativas educativas a partir de los resultados de las
evaluaciones. Adicionalmente, estas instancias deberan
incluir Consejos Tcnicos conformados por expertos
en didctica, estructura curricular y evaluacin, quienes
coadyuvaran en la generacin de propuestas que pu

dieran ponerse en prctica de forma experimental en
las aulas. Posteriormente, tras valorar la pertinencia de
los cambios, las autoridades educativas podran gene
ralizar su implementacin en el conjunto del sistema.
Gracias a la evaluacin, actualmente sabemos ms
del sistema educativo y de sus problemas, pero mientras
no superemos los obstculos anteriores, sera como no
desenterrar el tesoro y gozar de sus beneficios.
Anderson, Lorin W. (2007). The educator role of educatio

nal evaluators: a tribute to Arieh Lewy. Studies in Educational Evaluation, num. 33 (2007), pp. 5-14.
De Quevedo Villegas, Fancisco (1612). Antologa del Ensayo. El
Mundo por dentro. A Don pedro Girn, Duque de Osuna.
Recuperado de: http://www.ensayistas.org/antologia/
XVII/quevedo/mundo.htm
Iaies, Gustavo; Bonilla Saus, Javier; Brunner, Jos Joaqun;
Halpern Britz, Pablo; Granovsky, Martn; Tiara Ferrer,
Alejandro; Martnez Rizo, Felipe; Navarro, Juan Carlos;
y Tenti Fanfani, Emilio (2003). Evaluar las evaluaciones.
Una mirada poltica acerca de las evaluaciones de la calidad educativa. Buenos Aires, Argentina: iiepe-unesco.
Recuperado de: http://www.oei.es/evaluacioneducativa/
evaluar_evaluaciones_iipe.pdf
Martnez Rizo, Felipe y Blanco, Emilio (2010). La evaluacin
educativa: experiencias, avances y desafos. En Alberto
Arnaut y Silvia Giorguli (Coord.) Los grandes problemas
de Mxico, VII Educacin. p. 89-123. Mxico: El Cole
gio de Mxico. Recuperado de: http://2010.colmex.
mx/16tomos/VII.pdf
Ravela, Pedro (2001). Cmo presentan sus resultados los Sistemas Nacionales de Evaluacin Educativa en Amrica Latina?
Santiago de Chile: preal.
Ravela, Pedro (2011). Qu hacer con los resultados de pisa
en Amrica Latina? Documento de preal, Nm. 58.
Recuperado de: http://www.preal.org/BibliotecaN.asp?Id
_Carpeta=64&Camino=63|Preal%2Publicaciones/64|
PREAL%20Documentos.
Ravela, Pedro; Arregui, Patricia; Valverde, Gilbert; Wolfe, Ri
chard; Ferrer Guillermo; Martnez Rizo, Felipe; Aylwin,
Mariana; Wolff, Laurence (2008). Las evaluaciones educativas que Amrica Latina necesita. Documento Nm. 40.
Chile: preal. Recuperado de: http://mt.educarchile.cl/mt/
jjbrunner/archives/EVals_AL.pdf
Thomas Kellaghan, Vincent Greaney y T. Scott Murray (2009).
National Assessments of Educational Achievement, Vo
lume 5, Using the Results of a National Assessment of Educational Achievement. Washington, DC: The World Bank.
Recuperado de: http://www.uis.unesco.org/Education/
Documents/National_assessment_Vol5.pdf
en evaluacin y no han reparado en la necesidad de

formar cuadros de especialistas para la difusin de sus
resultados hacia pblicos diversos.
Al asumir el nuevo papel que podra tener el inee en
materia de evaluacin, la segunda propuesta consistira
en crear un grupo de trabajo especialmente orientado
a difundir los resultados de las evaluaciones, al cual se
le conceda la misma relevancia que tienen otras direc
ciones sustantivas (en trminos de tamao y recursos
financieros). Esta rea podra estar conformada por un
equipo multidisciplinario de comuniclogos, tcnicos
en evaluacin y especialistas en educacin (pedagogos,
psiclogos, socilogos, entre otros), con la tarea de ge
nerar las sinergias necesarias, tanto al interior como al
exterior del Instituto, para mejorar los procesos de co
municacin de los resultados de la evaluacin. Desde la
perspectiva democrtica, el funcionamiento del Siste
ma Educativo Nacional (sen) es un asunto que compete
a toda la ciudadana, por lo cual, hacer comprensibles
los resultados de la evaluacin a un pblico diverso
constituye una tarea sustantiva, pues solo as se podra
llegar a plantear un debate pblico bien informado so
bre los desafos que enfrenta la educacin en Mxico
en donde todos participen.
El tercer obstculo se refiere a la carencia de medi
das para que los resultados de la evaluacin se deriven
en prcticas concretas (mejoras didcticas o reformas
curriculares, por ejemplo) en las aulas. Aunque existen
algunas experiencias exitosas al respecto, muchas de
ellas tienen un alcance limitado, debido a que no cuen
tan con el respaldo de las altas autoridades educativas.
Al respecto, en la literatura se enfatiza la necesidad
de que cambios de este tipo cuenten con la participa
cin de maestros y autoridades para poder efectuarse,
147
El inee y la investigacin
Felipe Tir ado Segur a
Convocatoria sep-ineeConacyt, 2012.
148
e manera reiterada, diversos analistas sealan

que el siglo xxi se caracterizar por ser la era
del conocimiento. Con este planteamiento se
hace nfasis en que las sociedades que logran tener
el mayor dominio en el campo del conocimiento y su
aplicacin a travs de las tecnologas, sern las que
logren alcanzar las mejores condiciones para afrontar
con xito su desarrollo y la aguda competencia que
representa hoy en da la inevitable insercin en la
economa global, competencia que da lugar a grandes
desigualdades en detrimento de unos y beneficio de
otros. Pero no slo esto, sino quiz an ms impor
tante: el conocimiento brinda a las sociedades niveles
culturales ms altos, lo que hace posible consolidar
elevados estndares de calidad de vida en su ciudada
na. Por estas razones se es
tima, sin exagerar, que el co
nocimiento constituye una
estrategia de desarrollo y un
patrimonio que representa
un valor fundamental para
toda sociedad en el mundo
contemporneo. La genera
cin de nuevo conocimien
to debe ser promovida
con todo ahnco; se estima
que actualmente cada 18
meses se produce tanto
conocimiento como el
previamente alcanzado, lo
que da cuenta de la pro
duccin exponencial del saber y el apre
mio que hay para actuar en consecuencia.
El motor de desarrollo del conocimiento radica
en la investigacin; sta implica el esfuerzo sistem
tico para generar nuevos conocimientos, pues cons
tituye un procedimiento de bsqueda, de indagacin
metdica, de cuestionar lo que se tiene, de construir
una visin crtica, formular nuevas preguntas, explorar
para innovar, experimentar en busca de resultantes,
identificar factores determinantes, ofrecer explicacio
nes, poder predecir sucesos, controlar fenmenos,
elaborar marcos conceptuales y tericos, y ofrecer
alternativas sustentadas slidamente en evidencia em
prica para atender los grandes problemas que afronta
la sociedad. De aqu que la investigacin constituye un
recurso sustantivo para el desarrollo de toda sociedad,

en toda nacin.
El inee, desde su creacin, ha sido sensible al valo
rar la gran relevancia que implica la investigacin; en su
Plan Maestro de Desarrollo 2007-2014, se indica que,
dentro de sus funciones est realizar investigaciones
y prev para sus etapas de consolidacin tcnica que
los avances debern reflejarse especialmente en la
dimensin explicativa del trabajo, lo cual conlleva el
desarrollo de la investigacin y la colaboracin entre
las reas del Instituto para aprovechar las aportaciones
de cada una al explicar los resultados y sustentar con
mejores bases la toma de decisiones (p. 12).
En el apartado de la Misin, se dice que adems
de las investigaciones evaluativas que el inee realiza
como tarea regular, se impulsarn otros trabajos para
el desarrollo de nuevas metodologas de evaluacin, as
como estudios con los que se logren alcanzar expli
caciones ms complejas de los diversos factores que
influyen en la calidad del sistema educativo. Asimismo,
convendr impulsar investigaciones que den cuenta del
uso que hacen distintos actores de los resultados de las
evaluaciones. (p. 23)
Para mencionar algunos indicadores de los esfuer
zos realizados por el inee en la investigacin, se puede
sealar que en el corto periodo que significa una d
cada de historia, el Instituto ha publicado alrededor
de 20 reportes y 35 cuadernos de investigacin. En
tre sus ttulos, los cuales resultan ser muy sugerentes
para apreciar el tipo de trabajos realizados, se pue
den citar: Anlisis multinivel de la calidad educativa en
Mxico ante los datos de pisa 2006, Factores escolares
y aprendizaje en Mxico: el caso de la educacin bsica,
Aprendizaje y desigualdad social en Mxico. Implicaciones de poltica educativa en el nivel bsico, Anlisis de
los resultados de la prueba nacional de aprovechamiento en lectura en secundaria: estudio multinivel de logro
y tendencias, Factores asociados al aprendizaje del Lenguaje y las Matemticas en 13 estados de Mxico (3
y 4 grados en educacin bsica), Estudio sobre las
desigualdades educativas en Mxico: la incidencia de la
escuela en el desempeo acadmico de los alumnos y el
rol de los docentes. Esto por slo mencionar algunos
ttulos de estudios realizados, los cuales estn dispo
nibles en extenso, de manera gratuita y permanente,
en el sitio web del Instituto.
y Tecnologa (Conacyt), que se encarga de regular e

impulsar las operaciones concretas que promueven
la investigacin en todo Mxico. Otros actores rele
vantes son el Congreso de la Unin a travs de sus
comisiones de Ciencia y Tecnologa, el Foro Consul
tivo Cientfico y Tecnolgico (fccyt) que forma par
te del Consejo General de Investigacin Cientfica y
Desarrollo Tecnolgico; las universidades, centros e
institutos que desempean una funcin central en la
produccin del conocimiento especializado, y las or
ganizaciones en que se agremia la comunidad cient
fica, como la Academia Mexicana de Ciencias (amc)
instituida en 1959, o por citar un caso especfico en
la esfera de nuestro inters, el Consejo Mexicano de
Investigacin Educativa (Comie) establecido en 1993.
El Conacyt juega funciones muy relevantes en el
fortalecimiento de la investigacin, al tener la potestad
para establecer los criterios para la distribucin del fi
nanciamiento pblico destinado a la investigacin en el
pas, con lo cual se incide tanto en polticas institucio
nales de universidades, centros e institutos, como en
la comunidad de investigadores. Esto se expresa en la
distribucin de fondos a partir de concursos regulados
por convocatorias pblicas, los fondos sectoriales, el
Programa Nacional de Posgrados de Calidad (pnpc) a
partir del Padrn de Excelencia y el Sistema Nacional
de Investigadores (sni). Estas polticas han alentado
una tasa de crecimiento alto en el nmero de investi
En el cuarto apartado del Plan

Maestro, al referirse a la Investiga
cin y formacin de recursos hu
manos, se afirma que estas lneas
de trabajo constituyen una de las
principales reas de desarrollo del
inee). Se resalta que, adems de la
evaluacin educativa que constitu
ye la investigacin de tipo aplicado,
se deber desarrollar investigacin
de carcter metodolgico para
producir o perfeccionar instru
mentos, tcnicas y procedimientos
de evaluacin, as como trabajos
bsicos que impliquen estudios ex
plicativos y de orden terico. De
igual modo, se establece el com
promiso de coadyuvar a la forma
cin acadmica continua de per
sonal especializado en evaluacin,
tanto para capacitar a los integran
tes del propio Instituto como a los
de entidades estatales dedicadas a
la evaluacin educativa, a manera
de fortalecer competencias tcni
cas, metodolgicas y conceptuales
para planear, disear, instrumentar,
analizar, interpretar y comunicar
sus propios proyectos de investigacin. Para cumplir
con estos objetivos, se propone establecer acciones
interinstitucionales que lleven a articular los esfuerzos
con programas de posgrado en evaluacin educativa
ya instituidos.
Queda claro que el inee tiene una vocacin por
promover la investigacin que ha gestado grandes es
fuerzos, y en sus proyectos est la voluntad decidida de
seguir atendiendo comprometidamente este cometido.
Pero estos esfuerzos toman su verdadero sentido al
considerarlos en el contexto nacional, al poder valo
rar las repercusiones que logran tener en el desarrollo
de la cultura de la evaluacin, en las transformaciones de
los procesos de gestin educativa, en los cambios que
se generan en la comunidad de investigadores de la
educacin, de sus efectos en las escuelas y en las prc
ticas cotidianas en el saln de clases.
De aqu que sea importante considerar las accio
nes del inee en el contexto de la investigacin educati
va a nivel nacional. Para ello hay que tomar en cuenta
a los diversos actores institucionales, como el Con
sejo General de Investigacin Cientfica y Desarrollo
Tecnolgico, rgano que por ley tiene la funcin de
plantear las polticas y programas correspondientes al
Gobierno Federal encaminados a impulsar, fortalecer
y desarrollar la investigacin cientfica y tecnolgica
en el pas, reconociendo como la instancia ejecutiva y
cabeza del sector al Consejo Nacional de Ciencia
149
gadores acreditados en los ltimos aos. En 2002 ha

ba 7 mil 982 investigadores en el sni; para 2009 eran
15 mil 481, lo que equivale a un crecimiento de 93.9%
en siete aos.
No obstante el desarrollo de la investigacin cient
fica en los ltimos aos, ste es insuficiente. Si se tiene
en consideracin el Producto Interno Bruto (pib) que
coloca a Mxico en la posicin 14 dentro de la econo
ma mundial y que la inversin en ciencia es de tan slo
0.4% del PIB, sta resulta la ms baja dentro de los
pases asociados a la Organizacin para la Coopera
cin y el Desarrollo Econmicos (ocde), donde el
promedio es del orden de 2.3% del pib. El nme
ro de investigadores tambin resulta muy bajo:
Mxico cuenta con 112 millones 337 mil habitan
tes (Inegi) y hay nicamente 353 investigadores
por cada milln de personas; esta cifra se eleva a
493 en Cuba, 694 en Brasil, 980 en Argentina, 2 mil
944 en Espaa, 4 mil 663 en Estados Unidos y 7
mil 707 en Finlandia.
De acuerdo con un estudio [Colina, A. (2009). Los
investigadores en educacin en Mxico. X Congreso
Nacional de Investigacin Educativa. Comie], en 2009
haba 497 investigadores educativos, nmero que re
sulta igualmente insuficiente dadas las necesidades y
relevancia de la educacin.
No obstante la produccin especfica en investi
gacin educativa en el pas, se ha mostrado un cre
cimiento y fortalecimiento constante en las ltimas
150
dcadas, los cuales se pueden apreciar en los trabajos

realizados por el Comie, as como por la consolidacin
de diversas revistas de divulgacin de la investigacin,
como la Revista Mexicana de Investigacin Educativa,
del propio Consejo, la revista de Perfiles Educativos del
issue- unam, la Revista de la Educacin Superior de la
anuies y la Revista Electrnica de Investigacin Educativa (Redie) del iide-uabc. La creciente demanda por
la investigacin especializada de calidad a partir de di
versos crculos de lectores, el inters por contar con
elementos bien sustentados para orientar las polticas
educativas y la fusin de los distintos esfuerzos de los
actores del quehacer de la investigacin educativa han
dado lugar paulatinamente a un crculo virtuoso donde
el inee es un elemento que ha contribuido de manera
significativa y que est llamado a jugar un papel de im
portancia en la prospectiva de integrar sinergias que
impulsen al pas a elevar sus estndares de calidad en
este sentido.
El inee, en lo particular, puede incidir en la inves
tigacin sobre los procesos de la evaluacin para el
mejoramiento de la calidad de la educacin, que es
donde est centrada su misin, al contribuir en el an
lisis de las diferentes tradiciones de investigacin en
el campo, la formacin de nuevos paradigmas tanto
conceptuales como tericos y de los diversos procedi
mientos metodolgicos. Tambin puede trazar prc
ticas de investigacin que conlleven disciplina y rigor
metodolgico, ofrecer bases de datos robustos con
El inee ha publicado alrededor de
20 reportes y 35 cuadernos de
investigacin, los cuales estn disponibles en extenso, de manera gratuita

y permanente, en el sitio web del Instituto.
El inee en la exposicin
sep 90 Aos.
nacionales a partir de la vinculacin en la formacin

de programas de doctorado que permitan la capaci
tacin de la planta especializada de los institutos de
evaluacin educativa y de la requerida para cubrir las
plazas de profesores en las universidades y normales
del pas en que se investiga en torno a la evaluacin;
promover el uso de los medios digitales para ampliar
la difusin y, as, integrar redes de investigadores arti
culados al Instituto; alentar y contribuir con la comu
nidad de docentes en servicio a investigar respecto a
sus prcticas cotidianas de evaluacin en el aula, de
manera que los ms entusiastas e interesados se pue
dan ir articulando a comunidades de investigadores
que trabajen lneas temticas de inters compartido.
Quedan otras tareas importantes por hacer, como
evaluar el impacto que ha tenido el Instituto en la in
vestigacin y contribuir para que se establezca una
poltica de Estado que haga de sta un bien pblico
como base fundamental del desarrollo pleno del pas.
informacin bien estructurada, vlida y confiable de

indicadores que dan cuenta de los logros y limitacio
nes del Sistema Educativo Nacional, de manera que
esta informacin est orientada a solucionar diversos
problemas, a partir de procedimientos rigurosos, don
de el arbitraje est basado en evidencia emprica y
no en la opinin subjetiva, abierta a los grupos de
especialistas e interesados en el quehacer cotidiano
de la vida en el aula.
El inee podra evaluar los programas especficos de
la Secretara de Educacin Pblica; hacer estudios longi
tudinales para medir el valor agregado por las escuelas
controlando los efectos del contexto; generar inven
tarios de preguntas de investigacin; plantear hipte
sis de trabajo; ofertar la elaboracin de proyectos de
investigacin compartidos con el fin de atender los
temas fundamentales de coyuntura por su relevancia,
impacto social o requerimiento de polticas pblicas;
contribuir a la formacin de redes nacionales e inter
151
Qu se quiere saber
y cmo se piensa usar la informacin?
as anteriores son preguntas fundamentales para

cualquier sistema de evaluacin. En cuanto a la pri
mera qu se quiere saber?, en muchos sistemas
de evaluacin de Amrica Latina se ha hecho poco ms
que presentar la posicin relativa de un pas, estado o
grupo de estudiantes, comparndolo con otros. El inee
afortunadamente no se ha limitado a los rankings, sino
que en repetidas ocasiones ha provisto de informacin
detallada respecto de los conocimientos y habilidades de
los estudiantes con relacin a lo prescrito en el currculo
u otro cuerpo de referencia. Este trabajo, a travs de las
pruebas Excale e internacionales (pisa y llece) ha permi
tido conocer las habilidades de los estudiantes desde el
nivel preescolar hasta el medio superior.
Si bien las evaluaciones son diagnsticos relevantes,
no dan una visin de contexto que facilite la interpre
tacin de los resultados. Por ello, el inee se ha preocu
pado por administrar instrumentos complementarios
para conocer las caractersticas individuales y familiares
de los estudiantes que responden las evaluaciones, as
como de los docentes y directores. Ms an, se han
desarrollado estudios sobre las condiciones de oferta
educativa, prctica docente e infraestructura disponi
ble. Con estos estudios es posible comparar si los es
tudiantes de diversas caractersticas (por ejemplo, nivel
socioeconmico y etnicidad), agrupados en diferentes
tipos de escuelas (urbana o rural, pblica o privada, cas
tellano o indgena, etc.) cuentan con insumos relevantes
para aprender y si los procesos pedaggicos en el aula
son de calidad. Los estudios de condiciones de oferta
educativa ayudan a identificar cul es el peso relativo
de las variables socioeconmicas y culturales que se
vinculan al individuo y la familia, frente al de la escuela.
Las primeras sabemos que pesan mucho; el peso de la
escuela tambin es relevante y en todo caso es el factor
que se puede cambiar desde el sistema educativo.
En trminos generales, los estudios desarrollados
por el inee sugieren que las personas con menor rendi
miento educativo asisten a escuelas de menor calidad.
La educacin se convierte as en un instrumento que
perpeta inequidades, en lugar de disminuirlas. Esta si
tuacin no es nica a Mxico, sino que en gran medida
afecta a Latinoamrica, suscitando la pregunta de qu
hacer para convertir a la educacin en un instrumento
que profundice la democracia, entendida como justicia
social. Mejorar la calidad en el rendimiento debera
152
ser un instrumento que se persigue simultneamente

a la disminucin de la inequidad, que en Mxico se
asocia principalmente a ser pobre y/o pertenecer a un
grupo indgena.
La discusin anterior nos lleva a la segunda pregun
ta del ttulo: cmo se piensa usar la informacin? A
menudo, los pases de la regin no han planificado qu
hacer con los datos y reportes, con lo cual, ms all
de escandalosos titulares de la prensa (ltimos, igno
rantes, entre otros), el uso para mejorar el sistema ha
sido escaso. En la actualidad, hay una tendencia interna
cional que favorece la toma decisiones de poltica con
base en resultados de estudios rigurosos, junto a otros
insumos como, por ejemplo, las normas legales, los
recursos disponibles y el contexto poltico y social en
una determinada coyuntura. A partir de esto, el primer
uso de los informes del inee debera ser para influir en
los tomadores de decisiones a nivel nacional, regional
y local (incluyendo a docentes de aula). Pero hay otras
poblaciones objetivo.
A menudo, si se quiere tener impacto en poltica, es
necesario recurrir a los medios masivos de comunica
cin, que pueden tener mucha influencia en la opinin
pblica, y a travs de ella en la poltica educativa. Para
algunos mensajes, los padres y madres de familia, as
como los estudiantes, deberan ser la poblacin objeti
vo. Esto por una cuestin de derechos y tambin para
la accin en el contexto familiar. Los mensajes del inee
tambin podran ser material muy relevante para futu
ros profesionales en diferentes disciplinas vinculadas a la
educacin, quienes deberan ser capaces, al final de su
formacin inicial, de entender y discutir los resultados y
opciones de poltica vinculadas a informes tcnicos de
alto rigor como los que prepara el Instituto. Finalmente,
sus datos y estudios son notables para los acadmicos,
ellos principalmente buscan comprender y construir
teoras cuyas aplicaciones prcticas pueden ser extra
das luego (no necesariamente por ellos mismos).
Para todos estos grupos, el inee ha desarrollado a lo
largo de los aos herramientas de comunicacin, inclu
yendo publicaciones diversas, folletos y presentaciones
en distintos foros y medios, y en la pgina web que es
relevante no slo en cuanto a los materiales publicados,
sino tambin porque pueden buscarse resultados de las
pruebas, bajar bases de datos e instrumentos, as como
interactuar con otros.
corrupcin y violencia. El contexto actual de Mxico su

giere que su tratamiento requiere un trabajo desde di
ferentes sectores, al que el inee podra aportar sin duda.
El Instituto ya ha publicado datos sobre esta temtica
(en particular formacin cvica y tica), lo que sugiero es
realzar su importancia en futuras evaluaciones y ampliar
la discusin y uso de estos datos en el sistema.
En segundo lugar, quisiera sugerir que si bien el inee
debera mantener una lnea propia de investigacin y pu
blicaciones, de acuerdo con la agenda nacional, de igual
manera hara bien en buscar recursos adicionales para
financiar de manera peridica y regular el anlisis de sus
bases de datos por terceros. Acadmicos mexicanos y
extranjeros, trabajando de acuerdo con una agenda de
finida por el inee, podran producir estudios relevantes
en lo metodolgico, acadmico y poltico. Desde luego,
muchas de sus bases de datos ya estn disponibles en
su pgina web, y hay varios trabajos ya completados que
fueron encargados por el Instituto, por lo tanto, esta su
gerencia no es para iniciar una lnea de trabajo, sino para
profundizarla. Sera conveniente que en estos estudios
participaran los tcnicos del inee, de modo que sus co
nocimientos y habilidades se renueven constantemente.
Tambin sera positivo que los trabajos conjuntos se
publicaran en revistas internacionales de alto impacto
acadmico. Todo ello buscando aumentar el ya notable
nivel de las publicaciones del Instituto.
Sin lugar a dudas, el inee se ha vuelto un referente
para la evaluacin en Mxico y en toda la regin; esto
se ha logrado gracias a que ha mantenido un foco en
la evaluacin estandarizada del rendimiento y a las vir
tudes tcnicas del personal que lo ha dirigido y que ha
conducido los estudios. Tanto el foco como el rigor tc
nico le han permitido ganar prestigio, de modo que sus
resultados son considerados vlidos por todos los ban
dos polticos. En virtud de su liderazgo, sera provecho
so para el Instituto (y para los sistemas nacionales de
evaluacin de la regin) que se organizaran encuentros
para presentar metodologas, resultados e impactos en
poltica con sus pares de otros pases, quienes junto con
tomadores de decisiones y acadmicos podran seguir
pensando cmo favorecer la mejora de los sistemas
educativos desde la evaluacin.
De lo que se sabe poco has

ta ahora es cmo es que estos
actores han usado la informacin
del inee y, por lo tanto, si sta ha
tenido influencia para mejorar la
educacin mexicana. Hay estu
dios y relatos anecdticos en la
regin en los que se nota que las
audiencias objetivo no conocieron
o entendieron el mensaje tal como
estuvo planificado (o simplemente
tergiversaron la informacin). Hay
otros casos, en cambio, en los que
los actores han tomado acciones a
partir de los resultados, aunque no
siempre hayan reconocido el papel de la informacin.
El Instituto, consciente de esto, ha encargado un es
tudio sobre el tema que debera ser muy ilustrativo
para empezar a entender el impacto de la informacin
en las polticas educativas y, por consiguiente, ajustar
sus mensajes e instrumentos de comunicacin a las
diferentes audiencias.
Respecto del trabajo del inee en los prximos aos,
quisiera sugerir dos ideas para aumentar su relevancia.
La primera es que si bien la informacin recogida, pre
sentada y discutida ha sido muy vasta, se han priorizado
los campos de comprensin de lectura y matemticas.
Hay evaluaciones de otras reas del currculo, pero no
se ha incluido a todas. Comprensin de lectura y ma
temticas son por cierto fundamentales, tanto para el
aprendizaje de otras reas del currculo como para las
posibilidades del individuo de acceder a la educacin
superior (y, por tanto, para su productividad econmi
ca). Sin embargo, no debemos olvidar que el sentido
de la educacin es integral y busca desarrollar intereses
y potencialidades en todos los aspectos vinculados al
ser humano. Al ser varios de ellos ignorados por las
evaluaciones, la presuncin de muchos podra ser que
no importan, cuando en realidad uno quisiera ver es
tudiantes con conocimientos, valores y destrezas inte
lectuales, sociales y fsicas al nivel de lo que se pretende
desde el currculo.
Puesto que el trabajo que se hace en el inee ya es
muy grande, pretender ampliarlo podra ser riesgoso.
Aun as, sugiero que se considere a mediano plazo un
sistema de evaluaciones que de manera rotativa abor
de todas las reas del currculo en los diferentes niveles.
En algunos casos esto se podra hacer con muestras pe
queas, pero atendiendo el ncleo de lo que se debera
aprender; por ejemplo, las habilidades para escritura
en castellano y lengua indgena son casi imposibles de
hacer de manera confiable con muestras grandes, pero
posibles y tiles en pequea escala. Estas evaluaciones
proveeran de informacin para mejorar las condiciones
educativas, de enseanza y de aprendizaje para todos.
Entre estas reas, el primer candidato debera ser
un estudio sobre la educacin ciudadana o educacin
para la democracia, con nfasis en al menos dos temas:
153
Captulo
Qu sigue?
El inee: entre lo instituido y lo instituyente
ace diez aos, la creacin del Instituto Nacional para la

Evaluacin de la Educacin signific un hito en la historia
de nuestro sistema educativo. La decisin fue ampliamente celebrada entre acadmicos e investigadores de la educacin,
organizaciones sociales, empresarios, docentes y su agrupacin gremial, as como por colegas de instituciones similares
de otros pases.
El desarrollo del inee no ha sido un proceso sencillo ni
simple. Para la conformacin de su equipo enfrent la insuficiencia de especialistas en materia de evaluacin educativa y
debi invertir tiempo en la formacin de sus propios cuadros
tcnicos. El diseo de instrumentos y desarrollo de metodologas de evaluacin tambin han requerido dedicacin, especializacin y trabajo riguroso. En materia de difusin de resultados de evaluacin, gener y dio a conocer informacin
estadstica sobre el sistema educativo que no haba sido del
dominio pblico, y realiz un trabajo muy cercano con los
comunicadores, quienes tampoco tenan experiencia en temas
de evaluacin educativa.
Actualmente, el Instituto es reconocido como un organismo con credi
bilidad, solidez tcnica y confiabilidad en las evaluaciones que lleva a cabo.
Se puede decir que est instituido, porque su existencia ya no es un valor
nicamente para esta organizacin, sino tambin para la sociedad en la que
se instituy. Como seal en la introduccin del presente Informe, quienes
han sido y son parte de su historia, han tenido la capacidad de actuar en
el marco de lo instituido, es decir, en ese sistema de normas y valores
156
que le proporciona estabilidad y sentido, pero al mismo

tiempo han participado activamente en la innovacin
de procesos de trabajo para convertirla en una orga
nizacin instituyente caracterizada por ser abierta y
generar su propia renovacin. As, lo instituido y lo ins
tituyente han sido y son los motores que dinamizan la
vida del inee.
En las presentaciones que anteceden a este ltimo ca

ptulo del Informe 2012, se han expresado algunas de
las lecciones aprendidas a lo largo de estos diez aos
de vida; yo quisiera destacar aquellas que, a mi juicio,
representan aportaciones centrales en su desarrollo.
Me gusta pensar que la inteligencia de una organizacin
se traduce en su capacidad de aprendizaje.
La primera que quiero destacar es la referida al tra
bajo colaborativo; a la construccin de redes de apo
yo para el quehacer institucional. Durante una dcada,
el Instituto ha llevado a cabo diversos encuentros de
reflexin y anlisis en materia de evaluacin educativa
donde han participado especialistas nacionales y ex
tranjeros, investigadores, docentes, autoridades, estu
diantes, funcionarios y medios de comunicacin. Esto
ha contribuido a enriquecer sus propuestas, a incursio
nar en nuevas metodologas y a comunicar mejor los
resultados de las evaluaciones. El equipo conformado
por las personas que aqu trabajan, junto con quienes
han colaborado de manera externa en sus encuentros,
proyectos y acciones, representan la diversidad de
pensamientos que han confluido en su labor y que son
inherentes a su historia.
Lecciones aprendidas
Otra de las lecciones se relaciona con la naturale

za tcnica del inee. A lo largo de este tiempo hemos
aprendido y confirmado que una de nuestras fortalezas
es la bsqueda constante del rigor tcnico y metodol
gico como fundamentos de nuestros estudios. Su natu
raleza tcnica no es una dimensin esttica, como tam
poco lo es la produccin de conocimientos a travs de
la investigacin cientfica. La evaluacin de la educacin
y la investigacin educacional comparten un propsito:
la bsqueda de la verdad. Para que esa bsqueda se
produzca y genere los resultados esperados, ha sido
esencial la formacin de los cuadros tcnicos que se
fortalecen ao con ao mediante actividades de capa
citacin y profesionalizacin llevados a cabo dentro y
fuera del pas.
Una leccin ms se refiere al reconocimiento de
que dicha naturaleza no debe aislar al Instituto, sino que
es indispensable construir vnculos, lograr una interlo
cucin madura y fructfera con diversos actores a fin de
consolidar una relacin entre lo tcnico y lo polti
co que sea beneficiosa para el Sistema Educativo Na
cional. Como producto de reflexiones y discusiones in
ternas sobre este tema, en el inee hemos concluido que
es necesario pensar polticamente la construccin de
los diversos proyectos tcnicos, de manera que el actuar
de la institucin sea pertinente a la toma de decisiones de
la poltica educativa, dirigidas a la mejora del sen. Esta
tarea se encuentra en permanente construccin.
Tambin hemos aprendido que es imperioso sor
tear las exigencias y demandas administrativo burocr
ticas para lograr centrar nuestro trabajo en las funcio
nes sustantivas, pues si bien hay un camino andado en
este sentido, es necesario reconocer que esta tensin
157
Qu sigue? El inee: entre lo instituido y lo instituyente
institucin, por lo que es importante conocer sus prin

cipales caractersticas.
Tal vez aqulla a la que se le ha dado mayor presen
cia en los comentarios derivados de su publicacin en
el Diario Oficial de la Federacin es la referida a la auto
noma. Las diversas maneras en que sta ha sido ex
presada coinciden en la necesidad de que el pas cuente
con una institucin independiente de la Secretara de
Educacin Pblica que se caracterice por su solidez tc
nica para realizar estudios evaluativos de calidad y por
generar confianza en sus resultados.
De hecho, desde la creacin del Instituto, su au
tonoma ha sido y sigue siendo motivo de numerosas
reflexiones y se ha reconocido como una demanda
social, y en los documentos fundacionales existe la alu
sin a este tema. Desde el Decreto de creacin de
2002, se destacaba en los Considerandos:
Personal del
inee, 2012.
puede llegar a afectar la labor del Instituto; por lo tanto,

se debe seguir buscando un adecuado equilibrio que
asegure su dedicacin en el cumplimiento de su misin.
Ya desde el informe del cuarto aniversario, el entonces
director general, Felipe Martnez Rizo, adverta que era
necesario buscar caminos para evitar que el peso de
las actividades rutinarias, administrativas y burocrti
cas absorbieran el tiempo y la atencin del personal
en detrimento de la calidad de las tareas sustantivas.
En la actualidad, aunque se han impulsado estrategias
para buscar ese equilibrio entre los aspectos sustan
tivos y los administrativos, la tensin sigue presente y,
por ello, la bsqueda de soluciones ha sido y ser una
tarea constante.
Entre los diversos aprendizajes que ha tenido el
inee en el transcurso de esta dcada, estos cuatro fa
vorecen la comprensin del momento que hoy vive y,
por ello, deben ser considerados para la construccin
de su futuro, un futuro posible que valore la experien
cia acumulada.
La reforma del inee: las decisiones y el proceso
El 15 de mayo de 2012, el Presidente de los Estados

Unidos Mexicanos, Felipe Caldern Hinojosa, firm la
reforma al Decreto de creacin del inee mediante
la cual se da un paso hacia su autonoma, lo que es
altamente significativo para su futuro.
En los meses previos a la promulgacin del nuevo
Decreto, se realiz una consulta con diversos actores
educativos, sociales y polticos, incluidos los funcionarios
y cuerpos colegiados del propio Instituto, a fin de escu
char sus posturas y reflexiones con el objetivo de reto
marlas para la mejora del nuevo instrumento jurdico.
Si bien el Decreto 2012 es un punto de llegada des
pus de casi dos aos de trabajo, tambin es un punto
de partida sobre el cual se fincar el desarrollo de la
158
Que la calidad del Sistema Educativo Nacional y sus

componentes se apreciar objetivamente gracias a me
canismos rigurosos y confiables de evaluacin que sern
independientes de las autoridades, cuyos resultados se
difundirn y utilizarn para el mejoramiento de la cali
dad. Que un organismo pblico dotado de personalidad
jurdica y de la autonoma tcnica que se desprende de
la descentralizacin administrativa, est en posibilidad
de prestar los servicios especializados que requieran las
autoridades federal y locales, as como las instituciones
pblicas y privadas, para que las evaluaciones que rea
licen respecto de sus correspondientes sistemas edu
cativos cuenten con el respaldo cientfico y tecnolgico
que sustente la validez y confiabilidad de sus resultados1.
En 2002, el nfasis en la autonoma tcnica

se concibi como un factor que determinara la validez
y confiabilidad de las evaluaciones al utilizar mecanis
mos rigurosos e independientes de las autoridades, y
asimismo, se vincul a ella la difusin y uso de resulta
dos para la mejora de la calidad de la educacin. Esta
ltima puntualizacin alude al hecho de que en Mxico,
antes del ao 2000, los resultados de las evaluaciones
a gran escala no eran difundidos pblicamente.
En el citado informe del cuarto aniversario, el en
tonces director general afirmaba que uno de los retos
que seguira enfrentando el Instituto era su autonoma,
textualmente afirm: El trabajo del inee debe regirse
slo por criterios acadmicos, sin supeditarse a indi
caciones o preferencias de otra ndole. La autonoma
jurdica ser adecuada en la medida en que apoye la
independencia tcnica.
En 2011, la discusin pblica al respecto vivi uno
de los momentos ms intensos. Un nuevo elemento
se coloc en el debate: la evaluacin de los docentes.
Actores polticos y sociales se manifestaron enftica
1 Decreto de creacin del Instituto Nacional para la Evaluacin de la Educa
cin, publicado en el Diario Oficial de la Federacin el 8 de agosto de 2001.
y dos temas fueron clave: la autonoma y la distribucin

de competencias en materia de evaluacin. Sobre el
tema de la autonoma se realiz un anlisis sobre las ca
ractersticas jurdicas de distintos organismos de la Ad
ministracin Pblica Federal (apf). En el siguiente grfico
se sintetiza dicho anlisis y se puede observar la posicin
relativa del inee respecto de la autonoma, antes de la
aprobacin de la reforma del Decreto de creacin.
Como se puede apreciar, existen distintos grados
de autonoma en las instituciones de la apf. Slo el
Banco de Mxico, la Comisin Nacional de Derechos
Humanos, el Instituto Federal Electoral y el Instituto
Nacional de Estadstica y Geografa tienen autonoma
constitucional delimitada con precisin en sus propios
documentos normativos.
Este no es el espacio para entrar a detalle en el
anlisis de los distintos tipos de autonoma y el papel
que en cada una de ellas tienen o pueden llegar a
tener los tres poderes del Estado. Baste con decir
que en este momento (2012) para el inee el paso a
la autonoma fue definido en trminos de constituirlo
como un organismo descentralizado, no sectorizado
y con autonoma tcnica, operativa y de decisin (Ar
tculo 1 del Decreto 2012). Esto significa que se des
centraliza de la sep y que ya no se encontrar bajo su
mecanismo de coordinacin. Esta novedad tiene sus
implicaciones.
Sin duda, la expresin que utiliz el titular del Eje
cutivo federal al anunciar la reforma del Decreto del
Instituto ilustra ampliamente su postura sobre la au
tonoma de una institucin que se dedicar a producir
informacin y conocimiento que contribuya a la evalua
cin de la educacin:
2 Ibidem.
Ms autonoma
Banxico, cndh,
ife, inegi
Autnomo constitucional
Centros Pblicos de Investigacin

ifai
Descentralizado
no sectorizado
mente en torno a la autonoma del inee, entre ellos

el titular del Ejecutivo federal, los lderes de opinin,
de organizaciones sociales y de la organizacin gremial de
los docentes mexicanos.
Al colocar nuevamente el tema de la autonoma
del Instituto como un rasgo jurdico que garantice su
independencia tcnica, se vio la necesidad de acelerar
los trabajos de anlisis y de elaboracin de una pro
puesta que haban iniciado desde 2010. La sep, a travs
de la Unidad de Planeacin y Evaluacin de la Poltica
Educativa (upepe), manifest su inters y apoy decidi
damente el proyecto para impulsar la autonoma. En la
elaboracin de una propuesta, se cont con la coordi
nacin tcnica del Centro de Investigacin y Docencia
Econmicas (cide), con la colaboracin del Instituto de
Investigaciones Jurdicas de la unam y el propio inee se
implic con decisin en su desarrollo.
Resulta relevante destacar que desde la planifica
cin original del Instituto, se advirti la necesidad de
perfeccionar su figura jurdica con el objetivo de asegu
rar la calidad de su trabajo y la confianza en sus resul
tados. En este sentido, en uno de los considerandos se
dej asentado: Que una de las constantes, resultado
de las consultas, se expresa en el sentido de que la ins
tancia de referencia nazca, se estructure y asuma sus
funciones a la brevedad, sobre la base de que ello no
sera bice para que en el futuro la figura jurdica por
la que se opte, su estructura y funciones, se perfec
cionen de modo tal que la calidad de sus servicios se
optimice y la confianza que sus resultados suscite,
se incremente 2.
En el desarrollo de la propuesta de reforma del De
creto del Instituto se recogieron las diversas inquietudes
Conacyt / inmujeres / imss

Conapred / Coneval
inee
Profeco / Condusef
Cofeco / Cofetel
Menos autonoma
cisen
/ agn / inmigracin
Descentralizado sectorizados
con autonoma
Descentralizado sectorizados
sin autonoma
Desconcentrado autnomo
Desconcentrado tpico
159
Durante diez aos, el inee per

teneci a la sep y siempre estuvo
presente el dilema cercana-leja
na. No obstante, en el Instituto
tenemos muy claro que nuestro
trabajo se debe al Sistema Educa
tivo Nacional y que es necesario
construir de manera permanente
una relacin de colaboracin mutua. En los ltimos
aos, me preocup y ocup de que este vnculo entre
el inee y la Secretara de Educacin Pblica se basara en
un dilogo respetuoso y en una colaboracin franca y
productiva en aquellos temas que por nuestra compe
tencia compartimos.
La no sectorizacin significa una definicin formal y
jurdica de ese dilema cercana-lejana que tiene sus
consecuencias administrativo burocrticas que es ne
cesario cuidar de manera eficiente. El Instituto estar
ahora bajo la coordinacin de la Secretara de Hacien
da y Crdito Pblico (shcp) y presupuestalmente pasa
r del Ramo 11 de la sep al Ramo 6 de la shcp.
Sin embargo, la no sectorizacin no significa no
relacin, lejana o indiferencia. Al contrario, significa
nuevas maneras de establecer y acrecentar un vnculo
institucional definido, como lo he dicho, por un dilogo
respetuoso y una colaboracin franca y productiva que
permita contribuir a la mejora de la educacin y del
propio sen. Todos, la sep y el inee, habremos de salir
ganando. Es un camino que debemos construir.
El Instituto habr de buscar que el dilogo, el encuen
tro y el trabajo conjunto se acrecienten, expandan sus
horizontes y se consoliden tan rpido como sea posible.
Adems del anlisis de la autonoma, se llev a cabo
un estudio de las competencias en materia de evalua
cin de la educacin. De acuerdo con lo que establece
el artculo 3 de la Constitucin, la educacin es materia
concurrente entre la Federacin, Estados y Municipios.
Por su parte, la Ley General de Educacin (lge), regla
160
mentaria del tercero constitucional, establece la distri

bucin de la funcin social educativa entre los tres rde
nes de gobierno, as como las competencias exclusivas y
concurrentes. En materia de evaluacin, es competencia
exclusiva de las autoridades educativas federales la eva
Comunicacin Social de la Presidencia de la Repblica.
Para m es un honor el haber promulgado el da de hoy

el Decreto por el cual se dota de autonoma al Instituto
Nacional para la Evaluacin de la Educacin, el inee, para
hacer de l un organismo ms autnomo, ms ciudada
no, fortalecer su especialidad tcnica y, desde luego, que
est en manos de quienes puedan
decidir cul es la mejor evaluacin,
con independencia de los intereses
sindicales, sociales y polticos que
existen tanto en el gobierno como
en los sindicatos y en la sociedad.
Y esto responda al nico criterio
del bienestar del pas. [] A partir
de la promulgacin del Decreto,
el inee ejercer mayor autono
ma tcnica, operativa y de deci
sin (Felipe Caldern Hinojosa,
15 de mayo 2012).
luacin del sen y la fijacin de los lineamientos generales

de la evaluacin que las autoridades locales deban reali
zar (artculo 12 fracc. xii y 29 de la lge).
No hay duda de que para avanzar hacia una au
tonoma legal, es necesaria una reforma de la lge de
manera que en la distribucin de la funcin de la eva
luacin educativa se incluya el papel del inee. El decreto
es un primer paso hacia la autonoma legal y la consti
tucional, a fin de que ste se convierta en un futuro
cercano en la instancia rectora del sistema nacional
de evaluacin de la educacin obligatoria.
Rasgos del nuevo Decreto del inee 2012
Adems de la autonoma del Instituto, los otros rasgos

del nuevo Decreto pueden resumirse en el carcter
jurdico que se le confiere; su objeto y materia; las ca
ractersticas de su naturaleza tcnica; sus funciones y el
gobierno de la institucin.
El Decreto seala su condicin de organismo
descentralizado, no sectorizado, con personalidad jur
dica y patrimonio propio.
Asimismo, el artculo 2 establece que el
Instituto tendr por objeto generar, aportar y difundir in
formacin y conocimiento que permita a las autoridades
educativas federal y locales evaluar diferentes componen
tes, procesos o resultados del Sistema Educativo Nacional
en sus respectivos mbitos de competencia, a fin de tomar
decisiones que contribuyan a mejorar su calidad.
Para tal efecto, celebrar convenios con las autori

dades educativas federales y locales, as como con orga
nizaciones de docentes, instituciones acadmicas y de
investigacin, organizaciones nacionales o extranjeras,
gubernamentales, no guberna
mentales, internacionales o socia
les, todas ellas relacionadas con la
educacin y su evaluacin3.
3 Decreto por el que se reforma el diverso por el que se crea el Instituto

Nacional para la Evaluacin de la Educacin, publicado el 8 de agosto de
2002. Diario Oficial de la Federacin, 16 de mayo de 2012.
ms, participarn como integrantes, tres miembros de

la Junta Tcnica y el presidente del Instituto fungir
como secretario tcnico.
La Junta Tcnica es una innovacin destacable del
nuevo decreto. Este rgano colegiado es responsable
justamente de las decisiones tcnicas y estar inte
grado por cinco especialistas, uno de ellos presidir
el Instituto. Su nombramiento es responsabilidad del
Ejecutivo federal.
El consejo integrado por los responsables de las
reas estatales de evaluacin conserva la misma con
formacin, pero ahora se denomina Consejo de Vin
culacin con las Entidades federativas y el Distrito Fe
deral a fin de hacer explcito que se trata de un rgano
colegiado que promueve y permite la colaboracin y
articulacin en materia de evaluacin, con las autorida
des educativas locales.
Otra innovacin en el Decreto 2012 es la confor
macin de un Consejo Social de Evaluacin de la Edu
cacin con funciones consultivas y que a invitacin del
presidente del Instituto estar integrado por 19 per
sonas en los siguientes trminos: el Secretario de Edu
cacin Pblica o un suplente que deber tener nivel
de subsecretario o equivalente, quien lo presidir; tres
secretarios de educacin pblica de las entidades fe
derativas; un funcionario del Instituto Federal Electoral
que tenga competencia en materia de educacin cvica;
un representante del Instituto Nacional de Estadstica
y Geografa; dos titulares de instituciones de educacin
superior o de investigacin educativa; dos integrantes
Ser materia de los traba

jos del Instituto la evaluacin de
la educacin obligatoria, esto es, la
educacin de tipo bsico (los ni
veles preescolar, primaria y secun
daria) y la educacin de tipo me
dio superior, tanto pblica como
privada. Tambin, contribuir a la
evaluacin de la formacin inicial y
continua de los docentes, la edu
cacin para adultos, la educacin
especial y la educacin indgena.
Como puede apreciarse, la dife
rencia radica bsicamente en una
mayor precisin del objeto del
Instituto y la inclusin de la edu
cacin superior como parte de la
educacin obligatoria.
Para preservar y acrecentar la confianza en el
trabajo del inee, el nuevo Decreto establece que
ste se guiar por los principios de independencia,
transparencia, accesibilidad, inclusin, oportunidad,
pertinencia y equidad. Asimismo, seala que sus tra
bajos se realizarn con apego a los criterios tcnicos
de objetividad, validez, confiabilidad y replicabilidad
que aluden a la naturaleza tcnica de sus acciones.
Las funciones que el Instituto realiza, se precisan
y expresan en los siguientes trminos: 1) Generacin y
desarrollo de informacin, indicadores y estadsticas
educativas; 2) Diseo y desarrollo de instrumentos de
medicin y evaluacin; 3) Desarrollo y promocin
de investigacin evaluativa, y 4) Difusin y vincula
cin para el uso de la informacin y el conocimiento
(Artculo 13). Asimismo se enuncian las principales
acciones que implica cada una de estas funciones.
La bsqueda de una mayor solidez tcnica com
prendida como el fundamento de su independencia y
autonoma, se manifiesta en el nuevo Decreto en
la conformacin de una Junta Tcnica que orientar el
programa de trabajo de la institucin y en la integracin
de consejos tcnicos especializados para cada una de
las cuatro funciones sustantivas enunciadas.
El rgano de Gobierno estar integrado por un
representante de la Secretara de Educacin Pblica, de
la Secretara de Hacienda y Crdito Pblico, del Con

sejo Nacional de Ciencia y Tecnologa y del Consejo
Nacional para la Evaluacin de la Poltica de Desarrollo
Social. Este ltimo presidir el cuerpo colegiado. Ade
161
de la organizacin sindical de docentes mayoritaria del

pas; tres representantes de organizaciones de la socie
dad civil relacionadas con la educacin; dos represen
tantes de organizaciones de padres de familia, y cuatro
acadmicos de reconocido prestigio en materia de
educacin, quienes podrn ser miembros de los conse
jos tcnicos especializados.
Estas caractersticas del nuevo decreto dan origen
a una nueva etapa en la vida del inee en la que ocurri
rn transformaciones de distinto orden encaminadas a
su realizacin plena. En este proceso, es importante te
ner presentes los desafos que desde ahora es posible
identificar y que podrn ser retomados como orienta
ciones del quehacer institucional.
Los desafos del inee en esta nueva etapa
La vida del inee sigue. Si bien la creacin del Instituto

debe ser valorada como un hito en la historia de la
educacin en Mxico, mantener su trabajo y acrecen
tar su capacidad y competencia tcnica a lo largo del
tiempo constituyen una seal de su vala, as como de
su pertinencia tcnica, social y poltica construida du
rante diez aos de trabajo comprometido.
El nuevo Decreto del inee establece una ventana de
transicin de 90 das naturales antes de su entrada en
vigor. En este contexto, el primer gran desafo es llevar
a cabo las actividades administrativas y organizaciona
les que implica pasar de un organismo sectorizado a
la Secretara de Educacin Pblica a uno no sectori
zado. Al trmino de esta transicin, el Instituto habr
establecido los canales de coordinacin directa con la
Secretara de Hacienda y Crdito Pblico y se habrn
constituido los rganos colegiados de gobierno y tcni
cos; adems, se estar trabajando en el nuevo estatuto
orgnico que va de la mano con una redefinicin de la
estructura organizativa y sus funciones, as como de
las plantillas de personal. As, el Instituto tiene la
oportunidad y la obligacin de construir y ex
presar una visin amplia, estratgica y ambicio
sa que permita definir los pasos que debern
darse ao con ao.
Adems de este desafo inmediato y te
niendo como referentes el objeto, atribuciones
y funciones del nuevo inee, los retos de la institu
cin se pueden agrupar en las dimensiones que se des
criben a continuacin y que no pretenden ser exhaus
tivas ni tampoco pierden de vista que se trata de llevar
a cabo una innovacin con la institucin en marcha.
Consolidacin de la capacidad y competencia tcni
ca. El desarrollo presente y futuro del inee, as como su
independencia y autonoma, estn fincados en la com
petencia tcnica de sus especialistas y en la cantidad de
personal disponible para realizar sus tareas.
Ampliacin de los mbitos y temas de evaluacin.
Adems de incursionar en nuevos espacios y proble
mticas, como la evaluacin docente y de programas e
162
intervenciones de la poltica educativa, el Instituto tiene

el enorme reto de ampliar el panorama en materia de
indicadores educativos y de evaluacin de aprendizajes
al incorporar elementos distintos de logro acadmico
y de las condiciones de las escuelas para la enseanza y
el aprendizaje. Parte de estos desafos es la explicita
cin de criterios o estndares tcnicos para los diver
sos proyectos de evaluacin de la educacin, a fin de
proponerlos a las autoridades educativas competentes.
Una mayor difusin de la informacin y una vin
culacin ms slida con diferentes actores del sistema
educativo. La cultura de la evaluacin se construye de
manera cotidiana, a pie y cara a cara con los actores
del sector educativo, social, poltico o gubernamental.
La difusin de informacin y conocimiento derivados
de los proyectos de evaluacin es una estrategia que
debe diversificarse para atender distintas audiencias.
Asimismo, la vinculacin con actores diversos tanto del
sector educativo, como fuera de l, permitir generar
la interlocucin que necesitamos para construir de la
mejor manera un sistema nacional de evaluacin de
la educacin obligatoria. El Instituto podra fungir como
el nodo de una red amplia y diversa de grupos de ac
tores. ste es, tal vez, uno de los desafos ms apasio
nantes y de mayor exigencia para el futuro inmediato.
Se requiere de una gestin institucional diferente de
los procesos de difusin y vinculacin, que, entre otros
elementos, significa la construccin de mecanismos
distintos de interlocucin entre los diversos actores.
Asegurar la pertinencia de los productos genera
dos por el inee. El Instituto ha manifestado de diver
sas maneras y en distintos documentos y foros que la
evaluacin no tiene ningn sentido si sus resultados no
se utilizan para tomar decisiones orientadas al mejora
miento de la equidad y calidad de la educacin. Uno de
sus propsitos es informar a la poltica educativa y a los
actores que definen los propsitos y el contenido de la
poltica pblica en materia de educacin. En este sentido,
la reflexin que se ha hecho en el equipo directivo del
Instituto es sugestiva: informar a la poltica implica, en
tre otras cuestiones, desarrollar un pensamiento ms
poltico (y no slo tcnico); significa pensar en trminos
de problemas o temas educativos que sean relevantes
para que la poltica educativa sea estructural o coyun
tural, y clarificar cmo las distintas reas de la institu
cin aportan para crear fotografas ms completas de
esos problemas o temas. La intencin es ofrecer cada
vez mayores y mejores elementos que nutran la polti
ca. La evaluacin de la educacin es nuestra responsa
bilidad y nos toca hacer que sea relevante y pertinente,
y que sus resultados sean tiles y utilizados de la mejor
manera para iluminar las decisiones en esta materia.
Construir una nueva relacin con la sep. Vinculado
directamente con el reto anterior, el inee tiene el de
safo de proponer nuevos mecanismos de vinculacin
con la sep; como he dicho, la autonoma no implica
rompimiento, sino la confianza para dialogar. La sep y
y tcnicas en materia de investigacin y de evaluacin

de la educacin.
Fortalecer la Comunidad inee. Las personas son la
esencia de la institucin. Gracias a ellas, en lo colectivo
y en lo individual, la organizacin opera, pues son ellas
quienes tejen las redes de relaciones de trabajo que
dan sentido a los proyectos y a las acciones. A lo largo
de estos aos, el equipo del Instituto se ha construido
y reconstruido; las personas no siempre son las mis
mas. En esta nueva etapa continuar el movimiento,

pues sa es la naturaleza de un organismo que est en
constante evolucin.
El Instituto posee una poderosa tradicin. Me gus
ta esa palabra por su significado: viene del latn traditio
que a su vez, procede del verbo tradere, que significa
entregar. Hoy entregamos a la sociedad una institucin
con fortaleza y solidez tcnica, que goza de credibilidad
y confianza renovada, que inicia una nueva etapa de
autonoma, crecimiento y desarrollo para contribuir a
garantizar el derecho a una educacin de calidad con
equidad para todos.
El inee, a travs de los estudios que realiza, es una
institucin dedicada a la produccin de informacin y
a la construccin de conocimiento necesarios para la
evaluacin de la educacin, rasgo que le imprime un
dinamismo singular, por ello, tiene la responsabilidad
de resolver peridicamente la constante tensin en
tre la tradicin y la innovacin, entre lo instituido y lo
instituyente4.
Equipo directivo
inee, 2012.
el inee tienen la responsabilidad de sentar nuevas ba

ses de relacin que permitan hacer de la evaluacin
educativa un poderoso instrumento para la mejora de
los diversos componentes, procesos y resultados del
Sistema Educativo Nacional.
Cuidar y aumentar la pertinencia de los trabajos
del Instituto implica una interlocucin mejor orientada
con tomadores de decisiones y, para ello, es necesario
definir una poltica de comunicacin y estrategias que
permitan la emisin de mensajes
claros, con informacin relevante y
diferenciada para cada uno de sus
destinatarios.
En otro orden de ideas, la perti
nencia del trabajo del Instituto pasa
por la capacidad de escuchar las
crticas sobre su quehacer institu
cional, analizarlas y hacerlas propias,
porque es a travs del conocimien
to de otras miradas y puntos de
vista que se pueden transformar
los procesos de trabajo y mejo
rarlos para obtener resultados aun
mejores y ms tiles.
Consolidar el desarrollo insti
tucional. Sin duda, sta es una di
mensin insoslayable de la que de
pende la resolucin de los desafos
de las dimensiones anteriores. El
principio de innovar a partir de la
tradicin deber iluminar las decisiones futuras. Entre
otras actividades, el desarrollo de la institucin incluye
la restructuracin organizativa junto con los documen
tos normativos derivados, como son: estatuto orgni
co, manual general de operaciones, adecuaciones a los
instrumentos normativos vigentes, entre otros.
El crecimiento del inee deber estar fincado en
una gran capacidad de gestin que permita contar
con las condiciones administrativo burocrticas, de
organizacin y de recursos materiales, financieros
y de personal para llevar al mximo nivel la realizacin
del objeto, las atribuciones y las funciones. En esta
nueva etapa, el Instituto deber manifestar una mayor
disposicin y capacidad proactiva para buscar espacios
de negociacin y acuerdo, as como tejer redes de
apoyo y crear las condiciones para el mejor hacer del
colectivo institucional.
Adems, el desarrollo de la institucin, sustentado
en su independencia y autonoma tcnica, deber aten
der de manera explcita la interlocucin con las auto
ridades educativas competentes, tanto a nivel federal
como en las entidades federativas y en el Distrito Fede
ral. La pertinencia de los trabajos y estudios que el inee
lleve a cabo habr de verse enriquecida con la amplia
cin de redes de especialistas nacionales y extranjeros
que compartan sus saberes y experiencia. Se trata de
generar sinergias entre diversas comunidades cientficas
4 Cuando esta publicacin empiece a ser difundida y leda, simultneamente

entrar en vigor el nuevo Decreto del que aqu hemos hablado.
163
Estndares ticos
en la evaluacin educativa
Papel y retos del inee

y Jess Miguel Jornet Meli
a evaluacin, por definicin, implica una serie

de actividades para producir informacin per
tinente y suficiente para emitir juicios de valor
sobre la calidad de los sistemas, organizaciones, con
diciones y resultados que se articulan para dar forma
y continuidad a los procesos educativos. sta es, por
lo tanto, una actividad compleja y extensa que por su
naturaleza debe atender rigurosos estndares meto
dolgicos y tcnicos.
Toda accin evaluativa tiene consecuencias para
los actores implicados en estos procesos. Cuando las
evaluaciones se orientan hacia los distintos componen
tes de un sistema educativo, su finalidad es sealar ele
mentos e intervenciones viables para la mejora de las
condiciones y procesos de enseanza. Las condiciones
escolares y contextuales, que posibilitan que las perso
nas ejerzan su derecho a una educacin obligatoria y
de calidad, tienen consecuencias de por vida. Las caren
cias y limitaciones de diversa ndole que obstaculizan el
ejercicio de este derecho social tienen tambin conse
cuencias de largo alcance. Con este punto se destaca
que en el trasfondo de las acciones evaluativas est la
tente un vasto componente tico del que, aunque se
reconoce su importancia central, an no se conocen
del todo al menos en Mxico los elementos que
lo conforman y mucho menos han sido explicitados y
sistematizados de manera acorde con los planes y acti
vidades de evaluacin existentes.
Desde su creacin, el Instituto Nacional para la
Evaluacin de la Educacin adopt y mantiene vigente
el principio de la mejor prctica, el cual consiste en ubi
car, adaptar, desarrollar y aplicar los recursos tcnicos
ms robustos para planear y llevar a cabo sus funciones
sustantivas. A lo largo de diez aos, esta visin original
se mantiene actual y se ha reforzado desde la integra
cin del modelo de evaluacin en la planificacin de las
evaluaciones; el diseo y aplicacin de instrumentos de
medicin; la sistematizacin, anlisis y resguardo de la
informacin; la construccin y validacin de indicado
res; la formulacin y fundamentacin de conclusiones
y recomendaciones, as como en la difusin de los re
sultados hacia conjuntos diferenciados de audiencias y
destinatarios.
El propsito de nuestra contribucin es abrir un
espacio para el anlisis y discusin constructivos que,
eventualmente, lleve a un consenso sobre el conjunto
164
de principios y las prcticas de tica que subyacen y

deben orientar las tareas evaluativas en el Sistema Edu
cativo Nacional (sen).
Hasta ahora hemos identificado precedentes a la
tarea de definir estndares de tica para la evaluacin
educativa en el panorama internacional. Si bien no es
ste el espacio para desarrollar los anlisis de los prin
cipios rectores, su enumeracin es un punto de partida
para la tarea que proponemos.
En primer trmino, el referente ms cercano es el
Cdigo de tica de la American Educational Research
Association (aera, 2011). Si bien este material est
dirigido a investigadores, sus contenidos pueden ser
pertinentes para evaluadores. Los principios bsicos
que postula son: competencia profesional, integridad,
responsabilidad profesional, cientfica y acadmica,
obligaciones de respeto a derechos de personas en su
dignidad y diversidad y, por ltimo, la responsabilidad
social. En la misma tnica, el National Center for Edu
cational Statistics (nces, 2010) ha difundido una serie
de lineamientos de tica que introducen el concepto
Data Ethics en el campo de la educacin. El apego
a estos lineamientos se considera crucial en la era de
la informatizacin. Los contenidos se presentan para
orientar a directivos y personal de administracin esco
lar en asuntos donde se implican aspectos ticos en el
manejo de datos individuales y bases de datos grupales.
En el mismo mbito, la British Educational Research
Association (bera, 2004) ha publicado un conjunto de
estndares para la evaluacin, en los que se destacan
responsabilidades como la integridad, objetividad y
calidad en la investigacin educativa, entre otras. Se
enfatizan tambin valores de tradicin democrtica y
aspectos de libertad acadmica. Por su parte, la DeGE
val-Gesellschaft fr Evaluation (Evaluation Society, 2001)
adopt un conjunto de estndares para evaluacin y
sigui, en parte, los precedentes de aera para lograr
una adaptacin de estos lineamientos a los contextos
de Alemania y Austria. En un conjunto de 25 estnda
res, se postulan las obligaciones de los evaluadores en
la identificacin de los actores implicados en los proce
sos, la clarificacin de los propsitos de las evaluacio
nes, la credibilidad y competencia del evaluador para
los propsitos definidos, los alcances de la informacin
y la seleccin de enfoques, la transparencia de valores,
la exhaustividad y claridad de los reportes, la tempora
La base para decidir sobre los componentes ticos

de las actividades de evaluacin debe tener como
principio clave el desarrollo humano, que es la fi
nalidad de los procesos educativos y evaluativos.
Las decisiones puntuales sobre los aspectos ti

cos de las acciones de evaluacin, deben contem
plar las consecuencias que estas acciones tienen
sobre las personas que participan en los procesos
educativos.
Por su parte, el inee reconoce, con la debida res
ponsabilidad, la tarea de ejercer el liderazgo nacional
en el anlisis y definicin de estos temas, los retos de
hacer explcitos en su propio mbito de accin, los
principios y prcticas de tica que ataen a la perio
dicidad de las evaluaciones, los impactos de stas en
las partes evaluadas del sen, y la aplicabilidad de los
resultados generados para la mejora de la educacin
nacional. Por otra parte y sin ser excluyentes, conside
ramos que a esta tarea pueden sumarse los organis
mos que realizan evaluaciones del sistema educativo a
nivel nacional y estatal.
Para finalizar, apuntamos que la tica de la eva
luacin debe formar parte de un concepto amplio
de la cultura de evaluacin, en un marco de valores
democrticos donde la dignidad de las personas est
por encima de las tendencias normativas.
lidad y la utilizacin de resultados de evaluacin para la

mejora educativa.
Con este breve y parcial recuento, sealamos as
pectos temticos que estn latentes, pero no explci
tos, en nuestros entornos de evaluacin y reconoce
mos que los precedentes revisados se han originado
en contextos, tradiciones acadmicas y normativas
distintas a la nuestra. No por ello, los temas de la ti
ca de evaluacin educativa dejan de ser pertinentes a
nuestro panorama nacional.
Por otra parte, destacamos que el liderazgo del
inee, en materia evaluativa en el pas, es congruente
con la tarea de identificar y definir los temas de tica y
las formas de darles tratamiento y difusin.
Independientemente del camino que tome la dis
cusin, proponemos dos vertientes para avanzar en la
tarea de prospectiva de los estndares ticos en eva
luacin educativa:
American Educational Research Association, (2011). Code of

Ethics. Educational Researcher, 40, Nm. 3, pp. 145-156.
aera.
British Educational Research Association, (2004). Revised
Ethical Guidelines for Educational Research. Notts. UK .:
bera, South well.
Gesellschaft fr Evaluation-Evaluation Society (2001). Evaluation Standards. Johannes Gutenberg-Universitat, Mainz:
degeval.
National Center for Educational Statistics (2010). Forum Guide to Data Ethics. Washington, D.C.: U.S. Department
of Education.
National Assessment of Educational Progress (2001). Supervisor Manual. naep.
Instituto Nacional para la Evaluacin de la Educacin (2010).
El Derecho a la Educacin en Mxico. Informe Institucional
2009. Mxico, D.F.: inee.
165
El compromiso del inee

con la equidad educativa
l inee considera que la equidad en educacin es

un componente de su calidad. Entiende que no
se puede asegurar el derecho a la educacin,
del cual los gobiernos son garantes, si no se reconoce
la diversidad de regiones, contextos, familias y, en de
finitiva, alumnos y alumnas. Tratar igual a los diversos,
comprende el inee, es generar desigualdad. Es nece
sario dar ms a los que menos tienen y a los que ms
lo necesitan, a fin de que existan condiciones para la
equidad en los resultados de la educacin, es decir, en
aprendizajes relevantes para que los educandos pue
dan vivir una vida digna, de calidad. As entendida, la
equidad en la distribucin de los recursos financieros,
materiales y humanos da ms a quienes ms lo necesi
tan, es condicin para la calidad de los resultados de la
educacin, condicin al fin para asegurar el derecho al
aprendizaje relevante de todas y todos.
El inee ya ha mostrado ampliamente su compro
miso con la equidad de la educacin. Sus evaluaciones
buscan inequidades para develarlas, pero tambin para
comprenderlas y para proporcionar las bases
para focalizarlas y evitarlas. Esto lo hace cuan
do rinde los informes de las pruebas Excale
compara entre nios y nias, entre entida
des federativas, entre tipos y modalidades de
escuela; analiza, a partir de los datos com
parables que ya tiene, cmo evolucionan unos
y otros; trata de explicar las diferencias me
diante estudios de factores asociados en los
que incluye indicadores tradicionales y cons
truye el ndice de capital cultural escolar. Es el
Instituto quien por vez primera ha intentado
medir las diferencias, al menos percibidas, en
infraestructura y equipamiento escolar, por
regiones y tipos de escuela. Encuentra que
nuestro sistema educativo es injusto porque contribuye
a que las diferencias socioeconmicas se sigan reprodu
ciendo. Con ello afianza la inequidad, siendo que la edu
cacin precisamente tendra que contribuir a reducirla.
El inee se preocupa de manera especial por la po
blacin en condiciones de vulnerabilidad, como llama a
los alumnos y alumnas de escuelas indgenas, de cursos
comunitarios del Conafe y de telesecundarias. Propicia
el desarrollo de estudios que profundicen, con la infor
macin que genera y otra relevante, la compleja reali
dad de estas escuelas y la lamentable situacin educati
166
va de los alumnos. Al hacerlo, sienta las bases para que

quienes tengan inters por atender la problemtica,
puedan hacerlo con mayor conocimiento de causa.
El inee asume la perspectiva del derecho a la edu
cacin; desde tal posicin no puede ms que inquie
tarse cuando ste no se cumple a cabalidad: porque
los nios no asisten a la escuela, porque desertan de
la misma, porque reprueban grado o porque apren
den poco. Quienes seguimos su trabajo en torno a
indicadores, hemos podido ver cmo la situacin del
incumplimiento del derecho a la educacin es ms
grave de lo que pensbamos: la eficiencia terminal en
primaria, por ejemplo, si se mide conforme el mto
do de cohortes aparentes, desarrollado por el inee,
no es de 92%, como se nos haca creer, sino de 70%.
Los alumnos que no terminan su educacin primaria
en seis aos tienen ms probabilidades de truncar
su educacin bsica. Esto tambin lo muestran feha
cientemente los nios de edad mayor a la terica o
con extraedad grave, quienes obtienen menores cali
ficaciones en las pruebas
lo que por otra parte
permite cuestionar la re
probacin como medida
remedial. Hay ms ni
os con primaria sin con
cluir fuera de la escuela
en las edades de 12, 13
y 14 aos reprobaron
algn grado y deserta
ron sin terminar siquiera
la educacin primaria.
Desde la perspectiva del
derecho a la educacin,
stas y muchas ms in
formaciones que el inee nos proporciona, reflejan
situaciones inadmisibles. Sin decirlo abiertamente,
porque no es necesario, el inee nos lo da a entender:
hay que hacer algo para cambiar esta realidad.
Y en el futuro, qu esperaramos respecto del com
promiso del Instituto con la equidad de la educacin?
Esperaramos que el inee mantuviera su perspecti
va de la educacin como derecho. Esperaramos que
profundizara su preocupacin por comprender mejor
la situacin educativa de las poblaciones en condicio
nes de vulnerabilidad educativa, ampliando su mirada
a otros grupos, como los sectores marginales urbanos,

los jornaleros agrcolas migrantes, la poblacin migran
te de retorno y las diferentes etnias. Esperaramos que
siguiera reportando sobre la equidad en educacin
con la misma intensidad como hasta la fecha, respecto
de los datos de insumos, procesos y productos o re
sultados, y que continuara con los intentos serios por
comprender esta situacin.
En el futuro, al continuar con esta lnea, el inee re
querir profundizar su trabajo en torno a la equidad, so
bre todo en aquellos factores que explican la inequidad
y que son atendibles por el propio sistema educativo:
Como lo ha hecho hasta la fecha, el inee tendr que

poner en juego datos de contexto de diversidad cre
ciente, que se sabe influyen sobre los resultados edu
cativos y que por esa misma razn el sistema educativo
debe procurar contrarrestar con ms fuerza.
Con datos como los anteriores, que profundizan
en los factores que estudios previos del inee y de mu
chos otros han descubierto como propios del sistema
educativo y causantes de las inequidades, el Instituto
pone en manos del pblico en general nuevas fuentes
de indignacin social sobre la operacin de nuestro
sistema educativo y a las autoridades educativas una
agenda de polticas pblicas imprescindibles. A los in
vestigadores les da elementos para tratar de entender
la dinmica de la desigualdad educativa y a los maestros
e interventores educativos propuestas de posibles in
novaciones. Como consecuencia, el pueblo mexicano
est mejor informado acerca de nuestra problemtica
educativa, de la necesidad e importancia de atender
la, y de las posibles medidas de equidad que podrn
contribuir a que nuestro sistema educativo deje de re
producir, y en ocasiones fortalecer, las desigualdades
sociales y econmicas que nos sitan entre los pases
ms desiguales del mundo, y que se vaya acercando al
cumplimiento ntegro del derecho a la educacin. ste
es, como yo entiendo, el compromiso del inee con la
equidad educativa.
Reunin de Consejo
Tcnico, 2006.
Una fuente de inequidad en educacin es la forma

como sta se financia. Sabemos que el financia
miento es muy desigual un alumno de primaria
regular, por ejemplo, cuesta cinco veces ms que
un alumno de primaria comunitaria, pero no te
nemos suficientes datos duros al respecto. No sa
bemos cunto se gasta en un nio que asiste a una
escuela indgena o a una telesecundaria, respecto
de otro que es atendido en una primaria urbana
o en una secundaria tcnica. No sabemos cunto
cuesta proporcionar escuela a un nio de Oaxaca
respecto de uno de Nayarit. No tenemos mucha
idea de cmo ha evolucionado el financiamiento
educativo, no sabemos si la desigualdad crece o
disminuye. Puesto que el inee considera que la
equidad debe entenderse como la necesidad
de darle ms a quien ms lo necesita, debe in
comodarse e incomodarnos con datos de des
igualdad como stos, que son controlables y
modificables por una decisin del propio sistema
educativo. Profundizar sobre el financiamiento de
la educacin es una necesidad urgente que el Ins
tituto debe atender en el futuro prximo.
Otra fuente de inequidad en educacin es el
funcionamiento de las escuelas. Tienen stas lo
necesario para operar la educacin?, tienen au
las suficientes, en buen estado?, los directores,
tienen nombramiento?, hay maestros suficientes,
asignados al inicio del ciclo escolar y no cambia
dos en el transcurso del mismo?, estos maes
tros, asisten puntual y regularmente a la escuela?,
cuntas horas reales de trabajo en aula tienen
los nios?, estn equipadas las escuelas con lo
necesario para conducir el proceso de enseanza
que lleva al aprendizaje? Y obviamente, desde la
perspectiva de la equidad, cmo difieren las es
cuelas?, cules son los factores que explican estas
diferencias?
Una fuente ms de inequidad en educacin es
lo que pasa en la escuela y en el aula, de lo que
depende, en buena medida, la relevancia del
aprendizaje, que el inee tambin considera como
un componente fundamental de la calidad de la
educacin. Operan las escuelas como institucio
nes que buscan mejorar?, ejercen sus directores
un liderazgo acadmico?, hay propsitos comu

nes y trabajo en equipo por parte de los docen
tes?, los padres de familia y otros miembros de
la comunidad participan efectivamente, ms all
del pago de cuotas o los tequios de trabajo? Y en
el aula, cmo es el clima
socioafectivo que los es
tudios recientes coinciden
en identificar como uno
de los factores que mejor
explica las diferencias en
el aprendizaje cuando se
mantiene constante el ni
vel socioeconmico?, se
atiende a la diversidad lin
gstica, cultural, de capaci
dades de los alumnos?, se
privilegia el desarrollo de
habilidades bsicas y superiores de pensamiento,
y de valores para la convivencia?, los alumnos tie
nen agencia, protagonismo en su aprendizaje?, es
tn formados los maestros adecuadamente para
llevar a cabo prcticas como las anteriores? Sera
muy importante conocer cmo difieren las aulas,
los docentes, los directores y las escuelas respecto
a preguntas tan centrales como las anteriores, si
a ello tambin lo condiciona el nivel socioecon
mico y cultural del contexto y/o de los nios y
sus familias, o bien si la escuela est ejerciendo su
influencia posible para revertir las desigualdades.
167
Contribucin del inee

al desarrollo de la educacin en Mxico
u obra tan maravillosa fue la creacin del

Instituto Nacional para la Evaluacin de la
Educacin. Para m, fue la reforma ms im
portante durante la administracin del presidente Vi
cente Fox. A partir de ese momento se conocieron
muchas cosas, pero tambin se dibuj el mejor pa
norama de lo que no se saba en materia educativa.
Cierto tambin que el inee no naci como una institu
cin para la prctica escolar en su primera etapa, sino
para la indagacin y el descubri
miento de hechos y relaciones
que solamente se anticipaban o
se imaginaban.
Es mucho lo que se pue
de decir sobre la contribucin
del inee al desarrollo educa
tivo del pas a partir de que
inici sus trabajos en 2002 y,
por supuesto, puede uno re
ferirse objetivamente a lo que
falta por cambiar. Por ello, la
primera exigencia es que esta
institucin debe continuar su
trabajo como hasta hoy lo ha
hecho, quiz cambiando algu
nos procedimientos, quiz con
solidando otros y, por qu no,
hasta continuar y consolidar lo
que sucedi en esos diez aos,
cuando se generaron nuevas Archivo Iconogrfico dgme/sep.
formas de examinar los asuntos de la educacin nacio
nal. Es en ese orden que redacto esta pequea nota, a
la luz de mi experiencia como consejero tcnico, pero
tambin como una persona interesada en el desarrollo
de la educacin.
Lo primero que subrayo es que gracias al traba
jo del inee se consolid una forma de analizar la edu
cacin y, sobre todo, de hacer juicios sobre prcticas
escolares o sobre mecanismos institucionales con da
tos duros, con cifras que garantizan la credibilidad y la
confianza en los resultados. Esto quiere decir que los
productos generados por el inee son ya una base firme
para tomarse como punto de partida para otro tipo de
estudios y de investigaciones que se realizarn en un
futuro prximo. Por ejemplo, si ya se ha profundizado
en lo que son las variables de contexto y cul es el
168
impacto que tienen sobre los resultados en el apren

dizaje, ahora se debe observar cmo dichas variables
pueden ser manipuladas para alcanzar el fin deseado.
En otras palabras, la sola identificacin de ms de 75
elementos que impactan el aprendizaje, obliga de in
mediato a revisar cada uno de ellos y ver cul es el
poder predictivo que tendra una determinada inter
vencin sobre el rendimiento acadmico.
Esto es lo que permiti por primera vez en la
historia de la educacin mexi
cana, al menos desde la crea
cin de la sep en 1921, tener
informes de la educacin b
sica de manera regular. La
historia de la educacin en
Mxico, sobre todo la pblica,
pero tambin la privada, nos
dice que sabamos muy poco
sobre la operacin de los jar
dines de nios, las escuelas pri
marias o las secundarias.
Se afirma, con mucha na
turalidad, que la educacin era
buena o mejor que la de hoy,
pero ahora sabemos cmo es
tos juicios tan generales se ins
criben dentro de un grupo muy
pequeo de nuestra poblacin,
porque una gran proporcin de
sta ni siquiera saba leer y es
cribir. Hoy tenemos excelentes marcos de referencia y
en los prximos diez aos es probable que la agenda de
investigacin de la educacin primaria, secundaria
o de la media superior sea completamente diferente a
lo que hoy comprenden las evaluaciones que ao con
ao se llevan a cabo.
En otro orden de ideas, las aportaciones del inee se
inscriben en distintas lneas:
Se avanz en la definicin, el concepto y la necesi
dad de tener un sistema nacional de evaluacin de
la educacin que se haba planteado desde mucho
tiempo atrs.
Se perfeccion la forma de elaborar reactivos, de
disear pruebas de conocimientos y cuestionarios
de contexto. A partir del inee, enlace y Excale se
Tenemos tambin, gracias al inee, una fotografa

numrica de lo que pasa en las escuelas y fuera de
ellas, que confirma o conforma el modelo educativo, y
eso permite tambin la elaboracin de juicios, la reali
zacin de comparaciones, la posibilidad de estimacio
nes, que si bien antes se tenan o se hacan como ejer
cicios estadsticos importantes, es cierto que cuando
se revisan, uno se da cuenta que haba una gran sub
jetividad que ahora se ha disminuido gradualmente

gracias a la consistencia de datos y nmeros, vaya, de
indicadores, que toma tanto tiempo definir y elaborar,
y de los que el inee ha sido elemento fundamental
para su creacin en Mxico.
El Panorama Educativo de Mxico, desde su primera
edicin, ha sugerido un marco metodolgico diferente,
ha incorporado elementos estadsticos y economtri
cos cuyo manejo era antes solamente privilegio de unos
cuantos; s, de unos cuantos dentro de la investigacin
en este campo en Mxico. Ahora, por lo que veo en
diferentes estados de la Repblica, y sobre todo en las
reas de evaluacin de las entidades federativas, poco
a poco las cosas han cambiado y se ha constituido una
red cada vez ms segura para la realizacin de las medi
ciones que se requieren para una buena evaluacin. El
efecto demostracin, tan conocido en otras disciplinas
acadmicas, especialmente en el caso de la economa,
ha sido continuo y permanente a partir de la elabora
cin de bases de datos que antes servan para llenar
cajones de escritorios en las dependencias oficiales o
en las instituciones de educacin superior, incluso en
las escuelas, y que ahora constituyen datos utilizados
permanentemente y cuyo manejo y almacenaje se ha
simplificado con los procedimientos electrnicos. Es
decir, el trabajo del personal del inee es un trabajo que
ya se repite tal vez con menor calidad y consistencia en
otras instituciones.
Gracias al Instituto, hoy se habla de mejores prc
ticas de investigacin en el campo de la evaluacin
educativa; de la conformacin de una autntica cul
tura de la evaluacin; de ejercicios orientados a los
medios de comunicacin para una mejor difusin de
los informes; de las ventajas de preparar con mayor
exigencia los recursos humanos de las instituciones
y, sobre todo, de la conveniencia de conformar ins
tancias de gobierno que puedan actuar con libertad
absoluta, autonoma e independencia.
Desde que se dijo evaluar para mejorar, se cons
truy el paradigma que subyace en todos los trabajos
del inee; quirase o no, el reconocimiento de este he
cho es lo que permite ser optimistas sobre su futuro.
Arturo de la Orden Hoz y

Jos ngel Pescador Osuna.
constituyen como instrumentos perfectibles pero

eficaces de medicin de aprendizaje.
Se dio mayor confianza al manejo de las estadsti
cas y de los indicadores que prepara la Secretara
de Educacin Pblica. Ello permiti optimizar la
utilizacin de la forma 911, un instrumento que por
aos haba originado archivos y ms archivos, y que
parece tener cada vez una mejor proyeccin.
Se aceler una forma muy conveniente de
presentar resultados a travs de los informes
impresos y del acceso electrnico para quien
quisiera consultarlos.
Se gener mayor confianza y seguridad en los
ejercicios internacionales y de los organismos
especializados en lo que a la medicin de resul
tados educacionales se refiere. No es remoto
que en un futuro cercano, el inee est aportan
do nuevas ideas y metodologas dentro de este
campo tan importante.
Se gener el uso cotidiano y cada vez ms amplio
de los trabajos de investigacin que comprendan
no solamente los aprendizajes, sino los mecanis
mos de seguridad, las relaciones entre directivos
y docentes en las escuelas; las caractersticas de
algunas modalidades tan especiales como los cur
sos comunitarios o tambin las propuestas para
el mejoramiento de la telesecundaria, las cuales
siguen siendo una gran necesidad para garantizar
el cumplimiento de la norma constitucional y de la
Ley General de Educacin en lo que a la educacin
secundaria se refiere.
Se prob que una institucin, para que pueda ge
nerar resultados confiables y crebles en el corto
plazo, requiere de una buena direccin o un lide
razgo que resulta insustituible. Felipe Martnez y
Margarita Zorrilla supieron que un buen equipo
debe formarse y consolidarse sobre principios ti
cos, cientficos y mantener una lealtad inquebran
table a la institucin; estar seguro que los resul
tados se dan en el largo plazo, pero tambin con
exigencia inmediata.
Se vio a los rganos colegiados como serios ins
trumentos de discusin y de debate y no como
meras estructuras de simulacin; eso represent
un logro muy importante, sobre todo cuando nos
damos cuenta de cmo las cosas se pasan por alto
en dichos rganos de deliberacin, pues nica
mente se cumple el papel de asistir a juntas sin
revisar siquiera los documentos.
169
ndice de autores
Captulo 1
Captulo 3
Felipe Martnez Rizo
Andrs Snchez Moguel
Director del inee en el periodo 2002-2009. Profesor-Investigador.

Universidad Autnoma de Aguascalientes. P. 16
Dr. Reyes Tamez Guerra
Secretario de Educacin en el periodo 2000-2006. P. 24
Teresa Bracho Gonzlez

Presidenta del Consejo Tcnico del inee en el periodo 20062009. Profesora-Investigadora. Facultad Latinoamericana de
Ciencias Sociales (Flacso). P. 26

Presidente del Consejo Tcnico del inee en el periodo 20022006. Investigador Emrito. Instituto de Investigaciones para
el Desarrollo de la Educacin. Universidad Iberoamericana.
P. 27
Captulo 2
Director de Indicadores Educativos, inee. P. 30
Rafael Daz Garca

Director de Evaluacin. Secretara de Educacin. Guanajuato.
P. 36

Coordinador Acadmico. Colegio de Bachilleres. Durango.
P. 37

Estadstico. Divisin de Estadstica y Proyecciones Econmicas.
Comisin Econmica para Amrica Latina y El Caribe (Cepal),
Naciones Unidas. P. 38
Director de Pruebas y Medicin. inee. P. 50
Noem Garca Garca

Directora General Adjunta de Desarrollo
Curricular. sep. P. 55

Profesor-Investigador. uabc. P. 56
Jos Francisco Soares
Profesor del Departamento de Ciencias Aplicadas
a la Educacin. Coordinador del game (Grupo De Avaliao
E Medidas Educacionais). P. 60

Profesor-Investigador. Universidad Complutense
de Madrid. P. 62
Celia Daz Argero

Profesora-Investigadora. Instituto de Investigaciones
Filolgicas. unam. P. 65
Profesor-Investigador. Universidad de Colorado,
Boulder. P. 66

Profesor jubilado. P. 69
Captulo 4
Directora de Proyectos Internacionales y Especiales. inee. P. 72
Agustn Tristn Lpez
Director General. Mexicanos Primero a.c. P. 41
Director General del Instituto de Evaluacin e Ingeniera

Avanzada (ieia). P. 79
Rafael Vidal Uribe
Director General Adjunto de Anlisis de la Pobreza. Consejo

Nacional de Evaluacin de la Poltica de Desarrollo Social
(Coneval). P. 42
Director General del Centro Nacional para la Evaluacin

de la Educacin Superior (Ceneval). P. 80
Consultora independiente. P. 83
Director General Adjunto. Planeacin e Informacin. sep. P. 44

Subdirectora de Productos Censales. Direccin de Explotacin
Censal. Inegi. P. 45

Director General del Centro de Altos Estudios
Universitarios. oei. P. 46

Enrique Roca Cobo
Exdirector del Instituto de Evaluacin de Espaa.

Consultor de la Organizacin de Estados Iberoamericanos.
P. 84

Coordinadora Tcnica del Sistema de Medicin de Calidad
de la Educacin (simce). P. 86
Andreas Schleicher
Director Adjunto de Educacin. Asesor especial sobre Poltica
Educativa del Secretario General. ocde. P. 88
Captulo 5
Captulo 7
Raquel Ahuja Snchez
Alejandra Delgado Santovea
Directora de Evaluacin de Escuelas. inee. P. 94
Eva Moreno Snchez
Subdirectora de Investigacin y Coordinacin de Proyectos.

inee. P. 128
Directora General de Desarrollo Curricular en Educacin

Preescolar. sep. P. 97
Annette Santos del Real
Guadalupe Ruiz Cuellar
Pedro Ravela Casamayou
Profesora-Investigadora. Universidad Autnoma

de Aguascalientes. P. 98

Profesor-Investigador. Universidad de California,
Los Angeles. P. 101
Profesora-Investigadora. Facultad de Psicologa. unam. P. 102
Gilberto Guevara Niebla
Director Revista Educacin 2001. P. 108

Captulo 6
Directora General Adjunta. inee. P. 128

Director del Instituto de Evaluacin Educativa. Universidad
Catlica de Uruguay. P. 134
Silvia Garca Pea

Coautora de libros de texto de matemticas para educacin
bsica y de materiales de apoyo para maestros. P. 137
Pedro Flores Crespo

Investigador. Instituto de Investigaciones para el Desarrollo
de la Educacin. Universidad Iberoamericana. P. 138
Dalila Lpez Salmorn

Coordinadora Nacional de Programas Educativos para Grupos
en Situacin de Vulnerabilidad. sep. P. 142
Manuel Gil Antn

Directora de Relaciones Nacionales y Logstica. inee. P. 112
Mara Guadalupe Beltrn Medina

Directora General de Evaluacin. Secretara de Educacin
de Jalisco. P. 116
Francisco Ernesto Reyes Jimnez

Director de Produccin y Operaciones del Instituto Colombiano
para el Fomento de la Educacin Superior (icfes). P. 118

Coordinador operativo. Programa Escuelas de Calidad (cnpec).
sep. P. 120
Ana Isabel Bravo Fuerte

Colaboradora del inee en los operativos de levantamiento
de informacin. P. 124

Colaboradora del inee en los operativos de levantamiento
de informacin. P. 125
Profesor-Investigador. Centro de Estudios Sociolgicos.

El Colegio de Mxico. P. 141

Investigador. Instituto de Investigaciones sobre la Universidad
y la Educacin. unam. P. 146
Felipe Tirado Segura

Profesor titular. Programa de Investigacin Psicoeducativa
fes-Iztacala-unam. P. 148

Investigador Principal del Grupo de Anlisis para el Desarrollo
(Grade) Lima, Per. P. 152
Captulo 8
Directora General. inee. P. 156
Profesor-Investigador. Universidad de Valencia. P. 164
Jess Miguel Jornet Meli

Catedrtico del Departamento de Mtodos de Investigacin
y Diagnstico en Educacin. Facultad de Filosofa y cc. de la
Educacin. Universitat de Valncia P. 164

Directora del Instituto de Investigaciones para el Desarrollo
de la Educacin. Universidad Iberoamericana. P. 166
Presidente del Colegio de Sinaloa. P. 168
Junta directiva
Consejo tcnico
Presidente
DR. PEDRO ALEJANDRO FLORES CRESPO

Investigador del Instituto de Investigaciones para el Desarrollo
de la Educacin. Universidad Iberoamericana
DR. JOS NGEL CRDOVA VILLALOBOS

Secretario de Educacin Pblica
Presidente suplente
LIC. JUAN BERNARDO ROJAS NJERA
Titular de la Unidad de Planeacin y Evaluacin
de Polticas Educativas
Secretara de Educacin Pblica
DR. ALEJANDRO MRQUEZ JIMNEZ

Investigador del Instituto de Investigacin sobre la Universidad
y la Educacin, unam
MTRO. DANIEL SCAR TACCARI
Estadstico. Divisin de Estadstica y Proyecciones Econmicas.
Comisin Econmica para Amrica Latina y El Caribe (Cepal), Naciones Unidas
DR. MANUEL JORGE GONZLEZ MONTESINOS MARTNEZ
Profesor Investigador titular. Departamento de Ciencias Sociales.
Universidad de Sonora. Unidad Regional Norte
Consejeros
DR. EUGENIO J. GONZLEZ NAGEL

Director del Instituto de Investigaciones de la iea-ets
DR. JOS ENRIQUE VILLA RIVERA
DR. JESS MIGUEL JORNET MELI

Catedrtico del Departamento de Mtodos de Investigacin y Diagnstico en
Educacin. Facultad de Filosofa y cc. de la Educacin. Universitat de Valncia
Director General del Consejo Nacional de Ciencia y Tecnologa

LIC. FRANCISCO CISCOMANI FREANER
Subsecretario de Educacin Bsica
ING. CARLOS ALBERTO TREVIO MEDINA
Subsecretario de Egresos
Secretara de Hacienda y Crdito Pblico
DR. FELIPE TIRADO SEGURA

Profesor titular. Programa de Investigacin Psicoeducativa
fes-Iztacala- unam
DRA. AURORA ELIZONDO HUERTA
Secretaria acadmica. Universidad Pedaggica Nacional
DR. ENRIQUE CABRERO MENDOZA

Presidente del Centro de Investigacin y Docencia Econmicas, a. c.
DRA. LEONOR CARIOLA HUERTA

Coordinadora tcnica. Sistema de Medicin de Calidad de la Educacin (simce)
DR. JOS PABLO REN ASOMOZA Y PALACIO

Director General del Centro de Investigacin y de Estudios Avanzados del ipn
DR. ROBERTO RODRGUEZ GMEZ GUERRA

Investigador titular. Instituto de Investigaciones Sociales.
Universidad Nacional Autnoma de Mxico
DRA. SYLVIA ORTEGA SALAZAR

Rectora de la Universidad Pedaggica Nacional
DR. VINICIO SURO PREZ
Director General del Instituto Mexicano del Petrleo
DR. EMILIO ZEBADA GONZLEZ
Presidente de la Fundacin para la Cultura del Maestro, a. c.
EDUARDO BOHRQUEZ LPEZ
Director General de Transparencia Mexicana
PROFR. JUAN DAZ DE LA TORRE
Secretario General del Comit Ejecutivo
Sindicato Nacional de Trabajadores de la Educacin
RAMN LEOPOLDO GARCA LPEZ
Presidente de la Federacin Nacional de Asociaciones
de Padres de Familia, A.C.
CONSUELO MENDOZA GARCA
Presidenta de la Unin Nacional de Padres de Familia, a. c.
LIC. ALBERTO ESPINOSA DESIGAUD
Presidente de la Comisin de Educacin del Sector Empresarial
DRA. YEGNY MARISOL SILVA LAYA
Presidente de Observatorio Ciudadano de la Educacin a. c.
Secretariado
MTRO. RAFAEL FREYRE MARTNEZ
Coordinador de rganos Desconcentrados y del Sector Paraestatal
Comisario
ING. RAFAEL MUOZ DE COTE SISNIEGA
Comisario Pblico Propietario de la Comisin de Educacin y Cultura
Secretara de la Funcin Pblica
DR. JOS FRANCISCO SOARES

Profesor del Departamento de Ciencias Aplicadas a la Educacin.
Universidad Federal de Minas Gerais, Faculdade de Educao.
Coordinador game (Grupo de Avaliao e Medidas Educacionais)
DRA. MA. DEL PILAR BAPTISTA LUCIO
Directora del Centro Anhuac de Investigacin y Servicios Educativos
de la Facultad de Educacin. Universidad Anhuac
DR. FERNANDO REIMERS
International Education Policy Program. Harvard Graduate School
of Education. Director
DR. SANTIAGO CUETO CABALLERO
Investigador principal del Grupo de Anlisis para el Desarrollo (Grade)
Lima, Per
MTRA. SYLVIA SCHMELKES DEL VALLE
Directora del Instituto de Investigaciones para el Desarrollo de la Educacin.
Universidad Iberoamericana
DRA. MARA DE IBARROLA NICOLN
Profesora-investigadora del Departamento de Investigaciones Educativas (die).
Centro de Investigacin y Estudios Avanzados del ipn.
Consejo Consultivo
LIC. ANA MARA ACEVES ESTRADA
Secretaria Tcnica
MTRA. MNICA OFELIA RUIZ CORONADO
Subdirectora de Evaluacin Acadmica
Aguascalientes
LIC. JUAN GLVEZ LUGO
Director de Evaluacin Educativa
Baja California
LIC. LUZ AMRICA GUZMN RODRGUEZ
Jefa del Departamento de Evaluacin y Seguimiento
Baja California Sur
PSIC. MIRIAM CECILIA LIRA VALENCIA
Coordinadora Estatal de Evaluacin Educativa
Campeche
PROFRA. MARA ELISA GMEZ GARCA
Directora del rea de Evaluacin
Coahuila
MTRO. ANDRS MAGAA MORENO
Subdirector de Evaluacin y Estadstica
Colima
MTRO. DAVID ARTURO AGUILAR RUIZ
Director General del Instituto de Evaluacin
Chiapas
PROFR. JESS JURADO LERMA
Director General de la Secretara de Educacin, Cultura y Deporte
Chihuahua
ACT. MARA DE LOURDES ATILANO MIRELES
Directora de Planeacin Educativa
Distrito Federal
PROFR. SERGIO ADAME CALDERN
Jefe del Departamento de Evaluacin Educativa
Durango
DR. RAFAEL DAZ GARCA
Director de Evaluacin
Guanajuato
LIC. SALVADOR VEGA AGUIRRE
Guerrero
DRA. YAZMN TLLEZ NOEGGERATH
Directora de Evaluacin de Procesos Educativos
Hidalgo
MTRA. MARA GUADALUPE BELTRN MEDINA
Directora General de Evaluacin Educativa
Jalisco
LIC. JOS LUIS ALBARRN
Encargado de la Oficina del Instituto de Evaluacin Educativa
Mxico
MTRA. NORMA ISELA ARREOLA
Directora de Evaluacin Educativa
Michoacn
MTRA. OLGA YOLANDA VALDZ ZERMEO

Jefa del Departamento de Evaluacin Educativa e Institucional
Morelos
MTRO. MANUEL OVALLE ORTZ
Jefe del Depto. de Evaluacin Educativa e Institucional
Nayarit
LIC. ROLANDO GUZMN FLORES
Director General de Evaluacin Educativa
Nuevo Len
MTRO. DANIEL PREZ MONTES
Coordinador General de Planeacin Educativa
Oaxaca
MTRO. JOS ARTURO RAMREZ Y LPEZ
Puebla
LIC. CSAR FELIPE OLVERA MONTAO
Director de Evaluacin de la Poltica Educativa
Quertaro
ING. JUAN CARLOS GAYTN GOAS
Quintana Roo
MTRA. SILVIA SOCORRO CORTS TORRES
Coordinadora General de Evaluacin y Seguimiento
San Luis Potos
LIC. TRINIDAD PEUELAS CASTRO
Coordinador Estatal de Evaluacin, Director de CEIDES
Sinaloa
ING. EDGAR HIRAM SALLARD
Director General
Sonora
PROFRA. MA. ENCARNACIN GUADALUPE TAMS CUETO
Directora de Seguimiento y Evaluacin
Tabasco
LIC. NOHEM GONZLEZ BARRAGN
Directora de Evaluacin
Tamaulipas
PROFR. PRISCILIANO MOLINA ATONAL
Tlaxcala
LIC. ARTURO FRANCISCO GUTIRREZ GNGORA
Titular de la Unidad de Planeacin, Evaluacin y Control Educativo
Veracruz
ING. GASPAR MIGUEL NGEL SALAZAR CATZIN
Director del Centro de Evaluacin Educativa
Yucatn
PROFRA. ROCO GUADALUPE MANCHA LUNA
Jefa del Departamento de Evaluacin Acadmica
Zacatecas
Se termin de imprimir en julio de 2012

en los talleres de iepsa . En su formacin se utilizaron
las familias tipogrficas: Avenir lt, Gill Sans,
Helvtica lt, Serlio lt, Trajan Pro
Edicin especial: 1 000 ejemplares

Una Decada

Hochgeladen von

Dokumentinformationen

Copyright

Verfügbare Formate

Dieses Dokument teilen

Dokument teilen oder einbetten

Freigabeoptionen

Stufen Sie dieses Dokument als nützlich ein?

Sind diese Inhalte unangemessen?

Copyright:

Verfügbare Formate

Una Decada

Hochgeladen von

Copyright:

Verfügbare Formate

U

MTRO. ANDRS EDUARDO SNCHEZ MOGUEL

LIC. RAQUEL AHUJA SNCHEZ

LIC. MARA ANTONIETA DAZ GUTIRREZ

MTRA. MAGDALENA DEL PILAR GONZLEZ MARTNEZ

MTRA. REBECA REYNOSO ANGULO

ING. ENZO MOLINO RAVETTO

LIC. JAVIER DE JESS NOYOLA DEL RO

LIC. CSAR JAVIER GMEZ TREVIO

Director de Asuntos Jurdicos

Director de Indicadores Educativos

DR. HCTOR VIRGILIO ROBLES VSQUEZ

Directora General Adjunta

DRA. ANNETTE SANTOS DEL REAL

El Informe 2012, INEE: una dcada de evaluacin,

INEE: UNA DCADA DE EVALUACIN

Primera edicin, 2012

Jos Ma. Velasco 101, Col. San Jos Insurgentes,

Alejandra Delgado Santovea

Mara Norma Ordua Chvez

Juan Carlos Rosas Ramrez

Archivo Iconogrfico inee

Tomadas de los Suplementos Este pas (s.f.)

El contenido, la presentacin, as como la disposicin en conjunto y de cada

16 El proyecto del inee

Felipe Martnez Rizo

24 El inee, a diez aos

Hctor Virgilio Robles Vsquez

36 En atencin a los diez aos

Teresa Bracho Gonzlez

27 Iniciamos nuestras actividades

55 El anlisis curricular y los Excale

Reyes Tamez Guerra

26 Con los primeros

Andrs Snchez Moguel

37 Colaboracin del inee

38 Desafos del inee

56 Los retos que enfrent el inee

Daniel scar Taccari Gilli

41 La evaluacin para todos

42 El inee y la definicin del rezago

44 La importancia del trabajo

45 La contribucin del inee

69 Mi experiencia en los comits

79 Quin necesita al inee?

80 Mxico sin pisa

94 La evaluacin de los recursos

97 Colaboracin entre evaluadores

112 El vnculo con las reas

116 El inee y las reas

Rafael Vidal Uribe

98 El estudio de las condiciones

Rosa Elena Patn Lpez

84 La aportacin del inee

101 Apoyando a la formacin

Leonor Cariola Huerta

Francisco Ernesto Reyes Jimnez

Jos Felipe Martnez Fernndez

Enrique Roca Cobo

102 La importancia de la evaluacin

120 Contribuciones del inee

124 Promover un mayor uso de los

88 El desarrollo e impacto de pisa

108 La revolucin de la evaluacin