La evaluacin de la educacin bsica

en Mxico: indicadores nacionales e

internacionales


Laura Zendejas Frutos
Huatulco, Oaxaca 4 Agosto 2011

Contenido
Por qu es tan importante la evaluacin educativa?

Cules son las pruebas nacionales e internacionales con
las que se evala la calidad de la educacin bsica en
Mxico?

Qu diferencias existen entre Enlace y Excale?

Cul es la proporcin de alumnos en el pas (y en Oaxaca)
que cuyo logro acadmico es insuficiente segn Excale?

Qu cantidad alumnos mexicanos de 15 aos (y cuntos
oaxaqueos) no muestran el dominio de las competencias
bsicas en Matemticas, Lectura y Ciencias de acuerdo con
la evaluacin de PISA?

A qu se ha comprometido Mxico (y Oaxaca?) para
alcanzar las Metas propuestas por la OEI para 2021?
La importancia de la evaluacin
Arturo de la Orden advierte que "la evaluacin, al
prescribir realmente los objetivos de la educacin
determina, en gran medida... lo que los alumnos aprenden
y cmo lo aprenden, lo que los profesores ensean y cmo
lo ensean, los contenidos y los mtodos; en otras
palabras, el producto y el proceso de la educacin...
quermoslo o no, de forma consciente o inconsciente, la
actividad educativa de alumnos y profesores est en algn
grado canalizada por la evaluacin" (1989).

En otras palabras, la evaluacin prescribe y decide de facto
el qu, cmo, por qu y cundo ensear. Y en ese sentido,
las decisiones que se hayan tomado sobre qu, cmo, por
qu y cundo evaluar.






Cules son las pruebas nacionales e
internacionales con las que se evala a la
calidad de la educacin bsica en Mxico?

Enlace: prueba interna, aplicada por la
Secretaria de Educacin Pblica (SEP).

Excale: prueba externa, realizada por el
Instituto Nacional para la Evaluacin de la
Educacin (INEE).

PISA: prueba internacional, organizada por
la Organizacin para la Cooperacin y
Desarrollo Econmicos (OCDE) cuya
aplicacin en Mxico est a cargo del INEE.
Qu diferencias hay entre Enlace y Excale?

Objetivos y alcances:

Enlace:
1) Evaluar el logro acadmico de todos los alumnos de tercero a
sexto grado de educacin primaria y de los tres grados de educacin
secundaria, de conformidad con los planes y programas de las
asignaturas de Espaol, Matemticas y Ciencias Naturales, aprobados
por la Secretara de Educacin Pblica (SEP), vigentes, oficiales y
obligatorios.
2) Tiene carcter diagnstico/informativo, no sirve para
certificar ni a estudiantes ni a escuelas o hacer ordenamientos.
3) Informacin disponible por estudiante. No se debe utilizar para
evaluar al sistema educativo.
Excale:
1) Conocer el logro educativo de los estudiantes en grados clave
(3 preescolar y primaria, 6 primaria y 3 secundaria) de acuerdo al
currculo, as como los factores que lo explican.
2) Tambin es diagnstico y ofrece elementos para emitir juicios de
valor con el objeto de apoyar a la toma de decisiones de autoridades
educativas y de la sociedad.
3) Contribuir a la rendicin de cuentas a la sociedad mexicana
sobre el estado que guarda el Sistema Educativo Nacional.

Caracterstica ENLACE Excale
1.Alineacin criterial Curricular Curricular
2.Mtodo primario de
escalamiento
TRI - Rasch TRI - Rasch
3.Grados a que se aplica 3 a 6 de
primaria
1 a 3 de
secundaria
3 preescolar
3 y 6 de primaria
3 de secundaria
4.Grupo de aplicacin Censo Muestra representativa a
nivel nacional y en
ocasiones estatal
5.Ciclo de aplicacin Anual Cada 4 aos
6.Tamao tpico de cada
escala
50-70 reactivos 100-150 reactivos


Comparacin entre Enlace y Excale (1)
Fuente: INEE, Direccin de Pruebas y Medicin, 2011.
Caracterstica ENLACE Excale
7. Escalas
utilizadas
Espaol y Matemticas;
adems, cada ao se
agrega un rea ms:
Ciencias (2008),
Formacin cvica y tica
(2009), Historia (2010)
y Geografa (2011)
Espaol y Matemticas en
preescolar. Adems, en
primaria y secundaria se
agregan Ciencias naturales
(Biologa en el caso de
secundaria) y Formacin
cvica y tica.
8. Velocidad de
retroalimentacin
3-4 meses 14 meses
9. Retroalimenta-
cin fundamental
A los alumnos, los
profesores, las escuelas
Al sistema educativo
nacional, al sistema
educativo estatal.
10.Control de la
aplicacin
Muy controlada a una
muestra, control bajo
en el resto de la
poblacin
Muy controlada
Comparacin entre Enlace y Excale (2)
Fuente: INEE, Direccin de Pruebas y Medicin, 2011.
Caracterstica ENLACE Excale
11.Fechas de
aplicacin
Abril Mayo o junio
12.Punto de vista del
evaluador
Interno, de
autorregulacin del
sistema
Externo, de
retroalimentacin al
sistema
13.Impacto
(consecuencias
tangibles en corto
plazo)
Alto Bajo
14.Las pruebas se
hacen pblicas?
S, tras cada
aplicacin
generalizada
No. Se liberan
lentamente los reactivos
desgastados que son
sustituidos (unos pocos
cada 4 aos).
Comparacin entre Enlace y Excale (3)
Fuente: INEE, Direccin de Pruebas y Medicin, 2011.

RESULTADOS DE
EXCALE
Espaol
Estrato escolar
6 de primaria
1
Estrato escolar
3 de secundaria
2005 2007 2005 2008
% % % %
Urbana pblica 13.2 10.6 General 29.7 34.7
Rural pblica 25.8* 20.5 Tcnica 31.1 33.7
Educacin indgena 47.3 42.4 Telesecundaria
51.1
50.1
Educacin privada 2.0 1.6 Privada 8.1* 11.9
Nacional 18.0 13.8 Nacional 32.7* 35.9
Matemticas
Estrato escolar
6 de primaria
1
Estrato escolar
3 de secundaria
2005 2007 2005 2008
% % % %
Urbana pblica 13.6 12.5 General 50.5 50.5
Rural pblica 23.7 19.9 Tcnica 52.0 54.0
Educacin indgena 43.2 37.4 Telesecundaria
62.1
62.1
Educacin privada 2.7 2.4 Privada 23.7 24.5
Nacional 17.4* 14.7 Nacional 51.1 51.9
Cuntos alumnos de educacin bsica obtienen logros insuficientes
en espaol y matemticas segn los Excale en 2005, 2007 y 2008?
Espaol 3 de
secundaria
2005 2007
46.1% 45.3%
Matemticas 3 de
secundaria
2005 2007
59.1% 57.4%
Oaxaca
* Significativamente
diferente entre
aplicaciones
1. En primaria todava no se puede realizar la comparacin estatal, pues el tamao de la muestra no permite esa desagregacin.


Espaol 6 de
primaria
2005 2009
23.0% n.a.
Matemticas 6
de primaria
2005 2009
20.4% n.a.
Espaol
Estrato escolar
6 de primaria

Estrato escolar
3 de
secundaria
2005 2007 2005 2008
% % % %
Urbana pblica 6.6 8.3 General 4.6 5.7
Rural pblica 2.2 3.4 Tcnica 4.5 6.0
Educacin indgena 0.5 0.6 Telesecundaria 1.2 1.4
Educacin privada 29.0 30.0 Privada 22.2 21.2
Nacional 6.6* 8.5 Nacional 5.3 6.1
Matemticas
Estrato escolar
6 de primaria
1
Estrato escolar
3 de
secundaria
2005 2007 2005 2008
% % % %
Urbana pblica 7.3 8.7 General 1.1 1.6
Rural pblica 2.9 4.0 Tcnica 0.9 1.7
Educacin indgena 0.6 0.9 Telesecundaria 0.5 0.9
Educacin privada 24.5 23.5 Privada 7.0 9.7
Nacional 6.9 8.4 Nacional 1.4 2.1
Cuntos estudiantes de educacin bsica alcanzan un desempeo avanzado en
espaol y matemticas de acuerdo a los Excale en 2005, 2007 y 2008?
Espaol 3 de
secundaria
2005 2007
1.7% 3.8%
Matemticas 3 de
secundaria
2005 2007
0.6% 1.0%
Oaxaca
Nota. En primaria no es posible realizar
la comparacin estatal, pues el diseo
de la muestra no permite esa
desagregacin.
* Significativamente diferente entre aplicaciones




Espaol 6 de
primaria
2005 2009
5.1% n.a.
Matemticas 3 de
primaria
2005 2009
7.1% n.a.
3 de preescolar
(2007)
3 de primaria
(2006)
6 de primaria
(2005)
% % % Estrato escolar %
Urbana pblica 7.4 23.5 13.2
Rural pblica 18.7 30.7 25.8 General 29.7
Educacin indgena n.a. 40.9 47.3 Tcnica 31.1
Cursos comunitarios 26.0 17.4 32.5 Telesecundaria 51.1
Educacin privada 1.3 8.1 2.0 Privada 8.1
Nacional 9.2 24.7 18.0 Nacional 32.7
3 de preescolar
(2007)
3 de primaria
(2006)
6 de primaria
(2005)
% % % Estrato escolar %
Urbana pblica 7.6 36.3 13.6
Rural pblica 16.4 51.9 23.7 General 50.5
Educacin indgena n.a. 72.2 43.2 Tcnica 52.0
Cursos comunitarios 21.8 35.3 28.2 Telesecundaria 62.1
Educacin privada 1.1 12.6 2.7 Privada 23.7
Nacional 8.7 39.6 17.4 Nacional 51.1
3 de secundaria (2005)
Estrato escolar
Estrato escolar
Matemticas
Espaol
3 de secundaria (2005)
Fuente: Backhoff, et al. (2006). El aprendizaje del Espaol y las Matemticas en la educacin bsica en Mxico. Sexto de Primaria y Tercero de Secundaria. Mxico, INEE, p. 97, estimaciones de la Direccin de
Pruebas y Medicin, 2006 y 2008 y estimaciones de la DIE del INEE, 2008.
Cul es la proporcin de alumnos con logro insuficiente?
(Excale de 3 Preescolar, 3 Primaria, 6 Primaria y 3 Secundaria)
Nivel de
logro
Qu indica?
Avanzado
Indica un dominio muy avanzado de conocimientos,
habilidades y destrezas escolares, que reflejan el
aprovechamiento mximo de lo previsto en el currculo.
Medio
Indica un dominio sustancial de conocimientos,
habilidades y destrezas escolares, que pone de
manifiesto un buen aprovechamiento de lo previsto en
el currculo.
Bsico
Indica un dominio elemental de conocimientos,
habilidades y destrezas escolares necesarios para
poder seguir progresando satisfactoriamente en la
asignatura.
Por debajo
del bsico
Indica carencias importantes en el dominio curricular
de los conocimientos, habilidades y destrezas
escolares, que expresan una limitacin para poder
seguir progresando satisfactoriamente en la asignatura.
a
c
u
m
u
l
a
b
l
e
s

Fuente: INEE, Direccin de Pruebas y Medicin, 2011.
Mapa parcial de reactivos del Excale-06/Espaol
Fuente: Backhoff, Andrade, Snchez y Peon (2008). Estudio comparativo del aprendizaje en sexto de primaria en Mxico
2005-2007: Espaol y Matemticas. Mxico, D.F.: INEE.
Mapa parcial de reactivos del Excale-06/Matemticas
Fuente: Backhoff, Andrade, Snchez y Peon (2008). Estudio comparativo del aprendizaje en sexto de primaria en Mxico 2005-2007: Espaol y Matemticas. Mxico, D.F.: INEE.

RESULTADOS DE
PISA
PISA*
Qu es PISA?
Es un estudio peridico (3 aos), en cada aplicacin se tiene un
rea de inters particular (lectura, matemticas y ciencias). Es
una evaluacin comparativa donde participan pases miembros
y no miembros de la OCDE, organizacin que lo promueve y
organiza.
Cul es su objetivo?
Determinar los niveles de competencia alcanzados por los
estudiantes de 15 aos en dichas reas. Estas competencias se
consideran claves para una participacin activa y plena en la
sociedad.
Qu mide PISA?
La capacidad de los estudiantes para usar los conocimientos y
habilidades en situaciones de la vida real. Es un buen resumen
de cmo el pas prepara a sus ciudadanos, pues se espera que
ellos sean capaces de extrapolar lo que se ha aprendido a lo
largo de la vida y puedan aplicarlo en el mundo real dentro de
una gran variedad de situaciones. No es curricular.
*Por sus siglas en ingls: Programme International for Students Assessment
Lectura Ciencias Matemticas
Definicin
La capacidad de un
individuo para
comprender, emplear e
interesarse en textos
escritos
La capacidad de un
individuo que tiene
conocimiento cientfico y
lo utiliza para identificar
temas, adquirir nuevos
conocimientos, explicar
fenmenos cientficos.
La capacidad de un
individuo para analizar,
razonar y comunicar de
forma eficaz a la vez de
plantear, resolver e
interpretar problemas
matemticos.
Contenido
Tipo de material de
lectura
-Continuo
-Discontinuo
-Mixto
-Mltiple
Conocimiento de la ciencia
(sistemas fsicos, vivos,
de la Tierra y el espacio,
tecnolgicos)
Conocimiento sobre la
ciencia (investigacin y
explicacin cientficas)
-Cantidad
-Espacio y forma
-Cambio y relaciones
-Probabilidad
Proceso
-Acceder y recuperar
-Integrar e interpretar
-Reflexionar y evaluar
-Complejo (textos
electrnicos)
-Identificar temas
cientficos
-Explicar cientficamente
fenmenos
-Usar evidencia cientfica

-Reproduccin
-Conexin
-Reflexin
Situacin
o contexto
-Personal
-Educativo
-Laboral
-Pblico
Situaciones de tipo
personal, social y global
en reas de aplicacin:
Salud, recursos naturales,
etctera.
-Personal
-Educativo
-Laboral
-Pblico
Resumen conceptual de las reas de evaluacin PISA 2009
Niveles de desempeo por debajo del bsico
Nivel 1a. Los alumnos
pueden localizar uno o ms
fragmentos independientes
de informacin explcita;
reconocen el tema principal
de un texto siempre que
est asociado con su
conocimiento cotidiano.
Nivel 1. Los estudiantes
son capaces de contestar
preguntas que implican
contextos familiares donde
toda la informacin
relevante est presente.
Nivel 1. Los estudiantes:
tienen un conocimiento
cientfico limitado que slo
es aplicable a pocas
situaciones familiares; dan
explicaciones cientficas
obvias que se obtiene
directamente de la
evidencia dada.
Nivel 1b. Los estudiantes
slo pueden localizar un
fragmento de informacin
explcita ubicada en un
lugar evidente dentro de un
texto corto.
Por debajo del nivel 1.
Los estudiantes son
incapaces de realizar las
tareas de matemticas ms
elementales que evala
PISA.
Por debajo del nivel 1.
Los alumnos corren el
riesgo de enfrentar
dificultades en su paso
inicial de la educacin al
trabajo y no poder
beneficiarse de nuevas
oportunidades educativas y
de aprendizaje a lo largo de
la vida.
Por debajo del nivel 1b.
Los estudiantes son
incapaces de realizar el tipo
de lectura ms bsico.
Fuente: Daz, Mara Antonieta y Flores, Gustavo (2010). Mxico en PISA 2009. Mxico, D.F., INEE.
Niveles de desempeo bsico y ms
Lectura Matemticas Ciencias
Nivel 6. Los estudiantes que
alcanzan este nivel son lectores
capaces de realizar con detalle y
precisin mltiples inferencias,
comparaciones y contrastes.
Nivel 6. Los estudiantes
conceptualizan, generalizan y
utilizan informacin basada en sus
investigaciones y en la modelacin
de situaciones de problemas
complejos.
Nivel 6. Los alumnos pueden:
identificar, explicar y aplicar el
conocimiento cientfico y
conocimiento sobre la ciencia en
una variedad de situaciones
complejas de la vida real.
Nivel 5. Los alumnos son capaces
de: localizar y organizar fragmentos
de informacin que no resultan
evidentes.
Nivel 5. Los estudiantes
desarrollan y trabajan con modelos
de situaciones complejas;
identifican lmites y especifican
suposiciones.
Nivel 5. Los alumnos: identifican
los componentes cientficos de
situaciones complejas de la vida;
aplican conceptos cientficos a esas
situaciones.
Nivel 4. Los estudiantes son
capaces de interpretar el significado
de los matices del lenguaje en una
parte del texto, considerndolo
como un todo.
Nivel 4. Los estudiantes trabajan
efectivamente con modelos
explcitos para situaciones
complejas concretas que implican
limitaciones o demandan la
realizacin de suposiciones.
Nivel 4. Los estudiantes trabajan
efectivamente con situaciones y
temas que les implique explicar un
fenmeno y que les requiera
realizar inferencias sobre el papel
de la ciencia y la tecnologa.
Nivel 3. Los alumnos son capaces
de ubicar fragmentos mltiples de
informacin, su relacin y su ajuste
a mltiples condiciones, vincular
distintas partes de un texto.
Nivel 3. Los estudiantes ejecutan
procedimientos descritos
claramente, incluyendo aquellos
que requieran decisiones
secuenciales.
Nivel 3. Los estudiantes pueden:
identificar claramente temas
cientficos descritos en una variedad
de contextos.
Nivel 2. Los alumnos son capaces
de localizar uno o ms fragmentos
de informacin que pueden inferirse
ajustndose a ciertas condiciones.
Nivel 2. Los estudiantes
interpretan y reconocen situaciones
en contextos que requieren
nicamente inferencias directas.
Nivel 2. Los estudiantes: tienen un
conocimiento cientfico adecuado
para proporcionar posibles
explicaciones con contextos
familiares; pueden llegar a
conclusiones basadas en
investigaciones simples.
Fuente: Daz, Mara Antonieta y Flores, Gustavo (2010). Mxico en PISA 2009. Mxico, D.F., INEE.
Objetivos y Metas del Mileneo
Objetivos del Milenio hacia el 2015, Meta 3C. Lograr que la
mayora de los estudiantes de educacin bsica alcance niveles de
aprendizaje satisfactorio en lenguaje y matemticas, conforme a
estndares y exmenes establecidos por un organismo
independiente de evaluacin, reduciendo a la mitad los alumnos en
los niveles insuficientes de competencia, segn las evaluaciones
nacionales
1
.
Nivel de logro esperado: Reducir en 50% el nmero de alumnos
que obtienen logro insuficiente de acuerdo a los resultados de
Excale.
Metas 2021, Meta General Quinta Mejorar la calidad de la educacin
y el currculo escolar; Meta especfica 10: Mejorar el nivel de
adquisicin de las competencias bsicas y de los conocimientos
fundamentales por parte de los alumnos. INDICADOR 13. Porcentaje
de alumnos con niveles satisfactorios de logro en competencias
bsicas en las pruebas nacionales e internacionales
2
.
Nivel de logro: Disminuir en al menos un 20% el nmero de
alumnos situados entre los dos niveles ms bajos de rendimiento
en PISA (15 aos). Y aumentar en la misma proporcin los
alumnos en los dos niveles ms altos en dichas pruebas.
1. INEE (2006). La calidad de la educacin bsica en Mxico. Informe anual. Mxico, D.F., INEE, pp. 250-251.
2. OEI (2010). 2021 Metas educativas: La educacin que queremos para los bicentenarios. Espaa: OEI.
Laura Elena Zendejas Frutos
Subdirectora de Indicadores Educativos
Jos Mara Velasco 101, 4 piso, Col. San Jos
Insurgentes, Delegacin Benito Jurez, CP
03900, Mxico D. F.
Tel: 5482-0900*1071
laura.zendejas@inee.edu.mx
www.inee.edu.mx


Contacto