Académique Documents
Professionnel Documents
Culture Documents
La evaluación de la secundaria
En La educación secundaria. Cambios y perspectivas, Oaxaca, Instituto Estatal de Educación Pública de Oaxaca, 1996, pp. 175-190.
* Asesor educativo, actual coordinador de los Exámenes Nacionales de Ingreso a la Educación Media Superior y del Programa Nacional de
Actualización de Educación Básica en Servicio de la SEP, México.
147
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 148
esenciales en un aspirante a ingresar en alguna todas las versiones del examen para permitir su
institución de nivel medio superior. equiparación, al mismo tiempo que incorporar
2. Se estructura con 120 reactivos (128 para el un número reducido de reactivos experimen-
caso de su aplicación en la zona metropolitana tales con el fin de incrementar progresivamente
de la Ciudad de México) de opción múltiple, el banco disponible.
organizados en dos áreas, una en la que se
miden habilidades cognoscitivas de orden El EXANI I es entonces un instrumento estanda-
genérico (verbal y matemática) y otra en la que rizado, de ejecución típica, diseñado para identi-
se miden conocimientos y habilidades específi- ficar desde los sustentantes menos aptos hasta los
cos, en ocho campos temáticos: Español, más aptos, diferenciándolos según las habilidades
Literatura, Historia, Geografía, Matemáticas, y conocimientos que poseen. Por ello, la escala
Física, Química y Biología (figura 1). 0-10 que todos conocemos en la educación básica
Historia 6 Historia 6 12 10
Literatura 6 Literatura 6 12 10
Geografía 6 Geografía 6 12 10
Física 6 Física 6 12 10
Química 6 Química 6 12 10
3. Se compone de reactivos cuyo rango de dificul- no tiene sentido en un examen de ejecución típica
tad varía entre 0.27 y 0.73, y que simultánea- como el EXANI I, en virtud de que éste ha sido dis-
mente alcanzan un índice de discriminación, eñado para que el promedio de la población se
en el grupo de mejores calificaciones, superior mantenga alrededor de 50% de aciertos, que 66%
a 30% respecto al grado de dificultad. de la misma se ubique entre 38 y 62% de aciertos
4. La organización en cada sección del examen y que una calificación de 90% o más sólo sea
deriva del cumplimiento de tres criterios: alcanzada, en teoría, por menos de 2% de la
a) Representar fielmente, mediante muestreo, población. Por tanto, en estricto sentido, en este exa-
los aprendizajes considerados esenciales res- men no se aprueba o se reprueba, ni permite tam-
pecto a esta situación de tránsito entre la secun- poco sacar conclusiones absolutas sobre el nivel
daria y la educación media superior. de aprovechamiento escolar alcanzado por la
b) Mantener en promedio un grado de dificultad de población participante; sin embargo, sí resulta una
0.50, incluyendo niveles fáciles, difíciles y medios. herramienta útil como parámetro común de com-
c) Incluir un número predeterminado de reac- paración de individuos y agrupamientos en el con-
tivos comunes y de reactivos equivalentes en texto nacional o regional a lo largo del tiempo,
148
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 149
siempre y cuando demuestre ser un instrumento respuestas correctas; es decir, por abajo de los
válido y confiable en sus diferentes aplica- 68 aciertos en 120 posibles. Contrastando estos
ciones. datos con los obtenidos en el periodo 1994-
1995 encontramos un comportamiento consis-
Algunos resultados significativos tente en la población participante, ya que en
este periodo se obtuvo una media nacional de
Respecto de los resultados obtenidos en los periodos aciertos de 41.74% con una dispersión de 13.9.
de aplicación 1994-1995 y 1995-1996, interesa des- Es decir, la diferencia bruta entre medias de
tacar aquí sólo algunos de los más significativos, ambos periodos es de sólo 1.98.
enfatizando que, por coincidencia, estos resultados Esta apreciación, asociada al índice de
permiten comparar al mismo tiempo el desempeño1 equivalencia obtenido (de 95%), al aplicar a los
de la primera generación formada con el nuevo plan dos conjuntos de datos la fórmula de trasla-
de estudios por asignaturas del nivel medio básico y pamiento de Tilton (donde un traslapamiento
la última generación egresada con los planes anterio- cercano a 100% indica que los instrumentos
res (figura 2). son prácticamente iguales), nos permite afirmar
30 30
20 20
GEO LIT QUI HIS BIO ESP HV FIS HM MA T
1. Lo primero que vale la pena destacar es que el que se aplicaron versiones equivalentes de un
promedio nacional de respuestas correctas, en mismo instrumento en los dos periodos de apli-
el periodo 1995-1996, fue de 43.77, con una cación considerados y, con ello, que es posible
desviación estándar de 13.3, lo que significa la comparabilidad de los datos obtenidos en
que en promedio nuestros egresados de secun- éstos.
daria del ciclo lectivo 1995-1996 contestaron 2. Si se observan los resultados en términos de las
de manera correcta 52 reactivos de los 120 secciones que componen el examen, encon-
posibles y que aproximadamente 80% de la tramos que en el periodo 1995-1996, las que
población se encuentra por abajo de 57% de presentan una media por abajo de la media
1 No incluye los puntajes de los aspirantes que presentaron el examen para ingresar a la UNAM.
149
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 150
nacional de este año (43.77) son: Matemáticas el factor explicativo más a la mano aquí, sobre el que
(con 39.65), Literatura (con 38.69), Biología (con habría que profundizar en su momento, consiste en
38.56) y Física (con 37.84); en contraste con lo recurrir al cambio más notorio entre una generación
encontrado en el periodo 1994-1995 donde las y otra: la modificación sufrida en los planes de estu-
secciones por abajo de la media de ese año dio de la educación secundaria, cuya primera gene-
(41.74) fueron: habilidad verbal (con 40.23), ración egresó justamente en el ciclo escolar 1994-
Física (con 39.23), habilidad matemática (con 1995. El nuevo plan de estudios, organizado por asig-
37.47) y Matemáticas (con 37.29). Puede naturas, enfatiza, por cierto, el desarrollo de habili-
decirse entonces que Física y Matemáticas son dades más que el aprendizaje mecánico de reglas y
las secciones que aparecen consistentemente procedimientos.
como las de menor porcentaje de respuestas En el caso del incremento señalado en la sección
correctas, como las más difíciles del examen, de habilidad matemática entre la primera y la segun-
en ambos periodos de aplicación. da aplicación, también se encontró un compor-
tamiento estadístico equivalente en los reactivos
Entre un año y otro, las diferencias encontradas comunes a ambos periodos de aplicación.
sólo resultan significativas para las secciones de: La media de respuestas correctas, en los reactivos
comunes, obtenida por los sustentantes del periodo
· Habilidad verbal, que incrementa 10.4 puntos 1995-1996 fue igual a 48, significativamente mayor a
porcentuales en el periodo 1995-1996. la obtenida por los aspirantes del periodo 1994-1995
· Habilidad matemática, que incrementa 9.7 que fue de 37. La explicación dada al incremento en
puntos porcentuales en el periodo 1995-1996. el porcentaje de respuestas correctas para el caso de
· Química, que incrementa 6.3 puntos porcen- la sección de habilidad verbal podría ser generaliza-
tuales en el periodo 1995-1996. ble para el incremento observado en la sección de
· Literatura, que disminuye 5.9 puntos porcen- habilidad matemática.
tuales en el periodo 1995-1996. En el caso de la sección de Literatura, el decre-
· Biología, que disminuye 4.6 puntos porcen- mento detectado en los puntajes del periodo 1995-
tuales en el periodo 1995-1996. 1996 se observa también en los reactivos comunes
de ambas aplicaciones. La media del periodo 1994-
Respecto de estas diferencias nos atrevemos a ade- 1995 en estos reactivos comunes fue de 39.8, mien-
lantar algunas posibles explicaciones, aunque de tras que la del periodo 1995-1996 fue de 35.7. En
carácter muy general: este caso, habría que señalar que en los planes de
Respecto a la diferencia señalada en la sección de estudio reformados de secundaria se le da una nueva
habilidad verbal, cabe destacar que el incremento en orientación al estudio de este campo disciplinario que,
el porcentaje de respuestas observado en el periodo bajo el rubro de recreación literaria, pretende que el
1995-1996, se encuentra también reflejado en el estudiante conozca y se familiarice con las obras y
comportamiento estadístico de los reactivos comunes el análisis literario, poniendo especial énfasis en la
de ambos periodos de aplicación (reactivos que, ya lectura de autores hispanoamericanos, mientras que
lo dijimos, se encuentran presentes en todas las ver- en el plan anterior se pretendía lograr en el estudiante
siones de EXANI I en 1994-1995 y 1995-1996); es un dominio más amplio y preciso en torno a corrientes
decir, los sustentantes del periodo 1995-1996 tuvie- y géneros literarios, autores y obras representativas.
ron un mejor desempeño en estos reactivos comunes Habría que añadir que esta sección presentó proble-
(media = 52) que los sustentantes del periodo 1994- mas de correlación con algunas otras secciones del
1995 (media = 48) lo que impide pensar en que sim- examen, lo mismo que de discriminación inversa en
plemente esta sección tuviera un nivel de dificultad algunos de sus reactivos (es decir, los contestaron
menor en el periodo 1995-1996. En nuestra opinión, correctamente con mayor frecuencia los alumnos de
150
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 151
más bajos puntajes), por lo que, en nuestra opinión, menor en los reactivos utilizados en el periodo
hay que hacer un estudio detallado del perfil de va- 1995-1996, respecto a los incluidos en las versiones
lidez de esta sección del examen e incluso replantear 1994-1995.
su permanencia como una sección independiente del Vamos ahora a referirnos brevemente a datos que
mismo. pueden ser del interés de los lectores. Éstos se cons-
En relación con las diferencias observadas en la truyen a partir del cruce de dos bases de datos: la
sección de Biología, el mejor desempeño de los alum- derivada de nuestra hoja de registro, que recoge infor-
nos egresados en el ciclo 1993-1994 se presenta, lo mación socioeconómica, cultural y educativa de los
mismo en la sección total que en los reactivos comunes aspirantes, con la resultante de la lectura y calificación
presentes, en todas las versiones de ambos periodos. de la hoja de respuestas del examen.
Para el periodo 1994-1995 se obtuvo una media en los Un primer cruce de variables que puede destacarse
reactivos comunes de 35.6 y para el 1995-1996 una de se refiere al puntaje obtenido en la prueba, con-
33.2. Una posible explicación al respecto podría siderando la escuela de procedencia de los aspirantes,
referirse al hecho de que, mientras que en el plan de según sean públicas o privadas. Lo primero que sobre-
estudios de secundaria anterior se enseñaban con- sale aquí es que el patrón de desempeño, en ambos
tenidos de esta disciplina en los tres años sucesivos del periodos de aplicación, para uno y otro caso de aspi-
ciclo, en el plan reformado sólo se estudia Biología en rantes, coincide plenamente; es decir, las secciones
los dos primeros años. difíciles, las de dificultad media y las fáciles, lo son
En referencia al incremento de respuestas correctas para los dos tipos de agrupaciones, aunque en propor-
en la sección de Química, no es posible proponer una ción diferente. Lo segundo es que, lo mismo que a
explicación tentativa similar a las presentadas con nivel global que a nivel específico de las secciones, en
anterioridad, en virtud de que la diferencia encontrada ambos periodos de aplicación, los egresados de
en las ejecuciones relacionadas con los reactivos secundarias privadas obtienen mejores puntajes que
comunes es incluso inversa a la encontrada en la sec- las públicas, destacando el hecho de que las diferen-
ción como totalidad; la media para el periodo 1995-1996 cias más grandes que se mantienen en uno y otro
fue de 48, mientras que para el periodo 1994-1995 fue periodo de aplicación se encuentran en las secciones
de 52. Dicho de otra manera, en apariencia tuvimos de Matemáticas (10.2, en 1995-1996 y 7.6 para
aquí un efecto de incremento del porcentaje de 1994-1995) y Español (9.8 en 1995-1996 y 8.8
respuestas correctas, derivado de un nivel de dificultad para 1994-1995) (figuras 3 y 4).
%
60
50
40
30
20
QUI. HM. HV. HIS. ESP. GEO. MA T. FIS. BIO. LIT.
Privada Pública
151
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 152
%
70
60
50
40
30
20
QUI. HM. HV. HIS. ESP. GEO. MA T. FIS. BIO. LIT.
Privada Pública
Un segundo cruce de variables, que resulta intere- por los egresados de escuelas secundarias técnicas,
sante mencionar, es el relacionado con el puntaje los de secundaria abierta y, por último, los de secun-
alcanzado en función del tipo o modalidad de secun- darias para trabajadores y los de telesecundarias. Esta
daria en que se formaron los aspirantes. El compara- superioridad de los egresados de secundarias gene-
tivo del porcentaje total de aciertos a nivel nacional rales está presente en todas las secciones del examen,
muestra que el porcentaje mayor de aciertos en excepto en la sección de historia, donde los jóvenes
ambos periodos de aplicación lo alcanzan los egre- de secundarias técnicas tuvieron un puntaje un poco
sados de escuelas secundarias generales, seguidos mayor (figuras 5 y 6).
50
1994
40 1995
30
20 ARA
GENERAL TÉCNICA ABIERTA PARA TELESE-
TRABAJADORES CUNDARIA
Ya era de esperarse, la escolaridad de los padres Otra variable de interés —que muestra una
juega un papel muy importante en el desempeño de relación positiva con el desempeño de los aspirantes
los aspirantes en el examen. En los dos periodos de apli- en el EXANI I— la constituye el nivel de ingreso mensual
cación comparados se ha observado que a mayor familiar. En el periodo 1994-1995 se observa en tér-
escolaridad, tanto del padre como de la madre del minos generales que, a mayor ingreso familiar mayor
aspirante, se obtiene un mayor porcentaje de porcentaje de aciertos, excepto en los casos de los as-
respuestas correctas en el examen (figuras 7 y 8.). pirantes que declararon ingresos mayores a los
152
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 153
%
55
50
45
40
35
30
25
20
POSGR. LIC. BACH. SEC. PRIM. ANALF.
COMPL. COMPL. COMPL. COMPL.
1994 1995
153
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 154
5 mil pesos, los cuales obtuvieron, en promedio, ape- tener ingresos cercanos a los 3 mil pesos, pues alcan-
nas un poco más de 39% global de aciertos; en el zan un porcentaje de aciertos menor en comparación
periodo 1995-1996 esta tendencia se mantiene, en lo con quienes declaran ingresos familiares de mil a 2
general, excepto el caso de los jóvenes que declaran mil pesos (figura 9.).
40
30
20
$ 500 $ 1 000 $ 2 000 $ 3 000 $ 4 000 $ 5 000
1994 1995
La edad de los aspirantes es un factor que mayor edad del sustentante menor porcentaje de
parece influir también de manera importante en el aciertos correctos, acentuándose este efecto en
rendimiento que éstos tienen en la prueba; aquí, materias como Matemáticas y Física (figuras
la relación se puede expresar señalando que a 10 y 11).
%
50
40 1995
1994
30
20
13 14 15 16 17 18 años
154
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 155
%
60
50
40
30
20
QUI. HV. HM. HIS. GEO. ESP. MAT. BIO. LIT. FIS.
13 15 17
14 16 18
Por último, me gustaría presentar un par de tablas Universidad Autónoma del estado, mientras que,
en las que podemos comparar los resultados de los para el caso del Estado de México, el incremento en
dos periodos de aplicación considerados, teniendo la población fue mucho mayor al pasar de 343 sus-
como punto de referencia la posición relativa de las tentantes a 53 853, en virtud de que en el periodo
diferentes entidades federativas, con base en el 1995 se extendió la aplicación del EXANI I a todos los
promedio porcentual de aciertos obtenido por los subsistemas públicos de educación media superior
sustentantes de cada entidad (figura 12.). del estado.
Lo primero que se hace evidente en este contraste Si se consideran las cinco últimas posiciones de
es que, en términos generales, las entidades las tablas, se observa que cuatro casos (Tabasco,
mantienen una posición equiparable de un año a Tlaxcala, Michoacán y Sinaloa) se ubican, en ambos
otro. Si se toman, por ejemplo, los diez primeros periodos de aplicación, en este mismo sector. El cam-
lugares de la tabla correspondiente al periodo 1995- bio en la ubicación relativa del estado de Guerrero
1996 y se comparan con los diez primeros de la tabla puede explicarse porque en el periodo 1994-1995 se
del periodo 1994-1995, se podrá observar que sólo aplicó el examen en los Centros de Estudio de Ba-
tres casos de los diez (Morelos, México y Gua- chillerato y el Colegio de Bachilleres, mientras que
najuato), no se encuentran presentes en la tabla del en 1995-1996 sólo se aplicó en los Centros de
periodo 1994-1995. En el caso de Guanajuato, se Estudio de Bachillerato; el caso de Morelos quedó
explica porque no hubo ninguna institución educati- explicado en el párrafo anterior.
va de este estado que aplicara el examen en el perio- Para concluir, queremos señalar que —en nuestra
do 1994-1995. En los casos de los estados de opinión— los datos aquí presentados permiten ver
Morelos y México (que en el periodo 1994-1995 se que el EXANI I puede ser una herramienta útil en el
encontraban por debajo de la media) su presencia amplio y complejo proceso de evaluación de la edu-
entre los diez mejores promedios puede atribuirse a cación secundaria a nivel nacional, aunque el
un incremento muy significativo de la población par- alcance y significado de la información que de él se de-
ticipante, lo mismo que al nivel de desempeño que riva debe interpretarse dentro de los márgenes que
estas nuevas capas de población aportan: en el esta- desde el propio diseño del instrumento se han
do de Morelos el incremento en la población fue de establecido, con el fin de evitar generalizaciones
50.2% al incorporar a los aspirantes a ingresar a la excesivas o interpretaciones equivocadas.
155
LEC/P-103-156.QX4.0 24/7/03 9:57 AM Page 156
Esperamos que los datos y las reflexiones expues- da, en el análisis de la educación secundaria de
tas en el presente trabajo colaboren, en alguna medi- nuestro país.
1994 1995
Jalisco 51.57 Jalisco 52.66
Colima 45.49 Chihuahua 51.62
Puebla 44.59 Puebla 50.67
Quintana Roo 44.59 San Luis Potosí 48.03
Distrito Federal 42.94 Baja California 47.92
Chihuahua 42.00 Morelos 47.32
San Luis Potosí 41.70 México 46.83
Aguascalientes 41.61 Guanajuato 46.70
Oaxaca 41.07 Aguascalientes 46.56
Baja California 40.89 Colima 45.31
Veracruz 40.88 Yucatán 44.35
Sonora 40.84 Oaxaca 44.22
Baja California Sur 40.70 Querétaro 44.05
Querétaro 39.71 Hidalgo 43.87
Durango 39.46 Chiapas 43.81
Chiapas 39.35 Veracruz 43.37
México 39.33 Quintana Roo 43.22
Tamaulipas 38.21 Campeche 43.19
Guerrero 38.11 Zacatecas 43.19
Campeche 37.71 Durango 42.73
Zacatecas 37.01 Sonora 42.62
Yucatán 36.89 Tamaulipas 42.32
Hidalgo 36.10 Distrito Federal 41.66
Tlaxcala 36.09 Baja California Sur 41.36
Sinaloa 35.02 Guerrero 40.95
Michoacán 33.22 Sinaloa 40.62
Tabasco 32.04 Tlaxcala 40.50
Morelos 30.87 Tabasco 37.72
Michoacán 37.33
156