Académique Documents
Professionnel Documents
Culture Documents
¿Cómo saber
si aprenden
nuestros
estudiantes?
◗ Presentación
Contenido
◗ El Sistema Nacional de
Evaluación Educativa: una
estructura en construcción
◗ ¿Qué son los Excale?
◗ ¿Cuáles son los
objetivos de los Excale? Presentación
◗ ¿Cuáles son
las características
de los Excale?
◗ ¿Qué factores influyen
¿C uál es el desempeño de nuestros estudiantes en lectura y matemá-
ticas? ¿Poseen los conocimientos y habilidades que deberían tener
de acuerdo con el plan de estudios? ¿Cómo saber si aprenden nues-
tros estudiantes? Responder a estas preguntas no es sencillo. Menos aún si se
en el aprendizaje?:
Cuestionario de contexto considera que México cuenta con un sistema educativo nacional, 32 subsiste-
◗ Diseño, construcción
mas educativos estatales, más de 24.2 millones de alumnos y 205 mil escuelas,
y validación públicas y privadas, en educación básica (ciclo escolar 2003-2004), en regiones
de los Excale con diferentes niveles de desarrollo. Los Exámenes de la Calidad y el Logro
◗ Calendario Educativos (Excale), aplicados por primera vez en junio de 2005, cuyos resulta-
de evaluación dos se conocerán en 2006, buscan responder a estas preguntas. Diseñados bajo
del aprendizaje la coordinación del Instituto Nacional para la Evaluación de la Educación
◗ ¿Qué evalúan (INEE), los Excale evalúan la calidad de la educación básica en México y ayudan
los Excale? a identificar sus fortalezas y debilidades. En este documento, preparado por
◗ ¿Evaluar para qué?: la Fundación Este País, se abordan las principales características, objetivos y
la importancia de contar componentes de los Excale, una nueva generación de pruebas nacionales para
con pruebas nacionales conocer qué saben y pueden aprender nuestros estudiantes.
l o s E x á m enes de l a C a l i d a d y e l L o g r o E d u c at i v o s de l I N E E ¿ Q u é s o n y c ó m o se c o ns t r u y en ?
L
as pruebas, exámenes e instrumentos de evalua- Sistema Nacional de Evaluación Educativa (SNEE). Los
ción que se aplican en México en los distintos ni- Exámenes de la Calidad y el Logro Educativos (Excale),
veles educativos del Sistema Educativo Nacional cuyo diseño y aplicación coordina el Instituto Nacional
(SEN), pretenden integrarse a una estructura compuesta para la Evaluación de la Educación (INEE), son parte de
por leyes y normas, instancias gubernamentales e ins- este complejo esquema que permite conocer la calidad
trumentos de política pública que podrían constituir un de la educación que se imparte en México.
Sistema
Educativo
El Gobierno Federal Plan Nacional
define el de Desarrollo Nacional
Organismos
especializados en
evaluación de
educación superior
La Secretaría Programa Nacional (p.ej. Ceneval)
elabora el
de Educación Pública de Educación
Educación
Superior
Evalúa la
Educación
El Instituto Nacional Política Nacional de Media
para la Evaluación propone la Educación Media
Evaluación Educativa Superior
de la Educación Superior y Superior
Grupos técnicos
Evalúa la Educación Educación Básica
(uno por cada Excale)
Básica y Media Superior
Este es un diagrama que presen- Educativo Nacional, de forma in- Los planes y programas de estudio
ta algunos de los principales actores dependiente a las evaluaciones que definen los objetivos curriculares que
y componentes del futuro Sistema realicen las entidades federativas son el referente de la evaluación edu-
Nacional de Evaluación Educativa según sus leyes. cativa. Entre los organismos especiali-
(SNEE) y simplifica algunos de los El Instituto Nacional para la zados en la evaluación de la educación
vínculos que existen entre ellos. Evaluación de la Educación (INEE) superior se encuentra el Centro Na-
El SNEE que se está configuran- propone la Política Nacional de Eva- cional de Evaluación de la Educación
do, está integrado por las áreas de luación Educativa (PNEE), que debe Superior, A.C. (Ceneval). Otros de los
evaluación de la Secretaría de Edu- contribuir al cumplimiento de las sistemas en desarrollo son el Sistema
cación Pública (SEP), de las secre- metas del Sistema Educativo Nacio- Nacional de Información Educativa
tarías de educación de las entidades nal, según se establece en la Consti- y el Sistema Nacional de Indicadores
federativas y otros organismos de tución Política de los Estados Unidos Educativos que resguardan y ofrecen
evaluación autorizados, públicos y Mexicanos, la LGE, el Plan Nacional información sobre el aprendizaje de los
privados. La Ley General de Educa- de Desarrollo 2001-2006 (PND) y el alumnos y apoyan al gobierno y maes-
ción (LGE) establece que la SEP es Programa Nacional de Educación tros en la planeación y formulación de
la responsable de evaluar el Sistema 2001-2006 (PNE). proyectos educativos.
(2)
¿Qué son los Exámenes de la ¿Evaluación
de alumnos o del
L
lúan la calidad de
os Exámenes de la Calidad y el además de continuar con la apli- la educación del
Logro Educativos (Excale) son cación de pruebas a estudiantes de Sistema Educa-
pruebas diseñadas por el Insti- 6º de primaria y 3º de secundaria. tivo Nacional (SEN) y no de
tuto Nacional para la Evaluación de Las pruebas están diseñadas para estudiantes y escuelas en
la Educación que se aplican a alum- aplicarse a los alumnos cada cua- lo individual. Los Excale son
nos que cursan la educación básica tro años. aplicados a muestras de es-
y media superior en México para Los Excale son el resultado de tudiantes. Las escuelas que
conocer qué es lo que efectivamente una extensa revisión que realizó participan son seleccionadas
para ser representativas de
saben (conocimientos) y pueden ha- el INEE sobre el conocimiento
las entidades federativas,
cer (habilidades) en del país y de los estratos y
distintas disciplinas,
a nivel estatal y na- Los Excale son una nueva las modalidades del SEN.
En 2005, la muestra fue de
cional, y por estrato y
modalidad educativa.
generación de pruebas para alrededor de 2,800 escuelas
donde se imparte 6º de pri-
Los Excale fue-
ron aplicados por
evaluar la calidad del SEN maria y 2,400 que imparten
3º de secundaria. En ambos
primera vez en ju- casos se aplicaron los Excale
a 110 mil estudiantes, aproxi-
nio de 2005 a una muestra repre- acumulado en materia de evalua-
madamente.
sentativa de estudiantes de 6º de ción y el análisis de resultados de En cada escuela parti-
primaria y 3º de secundaria. En experiencias de evaluación educa- cipante sólo un grupo de
años próximos se aplicarán prue- tiva en México y otros países en estudiantes, seleccionado de
bas diseñadas con la metodología las últimas décadas. Por tanto, los manera aleatoria, responde
de los Excale a alumnos de 3º de Excale son una nueva generación el examen. Cada alumno
primaria (2006), 3º de preescolar de pruebas para evaluar la calidad responde sólo una parte
(2007) y 3º de bachillerato (2008), del SEN. de todas las preguntas que
comprende el Excale, pero
en conjunto todos los estu-
E
ntre los principales objetivos de los Exáme-
nes de la Calidad y el Logro Educativos se
encuentran los siguientes:
Contar con una visión general sobre lo que los
estudiantes aprenden durante su escolarización
formal en los niveles básico y medio superior.
Identificar las fortalezas y limitaciones de los
planes y programas de estudio y del Sistema Edu-
cativo Nacional, tomando en cuenta los factores
socioculturales y económicos del entorno de los
alumnos y sus escuelas.
Comparar y dar seguimiento a lo que aprenden
los estudiantes en distintas disciplinas durante su
permanencia en la educación formal.
Mejorar la evaluación a gran escala de las disci-
plinas que se evalúan: matemáticas, español, cien-
cias naturales y ciencias sociales.
(3)
l o s E x á m enes de l a C a l i d a d y e l L o g r o E d u c at i v o s de l I N E E ¿ Q u é s o n y c ó m o se c o ns t r u y en ?
A
partir del análisis realizado por el Instituto Nacional para la Evalua-
ción de la Educación y un grupo de expertos sobre las experiencias en
evaluación educativa en México y en otros países, se estableció que
los Exámenes de la Calidad y el Logro Educativos debían tener tres caracterís-
ticas básicas: criteriales, apegados al currículo y matriciales.
1| Criterial
Evalúan a profundidad el domi- 2| apegados al currículo
Los Excale evalúan el aprendi- 3| matricial
Las preguntas que inclu-
yen los Excale buscan evaluar
nio de los estudiantes en una disci- zaje adquirido por los alumnos res-
plina. Los resultados se interpretan a pecto de lo que se busca que apren- todos los contenidos relevantes
partir de la cantidad y tipo de mate- dan según lo establecen los planes y que establece el currículo. Pero
rial que el estudiante sabe y maneja programas de estudio (currículo for- los estudiantes sólo pueden res-
del universo total de conocimientos mal). Es decir, se evalúa qué tanto el ponder de forma eficiente, en
y habilidades evaluados. aprendizaje de los alumnos se acerca un límite de tiempo, una par-
o se aleja del currículo formal. te de todas las preguntas de la
prueba.
Conformación de cuadernillos de los Excale Por ello, se forman conjun-
tos o bloques de preguntas. Los
(diseño matricial)
diferentes bloques se combinan
y se forman cuadernillos de
a f e m preguntas que responde cada
Bloques alumno. Cada estudiante con-
de preguntas b c g h j i n c testa sólo una parte de todas
las preguntas del Excale, pero
1 2 3 4 en conjunto todos los estu-
diantes responden todas las
preguntas.
Para los Excale de Español y
1+2 1+3 1+4 2+3 2+4 3+4 Matemáticas de 6º de primaria
aplicados en 2005, por ejemplo,
Cuadernillos
se formaron 28 cuadernillos di-
ferentes.
Alumnos
Fuente: Elaborado por Fundación Este País con base en INEE, Plan General de Evaluación del Aprendizaje.
Proyectos Nacionales e Internacionales, 2005.
¿Qué es el currículo?
El currículo está formado por el plan y los programas de estudios de un curso, grado, ciclo o
nivel educativo. Además del contenido de las asignaturas, el currículo incluye las competencias
que se desea alcancen los alumnos, los métodos de enseñanza, los criterios y procedimientos de
evaluación y los materiales de apoyo didáctico, entre otros.
En un sentido más amplio, el currículo comprende también aspectos no explícitos que intervienen en
el aprendizaje: concepciones y valores implícitos en los planes y programas de estudio, las actitudes, y los
preconceptos y prejuicios que el maestro inculca a los alumnos en su interacción con ellos, entre otros.
(4)
¿Qué factores influyen en el aprendizaje?:
Cuestionario de contexto
L
os resultados del aprendizaje afectan el rendimiento escolar. La ¿Qué es evaluación?
de los alumnos medidos a par- información de los cuestionarios
La evalua-
tir de los Excale permiten sa- de contexto se obtiene mediante la ción educativa
ber los conocimientos y habilidades aplicación de tres tipos de cuestio- consiste en
de los alumnos y qué tan diferentes narios dirigidos a grupos específi- comparar el
son de lo que deberían saber, según cos de estudiantes, maestros y di- resultado de una medición,
el currículo formal. Pero una buena rectores de escuelas. una prueba, por ejemplo,
evaluación educativa debe contem- Los cuestionarios de contexto se con un punto de referencia
plar también los factores del contexto construyen siguiendo una metodolo- que establece lo que los
sociocultural y económico que influ- gía en la que participan investigado- alumnos deberían saber, el
currículo, por ejemplo. Si
yen, favorable o desfavorablemente, res del INEE y un cuerpo colegiado
se aplica una prueba para
en el desempeño de los alumnos y en de expertos externos. Estos cuestio- medir el aprendizaje de
la calidad de su aprendizaje. narios indagan las características de un grupo de alumnos, se
Para conocer dichos factores, de los estudiantes, docentes y escuelas, piensa que esto es una eva-
forma simultánea a la aplicación la distribución de los recursos eco- luación, pero no es así. La
de los Excale, el Instituto Nacional nómicos entre diferentes tipos de prueba sólo permite medir
para la Evaluación de la Educación estudiantes, las prácticas docentes el aprendizaje.
(INEE) aplica cuestionarios de con- más eficaces y el tipo de apoyo fami- Evaluar es emitir un jui-
texto, cuyo objetivo es identificar liar que fomenta el logro académico, cio como resultado de com-
parar una realidad empírica
los aspectos más importantes que entre otros aspectos.
(el resultado de una prueba)
con un parámetro normati-
Una buena evaluación educativa vo previamente definido (el
resultado deseado en una
debe contemplar los factores de prueba). Esta comparación
permite saber si el apren-
contexto sociocultural y económico dizaje es satisfactorio o
insatisfactorio.
... e influyen
Currículo formal Currículo logrado
en... Lo que los alumnos Lo que los alumnos
deben saber efectivamente saben
Fuente: Elaborado por Fundación Este País con base en INEE, Plan General de Evaluación del Aprendizaje. Proyectos Nacionales e Internacionales, 2005.
(5)
l o s E x á m enes de l a C a l i d a d y e l L o g r o E d u c at i v o s de l I N E E ¿ Q u é s o n y c ó m o se c o ns t r u y en ?
E
l proceso de diseño, construcción y validación de los Exámenes de la Calidad y el
Logro Educativos se divide en 7 fases y 16 etapas. La fase de Planeación general es
común a todos los Excale, mientras que las fases 2 a la 7 se llevan a cabo de forma
independiente para cada uno de los Excale que se aplican. Las fases 2 a la 7 tienen una
duración aproximada de 18 meses, desde el diseño de las pruebas hasta su validación.
En los diagramas que se presentan en esta y las siguientes páginas se resaltan las etapas
y principales actividades de cada fase y los principales productos y resultados que se
generan en cada etapa, la mayoría de los cuales son insumos para las siguientes etapas.
(6)
fase ii Estructuración de los Excale
Productos
El INEE Los Comités Académicos diseñan las
Etapa 4 capacita a pruebas: analizan el currículo de cada Tabla de
Diseño los Comités asignatura a evaluar y definen qué se contenidos
de las pruebas Académicos debe evaluar en los Excale (conocimien- de cada prueba
(uno por Excale) tos y habilidades) y su justificación
> fase IV
Coordinación y asesoría
INEE
La Dirección de Pruebas y Medi-
ción (DPM) del INEE es la instancia
encargada de coordinar todos los
procesos de diseño, construcción y Dirección de Pruebas
validación de los Excale. y Medición
Además, se conforman grupos técnicos por
cada Excale, integrados por personal de la DPM, Asesores
que se encargan de dar orden metodológico a en Medición
todos los procesos.
La DPM cuenta con dos grupos de asesores,
Asesores
en medición y en validación. en Validación
Los asesores en medición hacen un marco
de referencia de los Excale para darles uniformi-
dad y orden y los asesores en validación aseguran Grupos técnicos
la validez de las interpretaciones de resultados. (uno por cada Excale)
(7)
l o s E x á m enes de l a C a l i d a d y e l L o g r o E d u c at i v o s de l I N E E ¿ Q u é s o n y c ó m o se c o ns t r u y en ?
A cada cuadernillo
Etapa 10 (formas) con bloques Se imprimen los cuadernillos Cuestionarios
Edición, armado de preguntas se agrega de los Excale
e impresión de el cuestionario impresos
pruebas Excale de contexto
> fase V
> fase VI
(8)
fase VI Análisis e interpretación de los resultados
Productos
Reinicia
la Fase II
de los Excale
del siguiente
año
(9)
l o s E x á m enes de l a C a l i d a d y e l L o g r o E d u c at i v o s de l I N E E ¿ Q u é s o n y c ó m o se c o ns t r u y en ?
T
ener conocimiento de lo que aprenden nues- El programa de evaluación está construido con el pro-
tros estudiantes es una tarea permanente. La pósito de evaluar:
complejidad y costo del proceso de evaluación • El aprendizaje de los estudiantes de una generación
requieren además de una planeación adecuada y racio- que cursan un grado y nivel educativo en un año y
nal. Es así que el INEE contempla un programa de eva- comparar sus niveles de aprendizaje con estudiantes
luación para la aplicación de los Excale y otras evalua- de generaciones siguientes.
ciones nacionales e internacionales que inicia en 2005, • La evolución del aprendizaje de una misma generación
primer año de aplicación de los Excale, y continúa hasta de estudiantes en su paso por el sistema educativo,
el año 2016. desde el 3º de preescolar hasta el 3º de bachillerato.
Nota:
E Excale de Español LLECE Laboratorio Latinoamericano de
M Excale de Matemáticas Evaluación de la Calidad de la
Educación (evaluación en
N Excale de Ciencias Naturales
Lenguaje y Matemáticas en
S Excale de Ciencias Sociales alumnos de 3º y 4º grados de
PISA Pruebas del Programa primaria)
para la Evaluación Internacional
de Estudiantes (evaluación en
Lectura, Matemáticas, Ciencias Fuente: INEE, Plan General de Evaluación
y Solución de problemas a del Aprendizaje. Proyectos Nacionales e
jóvenes de 15 años de edad) Internacionales. Excale, Exámenes de la
Calidad y el Logro Educativos, 2005.
(10)
¿Qué evalúan los Excale?
E
n junio de 2005 se aplicaron por primera ocasión
los Exámenes de la Calidad y el Logro Educati-
vos del INEE a alumnos de 6º de primaria y 3º
de secundaria. Las pruebas se aplicaron a una muestra
de alrededor de 2,800 escuelas donde se imparte 6º
de primaria y 2,400 que imparten 3º de secundaria, y
sus resultados se darán a conocer en 2006. En ambos
casos los Excale se aplicaron a alrededor de 110 mil
estudiantes. Las disciplinas que se evaluaron en am-
bos grados fueron Español y Matemáticas.
6° de primaria
Los números, sus
Números naturales, fraccionarios y decimales
relaciones y operaciones
Medición Longitudes, áreas, volúmenes, peso y tiempo
Geometría Ubicación espacial, figuras y cuerpos geométricos
Matemáticas Tratamiento Organización de la información en tablas, diagramas,
de la información gráficas de barras y pictogramas
Identificación de la mayor o menor probabilidades de
Predicción y azar
eventos
Procesos de cambio Tablas de variación proporcional y cálculo de porcentajes
(11)
l o s E x á m enes de l a C a l i d a d y e l L o g r o E d u c at i v o s de l I N E E ¿ Q u é s o n y c ó m o se c o ns t r u y en ?
E
l primer paso para mejorar la aún necesitamos desarrollar y los ◗ Las políticas educativas nacionales
educación es evaluar su cali- desaf íos que debemos enfrentar. y estatales.
dad. Para tener la escuela y el Las pruebas nacionales, como los ◗ Los planes y programas de estudio
sistema escolar que queremos, que Exámenes de la Calidad y el Logro y los libros de texto.
prepare a los estudiantes para parti- Educativos, son un instrumento que ◗ Las prácticas pedagógicas.
cipar con éxito en la vida productiva permite medir el nivel de aprendiza- ◗ La administración y gestión esco-
y desarrolle habilidades para aplicar je de los alumnos para evaluar la cali- lares, la formación y actualización
los conocimientos efectivamente ad- dad del Sistema Educativo Nacional. de los maestros.
quiridos, es necesario medir y eva- El diseño y aplicación de los Ex- ◗ El conocimiento de la sociedad so-
luar el aprendizaje de los alumnos cale es por tanto el primer y funda- bre la calidad de la educación que se
para identificar las capacidades que mental paso para mejorar: imparte en el país.
Consejo Directivo
Presidente
Presidente de la Junta Directiva Reyes Tamez Guerra Federico Reyes Heroles
Presidente del Consejo Técnico Carlos Muñoz Izquierdo Consejeros
Rosa María Rubalcava
Fernando Serrano Migallón
Estructura Operativa
Director Ejecutivo
Director General Felipe Martínez Rizo Eduardo A. Bohórquez
Director General Adjunto Rafael Vidal Uribe Coordinación Académica
Director de Indicadores Educativos Héctor Robles Vásquez Roberto Castellanos C.
(12)