Centro Nacional de

Evaluación para la
Educación Superior
CENEVAL
El Centro Nacional de Evaluación para
ucación Superior es una asociación c
n fines de lucro que quedó formalmen
nstituída el 28 de abril de 1994, como
ce constar en la escritura pública núm
036 pasada ante la fe del notario 49
Distrito Federal.
 SÓLO SE PUEDE MEJORAR
LO QUE SE PUEDE EVALUAR

En el terreno de la educación,
como en todas las actividades
humanas, la evaluación es el
proceso que permite valorar los
aciertos, reconocer las fallas,
detectar potencialidades y
planificar las acciones.
Contar con la información válida
A la fecha, el CENEVAL ha
realizado más de 15
millones de exámenes en
alrededor de 14 mil
aplicaciones en todas las
entidades federativas del
país.
Ha entregado a sus clientes
más de 15 millones de
reportes individuales e
institucionales y más de 70
Alrededor de 350 instituciones,
asociaciones y organismos
solicitan desde 1994 nuestros
programas de evaluación
educativa y profesional.
El CENEVAL es la única institución que
cuenta con instrumentos de evaluación
estandarizados, diseñados para la
pobla-
ción mexicana y con alcance nacional
Dr. Salvador Malo A.
Director General
OBJETIVO CENTRAL DEL CENEVAL

EL CENEVAL TIENE POR OBJETO

CONTRIBUIR A MEJORAR LA CALIDAD DE
LA EDUCACIÓN MEDIA SUPERIOR Y
SUPERIOR, MEDIANTE EVALUACIONES
EXTERNAS DE LOS APRENDIZAJES
LOGRADOS EN CUALQUIER ETAPA DE
LOS PROCESOS EDUCATIVOS, DE
MANERA INDEPENDIENTE Y ADICIONAL A
LAS QUE LLEVAN LAS PROPIAS
INSTITUCIONES EDUCATIVAS.
 DISEÑAR SISTEMAS, DISEÑAR, ELABORAR
INSTRUMENTOS, PROCEDIMIENTOS Y APLICAR EXAMENES
Y ESTRATEGIAS DE EVALUACIÓN DE EVALUACIÓN

FUNCIONES DEL
CENEVAL

PROMOVER UNA CULTURA DESARROLLAR E IMPULSAR

PROPIA DE LA EVALUACIÓN ACTIVIDADES RELACIONADAS
CON SU OBJETIVO
 EXÁMENES QUE APLICA EL
CENEVAL

EXÁMENES NACIONALES DE INGRESO

(EXANI I, II Y III)

EXÁMENES GENERALES PARA EL EGRESO

DE LAS LICENCIATURAS (EGEL)

EXÁMENES DE CERTIFICACIÓN (ACUERDO 286)

EXÁMENES GENERALES PARA EL EGRESO

DE TÉCNICO SUPERIOR (EGETSU)
 COORDINACIONES DE
EXÁMENES

• EXANIS: I, II Y III
• CIENCIAS SOCIALES Y
HUMANIDADES
• CIENCIAS DE LA VIDA Y DE LA
CONDUCTA
• INGENIERÍAS Y TECNOLÓGICAS
 Cobertura de los EGEL
Contaduría 1994 INFO-COMP 1999

Medicina Veterinaria y Zootecnia 1994 Psicología 1999

Enfermería 1995 Ciencias Agronómicas 1999

Administración 1996 Ing. Industrial 2000

Ing. Civil 1996 Pedagogía – Ciencias de la Educación 2000

Turismo 1996 Derecho 2000

Odontología 1996 Ing. Mecánica – Eléctrica 2001

Medicina General 1997 Ing. Mecánica 2001

Ciencias Farmacéuticas (QFB) 1997 Química 2003

Ing. Eléctrica 1998 Mercadotecnia. 2002

Ing. Electrónica 1998 Comercio y Neg. Int 2002

Ing.Química 1999 Economía 2005

EXAMEN GENERAL
PARA EL EGRESO DE
LA LICENCIATURA
(EGEL)
 Q
¿ ué es un Examen
General para el Egreso de la
Licenciatura?

Es un instrumento diseñado
exprofeso para medir y evaluar
conocimientos y algunas habilidades
cognitivas de los egresados del nivel
de educación superior en diferentes
áreas disciplinarias
Características
del EGEL
 EGEL
Cuentan con una Construidos
guía de examen por expertos

Pueden ser una Características Exámenes

alternativa de estandarizados
titulación

Se actualizan y Formato de
perfeccionan elección múltiple
permanentemente
 Q
¿ uiénes participan
en la Construcción del
EGEL?
 Consejo Técnico

Comité Académico
Coordinación
del
EGEL
Especialistas de Áreas

Direcciones de Área del

CENEVAL
 El papel del Consejo Técnico en el EGEL
Consejo
Coordinación
Técnico

Investigació
Órgano
n y análisis
Normativo
Genera
propuestas y Instancia en donde
ejecuta acuerdos se lleva a cabo el
consenso

Diseño del examen

 El papel del Consejo Técnico en el EGEL

El Consejo Técnico con base en la investigación

realizada por la coordinación aprueba:

a. los propósitos del examen

b. el perfil referencial de validez
c. la tabla de contenidos y especificaciones
d. condiciones generales del examen

y define los ajustes necesarios del examen

 Secuencia en la
elaboración de los
EGEL
 Especificación de la finalidad

Evaluar los resultados logrados por los estudiantes

que egresan de las instituciones de educación
superior, contribuyendo al desempeño y
mejoramiento académico de los estudiantes y sus
instituciones

Se tiene el propósito de determinar si los estudiantes

satisfacen o no un criterio fijado previamente por el
grupo de expertos que diseña el instrumento
 Especificación de la finalidad

Metodología de evaluación

Determinación del
Perfil Referencial
El Perfil Referencial de Validez (PRV) es
de Validez
la descripción de la población a medir,
define los resultados del aprendizaje que
se esperan encontrar en un individuo; es
decir, delimitar cuáles serán las conductas
específicas a determinar, y qué se pretende
que un sujeto (egresado) tenga al final de
un proceso de enseñanza aprendizaje.
 Elementos metodológicos de un
Perfil Referencial de Validez (PRV)

1. Población
2. Objeto de estudio

3. Definición de conocimientos y dominio de la

disciplina
a. Conocimientos
b. Habilidades
c. Actitudes y valores
 Especificación de la finalidad

Metodología de evaluación

Determinación del Delimitación de

Perfil Referencial los Contenidos
de Validez Esenciales
(Tabla de especificaciones)

Es una relación por coordenadas que liga los productos del
aprendizaje que se desean, con el contenido del curso que se utiliza
para provocar estas transformaciones del comportamiento.
Permite obtener un producto acabado con las características
específicas.
En el uso de quien elabora las pruebas, le suministrará una mayor
seguridad de que las pruebas que diseñe habrán de medir los
productos del aprendizaje y el contenido a medir esté equilibrado.
 Elaboración de la tabla de especificaciones
Definición de contenidos: estructura del examen por áreas a medir.

Ponderación de áreas y secciones.

Definir el nivel de medición del conocimiento: tipología taxonómica

•Reactivos de Ensayo o Abiertos

• Reactivos de Respuesta Corta
o Completamiento
Definir el tipo de reactivos a utilizar
•Reactivos de Falso-Verdadero
•Reactivos de Aparejamiento
•Reactivos
Reactivos de
de Opción
Opción Múltiple
Múltiple
 Compr e
Conoci -

Análisis
Contenido del curso

mientos

Aplica -

Total
nsión

ción
1) Concepto de núm ero 6 4 10
2) Conceptos fundam entales de 4 4 2 10
aritm ética
3) Descripciones cuantitativas 2 3 3 2 10
4) Leyes de los gases 3 2 2 3 10
5) Aerodinám ica 1 2 3 4 10
6) Teoría cinética de la m ateria 4 4 2 10
7) Teoría del átom o 1 2 4 3 10
8) Electricidad y com bustión 1 6 3 10
9) Electrostática y m agnetism o 2 2 3 3 10
10) Electricidad y la naturaleza de 1 1 3 5 10
la m ateria

TOTAL 25 20 30 25 100
 Especificación de la finalidad

Metodología de evaluación

Determinación del Delimitación de Selección de los

Perfil Referencial los Contenidos Niveles
de Validez Esenciales Taxonómicos

Conocimientos
Taxonomía de

Comprensión
Bloom

Aplicación
Analisis
Sintesis
Evaluación
 Especificación de la finalidad

Metodología de evaluación

Determinación del Delimitación de Selección de los

Perfil Referencial los Contenidos Niveles
de Validez Esenciales Taxonómicos

CRITERIO
Punto de referencia de lo que“debe
saber y saber hacer” el egresado
 Elaboración de Reactivos

Validación Validación de
Técnica Contenido

Prueba Piloto

Validación Estadística

Banco de Reactivos

Ensamble del Examen

 Características de un examen

 VALIDEZ.- La prueba mide lo que pretende medir

 CONFIABILIDAD.- La prueba tiene precisión
 OBJETIVIDAD.- La prueba conduce a
mediciones independientes del evaluador o del
sujeto
 Evaluación criterial
 Comprobar el rendimiento de los alumnos basado en la
apreciación del grado en que el egresado ha cubierto los
objetivos de enseñanza de una disciplina. Se efectúa en
función de las realizaciones de cada alumno respecto al
perfil referencial de validez del egresado, determinado en
función de los atributos que debe poseer para iniciar la
práctica profesional
 Es la especificación de un conjunto de conductas
terminales dentro de un área del conocimiento
perfectamente definida, y un punto de corte o nivel
mínimo, que refleja el dominio o no de los objetivos de
aprendizaje propios de esa disciplina.
 Las conductas que el sustentante del examen debe
manifestar, enmarcadas dentro de una área del
conocimiento perfectamente definida, constituye el
criterio, es decir el punto de referencia de lo que “debe
saber y saber hacer...
 Tipos de aprendizaje

D E C
L A P R R A O T CI V E O D A I MC ET IN T T U A D
s a b e r q su a é b e r h a s c a e b r e r s e

H e c h o sP r o c e d i m A i e c n t it t o u s d e
C o n c e p t E o ss t r a t é g i Va sa l o r e s
P r i n c i p i o T s é c n i c a s É t i c a
D e s t r e z a s

Solución de problemas
Pensamiento crítico
Creatividad
 Conocimiento declarativo

1. HECHOS

2. DATOS

3. REGLAS O
PRINCIPIOS Causa-efecto
Relación entre conceptos
Leyes de probabilidad
Axiomas
 Conocimiento procedimental
Secuencia de actos mentales o psicomotores
que producen un resultado

Conocimiento actitudinales
Estado interno que influye o modifica la
selección Individual hacia un objeto o evento
 Taxonomias
HABILIDADES INTELECTUALES
INFORMACIÓN VERBAL
DESTREZAS COGNOSCITIVAS
DESTREZAS MOTORAS
ACTITUDES

DOMINIO COGNOSCITIVO
DOMINIO AFECTIVO
DOMINIO PSICOMOTOR
SABER QUÉ
SABER HACER
SABER SER
 Taxonomia de Bloom
(dominio cognoscitivo)

NIVELES VERBOS
1. CONOCIMIENTOS DEFINIR
(RECORDAR, INFORMAR)
IDENTIFICAR
LISTAR
2. COMPRENSIÓN
DESCRIBIR
(EXPLICAR EL SIGNIFICADO EXPRESAR
DE LA INFORMACIÓN) DISTINGUIR
 Taxonomia de Bloom
(dominio cognoscitivo)

NIVELES VERBOS
3. APLICACIÓN DETERMINAR
(USAR LA INFORMACIÓN PREPARAR
EN SITUACIONES NUEVAS) DESARROLLAR

4. ANÁLISIS SEÑALAR
DISTINGUIR
(SEPARAR LA INFORMACIÓN
EN SUS PARTES Y
COMPARAR
DISTINGUIRLA)
 Taxonomia de Bloom

NIVELES VERBOS
5. SÍNTESIS
CREAR
(UNIR LAS PARTES DE
LA INFORMACIÓN PARA FORMAR
DISEÑAR
UN TODO NUEVO) ORGANIZAR
.

6. EVALUACIÓN
(JUZGAR EL VALOR DE
CRITICAR
LA INFORMACIÓN: COMPROBAR
IDEAS, MATERIALES O
FENÓMENOS)
SELECCIONAR
.
NOTA: SE DEBEN VINCULAR LOS OBJETIVOS DEL APRENDIZAJE CON EL PERFIL
DEL EGRESADO.
 Conocimientos

 SUPONE EVOCACIÓN (RECUERDO) DE

INFORMACIÓN

• Conocimientos específicos de los términos, de

hechos específicos.
 Conocimientos relacionados con la formas y
medios y secuencias, categorías, criterios,
metodología.

 Conocimientos universales y abstracciones:

principios y generalizaciones, teorías y
estructuras.
 Comprensión

 REPRESENTA EL NIVEL MÁS BAJO DEL

ENTENDIMIENTO

 TRADUCCIÓN

 INTERPRETACIÓN

 EXTRAPOLACIÓN
 Aplicación

 LA UTILIZACIÓN DE ABSTRACCIONES EN
SITUACIONES PARTICULARES CONCRETAS
 Determinar que principios son apropiados
 Reformular un problema
 Especificar límites
 Reconocer excepciones
 Explicar nuevos fenómenos
 Predecir lo que sucederá mediante principios
pertinentes
 Determinar o justificar cursos de acción o
decisión
 Análisis

 SUBDIVISIÓN DE UNA COMUNICACIÓN

EN SUS ELEMENTOS O PARTES
CONSTITUTIVAS
 Elementos
 Relaciones
 Principios organizados
 Sintesis

 JUNTAR LAS PARTES Y ELEMENTOS

PARA CONSTRUIR UN TODO

 Producción de una comunicación única

 Producción de un plan de acción
 Deducción de un conjunto de relaciones
abstractas
 Evaluación

 JUICIOS ACERCA DEL VALOR DEL

MATERIAL Y DE LOS MÉTODOS PARA
DETERMINAR PROPÓSITOS
 Emitir juicios en función de evidencia
interna
 Emitir juicios en función de criterios
externos
 Examenes CENEVAL

Prueba objetiva
 El sustentante elige la respuesta entre dos o más
opciones.
 Contiene amplia variedad de preguntas, que
exigen respuesta única.
 Aborda más aspectos del conocimiento a evaluar.
 El sustentante tiene que leer, pensar y elegir.
 Es difícil de elaborar, pero fácil de calificar.
 Permite la validación estadística.
 La calidad depende de la habilidad de quien la diseña.
 Ventajas de examenes de opción multiple

Los resultados no dependen del criterio del evaluador.

Pueden medir diferentes niveles del conocimiento.

Permiten cubrir más aspectos del conocimiento a

medir.
Son exámenes estandarizados.

Permiten alta fidelidad de resultados, su perfecciona-

miento y actualización.
Se pueden construir diferentes versiones equiparables.
Son difíciles de elaborar, pero fáciles de
calificar.
 Elaboración de reactivos

La base principal de los reactivos

de opción múltiple, son los
contenidos, así como el nivel de
amplitud y profundidad (nivel
taxonómico) establecido en la
TABLA DE ESPECIFICACIONES
correspondiente
 Banco Banco de Reactivos
de Reactivos
Perfil Referencial de Validez (BR)

Tabla de Especificaciones

Elaboración
de reactivos
RED DE ASESORES
EXTERNOS

Piloteo

Validación Técnica
y de contenido

Banco de reactivos
 Conformar el Banco de Reactivos
Primera Formulación por Redactores

Revisión de contenido y de redacción del reactivo por otros externos

• Grado de dificultad de los reactivos

• Discriminación de los reactivos
Estudio Piloto Calibración de reactivos • Ajuste (Fit analysis)
• Análisis de distractores
• Análisis de azar.

Integración de reactivos aceptados al Banco General

Modificación de reactivos medianamente aceptados.
Eliminación de reactivos no aceptados.
 Red de Asesores Externos
¿Qué es?
Especialistas responsables de la formulación, revisión y
actualización de reactivos.
Integrantes
Son seleccionados posterior a un curso taller de elaboración de
reactivos que destacan por su habilidad en los temas del examen y
por su creatividad en la formulación de reactivos.
Dinámica
Colaborarán con el responsable de cada examen al elaborar
reactivos, podrán ser enviados vía internet por medio de una
carpeta individualizada; el sistema BRAE (Banco de Reactivos de
Acceso Externo) cuenta con claves de acceso personalizadas al
Sistema Integral de Información (intranet) que garantizan la
seguridad del examen. http://brae.ceneval.edu.mx
 Estudio Piloto del Instrumento.
• Obtener la confiabilidad general
• Obtener la confiabilidad de cada sección del Instrumento.
Análisis de Confiabilidad • Obtener el error de medida
• Determinar longitud del instrumento y sus partes

Análisis de Validez • Obtener la Validez de Constructo y otras evidencias de validez

(contenido y criterio)

Ajustar el Instrumento
• Integrar versión maestra y hacer reordenamientos

•Preparar versiones con reactivos comunes (ancla) y reactivos diferentes con

Ensamblar versión definitiva grado de dificultad similares

• Versiones equivalentes con la totalidad de los reactivos (a partir de la Tabla de

Especificaciones)

• Para Pruebas con Norma con referencia a Se establece una media técnica de 1000 en
50% de aciertos (o 0 lógitos) y una estándar de
una población o curva teórica (EXANI) 100 en 16.67% (o 0.7 lógitos).

• Para Pruebas por Norma con referencia a
Construcción de Escalas la población que sustenta el examen
(Primeros EGEL)
•Para Pruebas Criteriales ( EGEL actuales)
• A priori
Se establece el puntaje de 1000 en la media
poblacional y la desviación estándar poblacional
define 100 puntos..
En función de un análisis del dominio de
conocimientos o habilidades, el Consejo
Técnico establece los valores que servirán para
indicar un rendimiento satisfactorio (1000
puntos) y un alto rendimiento (1150 puntos o
más). Esto da origen a escalas que fluctúan en
el intervalo 700 a 1300 puntos, pero que
internamente son diferentes para cada prueba.

Establecimiento de los Puntos de Corte

•A posteriori
 Calibración de los reactivos de la aplicación.
Del Instrumento (en porcentajes)
Obtener el Grado de Dificultad
Del Reactivo (en lógitos)

Poder Discriminativo

Relación discriminativa

Revisión de redacción del reactivo

≥1 <1 Revisar el comportamiento de sus opciones

Obtener la discriminación de los reactivos
Cotejo contra la Tabla de Validez

Aprobado Revisado Eliminado

Corregido

Discriminación criterial
Pruebas Referidas a Criterio Correlación punto-biserial
Probabilidad de respuestas por reactivo ≥ 0.2

Modelos basados en TRI El ajuste se hace por medio de aproximaciones

Ajuste (Fit analysis) sucesivas con ayuda de un programa de cómputo
Modelos basados en análisis de Rash que realiza el ajuste en forma automática.

Global (opcional
cuando el dictamen de •El residuo estandarizado
Los valores que se emplean para
análisis es positivo) medir el ajuste al modelo son
Análisis de Distractores •El residuo cuadrático medio o
Local (obligatorio OUTFIT
cuando el dictamen es
•El promedio ponderado de los
desfavorable)
residuos estandarizados o INFIT
Análisis de Azar
•Valor de ajuste X 2 (Chi cuadrada)
 Integración, igualación y estabilidad de versiones
A partir de la Tabla de Especificaciones
Integración
Puede incluir reactivos de prueba.

1 Versión 2 o más Versiones

Verificar equivalencia utilizando el programa de calificación

Equivalentes Diferentes
Tomar las puntuaciones
obtenidas directamente Proceder a hacer su igualación
por el sustentante en forma matemática

Determinar las medias y desviaciones estándar de las versiones

Por medio de una prueba de hipótesis de diferencia de medias

establecer si la diferencia es significativa entre dichas versiones

No existen diferencias significativas Si existen diferencias significativas

Hacer una igualación

 Preparación de la Aplicación

Definición de Sedes

Capacitación de aplicadores y supervisores para la aplicación

Entrega de materiales

Registro de los aspirantes al examen por parte de la Institución

Llenado de la Hoja de Registro del CENEVAL por parte de los aspirantes.

Entrega de Guías de Estudio del Examen

Envío de las Hojas de Registro al CENEVAL

 Estudio de la versión utilizada.
•Confiabilidad general (Alpha de Cronbach)

Análisis de Confiabilidad •Confiabilidad por tema o área de examen

Usar fórmula de corrección de Livingston RCR
•Confiabilidad Criterial
Se puede usar otra fórmula de
confiabilidad o consistencia interna si se
justifica su uso

•Error estándar para la media

•Error estándar para la mediana
Análisis de Error de Medida
•Error estándar de medida
•Error de medida de cada sujeto
•Proporciones de reactivos especificadas
en la Tabla de Validez Lo decide el
Consejo Técnico
Longitud del instrumento y de las secciones Está en función de •Tiempo disponible para la aplicación

•Error de medida deseable para dictaminar

Se dispone de
el nivel de desempeño o dominio del
un modelo
sustentante
matemático

Verificar que se cumplan las especificaciones de la Tabla de validez de Contenido

De Contenido
Por Jueces

Consistencia entre el Revisión lógica (Jueces)

Análisis de Validez De Constructo Perfil Referencial de
Análisis de consistencia interna
Validez y la Prueba

Predictiva Análisis de la relación de la prueba con variables externas

 Bibliografía
 BROWN, Frederick. Principios de la medición en
psicología y educación. México: Manual Moderno,
2000.

 CARREÑO, Fernando. Enfoques y principios teóricos

de la evaluación. México: Trillas, 1990.

 FERMÍN, Manuel. La evaluación, los exámenes y las

calificaciones. Argentina: Kapelusz, 1992.

 RODRÍGUEZ, Héctor. Evaluación en el aula. México:

Trillas, 1992.
Coordinación del Área de las Ciencias
Sociales y de las Humanidades
Equipo de trabajo:
Juan Pablo Arroyo Ortiz
Rosaura Castañeda Ramírez
Ricardo Hernández Muñoz
Catalina Betancourt Correa