GUAS

Orientaciones para el examen de Estado de calidad de la educacin superior SABER PRO (ECAES)

PRUEBA DE COMPETENCIAS GENRICAS

Orientaciones para el examen de Estado de calidad de la educacin superior SABER PRO (ECAES)

PRUEBA DE COMPETENCIAS GENRICAS

Presidente de la Repblica Juan Manuel Santos Caldern Ministra de Educacin Nacional Mara Fernanda Campo Viceministro de Educacin Superior Gabriel Burgos Mantilla

Directora General Margarita Pea Borrero Secretaria General Gioconda Pia Elles Director de Evaluacin Julin Patricio Mario Von Hildebrand Director de Produccin y Operaciones Francisco Ernesto Reyes Jimnez Director de Tecnologa Adolfo Serrano Martnez Jefe de la Oficina Asesora de Comunicaciones y Mercadeo Ana Mara Uribe Gonzlez Subdirectora de Diseo de Instrumentos Flor Patricia Pedraza Daza Subdirectora de Produccin de Instrumentos Claudia Luca Senz Blanco Diseo Giovanni Camacho Solorza ISBN de la versin electrnica: 978-958-11-0538-0 Bogot, D.C., segunda edicin, mayo de 2011

GUAS

Contenido
Presentacin ............................................................................................................................................7 El examen ...............................................................................................................................................9 Prueba de comunicacin escrita .....................................................................................................10 Prueba de solucin de problemas ...................................................................................................11 Prueba de pensamiento crtico ........................................................................................................13 Prueba de entendimiento interpersonal ..........................................................................................14 Prueba de comprensin lectora.......................................................................................................15 Prueba de ingls ..............................................................................................................................16

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

GUAS

Presentacin
La Ley 1324 de julio 13 de 20091, estableci, entre otros aspectos, que el Ministerio de Educacin Nacional, deber cumplir funciones de inspeccin y vigilancia y, adems, proporcionar informacin para el mejoramiento de la calidad de la educacin, mediante la aplicacin de Exmenes de Estado. stos a su vez, son responsabilidad del Instituto Colombiano para la Evaluacin de la Educacin - ICFES-. Entre los exmenes de Estado se encuentra el dirigido a evaluar oficialmente la educacin formal impartida a quienes terminan los programas de pregrado en las distintas instituciones de educacin superior. La presentacin de estos exmenes es requisito indispensable para obtener el ttulo respectivo. Por su parte el Decreto 3963 de Octubre 14 de 20092, defini el examen de Estado de calidad de la educacin superior, como un instrumento estandarizado para la evaluacin externa de la calidad de la educacin superior. En el decreto se estableci que sern objeto de evaluacin, entre otras, las competencias de los estudiantes que estn prximos a culminar los distintos programas de pregrado, en la medida en que stas puedan ser valoradas con exmenes externos de carcter masivo, incluyendo aquellas genricas que son necesarias para el adecuado desempeo profesional o acadmico independientemente del programa que hayan cursado. Las competencias genricas que se van desarrollando gradualmente en los distintos niveles de la educacin formal, desde la bsica hasta la educacin superior, y que se espera se consoliden en este ltimo nivel, resultan fundamentales para el desempeo de los futuros profesionales. Estas competencias se desarrollan entonces, mediante la interrelacin entre la educacin disciplinar, la educacin general y las habilidades que los estudiantes han desarrollado y que traen a la educacin superior3. Se trata de competencias transversales, que aunque se desarrollen a partir de contextos especficos, pueden ser transferidas a otros.

1 2 3

Consulte el texto completo de la Ley 1324 de julio de 2009, en la pgina web del ICFES. Consulte el texto completo del Decreto 3963 de octubre de 2009 en la pgina web del ICFES. En: Klein, S., Benjamin, R., y Shavelson, R. y Bolus, R (2008). The Collegiate Learning Assessment. Facts and Fantasies. Evaluation Review. http://online.sagepub.com

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

La habilidad para reconocer diferentes planteamientos crticos y su coherencia, la adecuada articulacin y expresin de las ideas por escrito, la capacidad de comunicarse en una segunda lengua, la capacidad para analizar y utilizar informacin para resolver problemas son algunas de ellas. Con el propsito de avanzar en el proceso de evaluacin de competencias genricas en el pas, el ICFES durante el primer semestre de 2009, realiz en coordinacin con el Consejo Australiano para la Investigacin Educativa ACER- un estudio orientado a determinar la pertinencia de evaluar este tipo de competencias en educacin superior, obteniendo resultados positivos en los distintos programas incluidos. Como resultado de este estudio y de la experiencia acumulada por el ICFES en la aplicacin de pruebas de comprensin lectora e ingls en los ECAES, se conform un examen constituido por un grupo de pruebas que fueron validadas y que permitirn obtener informacin ms amplia sobre el desempeo de los estudiantes colombianos que presenten el examen durante el 2010. Las competencias genricas que sern evaluadas en el presente ao son las siguientes: comunicacin escrita, ingls, comprensin lectora, solucin de problemas, pensamiento crtico y entendimiento interpersonal. A continuacin se presenta una descripcin general de las pruebas que conforman el examen de Estado de calidad de la educacin superior y en un documento independiente encontrar algunos ejemplos de preguntas que esperamos proporcionen la informacin bsica necesaria para abordar las pruebas de una manera adecuada.

GUAS

El examen
OBJETIVOS
El Decreto 3963 de octubre de 2009, define los siguientes objetivos para el examen de calidad de la educacin superior: a) Comprobar el grado de desarrollo de las competencias de los estudiantes prximos a culminar los programas acadmicos de pregrado que ofrecen las instituciones de educacin superior. b) Producir indicadores de valor agregado de la educacin superior en relacin con el nivel de competencias de quienes ingresan a este nivel; proporcionar informacin para la comparacin entre programas, instituciones y metodologas, y mostrar su evolucin en el tiempo. c) Servir de fuente de informacin para la construccin de indicadores de evaluacin de la calidad de los programas e instituciones de educacin superior y del servicio pblico educativo, que fomenten la cualificacin de los procesos institucionales y la formulacin de polticas, y soporten el proceso de toma de decisiones en todos los rdenes y componentes del sistema educativo.

POBLACIN OBJETIVO
El artculo 4 del Decreto 3963 de 2009, establece que: Es responsabilidad de las instituciones de educacin superior realizar a travs del SNIES o de cualquier otro mecanismo que para tal efecto establezca el ICFES, el reporte de la totalidad de los estudiantes que hayan aprobado por lo menos el 75% de los crditos acadmicos del programa correspondiente o que tengan previsto graduarse en el ao siguiente. Cada uno de los estudiantes reportados deber realizar el proceso de inscripcin directamente o a travs de la respectiva institucin educativa y presentarse a la prueba. Igualmente los graduados de programas acadmicos de pregrado podrn inscribirse de manera independiente para presentar el examen de Estado de calidad de la educacin superior de conformidad con los trminos y procedimientos que el ICFES establezca para dicho efecto.

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

QU Y CMO SE EVALA
Las pruebas de competencias genricas que sern objeto de evaluacin, con su nmero de preguntas y el tiempo disponible para responderlas, es el siguiente:
Estructura del examen PRUEBAS GENRICAS Comunicacin escrita Solucin de problemas Pensamiento crtico Entendimiento interpersonal Comprensin lectora Ingls 15 Preguntas 40 preguntas 4 horas 30 minutos 93 preguntas 3 horas 50 minutos NMERO DE PREGUNTAS Un escrito TIEMPO 40 minutos

PRUEBA DE COMUNICACIN ESCRITA

Qu se evala
La prueba se enfoca en la competencia para comunicar ideas por escrito referidas a un tema dado. Cada estudiante deber elaborar un escrito argumentativo a partir del tema planteado. El escrito argumentativo se califica teniendo en cuenta los siguientes criterios: Qu tan persuasivos son el anlisis y la argumentacin presentados en el escrito. Qu tan bien estructurado est el argumento y cmo lo exprese. Dependiendo de la calidad del escrito cada evaluado ser ubicado en uno de los siguientes niveles de desempeo:

10

GUAS

Intencin y propsito

NIVEL I No hay una respuesta definida al tema.

Incoherente. Vago y verboso. Desorganizado. Desarticulado.

NIVEL II Respuesta adecuada al tema propuesto.

NIVEL III Respuesta elaborada al tema propuesto.

Estructura y organizacin Manejo del Lenguaje

Organizado, tiene alguna Organizado, con partes estructuracin. integradas.

Manejo muy limitado de Manejo apropiado de las Manejo de las convenciones de la las convenciones, de las convenciones. lengua. Estilo apropiado reglas. Leble, comunica con y consistente. claridad.

Cmo se evala
Como se anunci anteriormente a cada evaluado se le asignar un tema para que elabore el escrito argumentativo.

PRUEBA DE SOLUCIN DE PROBLEMAS5

Qu se evala
Esta prueba evala la competencia para interpretar, analizar y utilizar informacin para solucionar problemas de tipo no especializado. La prueba de solucin de problemas contempla los siguientes aspectos: Identificar, entender y enunciar el problema de manera diferente. Identificar y analizar informacin relevante del problema. Representar aspectos clave del problema. Reorganizar, sintetizar y aplicar informacin relevante al problema. Conceptualizar/generar/identificar la solucin del problema. Evaluar las estrategias de solucin y sus resultados.

ACER Australian Council for Educational Research. Derechos reservados ACER 2003. Traduccin y adaptacin Instituto Colombiano para la Evaluacin de la Educacin - ICFES.

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

11

Con base en sus resultados los evaluados sern ubicados en uno de los siguientes niveles de desempeo, as: NIVEL 1 Utiliza informacin estructurada de forma simple.
Identificar problemas bsicos y deducciones directas.

Anlisis y clasificacin de informacin

NIVEL 2 Analiza y clasifica informacin de manera lgica.

Identifica y hace deducciones en problemas de relaciones y patrones estndar. Analiza y reorganiza patrones presentados de manera estndar. Identifica relaciones con pocas variables.

NIVEL 3 Analiza y clasifica informacin de manera profunda y sistemtica.

Identifica e interpreta problemas de relaciones complejas.

Procesamiento y reorganizacin

Procesa y reorganiza datos. Identifica relaciones de dos variables.

Analiza y sintetiza datos complejos. Realiza generalizaciones abstractas con diversas variables. Aplica estrategias para solucionar problemas de relaciones abstractas y complejas y varios pasos y condiciones. Evala las soluciones a esos problemas.

Aplicacin de la informacin

Informacin estructurada Asla informacin clave para resolver problemas de forma simple. bien definidos que Problemas bien definidos requieren pocos pasos. de hasta 2 pasos. Evala las soluciones a Evala las soluciones a esos problemas. esos problemas.

Nivel Bsico.

Habilidades numricas

Desempeo adecuado Alto nivel de en problemas rutinarios, desempeo numrico no especializados. para problemas no rutinarios, no especializados.

Cmo se evala
La evaluacin se realizar mediante preguntas de seleccin mltiple.

12

GUAS

PRUEBA DE PENSAMIENTO CRTICO6

Qu se evala
La prueba de pensamiento crtico se centra en la habilidad de analizar y evaluar proposiciones y textos que presentan puntos de vista similares a los que los evaluados encontraran en el mundo real. La prueba de pensamiento crtico contempla los siguientes aspectos: Comprensin (contenido y puntos de vista del escritor o del interlocutor). Anlisis (identificacin de lneas de razonamiento, evidencia, conclusiones, argumentos). Identificacin de deficiencias en argumentos: inconsistencias lgicas, supuestos infundados, consecuencias no intencionadas, recursos retricos distorsionantes, falsas analogas, etctera. Evaluacin (credibilidad y validez de la evidencia, credibilidad de lneas de razonamiento, validez de argumentos, solidez de las conclusiones, etctera). Con base en sus resultados los evaluados sern ubicados en uno de tres niveles de desempeo, as: NIVEL 1 Deteccin de significados y relaciones Identificacin y anlisis de razonamientos Evaluacin de credibilidad y validez de argumentos
Realiza deducciones vlidas sobre las relaciones explcitas.

NIVEL 2
Realiza deducciones vlidas sobre las relaciones implcitas.

NIVEL 3
Realiza deducciones profundas y convincentes sobre las relaciones implcitas y perspicaces. Lneas de razonamiento, inconsistencias lgicas y otras deficiencias sutiles o complejas. Evidencias o argumentos complejos y sutiles. Generacin de criterios ajustados de evaluacin segn necesidades.

Lneas principales, evidencias e inconsistencias lgicas bsicas.

Lneas de razonamiento, inconsistencias lgicas y otras deficiencias moderadamente complejas. Argumentos moderadamente complejos relacionados con criterios de evaluacin implcitos.

Argumentos relacionados con criterios establecidos explcitamente.

Cmo se evala
La evaluacin se realizar mediante preguntas de seleccin mltiple.

ACER Australian Council for Educational Research. Derechos reservados ACER 2003. Traduccin y adaptacin Instituto Colombiano para la Evaluacin de la Educacin - ICFES.

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

13

PRUEBA DE ENTENDIMIENTO INTERPERSONAL7

Qu se evala
La prueba de entendimiento interpersonal se enfoca en el anlisis y evaluacin de situaciones laborales y otras situaciones interpersonales. El material sobre entendimiento interpersonal se centra en: Demostrar un buen nivel de comprensin de sentimientos, motivacin y comportamiento de otras personas, as como de problemas relacionados con el trabajo con otras personas o la ayuda a otras personas. Reconocer la manera como puede aplicarse esa comprensin para trabajar en equipo o ayudar a otros de manera efectiva en aspectos como la comunicacin, la negociacin, el trabajo en equipo y el liderazgo. Con base en sus resultados los evaluados sern ubicados en uno de tres niveles de desempeo, as: NIVEL 1 Comprensin de situaciones sociales (roles, relaciones, comportamientos, sentimientos, actitudes y motivos) Anlisis de trabajo (trabajo en equipo, liderazgo, negociacin y comunicacin) Capacidad de reconocer acciones y respuestas a problemas NIVEL 2 NIVEL 3

Comprensin bsica

Comprensin significativa

Comprensin sofisticada

Comprensin bsica

Comprensin significativa

Comprensin sutil

Apropiadas para problemas Apropiadas para problemas Apropiados para problemas interpersonales directos interpersonales complejos, interpersonales delicados o no familiares complejos

Cmo se evala
La evaluacin se realizar mediante preguntas de seleccin mltiple.

ACER Australian Council for Educational Research. Derechos reservados ACER 2003. Traduccin y adaptacin Instituto Colombiano para la Evaluacin de la Educacin - ICFES.

14

GUAS

PRUEBA DE COMPRENSIN LECTORA

Qu se evala
Esta prueba indaga el grado de desarrollo de la comprensin lectora de los estudiantes, en particular, la forma como se aproximan a los niveles de interpretacin textual. La comprensin lectora se entiende como la capacidad de leer comprensivamente diversos tipos de textos, mediante la aplicacin de estrategias comunicativas y lingsticas especficas que posibilitan el anlisis y el establecimiento de relaciones entre los distintos componentes que conforman un texto. Con la prueba se explorarn tres dimensiones de la competencia, definidas as:
Capacidad del estudiante para reconocer y dar cuenta de las relaciones semnticas, sintcticas y pragmticas que se dan entre enunciados, prrafos o el texto en su globalidad. El estudiante debe identificar y reconocer las relaciones entre tpicos locales y globales; inferir el sentido global y otros posibles sentidos del texto; reconocer las intenciones comunicativas de los enunciadores presentes en el texto e identificar las relaciones entre lo enunciado en el texto y la manera como es enunciado. Capacidad del estudiante para dar cuenta de los puntos de vista que sustentan una determinada posicin; para inferir y establecer relaciones de causalidad, de necesidad y suficiencia de condiciones determinadas; para dar explicaciones y razones coherentes y consistentes que articulen contenidos explcitos o que se puedan derivar de lo planteado en los textos. En este nivel el estudiante debe estar en capacidad de inferir conclusiones, de plantear secuencias lgicas o de organizacin textual y de validar una afirmacin a partir de casos particulares. Para lo anterior es necesario haber logrado una comprensin global de lo planteado en un prrafo, una porcin mayor del texto, o el texto en su totalidad. Capacidad del estudiante para valorar propuestas que resuelvan de modo adecuado y pertinente un problema o situacin particular. Se evidencia cuando se explicitan generalizaciones, conjeturas, deducciones o conclusiones que requieren ir ms all de la informacin expuesta en el texto. Exige la comprensin del tpico global del texto y la puesta en relacin de ste con el contexto sociocultural en que se inserta. El estudiante debe dar cuenta del establecimiento de relaciones entre el contenido del texto, sus interlocutores y lo que propone l como lector; as mismo, debe establecer relaciones de distinto orden entre varios textos.

Interpretativa

Argumentativa

Propositiva

Con la prueba tambin se indagar por la manera como el estudiante logra acceder a los distintos niveles de operatividad de la informacin en el texto: Informacin local: secuenciar datos; encontrar relaciones lgicas en los planos de las oraciones, los enunciados y partes menores del texto; reconocer informacin local relacionada causalmente a partir de datos explcitos e implcitos; dar cuenta de sentidos locales del texto. Informacin global: reconocer informacin proposicional implcita, sintetizar el tema, jerarquizar informacin, dar cuenta de subtemas, extraer conclusiones.

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

15

 Informacin intertextual: conectar informacin explcita, implcita y que se pueda derivar de lo planteado o sugerido en textos que aborden tpicos similares desde diversos puntos de vista.

Cmo se evala
La evaluacin de los estudiantes se realizar por medio de una prueba que consta de dos textos que abordan temas de inters general: uno de corte periodstico y otro expositivo. Con base en los textos se plantean 15 preguntas de seleccin mltiple con nica respuesta, las cuales indagan por los niveles de operatividad de la informacin en los textos descritos anteriormente.

PRUEBA DE INGLS
Qu se evala
La prueba de ingls tiene como propsito evaluar la competencia de los estudiantes para comunicarse efectivamente en ingls. Esta prueba que ha sido alineada al Marco Comn Europeo, permitir clasificar a los evaluados en una de las seis categoras que se describen a continuacin. Como puede apreciarse, quienes se ubiquen en el nivel A1 sern aquellas personas con menor manejo del ingls y por el contrario, quienes logren ubicarse en el nivel B2, sern aquellos con mayores competencias en ingls.
Es capaz de entender las ideas principales de textos complejos que traten de temas tanto concretos como abstractos, incluso si son de carcter tcnico siempre que estn dentro de su campo de especializacin. B2 Puede relacionarse con hablantes nativos con un grado suficiente de fluidez y naturalidad de modo que la comunicacin se realice sin esfuerzo por parte de ninguno de los interlocutores. Puede producir textos claros y detallados sobre temas diversos as como defender un punto de vista sobre temas generales indicando los pros y los contras de las distintas opciones. Es capaz de comprender los puntos principales de textos claros y en lengua estndar si tratan sobre cuestiones que le son conocidas, ya sea en situaciones de trabajo, de estudio o de ocio. Sabe desenvolverse en la mayor parte de las situaciones que pueden surgir durante un viaje por zonas donde se utiliza la B1 lengua. Es capaz de producir textos sencillos y coherentes sobre temas que le son familiares o en los que tiene un inters personal. Puede describir experiencias, acontecimientos, deseos y aspiraciones, as como justificar brevemente sus opiniones o explicar sus planes. Es capaz de comprender frases y expresiones de uso frecuente relacionadas con reas de experiencia que le son especialmente relevantes (informacin bsica sobre s mismo y su familia, compras, lugares de inters, ocupaciones, etc). Sabe comunicarse a la hora de llevar a cabo tareas simples y cotidianas que no requieran ms que intercambios sencillos A2 y directos de informacin sobre cuestiones que le son conocidas o habituales. Sabe describir en trminos sencillos aspectos de su pasado y su entorno as como cuestiones relacionadas con sus necesidades inmediatas. Es capaz de comprender y utilizar expresiones cotidianas de uso muy frecuente as como frases sencillas destinadas a satisfacer necesidades de tipo inmediato. Puede presentarse a s mismo y a otros, pedir y dar informacin personal bsica sobre su domicilio, sus pertenencias y A1 las personas que conoce. Puede relacionarse de forma elemental siempre que su interlocutor hable despacio y con claridad y est dispuesto a cooperar.

Usuario Independiente

Usuario Bsico

Council of Europe. (2001). Common European Framework of Reference for Languages: Learning, Teaching, Assessment. Cambridge University Press.

16

GUAS

Cmo se evala
Esta prueba que consta de 40 preguntas, se encuentra organizada en 6 partes, las cuales se describen a continuacin: Parte 1: El estudiante encuentra cinco avisos y debe decidir el lugar dnde los vera. Para cada pregunta hay tres opciones A, B o C que deber marcar en su hoja de respuestas. Parte 2: El estudiante encuentra una lista de ocho palabras numeradas de A a H. Cada una de las preguntas describe una de las ocho palabras y el estudiante debe buscar la relacin entre las dos y marcar la letra correcta (A a H) en su hoja de respuestas. Hay ms palabras (A a H) de las que el estudiante necesita. Parte 3: El estudiante encuentra cinco conversaciones cortas. Se debe completar la conversacin seleccionando la respuesta correcta de las tres opciones A, B o C en la hoja de respuestas. Parte 4: El estudiante encuentra un texto con ocho espacios, los cuales debe completar seleccionando la palabra correcta para cada espacio, de las tres opciones A, B o C en su hoja de respuestas. Parte 5: El estudiante encuentra un texto seguido por siete preguntas, en las cuales debe seleccionar la respuesta correcta entre tres opciones A, B o C en su hoja de respuestas. Parte 6: El estudiante encuentra un texto con diez espacios que debe llenar seleccionando la palabra correcta, para cada espacio, de las cuatro opciones A, B, C o D en su hoja de respuestas.

Orientaciones para el examen de Estado de calidad de la educacin superior - SABER PRO (ECAES) PRUEBA DE COMPETENCIAS GENRICAS

17

INFORMACIN IMPORTANTE La informacin relativa al SABER PRO - (ECAES) que no est en esta gua (Como aquella referida al proceso de registro, al calendario o a los resultados), se debe consultar en los vnculos correspondientes en el sitio web www.icfes.gov.co

18

Calle 17 No. 3-40 Telfono:(57-1)338 7338 Fax:(57-1)283 6778 Bogot - Colombia www.icfes.gov.co