Evaluacin en un contexto de formacin basada en Competencias

Mdulo 2 Aspectos generales de la evaluacin de competencia aplicada a contextos educativos

Mauricio Reyes
2008

Percepciones sobre la capacitacin/formacin

I Gasto Necesario Aprender para trabajar II. Beneficio Social Aprender para saber

III. Sistema Indirecto de Retribucin Aprender como premio

IV Inversin Empresarial Aprender para desarrollar

Mauricio Reyes - 2008

Modelo de Parker
Se evalan cuatro aspectos: Desempeo en el trabajo. Desempeo del grupo. Satisfaccin de los participantes. Conocimientos adquiridos por los participantes.

Mauricio Reyes - 2008

Modelo de Bell Systems

Resultados de reaccin. Resultados de capacitacin. Resultados de aplicacin. Resultados de valor.

Mauricio Reyes - 2008

Los 4 niveles de evaluacin (Kirkpatrick)

Nivel de Evaluacin
Reaccin

Preguntas
Quedaron satisfechos los participantes con el programa?

Aprendizaje Qu aprendieron los participantes en el programa? Conducta Resultados Cambiaron su conducta los participantes en base a lo que se aprendi? El cambio afect positivamente a la organizacin?

Mauricio Reyes - 2008

Esquema de 5 niveles ROI (Phillips)

Nivel de Evaluacin
1. Reaccin y Acciones Planeadas 2. Aprendizaje

Descripcin

Mediciones de la reaccin de los participantes del programa y los resultados especficos de planes de implementacin. Medicin de los cambios en los conocimientos, habilidades y actitudes. 3. Aplicaciones Mediciones del cambio en la al Trabajo conducta en el trabajo y las aplicaciones especficas del material de capacitacin. 4. Resultados Medicin del impacto del de Negocio programa en el negocio. 5. Resultados Comparar el valor monetario de Financieros los resultados con los costos del programa, usualmente expresado en porcentaje.
Mauricio Reyes - 2008 6

Diferencias en la Formacin/Evaluacin
Convencional Larga duracin. Currculos desactualizados. Estructura rgida. Se basa en el saber del docente. El participante es pasivo, memoriza y repite. El participante recepciona informacin. Formacin para un puesto de trabajo. Formacin de habilidades y destrezas. Por Competencias Formacin flexible y personalizada, de acuerdo a los requerimientos del participante. Contenidos y estrategias en entorno flexible. Rescata el saber del participante. El participante es activo: analiza, investiga, aporta su saber. Formacin para la empleabilidad. Formacin integral.

Capaz de........
Profundidad

Aplicar

Dominar

Explicar

Entender Saber
Internalizar

Repetir

Memoria Comprensin Pragmtico

EFECTIVIDAD DEL APRENDIZAJE INFORMAL Y FORMAL

efectividad

FORMAL

INFORMAL

Para qu? Funciones

Diagnstica
determinar grado de desarrollo de la competencia y necesidades de apoyo y formacin

Formativa Sumativa

monitorear el avance y desarrollo de las competencias

determinar si se logra el nivel de desempeo requerido en una o varias competencias

Mauricio Reyes - 2008

10

Quin o quines participan de la evaluacin?

Es individual, cada persona tiene como referencia los estndares y no se compara con otras. La persona evaluada juega un rol activo en el proceso de evaluacin. Evaluadores formados: en la especialidad y en el enfoque de evaluacin por competencias.

Mauricio Reyes - 2008

11

Identificar y seleccionar los mtodos e instrumentos de evaluacin, considerando:

Naturaleza de los referentes. Los niveles de logro esperados. Los principios y criterios de evaluacin. Las personas involucradas. Los recursos disponibles. El contexto.

Mauricio Reyes - 2008

12

Evaluacin por competencias; algunos de los puntos crticos a nivel conceptual

La posibilidad de captar las complejas interacciones entre las distintas dimensiones que constituyen la competencia, por ms claros y definidos que sean los criterios de desempeo. El grado de subjetividad que, ms all del estndar implica la lectura e interpretacin de las evidencias. La necesidad de evitar una relacin mecnica entre resultados y el nivel de competencia de los sujetos y la influencia de las condiciones del contexto en que ste se desarrolla.
Mauricio Reyes - 2008 13

Aspectos clave a considerar a la hora de implementar procesos de evaluacin por competencias

Las descripciones excesivamente detalladas (criterios o evidencias de desempeo) pueden rigidizar y sobrecargar los procesos de evaluacin. Se debe evitar una acumulacin excesiva de evidencias que dificulte las etapas del proceso. Se debe contar con evaluadores/as competentes, en la especialidad y en la gestin de la competencia, capaces de implementar nuevas prcticas de supervisin, evaluacin y formacin.

Mauricio Reyes - 2008

14

Diseo de escalas para evaluar competencias

Se requieren indicadores con el fin de evaluar el dominio de la competencia al trmino del proceso formativo. Hay diversas metodologas para construir indicadores. Una metodologa es establecer una escala con niveles de desarrollo de las competencias y establecer indicadores para cada nivel. Los indicadores deben ser verificables y contrastables. Todo indicador debe representa un logro en la competencia, por lo que debe evitarse el lenguaje negativo (ejemplo: no tiene la capacidad de aplicar).
Mauricio Reyes - 2008 15

Aspectos a analizar para la construccin de de indicadores

La naturaleza de la competencia y sus elementos (actividades). El perfil profesional de los egresados. El enfoque del programa y su duracin.

Mauricio Reyes - 2008

16

Procedimiento
Se establecen indicadores para el nivel mnimo de desarrollo. Luego se establecen los indicadores para el nivel mximo. Luego se establecen los indicadores para el nivel aceptable. Posteriormente se establecen los indicadores para los niveles intermedios.

Mauricio Reyes - 2008

17

Estrategias didcticas para evaluar competencias

Recoger la informacin a partir de experiencias reales o simuladas realizadas por el estudiante. Los juicios de evaluacin se construyen a partir de la observacin y el juicio experto (docente). Se enfoca la evaluacin de manera individualizada, sobre el mismo estudiante, y teniendo en cuenta sus propios aprendizajes y avances. Permiten al evaluador reconstruir el proceso de aprendizaje seguido por el individuo o el grupo. La informacin que se obtiene del proceso de evaluacin permite reconducir la actividades docentes. Permite al estudiante participar en su propia evaluacin

Mauricio Reyes - 2008

18

Elementos a considerar en la evaluacin (1)

La evaluacin debe desarrollarse a travs de tareas autnticas, en las que se ponga de manifiesto el aprendizaje que se pretende desarrollar. La evaluacin debe incluir todas las facetas o aspectos de la competencia. Distintos jueces deberan ser capaces de asignar la misma calificacin a la evaluacin. Los criterios utilizados en la evaluacin deben ser comprensibles para los individuos evaluados, de manera que puedan mejorar su ejecucin. Debe existir transparencia. Deben existir criterios para cada tarea y aspecto de lo que se considera una ejecucin especfica. La existencia de un archivo de ejemplos prototpicos de niveles de ejecucin, con comentarios y crticas de los evaluadores puede resultar til para el alumno.
Mauricio Reyes - 2008 19

Elementos a considerar en la evaluacin (2)

Es recomendable una capacitacin previo por parte del profesor para valorar las pruebas. Puede resultar til cierto grado de trabajo colaborativo por parte de los profesores. Con la autoevaluacin tambin se aprende y los alumnos deben ejercitarse en esta prctica. Los alumnos deben tener la oportunidad de repetir las pruebas de evaluacin, de manera que puedan trabajar en la mejora de los resultados. Los alumnos deben tener la posibilidad de conocer sus resultados de forma pormenorizada, de manera que puedan comprender cmo mejorarlos. Si es posible, definir distintos niveles de xito, de forma que los alumnos puedan identificar sus objetivos personales.
Mauricio Reyes - 2008 20

Muchas Gracias mreyes@competencias.cl

21