Académique Documents
Professionnel Documents
Culture Documents
Pedagoga Universitaria
Abstract
The present work shows the results from research Impact of evaluation and assesment
process in careers and masters programs realized in 2009-2010 years. In this proyect
were involucrated the authors of this work and experts from the Cuban Assesment Joint,
the Habanas University, Higher Politecnical Institute Jos A. Echeverra (ISPJAE),
Habanas Agrarian University, Pedagogical University Enrique Jos Varona, Habanas
Medical University and Ministry of Higher Education (Cuba).
The first purpose of this proyect was to show to the academic community and Cuban
society the impact of evaluation and assessment process wich were developed from the
creation of Cuban Assesment Joint, ten years ago, and how these process have contributed
to improve careers and masters programs. Furthermore, the proyect had an specific
purpose: to obtain an strategical methodology in order to evaluate the impact of the process
of external evaluation and assesment in improvement of the quality of careers and
masters programs.
Like in every scientific research, it was necessary to identify the meaning of the mains
concepts employed in the work. Concepts as quality, impact, impact of the evaluation
processes , impact evaluation, were focused in different contexts, and, in first place, in
the Cuban education. After a rigorous process of discussion in the work Group, it arrived
to definitions and obtains the main variables and index for the measure of the impact,
employed to confirm the hipothetyc support of research.
INTRODUCCIN
A partir de la oficializacin en 1999 del Sistema de Evaluacin y Acreditacin de las
Maestras (SEA-M), se puede hablar de una nueva etapa del control de la calidad en la
Educacin Superior cubana, porque hasta la fecha no exista un sistema que integrara los
procesos de evaluacin (autoevaluacin, evaluacin externa) con la acreditacin en el
mbito educativo en general y especialmente para los estudios de posgrado (Dopico. 2006)
A este sistema se incorporan posteriormente los de evaluacin y acreditacin de carreras
universitarias (2003), de programas de doctorado (2008) y de evaluacin institucional
(2010), todos los cuales se integran estructuralmente al Sistema Universitario de Programas
de Acreditacin (SUPRA), concebido y creado en el ao 2000 con estos fines integradores.
Es en este contexto que en el ao 2000 se crea la Junta de Acreditacin Nacional con la
misin de contribuir al mejoramiento de la calidad de la educacin superior cubana
mediante el desarrollo y aplicacin de un sistema de evaluacin y acreditacin de
programas e instituciones entre cuyos objetivos se encuentran los de promover, organizar,
ejecutar y controlar la poltica de acreditacin para la educacin superior del pas, as como
coordinar los diferentes procesos de evaluacin institucional en los centros adscritos al
MES.
A lo largo de estos aos, han sido sometidos a procesos de evaluacin externa y
acreditacin ms de 130 programas de maestra y 130 de carreras universitarias..
Sin embargo, durante los diez aos transcurridos desde la implantacin del SUPRA, no se
haba evaluado de manera sistemtica el impacto de los propios procesos de evaluacin
externa y acreditacin. Aqu es necesario precisar que nos estamos refiriendo a una
2
Pedagoga Universitaria
Pedagoga Universitaria
Pedagoga Universitaria
Especialistas del CITMA (Quevedo, V., Cha, J., Rodrguez, A, 2008.) consideran al
impacto de la ciencia y la innovacin tecnolgica como el cambio o conjunto de cambios
duraderos que se producen en la sociedad, la economa, la ciencia, la tecnologa y el medio
ambiente, mejorando sus indicadores, como resultado de la ejecucin de acciones de I+D+I
que introducen valor agregado a los productos, servicios, procesos y tecnologas
En las anteriores definiciones de impacto podemos encontrar varios elementos comunes:
-
Entre los elementos que distinguen al concepto pueden citarse el efecto multiplicador,
que se refiere al impacto de un proyecto en grupos no previstos
En general, las definiciones estudiadas se refieren al impacto como los cambios producidos
en un objeto determinado, sea el medio ambiente, los procesos o productos o algn grupo
poblacional, debido a una determinada accin.
A partir de estas definiciones y consideraciones acerca del concepto de impacto, fue
necesario precisar entonces cmo conceptualizarlo cuando se trata de los procesos de
evaluacin y acreditacin de programas educativos.
La evaluacin del impacto de los procesos de acreditacin de programas educativos.
El resultado ms inmediato de los procesos de autoevaluacin, evaluacin externa y
acreditacin est dado
por el mejoramiento de la calidad del objeto evaluado (el
programa). Sin embargo, el mejoramiento de la calidad en un programa universitario, sea
de una maestra o una carrera, no transcurre de manera espontnea, a partir de la
aplicacin de un proceso de evaluacin externa y acreditacin. Para lograr esta mejora, es
imprescindible la asuncin de conceptos asociados a la cultura de la calidad y la gestin de
la calidad, acompaados por la elaboracin de estrategias y la ejecucin de las
consiguientes acciones que propicien los cambios deseados en el programa. La aplicacin
consecuente de estos conceptos, estrategias y acciones encaminados a la mejora del
programa inducen a su vez cambios en la institucin que lo auspicia, desde el
departamento docente hasta la direccin de la institucin, que involucran en primer lugar a
los sujetos vinculados al programa evaluado. Estos cambios constituyen parte del impacto
de los procesos de evaluacin y acreditacin, en este caso sobre el contexto institucional.
Pero los cambios producidos por la aplicacin de los procesos de evaluacin y acreditacin
de programas no se circunscriben a los lmites de la institucin universitaria. Si bien aqu
se encuentran sus principales impactos, no es menos cierto que en el contexto social que se
relaciona de una u otra forma con el programa evaluado, los procesos de evaluacin dejan
una huella, sobre todo en lo relativo a la cultura de la calidad de los empleadores y de los
egresados, as como en el desempeo profesional de estos ltimos.
Pedagoga Universitaria
Constituye un proceso continuo dirigido a valorar no solo los resultados, sino tambin
la calidad de las acciones aplicadas.
Debe ser capaz de valorar si se producen o no(es decir, dnde no hubo impactos) los
cambios esperados y la relevancia de los cambios producidos.
Debe ofrecer la certeza de que los cambios observados son el resultado de las acciones
cuyo impacto se evala.
Debe ofrecer informacin sobre cules segmentos del objeto evaluado incidieron con
mayor intensidad las acciones aplicadas durante los procesos y en qu medida y qu
contribucin realizaron sus distintos componentes al mejoramiento de la calidad.
Atendiendo a los argumentos anteriores asumimos que la evaluacin del impacto de los
procesos de evaluacin y acreditacin constituye un proceso dirigido a valorar los
cambios significativos producidos en la calidad de los programas evaluados, en el
contexto institucional, el contexto social, as como en la mejora de la calidad de los
propios sistemas de evaluacin y acreditacin.
Variables e indicadores para la evaluacin del impacto
De las definiciones de impacto y su evaluacin se han podido inferir las dimensiones a
considerar para una operacionalizacin de variables que realmente permita determinar cul
ha sido el impacto de los procesos de evaluacin y acreditacin. En calidad de tales
dimensiones fueron considerados:
- El contexto institucional,
- El contexto social
- Los sistemas de evaluacin y acreditacin.
6
Pedagoga Universitaria
Fue necesario determinar entonces las variables a considerar en cada una de estas
dimensiones, en correspondencia con los objetivos generales planteados. Estas variables e
indicadores fueron asumidos a partir del estudio documental de los distintos expedientes de
evaluacin y acreditacin de carreras y maestras, en los que se analizaron las fortalezas y
debilidades y en un proceso de sntesis fueron identificadas, dentro de cada dimensin,
aquellos aspectos que podan ser considerados como variables y qu indicadores podan
expresar sus manifestaciones y caractersticas.
En la dimensin contexto institucional fueron asumidas como variables:
La gestin universitaria.
Entendamos que al detectar el impacto sobre estos dos significativos aspectos, era factible
obtener una informacin relevante acerca de los cambios producidos como resultado de la
aplicacin de estos procesos. En la variable calidad del programa se consideraron algunos
indicadores que resultan propios de todo proceso de evaluacin, pero al mismo tiempo
fueron tomados otros que respondan a los propsitos de la investigacin. As, como
indicadores de esta variable se consideraron la composicin y produccin cientfica del
claustro, el aseguramiento de la calidad, la formacin y desarrollo profesional y el
aseguramiento material y administrativo.
En la variable Gestin universitaria se asumieron como indicadores:
Las estrategias para el mejoramiento de la calidad y
El funcionamiento de la estructura institucional.
En el caso del primero, se contempla como criterio de medida el seguimiento de los planes
de mejora mientras que en el segundo, se consider la presencia de los planes de mejora
en la planificacin estratgica y operativa. A este ltimo aspecto se le concedi una gran
importancia al considerar el impacto de los procesos de evaluacin y acreditacin en la
gestin universitaria, dada la segregacin que en la actualidad se observa entre los planes
de mejoras derivados de las evaluaciones y la planificacin estratgica y operativa de las
instituciones.
En la dimensin Contexto social fue considerada como nica variable la pertinencia,
dado el valor que posee este aspecto al considerar el impacto de los programas en la vida
social del territorio o el pas, teniendo en cuenta el carcter integral de este trmino, ya
precisado ms arriba.
Finalmente, en la dimensin Sistemas de evaluacin y acreditacin se consideraron
como variables:
El perfeccionamiento de los sistemas y
La visibilidad de los sistemas y la agencia.
Los indicadores asumidos fueron desglosados en criterios de medida, los que fueron
utilizados en la encuesta elaborada por el Grupo de Trabajo, as como en entrevistas
realizadas a distintas categoras del personal involucrado en el impacto de estos procesos.
Fue realizada una validacin inicial del instrumento entre los miembros de la Junta de
Pedagoga Universitaria
Pedagoga Universitaria
CONCLUSIONES
Tanto las validaciones realizadas como las aplicaciones en las carreras y programas de
maestras seleccionados, permitieron confirmar la objetividad de las variables e indicadores
empleados para medir el impacto de los procesos de evaluacin y acreditacin.
Consideramos que an es necesario continuar trabajando en la estructura del instrumento
empleado en cuanto a lograr una mayor diversificacin en la informacin a obtener por
instituciones y carreras, as como precisar an ms las variables e indicadores con el fin de
lograr una mayor efectividad en su aplicacin. En este ltimo sentido, no podemos obviar
que la medicin del impacto de la evaluacin y acreditacin de programas es un proceso
que se desarrolla en medio de un entramado de influencias donde no es posible aislar sin
impurezas el efecto. Entre estas influencias se encuentran las transformaciones y polticas
nacionales en la educacin superior, los efectos regionales externos y los sistemas de
financiamiento de las IES.
Se justifica la permanente incorporacin de ajustes a los sistemas de evaluacin y
acreditacin a partir de los procesos peridicos de perfeccionamiento que los han
caracterizado desde el inicio de su aplicacin, con el objetivo de generar impactos
positivos, minimizar o eliminar los negativos y movilizar aquellos que no se han producido
REFERENCIAS BIBLIOGRFICAS
Addine Ftima y otros.(2007) Un modelo para evaluar el impacto de la maestra
ciencias de la educacin en condiciones de amplio acceso. La Habana.
en
Pedagoga Universitaria
(ANEXO)
MODELO DE ENCUESTA
PROYECTO DE INVESTIGACIN EVALUACIN DEL IMPACTO DE LOS
PROCESOS DE EVALUACIN Y ACREDITACIN DE PROGRAMAS
UNIVERSITARIOS
INTRODUCCIN
La Direccin de Evaluacin del MES, junto con un grupo de especialistas de diferentes
CES est realizando una investigacin con el objetivo de evaluar el impacto de la
evaluacin y acreditacin de programas de maestras y de carreras universitarias. Por tal
razn, solicitamos de Ud. su contribucin llenando este cuestionario a partir de sus
experiencias en este campo. Sus criterios, opiniones y sugerencias son de vital importancia
en este estudio.
De antemano le agradecemos su cooperacin.
I- Los procesos de evaluacin y acreditacin han influido en la calidad del programa.
Utilice la calificacin de: Generalmente de acuerdo (4), Indeciso (3) Generalmente en
desacuerdo (2), No tengo criterio (1)
a. Se han favorecido los procesos de categorizacin docente, la calificacin cientfica
y la produccin intelectual de los profesores _____
b. La utilizacin del plan de mejora de la calidad del programa____
c. Se ha estimulado el aprendizaje y rendimiento docente de los estudiantes____
d. La estimulacin del trabajo metodolgico____
e. En el perfeccionamiento del currculo del programa _____
f. Se ha estimulado la actividad cientfica del claustro del programa_____
Qu otro efecto, positivo o negativo, puede Ud. relacionar con respecto a la influencia de
los procesos de evaluacin y acreditacin sobre la calidad del programa de carrera o
maestra? (Inciso abierto de la primera pregunta)
_________________________________________________________________________
_________________________________________________________________________
_________________________________________________________________________
_____________________________________________________________
10
Pedagoga Universitaria
2.
3.
4.
5.
Pedagoga Universitaria
IV. Exprese cualquier observacin o criterio que considere pueda contribuir a evaluar el
impacto de los procesos de acreditacin.
_________________________________________________________________________
_________________________________________________________________________
_________________________________________________________________________
_____________________________________________________________
V. Si es Ud. alumno de una carrera universitaria o de un programa de maestra, le
solicitamos responda a las siguientes preguntas:
Estudiante de carrera_____
Alumno de maestra_____
Conoce Ud. la categora de acreditacin que posee la carrera o programa de maestra que
cursa?
SI ______
NO _______
En caso afirmativo: Qu categora? _________________
V. Finalmente, nos interesa conocer algunos datos relacionados con usted:
a) Aos de experiencia en la educacin superior____
b) Responsabilidad que ocupa en la educacin superior:
directivo_____; estudiante de carrera universitaria_____ ,
profesor
____;
12