MEDISAN 2002;6(2):108-115

DOCENCIA
Hospital Infantil Sur Docente GUA DE EVALUACIN PARA PROGRAMAS DE DIPLOMADOS: UNA PROPUESTA NECESARIA
Dra. Enma Bastart Ortiz, 1 Dra. Martha Castro Boch, Dr. Manuel de Jess Salvador lvarez 4
2

Dr. Reynaldo Reyes Mediaceja 3 y

RESUMEN Se elabor una gua de evaluacin para medir la calidad de los programas de diplomados, teniendo en cuenta los requisitos metodolgicos establecidos para su confeccin y en la cual se incluyeron 4 categoras: aprobado, no aprobado, acreditado y de excelencia. La propuesta presentada es novedosa, constituye una importante va para mejorar la calidad de dichos programas y resulta indispensable para el sistema de perfeccionamiento profesional. Descriptores: EVALUACIN; EFECTIVIDAD; ADECUACIN DE PROGRAMAS; EDUCACIN DE POSTGRADO EN MEDICINA; RECURSOS HUMANOS EN SALUD

El diplomado se concibi en pases del llamado Primer Mundo como respuesta a las necesidades de preparacin de los recursos humanos para desempearse en puestos de trabajo de mayor calificacin. En Amrica Latina se desarrollan programas de diplomados por centros de formacin profesional y colegios, mayormente de carcter privado, para solucionar diferentes demandas impuestas por el sector laboral. 1 En Cuba, el diplomado surgi para perfeccionar el sistema de superacin profesional, que se haba visto menguado desde finales de la dcada de los 80 al eliminarse los estudios de posgrado de viejo tipo, de---------------------------------1 2

dicados a la especializacin o reorientacin de los conocimientos y habilidades de los graduados del nivel superior. 2 Al igual que en las maestras, los diplomados deben contar con un patrn de calidad que favorezca su desarrollo exitoso y para el logro de lo cual constituye un eslabn sumamente importante la elaboracin correcta de los programas; 3 sin embargo, actualmente nuestros centros de perfeccionamiento carecen de un instrumento evaluativo para medir con precisin y de forma homognea la calidad de esos programas, por lo que resulta obvia la conveniencia de su creacin.

Especialista de I Grado en Pediatra. Profesora Asistente Especialista de I Grado en Histologa. Profesora Titular 3 Especialista de I Grado en Administracin de Salud. Profesor Asistente 4 Especialista de I Grado en Higiene y Epidemiologa. Instructor

Evaluar es emitir un juicio de valor sobre una actividad o tarea, como resultado de la comparacin entre la situacin observada y un patrn dado o modelo predeterminado y que se basa en mediciones, de donde se infiere que establecer un modelo deviene esencial para poder medir la calidad del trabajo desplegado; 4 por ende, en este trabajo proponemos un instrumento evaluativo para medir los parmetros de calidad que deben estar presentes en los programas de los diplomados en el Sistema Nacional de Salud, debido a su introduccin de forma renovadora en la educacin de posgrado en nuestras universidades mdicas. MTODOS Para elaborar este instrumento evaluativo se parti del documento: Apuntes metodolgicos para la confeccin de un Proyecto de Diplomado Nacional en el Sistema Nacional de Salud, 5 donde se exponen todos los requisitos metodolgicos para realizar un programa de diplomado, el cual se fue analizando en cada uno de sus aspectos. En el patrn de cali-

dad propuesto, que define lo que debe ser un diplomado, se entiende por calidad la conjuncin de la excelencia acadmica y la pertenencia social. Fue diseado a partir de 10 criterios a evaluar y las variables de calidad propuestas 6, 7 son las siguientes: 1. Experiencia institucional y del claustro (aval ms importante que garantiza la sostenibilidad del programa y calidad acadmica. Puede haber colaboracin interinstitucional). 2. Pertenencia e impacto social (grado de correlacin entre necesidades sociales que dan origen a esta intervencin educacional). 3. Respaldo material y administrativo del programa (infraestructura y equipamiento, instalaciones adecuadas e insumos requeridos). 4. Bibliografa y acceso a la informacin. 5. Estrategia docente utilizada. 6. Relacin horaria terico prctica. 7. Calidad de los objetivos. 8. Correspondencia entre los objetivos. 9. Sistema de evaluacin. 10. Perfil del egresado. 4

Cada uno de estos criterios tiene 4 opciones con las siguientes calificaciones, que se suman al final. a=0 b=1 c=2 d=3

A continuacin se estableci el patrn: Aprobado-Desaprobado, tomando en cuenta que el establecimiento de las normas o patrones de calificacin es un proceso complejo y arbitrario por su propia naturaleza. Existen diferentes mtodos: normativo, criteriado y otros; pero en este caso preferimos emplear el segundo o del criterio referencial, que se establece con anterioridad y pueden utilizarse escalas de calificacin numricas o alfabticas. La calificacin Aprobado es la apropiada para calificar la competencia. 8 Sobre la base de lo expuesto se consider:

Aprobado: Tener 60 % de indicadores, con 2 como mnimo. Acumular 16 como mnimo. No poseer indicador alguno con valor de 0. Acreditado Llevar 2 aos de impartido. Tener 60 % de indicadores con valores de 3. No poseer indicador alguno con valor de 0. Acumular 25 a 27 como mnimo. Excelencia Estar acreditado.

Tener 80 % de indicadores con valores de 3 y el resto con valores de 2. Acumular 28 como mnimo. No aprobado Tener indicadores con 0. Acumular menos de 16. Poseer menos de 50 % calificados con 2 3. En esta ltima categora se podrn hacer 3 recomendaciones:

Perfeccionar hasta 30 % indicadores a mejorar. Reelaborar de 31 a 50 % indicadores a mejorar. Rechazar ms de 50 % de indicadores deficientes o no vinculados con las necesidades sociales.

RESULTADOS Se muestran el instrumento creado y el procedimiento para su evaluacin.

INSTRUMENTO DE EVALUACIN PARA PROGRAMAS DE DIPLOMADOS Datos generales de la actividad: 1. 2. 3. 4. 5. 6. 7. Nombre de la actividad Institucin sede Fecha de inicio Fecha de terminacin Duracin (meses) Total de horas Veces anteriores que se ha impartido Nivel: Internacional Nacional Municipal Institucional reas con que se relaciona: - Atencin primaria de salud (APS) - Sistema Integrado de Urgencia Mdica (SIUM) - Segundo y tercer niveles de atencin - Programa de Atencin Maternoinfantil (PAMI) - Psicologa-Psiquiatra-Sociologa - Medicina Natural y Tradicional (MNT) - Pedagoga - Infecciones de transmisin sexual (ITS) - Enfermedades transmisibles - Tercera edad - Otras 8. Matrculas 9. Modalidad: Parcial A tiempo completo 10. Cantidad de mdulos o cursos 11. Requisitos de ingreso: - Profesin (s) - Especialista - Otros CRITERIOS A EVALUAR 1. La experiencia y el nivel cientfico del claustro se corresponden con: Doctores en Ciencias, Masters o Profesores Titulares: a) Menos de 10 % b) 11 hasta 29 % c) 30 hasta 50 % d) Ms de 50 % 2. La correspondencia del programa con las necesidades de la docencia, los servicios y los recursos humanos de la salud: a) No existe.

3.

4.

5.

6.

7.

b) Existe, pero no con las esenciales. c) Existe, pero se relaciona parcialmente con las esenciales. d) Existe y se relaciona con las esenciales. La infraestructura y el equipamiento: a) No son los requeridos. b) Satisfacen parcialmente en la minora de los mdulos. c) Satisfacen todos los mdulos, pero parcialmente. d) Satisfacen plenamente. La bibliografa y el acceso a la informacin: a) No es actual ni se garantiza. b) No es actual y se garantiza para 50 % de los mdulos. c) Es actual para 70 % de los mdulos, pero de acceso irregular. d) Son ptimos para todos los mdulos. La estrategia docente entre contenidos y objetivos en los mdulos: a) No se establece. b) Se establece en menos de 50 % de ellos. c) Se establece en 70 % de ellos. d) Se establece en ms del 80 % de ellos. La relacin teora-prctica (educacin en el trabajo y otras) es aproximadamente: a) 10:2 b) 10:5 c) 10:10 d) 4:10 Los objetivos generales y especficos:

a) Son formulados pobremente y no en funcin del diplomado. b) Son poco integradores y sistmicos. c) Algunas de sus partes no estn expresadas adecuadamente. d) Estn adecuadamente expresados. 8. Los contenidos y objetivos de los programas de los mdulos: a) Existen, pero no se relacionan entre s ni tampoco con los del diplomado. b) Se relacionan entre s en 50 % de los mdulos y con los del diplomado. c) Se relacionan entre s en 70 % de los mdulos y con los del diplomado. d) Se relacionan adecuadamente entre s en todos los mdulos y con los del diplomado. 9. El sistema de evaluacin: a) No est definido. b) Carece de evaluacin diagnstica o sistmica. c) Tiene definidas las evaluaciones diagnstica y final, pero la sistmica presenta dificultades. d) Es completo, integrador y sistmico. 10. El perfil del egreso: a) No se define. b) Est mal definido y no se relaciona con la estrategia docente. c) Est definido, pero con algunas imprecisiones. d) Est adecuadamente definido.

PROCEDIMIENTO PARA LA EVALUACIN A continuacin se exponen los 10 criterios de evaluacin a tomar en cuenta, cada uno de los cuales tiene 4 opciones con posibles valores, a saber: a=0 b=1 c=2 d=3

Marque con una X la opcin correspondiente al evaluar cada criterio, sume al final los valores otorgados -- con los que llenar el siguiente modelo -- y luego escoja el resultado que se aviene con el valor acumulado.

EVALUACIN 1. a _______ 2. a _______ 3. a _______ 4. a _______ 5. a _______ 6. a _______ 7. a _______ 8. a _______ 9. a _______ 10. a _______ Total: ______

b _______ b _______ b _______ b _______ b _______ b _______ b _______ b _______ b _______ b _______

c _______ c _______ c _______ c _______ c _______ c _______ c _______ c _______ c _______ c _______

d _______ d _______ d _______ d _______ d _______ d _______ d _______ d _______ d _______ d _______

=_______ =_______ =_______ =_______ =_______ =_______ =_______ =_______ =_______ =_______

RESULTADOS DE LA EVALUACIN A. No aprobado: Criterios con valores de 0 menos de 50 % evaluados con 2 (-16 puntos). Se propone: Perfeccionar _________ Reelaborar _________ Rechazar _________ B. Aprobado: 60 % de los criterios con valores de 2 ms y el resto con 1. Acumula entre 16-24 _______. C. Acreditado: Impartido en ms de 2 ocasiones con 50 % de los criterios evaluados con 2 y el resto con 2. Acumula entre 25-27 ________. D. De excelencia: Ms de 80 % de los criterios evaluados con 3, el resto con 2 e impartido en ms de 2 ocasiones. Acumula entre 28-30 ________. Calificacin: I. De excelencia ________ II. Acreditado ________ III. Aprobado _______ IV. No aprobado ________ Se propone: Perfeccionar ________ Reelaborar ________ Rechazar ________ Se escogieron al azar 2 programas de diplomados del Departamento de Perfeccionamiento del Instituto Superior de Ciencias Mdicas de Santiago de Cuba, no mencionados aqu por razones ticas, y se evaluaron con el instrumento elaborado, de donde se derivaron resultados diferentes de los obtenidos por la comisin evaluadora y que se muestran a continuacin: INSTRUMENTO DE EVALUACIN PARA PROGRAMAS DE DIPLOMADOS Datos generales de la actividad 1. Nombre de la actividad 2. Institucin sede 3. Fecha de inicio: 15-09-99 4. Duracin: 19 semanas

Fecha de terminacin: 27-01-00 Total de horas: 216

5. Veces anteriores que se ha impartido: Ninguna 6. Nivel: Internacional ____ Nacional ____ Provincial __x__ Territorial _____ Municipal _____ Institucional _____ 7. Relacionada con el rea APS __x MNT _______ SIUM _______ PAMI ______ 2do y 3er niveles de atencin ITS ___x___ Enfermedades transmisibles ______ Psicologa-PsiquiatraSociologa ______ Tercera edad ______Pedagoga ________ Otras ________ 8. Matrcula: No aparece 9. Modalidad: Parcial ___x___ A tiempo completo _______ 10. Cantidad de mdulos o cursos ___4___

EVALUACIN MODELO E INSTRUCCIONES Procedimiento para la evaluacin Valores de los indicadores o criterios de evaluacin 0 _______ 1 _______ 2 _______ 3 _______

Marque con una X al evaluar los indicadores o criterios en el valor correspondiente y seleccione el resultado que se aviene con el valor acumulado. Escoja las recomendaciones que se deben solucionar.

MODELO DE EVALUACIN 1. 0 _____ 2. 0 _____ 3. 0 _____ 4. 0 _____ 5. 0 _____ 6. 0 _____ 7. 0 _____ 8. 0 _____ 9. 0 __x__ 10. 0 __x___ 1 1 1 1 1 1 1 1 1 1 __x__ _____ __x__ __x__ __x__ __x__ __x__ __x__ _____ _____ 2 2 2 2 2 2 2 2 2 2 _____ _____ _____ _____ _____ _____ _____ _____ _____ _____ 3 3 3 3 3 3 3 3 3 3 _____ __x__ _____ _____ _____ _____ _____ __x__ _____ _____ = = = = = = = = = = __1___ __3___ __1___ __1___ __1___ __1___ __1___ __3___ ______ ______

Total: 12 Calificacin: No aprobado Se recomienda: Reelaborar Ampliar sistema de evaluacin Perfil de egreso Objetivos de los mdulos y estrategia docente Definir sistema de evaluacin Mejorar composicin del claustro INSTRUMENTO DE EVALUACIN PARA PROGRAMAS DE DIPLOMADOS Datos generales de la actividad 1. Nombre de la actividad

Institucin sede Fecha de inicio: 17-02-00 Fecha de terminacin: 16-06-00 Duracin: 19 semanas Total de horas: 216 Veces anteriores que se ha impartido: Ninguna Nivel: Internacional _____ Nacional ______ Provincial ______ Territorial ______ Municipal ______ Institucional ___x___ 7. Relacionada con el rea APS __x MNT _______ SIUM _______ PAMI ______ 2do y 3er niveles de atencin ITS ___x___ Enfermedades transmisibles ______ Pscologa-PsiquiatraSociologa ______ Tercera edad ______Pedagoga ________ Otras ________ 8. Matrcula: No aparece 9. Modalidad: Parcial __x__ A tiempo completo ________ 10. Cantidad de mdulos: _ 4____

2. 3. 4. 5. 6.

EVALUACIN MODELO E INSTRUCCIONES Procedimiento para la evaluacin Valores de los indicadores o criterios de evaluacin 0 _______ 1 _______ 2 _______ 3 _______

Marque con una X al evaluar los indicadores o criterios en el valor correspondiente y seleccione el resultado que se aviene con el valor acumulado. Escoja las recomendaciones que se deben solucionar. MODELO DE EVALUACIN 1. 0 _____ 2. 0 _____ 3. 0 __x__ 4. 0 _____ 5. 0 __x__ 6. 0 __x__ 7. 0 __x__ 8. 0 _____ 9. 0 _____ 10. 0 _____ 1 1 1 1 1 1 1 1 1 1 __x__ _____ _____ __x__ _____ _____ _____ _____ __x__ __x__ 2 2 2 2 2 2 2 2 2 2 _____ _____ _____ _____ _____ _____ _____ _____ _____ _____ 3 3 3 3 3 3 3 3 3 3 _____ __x__ _____ _____ _____ _____ _____ __x__ _____ _____ = = = = = = = = = = __1___ __3___ ______ __1___ ______ ______ ______ __3___ __1___ __1___

Total: 10 Calificacin: No aprobado Se recomienda: Reelaborar Ampliar sistema de evaluacin Perfil de egreso Incluir locales y equipamiento Definir sistema de evaluacin Mejorar composicin del claustro

RECOMENDACIONES CONCLUSIONES 1. El diseo del instrumento propuesto constituye una va importante para el 2. desarrollo de la calidad de los programas de los diplomados. 3. La propuesta metodolgica presentada es novedosa y necesaria para el sistema de perfeccionamiento del profesional. ABSTRACT Evaluation Guide for Programs of Certificate Works: A Necessary Proposal An evaluation guide was elaborated to measure the quality of certificate work programs, keeping in mind the established methodological requirements for its implementation and in which 4 categories were included: approved, not approved, credited and of excellence. The presented proposal is novel, it constitutes an important way to improve the quality of these programs and it is indispensable for the professional improvement system. Subject headings: EVALUATION; EFFECTIVENESS; ALLOCATION; EDUCATION, MEDICAL, GRADUATE; HEALTH MANPOWER REFERENCIAS BIBLIOGRFICAS 1. Stolyck D. Informe sobre el posgrado. La Habana: MES;1995:6-12. 2. Propuesta del plan de desarrollo de diplomados para la Atencin Primaria de Salud. La Habana: CENAPEM;1998:8-12. 3. Sistema de evaluacin y acreditacin de los programas de maestras (ASEA- M). La Habana: MES;1999:1-5. 4. Hatim A, Gmez I. Calidad, evaluacin e impacto social de los postgrados. En: Manual de educacin de postgrado para la Maestra en Educacin Media. La Habana: CENAPEM;1999:18-20. 5. Apuntes metodolgicos para la confeccin de un proyecto de diplomado nacional en el Sistema Nacional de Salud. La Habana: CENAPEM;1998:1-4. 6. Gua de autoevaluacin de programas de posgrado. [Santiago de Chile?]: Junta Iberoamericana de Postgrado;1997:8-15. 7. Gua de autoevaluacin de programas de maestra. La Habana: CENAPEM;1998:1-6. 8. Syr Salas-Perea R. Evaluacin de la competencia y desempeo profesionales. La Habana:ECIMED;1999: 117-78.
Dra. Enma Bastart Ortiz. Edificio 12 plantas, Piso 10, Apto. M, Centro Urbano Antonio Maceo, Santiago de Cuba

1. Utilizar el instrumento evaluativo citado en los centros de perfeccionamiento, a fin de estandarizar criterios de evaluacin. 2. Realizar investigaciones al respecto para poder validarlo.

CMO CITAR ESTE ARTCULO Bastard Ortiz E, Castro Boch M, Reyes Mediaceja R, Salvador lvarez M de J. Gua de evaluacin para programas de diplomados: una propuesta necesaria (artculo en lnea). MEDISAN 2002;6(2). <http://bvs.sld.cu/revistas/san/vol6_2_02/san18202.htm> [consulta: fecha de acceso]