EVALUACIN DE LA REFORMA CURRICULAR

DE EDUCACIN SECUNDARIA 2006 EN MXICO

REPORTE FINAL

Dr. Sheldon Rothman & Dita Nugroho

Diciembre 2010

AGRADECIMIENTOS Este reporte se basa en una serie de instrumentos administrados en 314 escuelas de Mxico durante el 2010. Se aprecia con gratitud la contribucin de estas escuelas participantes, de los 296 directores, los 2,216 maestros y ms de 15,000 estudiantes. Este proyecto no pudo haberse llevado a cabo sin la enorme participacin de Armando Estrada y el equipo del Consejo Nacional de Alianzas Educativas (NCCEP), as como de su equipo de encuestadores. Las opiniones expresadas en este reporte son las de los autores y no necesariamente las de la SEP, NCCEP o cualquier otro individuo u organizacin. Reporte elaborado por: El Consejo Australiano para la Investigacin Educativa 19 Prospect Hill Road, Camberwell, Victoria, 3124, Australia. Copyright 2010 Australian Council for Educational Research Presentado a Direccin General de Desarrollo Curricular Subsecretara de Educacin Bsica Secretara de Educacin Pblica Argentina 28, Colonia Centro, 06020, Mxico D.F. Presentado el 23 de diciembre de 2010. Contacto: Dr. Sheldon Rothman Director de Investigacin rothman@acer.edu.au +61 3 9277 5482 TRADUCCIN Alberto Esteban Trevio Garca LECTORES: Noem Garca Garca Enrique Morales Espinosa Rosa Mara Nicols Mora Miguel ngel Vargas Garca Antonio Blanco Lern

NDICE TABLAS RESUMEN EJECUTIVO 1. INTRODUCCIN 2. METODOLOGA 2.1 SELECCIN DE LA MUESTRA 2.2 DESARROLLO DE LOS INSTRUMENTOS
Cuestionario para los maestros Cuestionario para los directores Traduccin de los instrumentos Puesta en prueba de los instrumentos

2.3 2.4 3. 3.1

RECOLECCIN DE LA INFORMACIN ANLISIS DE LA INFORMACIN RESULTADOS PERCEPCIN DE LA RS

Percepcin de los maestros de la RS Diferencia por asignatura Diferencia por tipo de escuela Factores asociados con la actitud hacia la RS

3.2

CURSOS DE CAPACITACIN
Cantidad de capacitacin Evaluando capacitacin Factores asociados a capacitacin

3.3

PRCTICA DOCENTE
Respuestas de los maestros Puntaje de prctica docente Diferencia por asignatura Diferencia por tipo de escuela (modalidad de escuela) Respuestas a escenarios de enseanza Respuestas de estudiantes Relacin entre las actitudes hacia la RS y la prctica docente

3.4 RELACIN ENTRE EL PUNTAJE DE LOS MAESTROS Y LOGRO DE LOS ESTUDIANTES

Puntaje de logro y prcticas docentes

3.5

XITOS, OBSTCULOS Y SUGERENCIAS PARA MEJORA DE LAS ESCUELAS

xitos en la implementacin de la RS Retos en la implementacin de la RS Sugerencias para la mejora El papel de la escuela en el liderazgo y apoyo

4.

CONCLUSIONES

Referencias bibliogrficas

TABLAS
Tabla 1: Etapas de implementacin de la RS Tabla 2: Actitud de los maestros hacia la RS, por enunciado, todos los maestros Tabla 3: Actitud de los directores hacia la RS, por enunciado, todos los maestros Tabla 4: Actitud hacia la RS, por escuela, directores y maestros Tabla 5: Correlacin entre la actitud de los directores y los maestros hacia la RS, por escala Tabla 6: Actitud de los maestros hacia la RS, puntaje por escalas, por asignatura Tabla 7: Actitud de los maestros hacia la RS, puntaje por escalas, por tipo de escuela Tabla 8: Variables de los maestros correlacionadas con actitudes hacia la RS, todos los maestros Tabla 9: Actitud sobre capacitacin de la RS por tipo de curso de capacitacin Tabla 10: Actitud de los directores sobre material RS por proporcin de alumnos indgenas Tabla 11: Tipo y cantidad de capacitacin tomado, todos los maestros Tabla 12: Razones por emprender capacitacin, todos los maestros Tabla 13: Barreras para participar en capacitacin, todos los maestros Tabla 14: Importancia de roles en la seleccin de cursos de capacitacin Tabla 15: Variables continuas de formacin profesional correlacionadas con capacitacin de la RS, todos los maestros Tabla 16: Asistencia a cursos de capacitacin por tipo de contrato, todos los maestros Tabla 17: Asistencia a cursos de capacitacin por escala salarial, todos los maestros Tabla 18: Asistencia a cursos de capacitacin por modalidad de escuela, todos los maestros Tabla 19: Prcticas docentes, resumen Tabla 20: Media del puntaje de las prcticas docentes, por asignatura Tabla 21: Media del puntaje de las prcticas docentes, por tipo de escuela Tabla 22: tems de los escenarios y puntajes, por asignatura Tabla 23: Media de los puntajes de los escenarios, por asignatura Tabla 24: Media de los puntajes de los escenarios, por tipo de escuela Tabla 25: Relacin entre la actitud hacia la RS de directores y maestros con puntajes sobre prctica docente. Tabla 26: Relacin entre actitudes hacia la RS y los puntajes de los escenarios de enseanza Tabla 27: Puntajes de los escenarios de enseanza, de acuerdo a las actitudes de los directores sobre los propsitos de la RS Tabla 28: Correlacin entre el puntaje de los estudiantes en la prueba de lectura SEP-ISA y el puntaje de los alumnos de secundaria sobre su percepcin de las prcticas docentes en la asignatura de espaol Tabla 29: Correlacin entre el puntaje de los estudiantes en la prueba de matemticas SEP-ISA y el puntaje de los estudiantes sobre su percepcin de las prcticas docentes Tabla 30: Correlacin entre el puntaje de los estudiantes en la prueba SEP-ISA y el puntaje de los propsitos de los maestros en relacin a la RS y los efectos de la RS, 1er grado Tabla 31: Muestra de escuelas para la entrevista

RESUMEN EJECUTIVO La Secretara de Educacin Pblica (SEP) en el ciclo escolar 2005-2006 puso en marcha la Primera Etapa de Implementacin (PEI) de la Reforma de la Educacin Secundaria, en el primer grado de secundaria en 159 escuelas generales y tcnicas de 30 entidades del pas. Esta Reforma tena la finalidad de mejorar las oportunidades de aprendizaje de todos los estudiantes, garantizando equidad y calidad en la educacin que reciben. La Reforma se implement en etapas y para el final del ciclo escolar 2008-2009 todas las escuelas secundarias haban sido incluidas en la misma. En el 2010 el Consejo Australiano para la Investigacin Educativa (ACER, por sus siglas en ingls) fue contratado por la Secretara de Educacin Pblica para llevar a cabo una evaluacin de la RS. El foco de esta evaluacin es la implementacin de los programas de capacitacin docente a nivel escolar, incluyendo la evaluacin de las variaciones que pudieran ocurrir. La SEP expres su inters en conocer tambin el impacto que los programas y los materiales, distribuidos para apoyar la reforma, han tenido en las prcticas que se llevan a cabo en el saln de clases y subsecuentemente, en el logro del alumno. Para la evaluacin se utiliz un anlisis de correlacin para obtener medidas de relacin entre las variables. Sabemos que ste no permite establecer relaciones de causa y efecto, pero no fue posible implementar un estudio experimental, ya que todas las escuelas haban participado en la reforma en el momento en que esta evaluacin inici. Esta metodologa incorpor informacin de cuestionarios a maestros y directores, informacin del logro escolar de estudiantes de la prueba SEP-ISA y entrevistas con personas clave. La Informacin de 314 escuelas fue recolectada, e incluye 296 directores, 2,216 maestros de espaol, matemticas y ciencias y ms de 15,000 estudiantes en las 32 entidades federativas. Este reporte, producto final de la evaluacin, describe el proceso y los resultados de la evaluacin. De los resultados destacan los siguientes: Actitudes hacia la RS Una gran mayora de maestros (ms del 85 %) y directores (ms del 90 %) cree entender los propsitos de la RS y lo que se espera de ellos y de los estudiantes bajo la RS. En contraste, un nmero considerablemente menor de maestros y directores creen que ha recibido suficiente material de apoyo para ensear de acuerdo a la

RS. No hubo mucho acuerdo en cuanto a la disponibilidad y calidad de estos materiales. Por ejemplo: o Aunque los maestros en escuelas secundarias generales y tcnicas se encuentran igualmente divididos en este punto, el 70 % de los maestros de telesecundarias creen no haber recibido suficiente material. o Los maestros de la asignatura de ciencias dieron un ndice de aprobacin significativamente menor en cuanto a los materiales de apoyo docente, en comparacin con maestros de matemticas y espaol. Los maestros con ms aos de experiencia mostraron mayor satisfaccin por los materiales de apoyo docente y los cursos de capacitacin disponibles en apoyo a la RS. Sin embargo, estaban ligeramente menos de acuerdo en que la RS estuviera teniendo un efecto positivo en la enseanza y el aprendizaje. Los maestros que han participado en cursos de capacitacin expresaron mayor entendimiento de los propsitos de la RS; piensan ms favorablemente de los cursos de capacitacin proporcionados en apoyo a la RS que de los materiales de apoyo docente y de los efectos de la RS. Cursos de capacitacin La mayora de los maestros ha participado en Talleres Generales de Actualizacin o, a partir de 2009, en los Cursos Bsicos de Formacin Continua. Aproximadamente la mitad de los maestros ha participado en Cursos Estatales de Actualizacin.. Casi la mitad de todos los maestros afirmaron que queran participar en ms cursos de capacitacin para la RS de los que hicieron. Las restricciones de tiempo fue el principal obstculo para esto, seguido por la carencia de informacin oportuna sobre los cursos en oferta. Es ms probable que maestros con ms experiencia hayan participado en estos cursos, al igual que aquellos con contratos ms permanentes. Un tercio de los maestros mencionaron la adquisicin de puntos para Escalafn Docente o Carrera Magisterial, como la principal razn por inscribirse a los cursos. Esta relacin es ms relevante para los Cursos Estatales; dos tercios de los maestros que estn en Carrera Magisterial participan en estos cursos, comparado con menos de la mitad de los maestros de Escalafn Docente. Aproximadamente un tercio de los maestros queran participar en ms cursos sobre competencias generales de enseanza. Otros temas que los maestros queran aprender fueron sobre tecnologas de la informacin y comunicacin y tecnologas digitales, al igual que cursos ms prcticos acerca de cmo
6

implementar la RS en el saln de clases, incluyendo el diseo y trabajo con proyectos didcticos. Prctica docente De acuerdo a los maestros, las prcticas docentes mostradas con mayor nfasis en los materiales relacionados con la RS (descripcin de propsitos de aprendizaje, trabajo basado en proyectos, transversalidad de los temas) ocurren con mayor frecuencia, sugiriendo que los maestros al menos estn familiarizados con los tipos de actividades que forman parte de la implementacin de la RS. Aunque a los estudiantes tambin se les pidi reportar acerca de la prctica docente, no fue posible correlacionar sus respuestas con las de sus maestros, a nivel saln de clases; slo a nivel escuela el 70% de la informacin de maestros y alumnos pudo correlacionarse. En esas escuelas, no hubo correlacin positiva entre la prctica docente reportada por los maestros y la percepcin de los alumnos de ellos. La media del puntaje de la prctica docente de los maestros de matemticas fue ms de una desviacin estndar ms baja comparada con la de los maestros de espaol, lo que puede estar altamente relacionado con el contenido de las asignaturas. La media del puntaje de la prctica docente de los maestros de telesecundaria fue estadsticamente ms significativa que la de los maestros en otras modalidades, esto quiz porque relacionan temas a travs de las asignaturas, dedican tiempo a proyectos de larga duracin y administran pruebas para evaluar el aprendizaje con mayor frecuencia. Sin embargo, cuando se presentan escenarios de enseanza para medir el conocimiento pedaggico de la RS, los maestros de telesecundarias recibieron un puntaje estadsticamente significativo menor al de la media. Las prcticas docentes reportadas por los maestros tienen una correlacin positiva con la actitud de los directores y maestros en torno a todos los aspectos de la RS. En las escuelas en las que el director tena una actitud ms positiva hacia los propsitos y efectos de la RS, el conocimiento pedaggico de los maestros (evaluado por los escenarios de enseanza, independientemente evaluados) fue ms alto.

Relacin con el aprendizaje de los estudiantes Tomando en cuenta las limitaciones metodolgicas para correlacionar las respuestas de los estudiantes con las de los maestros a nivel escuela las
7

respuestas individuales de los maestros no pudieron relacionarse con las de sus alumnos. Considerando lo anterior, se encontr una pequea correlacin negativa entre los puntajes de prctica docente y los puntajes de las pruebas de los estudiantes. Una correlacin ms positiva, aunque pequea, se encontr entre la percepcin de los maestros sobre los efectos de la RS y los puntajes en las pruebas del 1er grado, donde la RS ha estado por ms tiempo. En las escuelas en las que la RS ha sido ampliamente aceptada, los maestros reportaron que los alumnos estn ms comprometidos con el aprendizaje y estn demostrando mayor confianza y creatividad al abordar su trabajo.

En general, los resultados de esta investigacin implican que la RS sigue en el proceso de ser implementada en los salones de clase. Pasar algn tiempo antes de que el impacto sobre la enseanza y el aprendizaje sea ms claro. La labor de la SEP por lo tanto, deber enfocarse en asegurar una efectiva y continua implementacin de la RS. Tomando como base los resultados de este estudio se recomienda lo siguiente para acciones futuras: Incrementar el acceso y mejorar la oferta y la calidad de los cursos de capacitacin. Asegurar la disponibilidad de suficientes recursos que se requieren para cumplir con los propsitos de la RS, en particular en telesecundarias y escuelas rurales. Trabajar con directivos y asesores tcnico pedaggicos de las escuelas sobre cmo pueden apoyar a los maestros a implementar la RS en el saln de clases. Recolectar y compartir los xitos y ejemplos de buenas prcticas para cambiar actitudes. Llevar a cabo un estudio de seguimiento sobre el impacto de la RS, con un enfoque en su impacto en el compromiso y logro de los estudiantes.

1. INTRODUCCIN La Secretara de Educacin Pblica (SEP) de Mxico inici en 2002 una reforma curricular para el nivel de secundaria en sus tres grados. La Reforma de la Educacin Secundaria (RS) tena el cometido de transformar las prcticas docentes en escuelas secundarias con la finalidad de incrementar las oportunidades de aprendizaje de todos los estudiantes. La Primera Etapa de Implementacin (PEI) se llev a cabo en 127 escuelas secundarias generales y tcnicas repartidas en 30 entidades federativas. La Reforma se implement en etapas (ver Tabla 1) y para el final del ao acadmico 2008-2009 todas las escuelas de las modalidades de educacin secundaria (generales, tcnicas, privadas y telesecundarias) haban sido incluidas en la misma.

Ao escolar
2002-2003 2003-2004 Proceso de desarrollo 2004-2005 Prueba piloto en dos escuelas secundarias del estado de Morelos (cerca del D.F.) 2005-2006 Prueba piloto 2006-2007 Generalizacin hacia todos las escuelas Prueba piloto 2007-2008 2008-2009

1er grado 2 grado 3er grado

Todas las escuelas Prueba piloto Todas las escuelas

Tabla1: Etapas de implementacin de la RS

De acuerdo con documentos oficiales, se consideraron cuatro elementos en el proceso de la reforma: 1. El curriculum 2006 como un mecanismo para mejorar las prcticas docentes articulando los perfiles de los resultados acadmicos, incorporando programas transversales, disminuyendo el nmero de temas y contenidos en cada grado, incrementando la flexibilidad pedaggica e incorporando el contexto local; 2. La creacin de Consejos Consultivos Interinstitucionales con la finalidad de asistir el mejoramiento gradual de las prcticas docentes y los programas de estudio; 3. El diseo de programas de capacitacin para profesores, directores y dems personal de apoyo para promover el curriculum 2006; 4. Dotacin del equipo y mejoramiento de la infraestructura escolar para facilitar las prcticas pedaggicas mejoradas.

Trabajando en alianza con la Direccin General de Desarrollo Curricular (DGDC) de la SEP, el Consejo Australiano para la Investigacin Educativa (ACER), en colaboracin con el Consejo Nacional de Alianzas Educativas (NCCEP), evalu la implementacin y el impacto de la reforma educativa para el nivel secundaria, teniendo como foco la capacitacin, la prcticas docentes en el saln de clases y el logro de aprendizaje de los estudiantes. Despus de las reuniones sostenidas entre la SEP y ACER en febrero de 2010, se estableci que el foco de la evaluacin debera basarse en la implementacin de los programas de capacitacin docente a nivel escolar, incluyendo la evaluacin de las variaciones que pudieran ocurrir. Haba tambin un inters en conocer cualquier impacto que los programas y los materiales distribuidos para apoyar la reforma hayan tenido en las prcticas que se llevan a cabo en el saln de clases y subsecuentemente, en el logro del alumno. Especficamente, se evaluaron los siguientes aspectos: 1. Las caractersticas de la actualizacin docente recibida por los docentes en apoyo a la reforma curricular del 2006; 2. La satisfaccin de directores y maestros con los programas de actualizacin y los materiales de apoyo provistos por la reforma curricular del 2006 3. Cumplimiento de las expectativas propuestas en el curriculum 2006 a partir de las prcticas docentes que se llevan a cabo en las secundarias 4. El impacto de los elementos involucrados en el proceso de la reforma en el aprovechamiento de los alumnos en las asignaturas de espaol, matemticas y ciencias; 5. Una comparacin de la implementacin y el impacto de la reforma en las cuatro modalidades de secundaria (general, tcnica, privada y telesecundaria) Durante las reuniones con la DGDC y el Coordinador Nacional de Telesecundarias, se subray la necesidad de separar el anlisis de la actualizacin y los materiales pedaggicos recibidos por los maestros de telesecundaria. Este anlisis necesitar considerar las circunstancias nicas de las escuelas telesecundarias. Este documento es el reporte final y ha sido preparado e incorpora el anlisis de la informacin de las entrevistas de las escuelas y las recomendaciones que formulamos en conjunto con los actores relevantes. Cubre el diseo del estudio, la descripcin de procesos, y los resultados del estudio.

10

2. METODOLOGA Debido a que todas las escuelas han participado en la reforma al momento de la investigacin, no fue posible identificar un grupo control con el cual hacer comparaciones. Se utiliz un anlisis de correlacin. Aunque ste no permite establecer relaciones de causa y efecto, se pueden obtener medidas de relacin entre las variables. Se incorpor informacin de tres fuentes principales: cuestionarios a directores y maestros, entrevistas con personas clave e informacin del logro acadmico de estudiantes de la prueba SEP-ISA. Para esta ltima se acudi a la administracin de la prueba SEP-ISA a una muestra de alumnos, para conocer su logro acadmico en matemticas y ciencias; prueba diseada por ACER para la SEP-UPEPE.RS. La informacin obtenida de la prueba SEP-ISA sirve como variable dependiente para medir los efectos que los programas de actualizacin docente de la RS han tenido en el logro acadmico de los estudiantes. Se midi la prctica docente dentro de los cuestionarios para maestros, en contraste con preguntas similares aplicadas a estudiantes, para utilizarlas al construir una variable dependiente, y medir el efecto que la RS ha tenido en prcticas dentro del saln de clase. 2.1 SELECCIN DE LA MUESTRA Para poder relacionar la informacin obtenida de los directores y de los maestros con la informacin del logro acadmico de los estudiantes recolectada por SEP-ISA, se utiliz la misma muestra que SEP-ISA. Una muestra nacionalmente representativa de 314 escuelas fue seleccionada por ACER en marzo de 2010 de un espacio muestral proporcionado por la SEP. Esta muestra const de grupos completos para cada servicio (modalidad) de escuela secundaria de los tres grados de educacin secundaria en todas entidades federativas. Para cada escuela de la muestra, se incluyeron dos posibles escuelas de remplazo con las mismas caractersticas. Los estratos implcitos identificados en la muestra fueron las 32 entidades y las 4 modalidades (general, tcnica, privada y telesecundaria). Las escuelas comunitarias, las escuelas con menos de 25 alumnos en total y las escuelas sin alguno de los grados escolares, fueron excluidas. Despus de exclusiones, el espacio muestral comprendi 29,403 escuelas y 5991,739 estudiantes.

11

NCEEP, analiz la muestra de 314 escuelas. Tomando en cuenta la seguridad de la zona y otros asuntos de logstica, identific escuelas en la muestra que podan ser visitadas. stas incluyeron 277 de las originalmente en la muestra, 24 escuelas escogidas como primer reemplazo y 13 escuelas escogidas como segundo reemplazo. El procedimiento de muestreo utilizado fue el mismo que el utilizado en SEP-ISA para 2008. El espacio muestral fue proporcionado por la SEP-UPEPE e identific escuelas, as como otra informacin relevante: entidad federativa, modalidad, sesin, matrcula, gnero. UPEPE fue responsable del proceso de empatar y de comparar resultados. Se seleccion igual nmero de estudiantes para cada grado. En SEP-ISA 2008, fueron aproximadamente 5,500 estudiantes de cada grado los que participaron. Un nmero similar de estudiantes de cada grado particip en SEP-ISA 2010 y en el proyecto de evaluacin. Todos los maestros de las asignaturas de espaol, matemticas y ciencias de las escuelas incluidas en la muestra tambin participaron en la evaluacin. 2.2 DESARROLLO DE LOS INSTRUMENTOS Cuestionarios para maestros Se disearon cuestionarios para los maestros de las asignaturas de matemticas, ciencias y espaol. Estos cuestionarios incluyeron preguntas acerca de su formacin profesional y mbito laboral, experiencia y opinin sobre los programas de actualizacin docente proporcionados en apoyo a la RS de sus impresiones sobre el efecto general que ha tenido la RS. Tambin incluyeron preguntas para evaluar sus prcticas pedaggicas. Los cuestionarios incluyeron tems idnticos para recabar informacin comn sobre los antecedentes de los maestros de las tres asignaturas. Estos tems se basaron en instrumentos utilizados en el proyecto (OCDE, 2009) Estudio Internacional sobre Docencia y Aprendizaje (TALIS, por sus siglas en ingls), el proyecto (UNESCO-IIEP, 2004) Consorcio del frica Meridional y Oriental para el Monitoreo de la Calidad de la Educacin (SACMEQ, por sus siglas en ingls) y el proyecto (OCDE, 2008) Programa para la Evaluacin Internacional de los Estudiantes (PISA, por sus siglas en ingls). tems subsecuentes fueron diseados para este proyecto de evaluacin, tomando en cuenta la experiencia de los maestros en cursos de capacitacin en los que han participado y en la RS en general. Temas incluidos en los cuestionarios a maestros:

12

1. 2. 3. 4.

Datos demogrficos (gnero, edad) Formacin profesional (experiencia, responsabilidades docentes actuales) Actualizacin docente (horas atendidas, razones) Opinin de la reforma (relevancia, calidad de las materiales). Se utiliz una escala Likert con cuatro niveles de respuesta, 1 siendo totalmente de acuerdo y 4 totalmente en desacuerdo. 5. Prcticas docentes especficas para la asignatura (horas, frecuencia de actividades especficas) 6. Conocimiento pedaggico especfico sobre la reforma utilizando escenarios de enseanza. La informacin recolectada de los cuestionarios para maestros fue utilizada con cuatro propsitos principales: 1. Para proporcionar un perfil de los maestros de matemticas, ciencias y espaol en escuelas secundarias; 2. Para recolectar informacin del grado de experiencia que tienen los maestros con la RS y la capacitacin relacionada; 3. Para examinar la relacin entre la formacin profesional de los maestros y su experiencia y la experiencia de los maestros y las escuelas con la RS, y 4. Para desarrollar indicadores de resultados (satisfaccin con los materiales docentes de la RS, conocimiento pedaggico relacionado a la reforma). Cada cuestionario para maestros incluy dos escenarios de enseanza desarrollados especficamente para la evaluacin. El primer escenario fue especfico para la asignatura, con tems diseados para enfocarse en el conocimiento pedaggico que tienen los maestros de su asignatura. La seleccin del tema se realiz tomando documentos disponibles distribuidos por la SEP sobre la RS para estas tres asignaturas. (SEP 2006a, 2006b y 2006c). El segundo escenario fue para ser utilizado con maestros de las tres asignaturas, y se bas en elementos especficos del Curriculum 2006, tambin tomados de documentos que han sido distribuidos pblicamente. Estos temas fueron: Matemticas: representacin de informacin/grficas (SEP 2006a, p.25) Ciencias: materiales/experimentos en torno a las propiedades de los materiales y el agua (SEP 2006b, p.27)

13

Espaol: mbito de estudio/escribir resmenes y biografa de una persona(SEP 2006c, p.20) Todas las asignaturas: incorporacin de temas que se abordan en ms de una asignatura, estudio ms profundo de contenidos fundamentales (SEP 2006d) y trabajo en equipo basado en proyectos (SEP 2006a, 2006b y 2006c).

El desarrollo del instrumento fue llevado a cabo por ACER con asesora de representantes de la SEP y de NCCEP. Se realizaron ajustes al instrumento despus de una puesta a prueba - se hicieron cambios en el fraseo de algunas preguntas, el orden de otras preguntas y el agrupamiento y distribucin de las opciones de respuesta. Los cuestionarios a maestros utilizados constaron de 32 preguntas y tom 25 minutos en responder. Cuestionarios para directores Los cuestionarios para directores tambin fueron desarrollados por ACER con la asesora de NCCEP y la SEP. Las respuestas de los cuestionarios para directores se utilizaron para crear variables sobre las caractersticas de las escuelas (tambin formando variables externas) y para recolectar informacin acerca de la percepcin de los directores sobre el efecto de la RS en la gestin escolar y la dinmica de cooperacin entre maestros. Los cuestionarios para directores constaron de 23 preguntas y tom aproximadamente 30 minutos en responderlas. Cuestionario para estudiantes El cuestionario para estudiantes que se aplica con la prueba PISA se administr al mismo tiempo que la prueba SEP-ISA, la informacin de los estudiantes se tom de esta fuente. Cierto nmero de tems sobre prcticas docentes en matemticas, ciencias y espaol (5 tems por asignatura) se incluyeron en el cuestionario para estudiantes SEP-ISA. Estos tems concuerdan con las prcticas docentes que se pidi de los maestros en sus cuestionarios y fueron comparados con las respuestas de los maestros. Traduccin de los instrumentos Cada uno de los instrumentos arriba mencionados fue elaborado en ingls y traducido al espaol, con un proceso adicional de verificacin. Dos partes estuvieron involucradas en el proceso: NCCEP y un traductor certificado en Australia. Para cumplir con los tiempos establecidos para la evaluacin, los roles de traduccin y verificacin de la traduccin se fueron rotando entre ambas partes.
14

Puesta a prueba de los instrumentos La puesta a prueba de los cuestionarios para los maestros fue llevada a cabo a finales de marzo 2010 con un grupo de 10 escuelas secundarias, 6 escuelas en Monterrey, 1 escuela en Veracruz, y 3 telesecundarias tambin en Veracruz. Se recibieron un total de 89 respuestas por parte de los maestros. Adems de poner a prueba los tems de los cuestionarios para maestros, tambin se puso a prueba el sistema de recopilacin de informacin. Las respuestas de los maestros fueron escaneadas y enviadas a ACER. Se llev a cabo un anlisis (frecuencias y anlisis de datos incompletos) de las respuestas y se realizaron modificaciones a los cuestionarios basndose en esta informacin y despus de una consulta entre ACER y NCCEP. 2.3 RECOLECCIN DE LA INFORMACIN Se visitaron 314 escuelas secundarias para administrar los cuestionarios para directores y para todos los maestros de matemticas, ciencias y espaol. Estas visitas se llevaron a cabo en el curso de 8 semanas entre mayo y junio del 2010. Cinco coordinadores de NCCEP condujeron a un equipo de 18 encuestadores, que llevaron a cabo las visitas a las escuelas. NCCEP capacit a los investigadores y les proporcion un manual para el trabajo de campo con los pasos a seguir durante las visitas a las escuelas (ver Reporte de Avance 2). Se solicit permiso a las autoridades educativas estatales para visitar las escuelas. A los encuestadores se les proporcionaron cartas de presentacin tanto de NCCEP como de la SEP, tambin se les inform a los directores y a los maestros como sera utilizada la informacin y que sera de carcter confidencial. Durante las visitas, los encuestadores comenzaron por describir el propsito de la evaluacin al director y mostrando la carta de presentacin y el cuestionario para los directores. Despus procedieron a administrar los cuestionarios a todos los maestros de matemticas, ciencias y espaol que estuvieran presentes ese da. Si un maestro estaba dando clase en ese momento, se dejaba el cuestionario para ser recogido ms tarde durante el da.

15

Problemas durante la recoleccin de la informacin Durante el proceso de recoleccin de informacin, los equipos encontraron ciertos problemas que dificult su acceso a varias escuelas de las 314 de la muestra. 2.4 ANLISIS DE LA INFORMACIN Los encuestadores fueron capacitados para ingresar la informacin en una hoja de clculo preparada por ACER. Tambin se les proporcion una gua de acompaamiento (ver Reporte de Avance 2). Despus de visitar las escuelas, se les peda a los encuestadores ordenar las respuestas de los directores y de los maestros e ingresarlas en la hoja de clculo. Una vez realizadas las visitas a todas las escuelas, las respuestas de los maestros y las hojas de clculo fueron ordenadas por NCCEP. Dos miembros del personal de ACER llevaron a cabo una capacitacin el 1 y 2 de julio de 2010 acerca de cmo evaluar y codificar las respuestas de los maestros en relacin a los escenarios en matemticas, ciencias y espaol, siguiendo una rbrica de evaluacin. Una vez que se evaluaron y codificaron las respuestas para los escenarios, los cdigos se ingresaron en una hoja de clculo. Durante este proceso, un supervisor de calidad, al azar, verificaba la informacin que se estaba ingresando en las hojas de clculo al igual que los cdigos para los escenarios. Una vez que se haba ingresado toda la informacin, el supervisor llev a cabo ms revisiones al azar. Las hojas de clculo con las respuestas de (i) cuestionarios para maestros, (ii) escenarios de aprendizaje y (iii) cuestionarios para directores fueron enviados a ACER a mediados de agosto 2010. Las hojas de clculo se exportaron y analizaron utilizando el paquete estadstico SPSS. Durante el primer proceso de verificacin de la informacin y limpieza de datos, se verificaron los cdigos de identificacin antes de fusionarse. Alrededor del 2.5% de los casos en el conjunto de datos (i) y (ii) no pudo ser empatado y se requirieron ms verificaciones. Un pequeo nmero de cdigos fueron corregidos y se fusionaron los dos archivos. El cdigo CCT es utilizado para identificar a las escuelas. Las respuestas de los maestros fueron agregadas al nivel escuela obteniendo as promedios para escuelas. Despus de la
16

limpieza de datos, alrededor del 9 % de los casos en el conjunto de datos (ii) y (iii) no pudieron ser empatados. Adicionalmente, slo el 70 % de la informacin de los maestros y alumnos a nivel escuela pudo ser empatada. Esto se debi principalmente a que los cuestionarios a maestros y alumnos se aplicaron en momentos diferentes. Como resultado de esto, el nmero de casos analizados varia ligeramente en los diferentes niveles de anlisis agregado que se menciona en captulos subsecuentes.

3. RESULTADOS En las 314 escuelas visitadas se administraron cuestionarios a directores y maestros de las asignaturas de matemticas, ciencias y espaol, preguntndoles acerca de su experiencia y percepcin sobre la RS (la construccin de los cuestionarios se describi con mayor detalle en el Captulo 2). A los alumnos de estas escuelas se les administr un da diferente, un pequeo nmero de tems sobre la prctica docente como parte del cuestionario para alumnos para la prueba SEP-ISA. Se recolect informacin de un total de 296 directores, 2,216 maestros y ms de 15,000 alumnos. Este captulo describe los resultados del anlisis de la informacin que se obtuvo de estos cuestionarios. En especial: (1) la satisfaccin de los directores y maestros en relacin a la implementacin de la RS y a los programas de capacitacin y los materiales que la apoyan, (2) el nmero de programas de capacitacin en relacin a la RS en los que participaron los maestros; (3) el grado en el que la prctica docente en estas escuelas cumpli con las expectativas de la RS; y (4) la relacin entre estos factores y el logro acadmico de los alumnos en matemticas, ciencias y espaol. Cuando fue relevante, se realizan comparaciones tambin entre las tres asignaturas y las modalidades de escuelas secundarias en Mxico (general, tcnica y telesecundaria). 3.1 PERCEPCIN DE LA RS Se les present a los directores y maestros una serie similar de 22 tems en una escala Likert (con opciones de respuesta: totalmente en desacuerdo, en desacuerdo, de acuerdo y totalmente de acuerdo) que peda su percepcin sobre los propsitos generales de la RS, sobre los cursos de capacitacin y sobre los materiales de apoyo docente y el sobre el impacto de la RS en las prcticas de enseanza y aprendizaje en su escuela.

17

Atendiendo a las recomendaciones de los maestros durante la puesta en prueba de los cuestionarios para maestros, se les pregunt tambin si su escuela tena el equipo necesario para apoyar la implementacin de la RS. Este rubro tratado como un tem individual no se incluy en ninguna de las escalas sobre la percepcin de la RS. Este aspecto, sobre el apoyo que las escuelas y la SEP proporcionan a los maestros durante la implementacin de la RS se investig ms a fondo durante las entrevistas con una muestra ms pequea de directores y maestros. Percepcin de los maestros de la RS Las respuestas de los maestros en cuanto a su percepcin de la RS se presentan en la Tablas 2 y 3. Como muestran las tablas, fueron cuatro los aspectos examinados acerca de su actitud hacia la RS :(1) su comprensin de los propsitos y objetivos de la RS, (2) su actitud hacia la capacitacin en relacin a la RS, (3) su actitud hacia los materiales de apoyo docente relacionados a la RS y (4) su opinin acerca de los efectos e impacto potencial de la RS.

18

Tabla 2: Actitud de los maestros hacia la RS, por enunciado

Totalmente de acuerdo (%) Propsitos y objetivos de la RS Entiendo el propsito general de la RS He recibido informacin adecuada para ensear de acuerdo a lo requerido por la RS Los propsitos que se plantean en la RS son fcilmente aplicables en el aula Entiendo lo que se espera de mi como profesor enseando de acuerdo a la RS Entiendo lo que se espera de mis alumnos bajo la RS Cursos de desarrollo Profesional RS No he participado en los cursos de capacitacin Los cursos de capacitacin a los que he asistido me han preparado lo suficiente para ensear de acuerdo a la RS Los cursos de capacitacin a los que he asistido fueron de una duracin apropiada. Considero que el contenido de los cursos fue relevante para los propsitos de la RS Los cursos a los que he asistido han transformado mi prctica docente Se me ha informado sobre cmo participar en cursos adicionales que pudiera necesitar para implantar la RS Materiales de apoyo para la enseanza RS No he recibido materiales de apoyo Los materiales de apoyo docente que he recibido son adecuados a la RS Los materiales de apoyo que he recibido son adecuados para las necesidades de los alumnos Los materiales que he recibido son de mejor calidad que materiales anteriores He recibido suficientes materiales para poder llevar a cabo mi prctica docente de acuerdo a la RS Estoy satisfecho con la calidad de los materiales que he recibido como apoyo 19.4 12.1 67.2 53.8 8.7 26.7 3.0 5.8 1.6 1.6 De acuerdo (%) En desacuerdo (%) Totalmente en desacuerdo (%) Error (%)

8.2 24.3 24.3

45.8 63.9 62.2

38.9 8.2 9.6

5.1 1.9 2.3

2.1 1.7 1.6

13.6 5.0 45.4 41.2 5.2 3.2

7.5

47.5

36.6

5.0

3.4

8.6

55.3

29.3

3.9

2.9

14.5 5.6

61.3 36.8

18.8 39.0

2.1 15.5

3.4 3.0

17.4 10.0 5.8 57.7 43.0 25.1 41.7 4.4 6.2 2.8 3.3

7.1 4.6

44.2 27.8

37.8 51.3

6.9 13.4

4.0 2.8

5.0

36.3

46.6

9.1

3.1

19

desde la reforma Los materiales que he recibido como apoyo a la RS son fciles de usar en el aula Impacto de la RS en la prctica docente Desde que inici el proceso de reforma ha mejorado la manera en la que los alumnos interactan entre s Desde la reforma, los maestros trabajan ms colaborativamente en la escuela El cambio metodolgico propuesto por la RS ha incrementado el inters de los alumnos por aprender En mi opinin, en el futuro la RS mejorar el aprendizaje y rendimiento escolar de los alumnos Otro Mi escuela cuenta con los equipos necesarios (computadora, internet, reproductor de DVD, etc.) para apoyar la enseanza de acuerdo a la RS 6.8 44.8 37.7 7.9 2.9

7.5

57.0

29.5

3.8

2.2

6.5

42.4

41.2

7.6

2.3

4.5

41.5

43.6

7.8

2.7

10.9

52.9

27.4

6.5

2.3

13.1

33.6

31.1

20.1

2.1

Nota: * Este tem se agreg a esta seccin del cuestionario despus de los comentarios realizados por los maestros durante la puesta en prueba de los instrumentos. Tabla 3: Actitud de los directores hacia la RS, por enunciado
Totalmente de acuerdo % Propsitos y objetivos de la RS Entiendo el propsito general de la RS Mi escuela ha recibido informacin adecuada para ensear de acuerdo a lo requerido por la RS Entiendo lo que se espera de mi como director enseando de acuerdo a la RS Entiendo lo que se espera de mis maestros bajo la RS Entiendo lo que se espera de mis alumnos bajo la RS Cursos de desarrollo Profesional RS Ninguno de los maestros ha participado en los cursos de capacitacin Los cursos de capacitacin preparan a los maestros lo suficiente para ensear de acuerdo a la RS 39.3 26.8 55.9 53.9 3.4 15.3 0.3 2.7 1.0 1.4 De acuerdo % En desacuerdo % Totalmente en desacuerdo % Error %

41.4 42.7 44.1

52.2 52.2 50.5

5.4 4.4 4.7

0.7 0.3 0.3

0.3 0.3 0.3

6.4 14.8 54.8 25.8 3.9 0.7

20

Los curos de capacitacin fueron de una duracin apropiada El contenido de los cursos fue relevante para los propsitos de la RS Mis maestros entienden cmo acceder a los cursos adicionales que necesitan Materiales de apoyo para la enseanza RS La escuela no ha recibido materiales de apoyo Los materiales de apoyo docente recibidos son adecuados a la RS Los materiales de apoyo recibidos son adecuados para las necesidades de los alumnos Los materiales recibidos son de mejor calidad que materiales anteriores Mis maestros han recibido suficiente materiales para ensear de acuerdo a la RS Estoy satisfecho con la calidad de los materiales que he recibido como apoyo desde la reforma Impacto de la RS en la enseanza y el aprendizaje Desde que inici el proceso de reforma ha mejorado la manera en la que los alumnos interactan entre s Desde la reforma, los maestros trabajan ms colaborativamente en la escuela El cambio metodolgico propuesto por la RS ha incrementado el inters de los alumnos por aprender La RS mejorar el aprendizaje y rendimiento escolar de los alumnos Otro Mi escuela cuenta con los equipos necesarios (computadora, internet, reproductor de DVD, etc.) para apoyar la enseanza de acuerdo a la RS*

12.0 21.6 19.1

47.7 58.7 50.2

36.7 17.3 26.9

3.2 1.8 2.8

0.4 0.7 1.1

10.8 19.2 14.5 57.9 50.2 17.0 26.1 4.4 3.3 1.5 1.8

16.6 9.2

49.5 32.9

25.1 42.0

3.5 9.5

1.1 2.1

12.4

43.1

31.1

6.7

2.5

13.6

57.3

24.7

2.7

1.7

16.3

56.3

23.4

2.4

1.7

12.5

47.1

35.6

3.1

1.7

23.1

58.3

14.6

2.7

1.4

18.3

32.2

28.5

18.0

2.0

Nota: * Este tem se agreg a esta seccin del cuestionario despus de los comentarios realizados por los maestros durante la puesta en prueba de los instrumentos. En las respuestas tanto de los directores como de los maestros, los niveles ms altos de acuerdo fueron con los enunciados relacionados a su entendimiento de los propsitos de la RS y con lo que se espera de ellos y de sus alumnos bajo esta reforma. Alrededor del 86-

21

88 % de los maestros y 93-95 % de los directores estaban de acuerdo con estas afirmaciones. A la inversa, slo una cuarta parte de los maestros y alrededor del 42 % de los directores estuvieron de acuerdo con el enunciado que afirma que los maestros haban recibido suficiente material de apoyo para ensear de acuerdo a la RS, que fue el enunciado que recibi la proporcin ms pequea de acuerdo. Un anlisis factorial confirm que el agrupamiento de los tems en el cuestionario fue apropiado. Se realiz un anlisis Rasch, utilizando el rating scale model (Masters, 1982), para generar un puntaje para cada uno de los maestros o directores en cada seccin del cuestionario. Los puntajes se estandarizaron para obtener una media de 50 y una desviacin estndar de 10. Estos puntajes de actitud hacia la RS se utilizaron despus en anlisis subsecuentes. Mientras que los puntajes absolutos son mucho ms altos entre los directores que entre los maestros, hay dos similitudes importantes. Los directores dieron la evaluacin ms alta a los propsitos de la RS (la media del puntaje estandarizado 89.8), al igual que los maestros (la media del puntaje estandarizado 62.5). Tanto directores (62.1) como maestros (49.2) evaluaron lo ms bajo a los materiales disponibles en las escuelas para apoyar la RS. Entre las respuestas de los maestros, su actitud hacia los materiales, tambin present la desviacin estndar ms grande. La Tabla 4 muestra un resumen de los puntajes estandarizados de estas actitudes tanto de directores como de maestros.
Tabla 4: Actitud hacia la RS, por escala, directores y maestros

Aspecto de la RS Propsitos y uso de la RS Cursos de capacitacin de la RS Materiales de la RS Efectos de la RS

Media 62.5 52.7

Maestros SD 18.8 18.1

n 2090 1825

Media 89.8 64.2

Directores SD 29.2 27.0

n 293 281

49.2 50.8

21.6 13.9

1735 2144

62.1 69.1

28.5 28.6

263 287

Se agregaron los puntajes estandarizados de las actitudes de los maestros para cada escuela, y se construy un puntaje estandarizado para cada escuela, que es la media de
22

los puntajes estandarizados de los maestros. Estas medias se compararon con los puntajes estandarizados de los directores para cada escuela. En cada escala de actitud hacia la RS hubo una correlacin baja a moderada entre los puntajes estandarizados de los maestros y la de los directores (ver Tabla 5). El nivel ms alto de acuerdo fue en el efecto de la RS (0.33). Hubo una variacin mucho mayor entre las escuelas, en las actitudes de los maestros, y esta variacin parece incrementar cuando los puntajes estandarizados de los directores incrementen. En otras palabras, en las escuelas en las que el director es muy positivo en cuanto a los efectos de la RS, hay una variacin mucho mayor en las actitudes de los maestros hacia las reformas que aquellas escuelas en las que el director es ms negativo acerca de las reformas.

Tabla 5: Correlacin entre la actitud de los directores y los maestros hacia la RS, por escala Escala Correlacin 0.26 Propsitos y uso de la RS 0.21 Cursos de capacitacin de la RS 0.26 Materiales de la RS 0.33 Efectos de la RS

Se encontraron correlaciones significativas y de tamao mediano entre las respuestas de los directores y las respuestas de los maestros en las cuatro escalas, las ms fuertes referidas a los efectos de la RS (ver Tabla 5 arriba). Tomando en cuenta la existencia de estas correlaciones, las siguientes secciones de este reporte se enfocarn en los resultados de las respuestas de los maestros, que es el foco principal de esta evaluacin. Diferencia por asignatura Los maestros de todas las asignaturas estuvieron ms fuertemente de acuerdo con los enunciados acerca de su comprensin de los propsitos de la RS. Slo hay ligeras diferencias en trminos de su comprensin de la RS y perspectiva de los cursos de capacitacin y los efectos de la RS (ver tabla 6); sin embargo, existe una diferencia significativa en cuanto a los puntajes estandarizados de los materiales. Como muestra la tabla, de los maestros de las tres asignaturas, los maestros de ciencias estuvieron menos de acuerdo con los enunciados relacionadas a los materiales que recibieron como parte de la RS; mientras que los maestros de matemticas estuvieron ms de acuerdo con la RS.

23

Tabla 6: Actitud de los maestros hacia la RS, puntaje por escalas, por asignatura

Asignatura

Propsitos de la RS 61.9 18.5 753 62.3 19.0 665 63.8 18.9 614 62.5 18.8 2090

Ciencias

Media SD n Espaol Media SD n Matemticas Media SD n Total Media SD n

Cursos de Materiales capacitacin de la RS de la RS 51.8 47.0 18.4 21.5 646 614 53.9 49.3 18.7 21.9 585 542 53.0 51.9 17.1 21.3 544 528 52.7 49.2 18.1 21.6 1825 1735

Efectos de la RS 51.2 14.2 766 51.2 14.2 688 50.3 13.4 629 50.8 13.9 2144

Es de inters mostrar, que a pesar de que la diferencia no es significativa, los maestros de matemticas tambin estuvieron de acuerdo con los enunciados acerca de su comprensin de los propsitos de la RS. Sin embargo, en comparacin con los maestros de las otras asignaturas, dieron el puntaje ms bajo a los efectos percibidos de la RS. Diferencias por tipo de escuela Hay tres modalidades de escuela secundaria de Mxico: General, Tcnica y Telesecundaria. Esta seccin aborda las diferencias en las respuestas de los maestros entre modalidades (ver Tabla 7). Las respuestas de los maestros en las cuatro escalas de actitud, cuando se analizan por tipo de escuela, muestran slo ligeras diferencias, ninguna estadsticamente significativa.

24

Tabla 7: Actitud de los maestros hacia la RS, puntaje por escalas, por tipo de escuela

Modalidad de la escuela General Media SD n Tcnica Media SD n Telesecundaria Media SD n Total Media SD n

Propsitos Cursos de Materiales Efectos de la RS capacitacin de la RS de la RS de la RS 62.5 52.1 49.0 51.1 18.9 18.1 22.0 14.3 1256 1084 1039 1300 63.4 53.7 49.6 50.4 17.8 18.1 21.0 13.8 575 505 479 577 60.4 53.3 49.4 50.4 20.1 18.1 21.2 12.7 259 236 217 267 62.5 52.7 49.2 50.8 18.8 18.1 21.6 13.9 2090 1825 1735 2144

Vale la pena notar, la similitud de los puntajes relativos a los materiales entre los maestros en las diferentes modalidades de escuela. Una de las razones por las que se incluy una serie de enunciados para evaluar las actitudes de los maestros en relacin a los materiales de apoyo docente, fue el estudiar la percepcin de los maestros de telesecundaria acerca de los materiales que recibieron, ya que dependen ms de los materiales de apoyo, que incluyen los videos y programas de televisin. Factores asociados con la actitud hacia la RS Esta seccin describe las relaciones entre los antecedentes de los maestros y escuelas y sus actitudes hacia la RS, en relacin a las cuatro escalas mencionadas arriba. stas se realizaron mediante un anlisis de correlacin, que no permite obtener conclusiones causales en trminos de cmo estos factores influencian el logro. Aun as, los resultados de un anlisis de correlacin, pueden proporcionar evidencia relacionada a los factores que estn ms fuertemente relacionados con las actitudes de la RS que otros. La tabla 8 muestra el coeficiente de correlacin entre las variables continuas recolectadas de los maestros y sus actitudes hacia las RS en las cuatro escalas. Debido al nmero de variables, slo se muestran aquellas en las que el coeficiente de correlacin excede 0.10 en al menos una instancia. Una relacin no trivial con actitudes hacia la RS se encontr en el tipo de contrato y si han participado en cursos de capacitacin (cualquier tipo).
25

Tabla 8: Variables de los maestros correlacionadas con actitudes hacia la RS, todos los maestros

Variable de los maestros

Propsitos de la RS

Aos como -.014 maestro Aos enseando -.004 en esta escuela Nota: *p 0.05, ** p 0.01

Cursos de capacitacin de la RS .184** .150**

Materiales de la RS .117** -110**

Efectos de la RS -.058** -.044*

Se encontraron relaciones estadsticamente significativas, pero pequeas, entre la experiencia y la actitud de los maestros hacia la RS. Maestros con ms aos de experiencia estuvieron ms de acuerdo con los enunciados relacionados con la satisfaccin de los cursos de capacitacin y apoyo docente, proporcionados en apoyo a la RS. Sin embargo, hay una pequea relacin negativa, estadsticamente significativa, entre la experiencia y los enunciados relacionados a los efectos de la RS. Se encontr tambin, que haber participado en cursos de capacitacin estaba correlacionado con las actitudes sobre la capacitacin de la RS. Sin embargo, el nmero de horas de curso no se relaciona con las actitudes sobre capacitacin de la RS. Los maestros que participaron en cursos de actualizacin de la RS tuvieron una actitud ms positiva hacia dichos cursos. Haber participado en cursos de capacitacin est relacionado a diferencias en las actitudes, en diferentes grados. La tabla 9 compara la media de las actitudes de los maestros sobre los cursos de actualizacin de la RS, entre maestros que han participado en cursos y los que no. Muestra que hay diferencias estadsticamente significativas entre los maestros que han participado en Cursos Generales y aquellos que no. Los maestros que han participado en cursos de capacitacin, tienen puntajes de aproximadamente un tercio de desviacin estndar que las de los maestros que no participaron en estos cursos.

26

Tabla 9: Actitud hacia los cursos de actualizacin de la RS por tipo de curso Media del puntaje Prueba de la actitud hacia t capacitacin de la RS Participado No t participado Talleres Generales 53.0 49.2 2.5 de Actualizacin Cursos Generales de 54.0 50.8 3.8 Actualizacin Cursos Bsicos de 53.5 51.7 2.1 Formacin Continua Otro(s) curso(s) 55.1 51.7 3.7

p .01 .001 .03 .001

A nivel escuela, la actitud hacia la RS de los directores y los maestros, no se relaciona con el tamao ni la localidad de la escuela (urbana o rural). De las variables a nivel escuela obtenidas de los cuestionarios para directores, la nica correlacin estadsticamente significativa fue entre la proporcin de alumnos indgenas en la escuela y la actitud de los directores sobre el material de la RS (ver Tabla 10). La diferencia significativa se encuentra entre las escuelas con menos de 10 % de alumnos indgenas, donde los directores tenan una opinin ms positiva acerca de los materiales de la RS, en comparacin con las escuelas con una proporcin mayor de alumnos indgenas. Debe notarse sin embargo, que hubo pocas escuelas en la muestra con ms del 10 % de alumnos indgenas inscritos. Tabla 10. Actitud de los directores sobre material RS por proporcin de alumnos indgenas Proporcin de alumnos Puntaje medio de la Nmero de escuelas indgenas actitud de los directores hacia los materiales de la RS Menos del 10% 65.4 204 10% o ms, pero menos 55.9 33 del 40% 40% o ms 42.5 20

27

3.2 CURSOS DE CAPACITACIN Como resultado de consultas con la SEP, se estableci que este proyecto tuviera un foco particular en cursos de capacitacin en apoyo a la RS. Por lo tanto, se pregunt a los maestros acerca del tipo y nmero de cursos de capacitacin en los que participaron y los motivos por los que asistieron o no. Los resultados que se describen aqu, junto con resultados adicionales sobre los factores relacionados a la formacin profesional de los maestros que se correlacionan con el nmero de cursos de capacitacin en los que participaron. Nmero de cursos de capacitacin Una proporcin pequea (6%) de los maestros reportaron nunca haber participado en un curso de capacitacin desde la implementacin de la RS. La gran mayora ha participado en al menos un curso de capacitacin. Debe notarse, que esto contradice lo encontrado en los cuestionarios, en la seccin de actitudes hacia cursos de capacitacin de la RS, donde el 13.6 % de los maestros reportaron no haber participado en ningn curso de capacitacin de la RS. El tipo y nmero de cursos que los maestros reportaron haber participado se resume en la Tabla 11. Se les pidi a los maestros que especificaran el tipo de curso en los que participaron: Talleres Generales de Actualizacin (TGA), Cursos Estatales de Actualizacin (Cursos), Cursos Bsicos de Formacin Continua (Bsicos) u otro tipo de curso. La mayora de los maestros ha participado en un curso TGA. En promedio, los maestros han acumulado 32 horas de cursos TGA desde la implementacin de la RS. Alrededor de la mitad de los maestros ha participado en cursos estatales de capacitacin. El promedio de horas que los maestros han acumulado en este tipo de curso es de aproximadamente 42. Slo la mitad de los maestros tambin ha participado en Cursos Bsicos, pero hay una gran variedad en cuanto a las horas acumuladas para este tipo de curso. Aproximadamente un cuarto de los maestros ha participado en otro tipo de curso de capacitacin.

28

Tabla 11: Tipo y cantidad de capacitacin tomada, todos los maestros

Tipo de capacitacin Talleres Generales Actualizacin Cursos Generales Actualizacin Cursos Bsicos Formacin Continua Otro(s) curso(s) de de de

Participado (%) 86.5 54.1 50.7 27.1

Nmero total de horas (media) 32.2 41.7 38.4 47.0

Acceso a cursos de Capacitacin Adems del nmero de cursos de capacitacin en los que los maestros han participado desde la implementacin de la RS, se les pregunt los motivos por los que asistieron, si hubieran querido asistir a ms cursos y el por qu. Sus respuestas se resumen en la Tabla 12 y en la Tabla 13. La mayora de los maestros (poco menos del 70%) estableci inters personal y profesional en la materia como una de las razones para participar en los cursos de capacitacin. Despus de ste, el motivo ms comn fue que los cursos son requeridos por sus escuelas (45 %) y cuentan para la adquisicin de puntos para Escalafn Docente o Carrera Magisterial (35 %). Un cuarto de los maestros ha participado en cursos de capacitacin porque son de carcter obligatorio para la Secretara de Educacin Estatal. Un pequeo nmero de maestros expres otras razones para participar en cursos de la RS. Aproximadamente un cuarto de estos maestros queran actualizar su conocimiento existente sobre prcticas pedaggicas. Otros estaban interesados en temas especficos (incluyendo Tecnologas de la Informacin y la Comunicacin TIC), educacin ambiental y manejo del saln de clases). Algunos sintieron que estos cursos seran una buena oportunidad para conocer y compartir experiencias con otros maestros.
Tabla 12: Razones por emprender capacitacin, todos los maestros Razones por participar en cursos de capacitacin Inters personal o profesional en el tema Requerido por el director de la escuela Acumulacin de puntos para Escalafn docente o Carrera Magisterial Requerido por las oficinas estatales de la SEP Otro(s) % 69.2 45.3 35.5 25.9 6.7 29

Poco menos de la mitad de los maestros (46 %) afirm querer participar en ms cursos de capacitacin en relacin a la RS de los que fue posible. De estos maestros, la razn principal por la que no se pudo fue restriccin de tiempo debido a razones personales o profesionales. Una proporcin similar de estos maestros postul otras razones por no haber participado en la cantidad de cursos de capacitacin que hubieran deseado. La razn ms comn que ofrecieron fue la falta de informacin oportuna, algunos maestros mencionan que cuando reciban la informacin acerca del curso en el que queran participar, ya estaba lleno o ya se haba llevado a cabo, y otros maestros afirmaron no haber recibido informacin acerca de estos cursos de la RS. La siguiente razn ms comn mencionada por los maestros fue, una vez ms, restricciones de tiempo, para muchos maestros el horario de los cursos, en las maanas o los fines de semana, resulta un inconveniente. Adicionalmente, un nmero de maestros afirm que el lugar donde se impartan los cursos estaba muy lejos.
Tabla 13: Barreras para participar en capacitacin, todos los maestros

Razones por no haber participado en cursos de capacitacin No tuve tiempo debido a responsabilidades familiares o personales No tuve tiempo debido a mi horario de trabajo El curso era demasiado caro o yo/mi escuela no lo poda pagar No hubo suficiente cupo en el curso El curso que quera no se dio en mi estado No hubo apoyo en mi escuela No cumpla con los requisitos (experiencia, antigedad)

% 13.0 12.7 9.2 8.3 6.4 6.3 5.4

Tambin se les pregunt a los maestros que propusieran qu tipo de temas de capacitacin les hubiera gustado que se trataran en los cursos. Aproximadamente un tercio postul cursos generales de prctica docente. Otros cursos postulados fueron en las reas de TIC y tecnologas digitales, cmo implementar la RS en el aula de clases y temas ms especficos, cmo desarrollar proyectos o cmo ensear contenidos particulares en su asignatura.

30

A nivel escuela, se pregunt a los directores acerca del proceso para decidir a qu cursos de capacitacin asistiran los maestros. De acuerdo con los directores, los maestros tienen el rol ms importante en esta decisin (Tabla 14). Slo un poco menos de un tercio de los directores report que la Secretara Pblica Estatal y los coordinadores de maestros en las escuelas tambin tienen roles importantes al respecto. La organizacin sindical es percibida como menos importante en la decisin de a qu cursos asistir. Tabla 14. Importancia de roles en la seleccin de cursos de capacitacin Fuente Muy importante Algo importante No importante Maestro 54.9 4.4 1.1 Director 44.0 13.6 2.7 Oficinas Estatales de la 31.3 12.7 7.8 SEP Maestro 30.4 13.3 7.3 principal/Coordinador de capacitacin SNTE 15.8 16.2 15.1 Otro(s) 7.3 1.6 1.6 Factores asociados con capacitacin Se llev a cabo un anlisis de correlacin con las variables de capacitacin y variables de experiencia profesional. La Tabla 15 presenta las variables que fueron significativamente correlacionadas, donde los coeficientes de correlacin fueron mayores a 0.10. La experiencia de los maestros se correlaciona con la tendencia de participar en los tres tipos de cursos de capacitacin de la RS. Maestros que imparten ms horas son ligeramente ms propensos a participar en algn tipo de curso de capacitacin de la RS.
Tabla 15: Variables continuas de formacin profesional correlacionadas con capacitacin de la RS, todos los maestros

Aos maestro Aos enseando en esta escuela Horas a la semana enseando la asignatura

Talleres Generales como .241** .222**

Cursos Estatales .272**. .220**

Cursos Bsicos de FC .109** .078**

Ningn curso -.146** -.142**

.114**

.146**

.070

-.071**

31

Nota **p<0.01 Tambin se encontr que la asistencia de los maestros a cursos de capacitacin, vara de acuerdo al tipo de contrato que tienen. Aquellos con contratos ms permanentes asistieron a ms cursos. Esta variacin se presenta en la Tabla 16, que resume el porcentaje de maestros con diferentes contratos que ha asistido a diferentes cursos de capacitacin, y la media de cursos de capacitacin, donde la variacin es estadsticamente significativa ( 0.05). Como se mencion anteriormente, un tercio de todos los maestros que particip en cursos de capacitacin de la RS, postul la adquisicin de puntos para Escalafn Docente o Carrera Magisterial, como una de las razones por hacerlo. Un anlisis de la variacin entre las respuestas de los maestros en los diferentes tipos de escalas de salario confirm esto. Como slo menos del 4 % de los maestros estaban en dos escalas salariales, se excluyeron de este anlisis. Tabla 16: Asistencia a cursos de capacitacin por tipo de contrato, todos los maestros Permanente Temporal Temporal ilimitado limitado Talleres 89.7 82.4 63.6 Generales Cursos Estatales 59.5 42.8 28.8 Curos Bsicos 53.2 46.8 31.8 Otro(s) curso(s) 28.3 20.3 17.4 Horas Media de las horas Media de las horas Media de las horas Talleres, horas 33 28 31 totales Cursos, horas 43 35 25 totales

La Tabla 17 muestra un resumen de los porcentajes de maestros en las diferentes escalas salariales que han participado en diferentes tipos de cursos de capacitacin, donde la variacin es estadsticamente significativa ( 0.05). Como la tabla muestra, la variacin ms notable se da en relacin a los Cursos Estatales, en los que han participado significativamente ms maestros de Carrera Magisterial que de Escalafn Docente.

32

El nmero de horas en Cursos Estatales en los que han participado los maestros de Carrera Magisterial tambin fue significativamente mayor. Maestros de Carrera Magisterial tambin participaron ms en Talleres Generales. Tabla 17: Asistencia a cursos de capacitacin por escala salarial, todos los maestros Escalafn docente Carrera Ninguna de las Magisterial escalas Talleres 84.3 92.9 83.1 Generales Cursos Estatales 49.8 76.4 44.2 Curos Bsicos 50.1 58.7 47.4 Otro(s) curso(s) 24.8 28.2 28.8 Ninguno de los 5.1 2.4 9.9 cursos anteriores Adems de los factores arriba mencionados, la modalidad de la escuela tambin se correlacion con la asistencia de maestros a cursos de capacitacin (ver Tabla 18). La variacin ms grande de nuevo aparece para Cursos Estatales. Los maestros de telesecundarias asistieron significativamente ms a este tipo de cursos que los maestros de escuelas generales o tcnicas. Los maestros de telesecundaria participaron ms en Cursos Bsicos; sin embargo, participaron menos en Talleres Generales. La diferencia en la cantidad de Talleres Generales en los que participaron los maestros de telesecundarias tambin es estadsticamente significativa (media de 27 horas, comparado con 33 horas para maestros en escuelas generales y tcnicas). No hay una diferencia estadsticamente significativa en la asistencia a cursos de capacitacin por maestros de diferentes asignaturas. Tabla 18: Asistencia a cursos de capacitacin por modalidad de escuela, todos los maestros Tipo de General Tcnica Telesecundaria capacitacin Talleres 87.0 87.6 81.7 Generales Cursos Estatales 50.2 57.4 65.5 Curos Bsicos 49.4 49.7 58.8 Ninguno de los 6.9 3.8 6.8 cursos anteriores

33

3.3 PRCTICA DOCENTE Para conocer las ideas de los maestros y sus prcticas docentes, los cuestionarios para maestros incorporaron un nmero de tems preguntndoles acerca de la frecuencia en la que ciertas prcticas docentes se llevan a cabo en una clase en particular. Estos puntajes no necesariamente reflejan la prctica docente de los maestros como resultado de la RS, nicamente su coherencia con prcticas docentes recomendadas como parte de la reforma. Preguntas similares fueron incluidas en los cuestionarios para alumnos. Respuestas de los maestros La Tabla 19 muestra las respuestas de los maestros a estos tems. Las prcticas ms explcitamente relacionadas a las prcticas ms prominentemente mostradas en los materiales de la RS (describir propsitos de aprendizaje, trabajo basado en proyectos, relacionar conceptos a la vida cotidiana, transversalidad de los temas) ocurren con la mayor frecuencia. Esto sugiere que los maestros al menos estn familiarizados con los tipos de actividades docentes que forman parte de la RS. A los alumnos en las clases de estos maestros, tambin se les presentaron 6 de los 15 tems arriba mencionados, los que ms estn vinculados con los principios de la RS, como parte del cuestionario de la prueba SEP-ISA. Puntajes de prctica docente Se realiz un anlisis de los principales componentes para examinar las respuestas de los maestros a los 15 tems relacionados con su prctica docente. Antes del anlisis, se asign a las respuestas una puntuacin de 1 a nunca o casi nunca, 2 a en algunas clases, 3 a en la mayora de las clases y 4 a en todas las clases. Cuatro tems que se consideraron inapropiados para la enseanza bajo la RS (por ejemplo, los alumnos copian informacin del pizarrn o de libros) se recodificaron de tal manera para que 1 aplicara a las respuestas en todas las clases y 4 a respuestas nunca o casi nunca. El anlisis de los componentes principales muestra que un segundo componente, conformado por los cuatro tems que fueron codificados a la inversa, pudiera considerarse, sin embargo, todos los tems contribuyeron al primer componente. Los once tems que conformaron el primer componente principal fueron examinados utilizando el modelo Rasch. Los puntajes de prctica docente se calcularon despus del modelo Rasch para tener una media de 50 y una desviacin estndar de 10.
34

Tabla 19: Prcticas docentes, resumen

En todas las clases % Empleo el tiempo de clases principalmente exponiendo los temas frente a los alumnos Describi de forma explcita los propsitos de aprendizaje Los alumnos trabajan en pequeos grupos para llegar a una solucionar problemas Les pido a los alumnos que sugieran o planean actividades Los alumnos trabajan en proyectos que requieran al menos una semana de trabajo Los alumnos trabajan en grupos en funcin de sus habilidades Trabajo con los alumnos de manera individual Realizo tests para evaluar el aprendizaje Los alumnos copian informacin del pizarrn o de un libro Los alumnos buscan informacin en internet o en la biblioteca de manera individual Los alumnos practican con pruebas anteriores Apoyo a los alumnos para relacionar conceptos de clase a su vida cotidiana Los alumnos aprenden sobre temas que tambin son tratados en otras clases Los alumnos tienen debates o discusiones sobre temas especficos 6.9 En la mayora de las clases % 24.8 En algunas clases % 57.8 Nunca o casi nunca % 9.8 Error %

0.7

27.0 11.5

52.1 51.8

18.1 34.6

1.8 1.5

1.0 0.7

11.9 18.9

33.4 31.9

44.0 36.7

10.0 11.0

0.7 1.4

9.9 4.8 6.4 5.7 10.6

41.4 23.6 31.7 22.9 41.5

38.0 59.5 48.3 54.6 41.7

9.3 11.1 12.4 15.7 5.3

1.3 1.0 1.2 1.1 0.9

4.8 33.2 20.2 8.3

29.4 52.5 50.3 38.7

45.4 13.0 27.7 46.6

19.1 0.4 0.9 5.4

1.3 0.9 0.9 1.0

Diferencias por asignatura Hubo diferencias en la media de los puntajes de prctica docente por asignatura. La Tabla 20 muestra la media del puntaje para cada asignatura. Los maestros de matemticas tuvieron el puntaje ms bajo para prctica docente y los maestros de espaol la ms alta. La diferencia entre maestros de matemticas y ciencias es de 2.5 puntos, o alrededor de un cuarto de una desviacin estndar (tamao del efecto 0.25). Entre maestros de matemticas y espaol, la diferencia fue alrededor de 4.4 puntos, cerca de una mitad de desviacin estndar (tamao del efecto 0.44).

35

Tabla 20: Media del puntaje de las prcticas docentes, por asignatura

Asignatura Matemticas Ciencias Espaol Total

Media 47.7 50.2 52.1 50.1

SD 10.3 9.8 9.5 10.0

n 627 754 678 2059

Es probable que las diferencias de las prcticas docentes entre las asignaturas estn relacionadas con las propuestas de las propias asignaturas. En las clases de espaol, por ejemplo, la discusin y el debate, pudieron haber sido prcticas estndares existentes antes de la implementacin de la RS, por lo que los maestros se sentiran ms cmodos enseando en una manera coherente con las recomendaciones de la RS. A la inversa, se cree frecuentemente que la enseanza de las matemticas debe depender de la memorizacin para el aprendizaje, como las tablas de multiplicar, frecuentemente de manera individual. La enseanza de las ciencias puede combinar prcticas de memorizacin como en las matemticas y el trabajo de equipo y debate del espaol. Diferencias por tipo de escuela (modalidad de escuela) La media del puntaje de las prcticas docentes no vari significativamente entre maestros de escuelas secundarias generales y escuelas tcnicas, como se muestra en la Tabla 21. Los maestros de escuelas telesecundarias, sin embargo, tienen un puntaje medio estadsticamente significativo ms alto que las medias de los maestros en las otras modalidades.
Tabla 21: Media del puntaje de las prcticas docentes, por tipo de escuela

Modalidad
General Tcnica Telesecundaria Total

Media
49.6 49.9 52.3 50.0

SD
9.8 10.0 10.6 10.0

n
1280 574 267 2121

La diferencia entre los maestros de telesecundaria y los maestros de otras escuelas recae en la frecuencia en la que los maestros integran temas y tpicos que tambin son tratados en otras clases, la cantidad de tiempo dedicado a proyectos (normalmente ms de una semana) y la utilizacin de pruebas para evaluar el aprendizaje de los alumnos. Los maestros de telesecundarias afirmaron utilizar estas tcnicas con ms frecuencia que los maestros en las escuelas de otras modalidades.
36

Cursos de actualizacin y puntajes de prctica docente Un anlisis de la correlacin entre los puntajes de prcticas docentes y otras variables asociadas a los maestros mostr que participar en cursos de capacitacin est relacionado con el puntaje de prcticas docentes. Esta variacin es ms fuerte en relacin a Cursos Estatales. Como se coment anteriormente, esto se podra atribuir posiblemente al hecho de que los maestros que han participado en cursos de capacitacin estaran ms familiarizados con las prcticas docentes que conforman la RS. Respuestas a los escenarios de aprendizaje A los maestros tambin se les presentaron dos escenarios de aprendizaje. El primer escenario describi una situacin tpica del aula y relacionada con un tema especfico de la asignatura. El segundo escenario describi un proyecto que poda ser apropiado para cualquiera de las tres asignaturas. Se les pregunt a los maestros como responderan a diferentes aspectos de la situacin descrita en cada uno de los escenarios. Los escenarios fueron evaluados por personal especializado en cada una de las asignaturas, reclutados y coordinados por NCCEP y capacitados por dos miembros del personal de ACER.
Tabla 22: tems de los escenarios y puntajes, por asignatura

tem/Asignatura tem 1:

tem 2:

Ciencias Espaol Matemticas Comn

tems 3 4 5 3

Puntos brutos 3 9 7 6

Las respuestas de los maestros se evaluaron en funcin de las prcticas docentes descritas en la RS. Algunas respuestas podan recibir puntos parciales. Hubo tres tems separados para el escenario comn, cada uno evaluado 0, 1 o 2 para obtener una puntuacin bruta de 6 puntos. La evaluacin para los escenarios especficos por asignatura poda variar, como se muestra en la Tabla 22. Los resultados de los escenarios fueron evaluados utilizando una versin del modelo Rasch desarrollado por Masters (1982). Como todos los maestros respondieron el escenario comn, una sola escala se pudo desarrollar para las respuestas de los escenarios en las tres asignaturas. Los puntajes de los escenarios se estandarizaron para tener una media de 50 y una desviacin estndar de 10. La Tabla 23 muestra un resumen de los puntajes de los escenarios por asignatura. Cuando se incluyen todas las respuestas de los maestros, la escala tiene una media de 50 y una
37

desviacin estndar de 10. Las medias reportadas en la Tabla 23 reflejan que hay informacin faltante para algunos maestros que respondieron a los tems de los escenarios, su puntacin fue eliminada del anlisis. La media general para maestros con informacin en los cuestionarios y los escenarios es de 49.54. No hubo una diferencia estadsticamente significativa entre las asignaturas en la media del puntaje de los escenarios.
Tabla 23: Media de los puntajes de los escenarios, por asignatura

Asignatura Matemticas Ciencias Espaol Total

Media 49.9 49.4 49.4 49.5

SD 9.4 11.6 8.5 10.0

n 674 793 699 2166

La Tabla 24 muestra la media de los puntajes para las tres modalidades de escuela. No hubo una diferencia estadsticamente significativa entre la media de los maestros de escuelas generales y la media de los maestros de escuelas tcnicas, sin embargo, los maestros de las escuelas telesecundarias tuvieron una media menor en el puntaje del escenario, y la diferencia es estadsticamente significativa.
Tabla 24: Media de los puntajes de los escenarios, por tipo de escuela

Modalidad General Tcnica Telesecundaria Total Respuestas de los alumnos

Media 50.0 49.7 46.9 49.5

SD 10.2 9.4 10.1 10.0

n 1322 581 263 2166

Es pertinente recordar que la muestra de escuelas donde se aplicaron los cuestionarios para directores y maestros fue la misma para administrar la prueba SEP-ISA en junio del 2010. Como parte de la administracin de la prueba SEP-ISA, se les pidi a los alumnos responder un cuestionario acerca de ellos y de sus maestros. Seis preguntas en el cuestionario para los alumnos estaban directamente relacionadas con las prcticas docentes, y con las preguntas de prcticas docentes de los cuestionarios para maestros. Se propuso que sera posible empatar las respuestas de los maestros con las clases que impartan, sin embargo, muchos maestros son responsables de ms de una clase en diferentes grados, y sus prcticas docentes pueden variar de acuerdo al grado y grupo de
38

estudiantes que ensean. Adems, el cuestionario para estudiantes se respondi en un momento diferente y es probable que la muestra diseada no se pudiera lograr. Como resultado de esto, la comparacin de las respuestas de los estudiantes con las respuestas de los maestros en los cuestionarios fue limitado: los resultados de los cuestionarios para los maestros fue disponible para 158 escuelas de las 224 en las que se aplic el cuestionario de alumnos (70.5%). En estas escuelas, no hubo una correlacin estadsticamente significativa entre las opiniones de los maestros acerca de su prctica docente y las opiniones de los alumnos de la prctica docente. Relacin entre las actitudes hacia la RS y la prctica docente Las secciones anteriores proporcionaron una descripcin de la respuesta a la RS por escuelas mexicanas, la actitud de los directores y maestros hacia diferentes aspectos de la RS, y la descripcin de los maestros de prcticas docentes en el saln de clases. Esta seccin estudia si las actitudes hacia la RS y las prcticas docentes estn relacionadas. La medida para prctica docente se basa en las descripciones de los maestros como se resume en la seccin anterior. Las actitudes de los directores y maestros hacia los cuatro aspectos de la RS se correlacionan con la prctica docente (ver Tabla 25). Las correlaciones se encuentran entre 0.16 y 0.27, todas estadsticamente significativas. Lo que esto muestra es que los maestros que tienen una actitud ms positiva hacia la RS y ensean en escuelas en las que los directores muestran una actitud ms positiva hacia la RS, tambin reportaron utilizar prcticas docentes que se encuentran ms en lnea con la RS. Sin embargo, la correlacin no muestra causalidad. Debido a que no hay informacin sobre la manera de ensear de estos maestros antes de la RS, existe la posibilidad de que los maestros que estn acostumbrados a ensear de acuerdo a lo que la RS recomienda tienen una actitud ms positiva hacia ella. Tabla 25: Relacin entre la actitud hacia la RS de directores y maestros con sobre prctica docente. Actitud de los Actitud de los directores maestros Aspectos de la RS R p R Propsitos de la RS 0.16 0.017 0.23 capacitacin de la RS 0.16 0.017 0.27 Materiales de la RS 0.21 0.003 0.23 Efectos de la RS 0.16 0.015 0.34 puntajes

p <0.001 <0.001 <0.001 <0.001

39

Los puntajes de prctica docente se obtuvieron de la descripcin que hicieron los maestros de sus prcticas. Tambin se encontr una relacin entre las actitudes hacia algunos aspectos de la RS y el desempeo de los maestros en los escenarios de aprendizaje evaluados por separado (Tabla 26). La relacin que hay entre los puntajes de los escenarios de enseanza y las actitudes sobre los propsitos y efectos de la RS. Las actitudes tanto de los directores como de los maestros sobre los propsitos de la RS se correlacionan positivamente con los puntajes de los escenarios de enseanza, al igual que la actitud de los directores hacia los efectos de la RS. Tabla 26: Relacin entre actitudes hacia la RS y los puntajes de los escenarios de enseanza Actitudes hacia la RS R p Actitud de los maestros hacia los propsitos de 0.18 0.002 la RS Actitud de los directores hacia los propsitos de 0.25 <0.001 la RS Actitud de los directores hacia los efectos de la 0.23 0.001 RS Nuevamente, estas relaciones no proporcionan evidencia de que las actitudes positivas hacia la RS causan un cambio en la prctica docente. Esta correlacin sin embargo, muestra que hay una conexin entre la actitud de los directores hacia los propsitos y efectos de la RS y el desempeo de los maestros ante los problemas planteados en los escenarios de aprendizaje. La Tabla 27 muestra el efecto de una de estas relaciones, la de las actitudes de los directores sobre los propsitos y efectos de la RS y los puntajes de enseanza en escuelas. La media del puntaje para los escenarios de enseanza en las escuelas en las que la actitud de los directores se encontr en el cuartil superior es 43% de una desviacin estndar ms alta que la de aquellos directores cuya actitud se encontr en el cuartil ms bajo. Tabla 27: Puntajes de los escenarios de enseanza, de acuerdo a las actitudes de los directores sobre los propsitos de la RS Actitud de los directores sobre los propsitos de la RS Q1 Q2 Q3 Q4 Media de la puntaje de los 46.2 48.9 49.7 50.5 escenarios de enseanza Deber notarse tambin que la correlacin entre la actitud de los directores hacia la RS y los puntajes de los escenarios de enseanza contina existiendo aun cuando se controla
40

para las circunstancias de la escuela incluyendo proporcin de alumnos cuya primera lengua no es el espaol. La correlacin tambin perdura cuando se toma en cuenta la ubicacin de la escuela y la existencia de facilidades suficientes para ensear de acuerdo a la RS. 3.4 RELACIN ENTRE EL PUNTAJE DE LOS MAESTROS Y EL LOGRO DE LOS ALUMNOS El logro de los alumnos se midi utilizando los resultados de la prueba SEP-ISA. Esta prueba comprende pruebas para medir el desempeo de los alumnos en matemticas, lectura, desarrollado especficamente para Mxico por ACER. SEP-ISA se basa en el Programa Internacional para la Evaluacin de Escuelas desarrollado por ACER y los resultados se reportan utilizando la escala PISA-OCDE. La prueba se administr por primera vez en Mxico en el 2008. Esta seccin no reporta los resultados de SEP-ISA, que se presentan en un documento separado. Esta seccin se enfoca en la relacin entre los puntajes SEP-ISA y los tems relacionados a la RS en los cuestionarios para directores, maestros y alumnos. Como se mencion anteriormente, los cuestionarios para directores y maestros fueron administrados entre mayo y junio de 2010 y no fueron parte de la prueba SEP-ISA que se aplic en junio de 2010. Adems, los maestros involucrados en las encuestas pudieron no ser los mismos que impartieron clases a los alumnos que participaron en la prueba SEPISA. Todos los resultados por lo tanto, deben ser tratados con precaucin, ya que la informacin recolectada de los estudiantes no est tan relacionada con la informacin recolectada por los maestros y directores, como originalmente se tena intencionado. Sin embargo, algunas relaciones, que requieren ms investigacin, pueden ser identificadas en la informacin obtenida. Logro y puntaje de las prcticas docentes de los maestros Lectura Entre todos los estudiantes, hubo una pequea correlacin negativa pero estadsticamente significativa, entre los puntajes de lectura SEP-ISA y las observaciones de los estudiantes sobre la prctica docente de sus maestros en las clases de espaol en los tres grados. Todos los coeficientes de correlacin fueron pequeos, entre -0.007 y -0.008 en los tres grados.

41

Cuando los puntajes fueron agregados al nivel de escuela, con los puntajes de la escuela calculados como la media del puntaje de la prueba de lectura SEP-ISA y la media del puntaje de las percepciones de los alumnos de la prctica docente, la relacin permaneci para el 2 y el 3er grado, pero no para el 1er grado. Para el 2 grado, el coeficiente de correlacin es de -.14, y para el 3er grado de -.13- No hubo una correlacin estadsticamente significativa para el 1er grado. De nuevo, estas correlaciones son pequeas pero negativas. Correlaciones entre el grado de los alumnos y el grado de la escuela se reportan en la Tabla 28. No hubo una correlacin estadsticamente significativa entre el puntaje de prctica docente reportada por los maestros y el puntaje de los alumnos en la prueba de lectura SEP-ISA, y ninguna correlacin estadsticamente significativa entre el puntaje de prctica docente reportado por los maestros y la percepcin de los alumnos de las prcticas docentes de sus maestros en relacin a la RS.
Tabla 28: Correlacin entre el puntaje de los estudiantes en la prueba de lectura SEP-ISA y el puntaje de los alumnos de secundaria sobre su percepcin de las prcticas docentes en la asignatura de espaol.

Grado 1 2 3 Matemticas

Nivel alumno R -0.07 -0.08 -0.07

p <0.001 <0.001 <0.001

Nivel escuela R 0.07 -0.14 -0.13

p 0.275 0.033 0.048

Para matemticas, existen correlaciones similares entre el puntaje de la prueba de los alumnos y la percepcin de los alumnos de la prctica docente de sus maestros de matemticas. A nivel alumno y a nivel grado, hay una pequea correlacin negativa, pero estadsticamente significativa entre los puntajes de la prueba de matemticas SEP-ISA y las observaciones de los alumnos sobre la prctica docente de sus maestros. Todos los coeficientes son pequeos, entre -0.08 y -0.10 en los tres grados. Cuando los puntajes fueron agregados al nivel de escuela, con los puntajes de la escuela calculados como la media del puntaje de la prueba de matemticas SEP-ISA y la media del puntaje de las percepciones de los alumnos de la prctica docente, la relacin permaneci para el 3er grado, pero no para el 1 o el 2 grado. Para todos los grados, el coeficiente de correlacin va de -0.08 a -0.14, considerados como pequeos. No hubo una correlacin estadsticamente significativa entre el puntaje de prctica docente de los maestros y el puntaje de los alumnos en la prueba de matemticas SEP-ISA, y ninguna correlacin estadsticamente significativa entre el puntaje de prctica docente de los maestros y la
42

percepcin de los alumnos de las prcticas docentes de sus maestros en relacin a la RS. Los coeficientes de correlacin para matemticas se muestran en la Tabla 29.
Tabla 29: Correlacin entre el puntaje de los estudiantes en la prueba de matemticas SEP-ISA y el puntaje de los estudiantes sobre su percepcin de las prcticas docentes

Grado
1 2 3

Nivel alumno R
-0.10 -0.09 -0.08

p
<0.001 <0.001 <0.001

Nivel escuela R
-0.08 -0.12 -0.14

p
0.262 0.089 0.042

Logro y actitud de los maestros hacia la RS

Mientras que slo hubo coeficientes de correlacin pequeos entre el logro de los estudiantes en matemticas y lectura y la prctica docente, hay otras correlaciones que valen la pena mencionar (ver Tabla 30). A nivel escuela, hay una pequea correlacin en 1er grado, entre el puntaje en las pruebas tanto de matemticas como de lectura y la comprensin de los maestros sobre los propsitos de la RS, ambas correlaciones son significativas con un nivel de 0.10. Tambin hay una correlacin pequea, pero estadsticamente significativa entre los puntajes de las pruebas en el 1er grado y la percepcin de los maestros de los efectos de la RS. Nuevamente, debe tomarse en cuenta que las mltiples responsabilidades de enseanza de los maestros y el nivel de igualdad entre las muestras implica que la relacin entre la informacin de los maestros y los estudiantes debe de tomarse con cautela. Tambin es importante mencionar que slo ha transcurrido uno a tres aos desde que se implement de manera completa la reforma en todas las escuelas y que se llev a cabo esta evaluacin.
Tabla 30: Correlacin entre el puntaje de los estudiantes en la prueba SEP-ISA y el puntaje de los propsitos de los maestros en relacin a la RS y los efectos de la RS, 1er grado Propsitos de la RS Efectos de la RS R p R p Asignatura 0.134 0.094 0.182 0.023 Lectura 0.140 0.082 0.188 0.019 Matemticas

Sin embargo, el resultado arriba mencionado es notable, porque una relacin entre la opinin de los maestros sobre los efectos de la RS y el logro de sus estudiantes se encontr para el 1er grado, dnde se ha implementado la RS por el periodo ms largo.
43

3.5 XITOS, OBSTCULOS Y SUGERENCIAS EN LA MEJORA DE LAS ESCUELAS Esta seccin proporciona un resumen de los resultados que se obtuvieron de las entrevistas de una muestra de directores y maestros despus de aplicados los cuestionarios. Las escuelas se seleccionaron para proporcionar un rango de opiniones, tomando como base las respuestas de los maestros proporcionadas en la seccin del cuestionario de actitudes hacia la RS. Tomando como base la media del puntaje de la actitud hacia la RS de todos los maestros a los que se les aplic el cuestionario en todas las escuelas, las escuelas se clasificaron en alto (opinin ms positiva), bajo (opinin ms negativa) y medio. Se seleccionaron cinco estados que representaron un escenario diverso en trminos de recursos y situacin poltica. Debido a que la implementacin de la RS vari por estado y que el acceso de las escuelas al apoyo dependi del estado en el que se encuentran, fue importante empatar a las escuelas dentro del estado. Al menos un par de escuelas (alto, y bajo/medio-bajo de la misma modalidad) fueron seleccionadas de cada estado. El resultado es un grupo diverso de 16 escuelas /ver Tabla 31) Tabla 31: Muestra de escuelas para la entrevista Estado General Tcnica Chiapas Mxico Nuevo Len Puebla Oaxaca Total 2 2 2 6 2 2 4

Telesecundaria 2 2 2 6

Todas las escuelas 6 6 2 4 2 16

Durante las visitas a cada escuela, el director (subdirector, si el director se encontraba ausente) se entrevist primero individualmente. El tiempo de la entrevista fue de aproximadamente 30 minutos, a esta entrevista le sigui una grupal con todos los maestros de matemticas, ciencias y espaol presentes y disponibles durante la visita. Esta entrevista grupal dur aproximadamente 45 minutos. Las entrevistas se transcribieron y tradujeron al Ingls; el anlisis que aqu se presenta se realiz utilizando la versin en Ingls de la transcripcin.

44

xitos en la implementacin de la RS El xito es cuando damos una instruccin que creemos ser complicada, en equis tema, y el alumno nos sorprende al solucionarlo por su propia cuenta. Algunas veces trabajando en parejas o en equipos, pero lo solucionan, temas que crees que no podrn hacerlo. -Maestro, escuela tcnica de Nuevo Len Al hablar acerca de lo que funcion en la implementacin de la RS, los maestros y directores frecuentemente reflexionaban acerca de los cambios que han visto en la actitud de los alumnos. Maestros y directores de diferentes estados y de diferentes modalidades de escuelas mencionaron que los estudiantes tenan ms confianza en expresarse y en solucionar problemas. Al hacer estos comentarios, frecuentemente comparaban la situacin antes de la RS, donde los alumnos estaban acostumbrados a un aprendizaje pasivo que se limitaba a la memorizacin. Los maestros atribuyeron el cambio en los alumnos al contexto en situaciones reales de los proyectos que se estaban llevando a cabo. Especficamente, algunos maestros estaban impresionados por la habilidad y el inters de los alumnos en la lectura y en aplicar esto en la investigacin de la solucin de sus propios problemas. El cambio en la actitud de los alumnos, en particular en su confianza y creatividad, tambin fue notado por varios maestros, como lo explica un maestro de Telesecundaria del estado de Mxico: Los alumnos realmente se vuelven ms creativos, ms interesados y ms involucrados en sus actividades diarias, esto es, practican en su vida diaria lo que aprenden Tambin son ms participativos. Estas actividades permiten que los alumnos se expresen ms, se atreven a proyectar su conocimiento y llevar a cabo actividades en donde demuestran con mayor facilidad las habilidades que estamos tratando de desarrollar, las habilidades que adquieren a travs de todas las habilidades que se establecen y se proporcionan en el libro. Muchos directores y maestros notaron la importancia de trabajar con los padres de familia para asegurar la exitosa implementacin de la RS. Algunos directores notaron que una cooperacin cercana con los padres de familia es un elemento de la RS que ha estado funcionando bien. Un director de telesecundaria en Puebla, atribuy esto en particular al Programa Escuelas de Calidad al que pertenece su escuela, diciendo lo siguiente:

45

alrededor del 60% de los padres de familia han tenido un cambio de actitud. En el pasado, los padres de familia aqu no nos apoyaban, era difcil encontrar a un padre que asistiera a las juntas y la vida era difcil para ellos, pero ahora, con todo lo que hemos implementado, hemos notado que se estn involucrando ms con sus hijos. Los maestros tambin hablaron positivamente en el incremento de flexibilidad que tienen en la seleccin de los materiales de enseanza. Aunque algunos comentaron que no tenan acceso suficiente a materiales y al internet, muchos maestros expresaron su agradecimiento de poder llevar a cabo su propia investigacin y seleccin de materiales para sus alumnos. Algunos maestros tambin reflexionaron sobre el incremento en la cooperacin entre sus colegas, propiciado por la planeacin y preparacin para el manejo transversal de los temas. Estos maestros creen que la comunicacin entre los maestros de sus escuelas es uno de los resultados ms exitosos de la RS. Algunos maestros creen que han estado enseando de acuerdo a los principios de la RS. Por ejemplo, maestros en una escuela general del estado de Mxico, han basado su enseanza durante los ltimos aos, en el desarrollo de competencias. Aunque no han visto un cambio dramtico en su prctica docente, estos maestros aprecian el cambio en la capacitacin proporcionada por la RS, ya que se apega ms a las prcticas docentes que tienen. Los maestros en el estado de Mxico, por ejemplo, agradecieron en particular la introduccin de los proyectos de aprendizaje basados en problemas de la vida real. Retos a la implementacin de la RS Creo que el reto ms grande fue que nos lanzaron al ruedo sin capote -Maestro, escuela general en Chiapas es como mandarte a la guerra sin fusil. Creo que ese fue el obstculo ms grande. -Director, telesecundaria en Oaxaca Hubo dos retos principales a la implementacin de la RS, de acuerdo a lo expresado por directores y maestros. El primero se relaciona con la falta de recursos. Una abrumante proporcin de directores y maestros en diferentes estados y en todas las modalidades, coment acerca de la entrega tarda de los libros de texto, los maestros estaban
46

decepcionados con la falta de recursos en apoyo de la enseanza de la RS. Esto se sinti particularmente fuerte entre el personal de las escuelas rurales. Algunos maestros de Nuevo Len y Chiapas tambin notaron que los libros que haban recibido eran diferentes a los que haban pedido. La escasez de los libros apropiados impidi que los maestros se pudieran preparar para ensear bajo las orientaciones de la RS. Adicionalmente, como lo mencion un maestro, condujo a una situacin difcil en la que los maestros tenan libros de texto diferentes a los que estaban utilizando los alumnos. Adems de los libros de texto, los maestros y directores tambin mencionaron la falta de computadoras y acceso a internet como una limitacin de recursos que fue un reto para la implementacin de la RS. Notaron que la reforma alentaba el uso de la investigacin. Algunos maestros comentaron que fue un reto demasiado grande para sus alumnos. An entre la mayora de los maestros y directores que ven esto como una mejora, sin embargo, muchos sintieron que no pudieron completamente implementar la RS porque no tenan computadoras ni acceso a internet. Lo siguiente fue expresado por un director de una escuela general en Chiapas: Para que la reforma sea realmente un xito, la escuela debe contar con la debida infraestructura. Para los maestros, la limitacin principal est en los recursos, particularmente para los de telesecundarias y/o reas rurales. Como lo relat un maestro de una escuela telesecundaria en Oaxaca: El reto ms grande que tenemos nosotros como maestros es desarrollar una manera de aplicar el programa a pesar de las limitaciones que tenemos. Hemos buscado la manera de investigar por nuestra propia cuenta y llevarlo a nuestros alumnos. porque no tenemos las herramientas.

El segundo obstculo principal en la implementacin de la RS es la resistencia de los maestros y/o los sindicatos. Esto se siente ms en algunos estados, incluyendo Chiapas y Oaxaca. La oposicin de los maestros puede tener diferentes bases. Algunos directores y maestros apuntan a los maestros tradicionalistas que estn acostumbrados a estilos particulares de enseanza y no aceptan el cambio fcilmente. Otros afirmaron el escepticismo como una razn, porque han visto demasiadas reformas en su carrera profesional.

47

Durante una visita a una escuela en particular se encontr una posibilidad interesante. En una escuela en Oaxaca, que haba expresado repetidamente su rechazo hacia la RS, un director afirm que a pesar de su denuncia pblica en contra de la RS y su rechazo a participar en cursos de capacitacin de la RS, los maestros de la escuela haban estado trabajando con los libros proporcionados. El director explica lo siguiente: en el rea que pertenece al estado de Oaxaca, la nueva reforma educativa se rechaz no estamos trabajando con ella y es una gran contradiccin porque estamos trabajando con los libros, con el contenido de la nueva reforma. Algunas entrevistas tambin revelaron un cambio gradual pero prometedor, en la actitud entre los maestros. Algunos de los directores y de los maestros que haban comentado acerca de la oposicin a la RS en su escuela, tambin afirmaron ver algunas mejoras. Un director observ que esto se debe a que los maestros ven cambios positivos en sus alumnos o escuchan historias de xito en escuelas de otros estados. La falta de capacitacin es observada por varios maestros y directores, que afirmaron que esto hubiera ayudado a los maestros a sentirse ms preparados para la implementacin de la RS. Especficamente, los maestros sintieron que se hubieran beneficiado con una capacitacin ms prctica, que no slo cubriera los principios e ideas principales de la reforma. La preocupacin principal de los maestros es cmo implementar la RS en el saln de clases. Un ejemplo proporcionado por un grupo de maestros de Mxico sobre la implementacin de los proyectos. Sintieron que no aprendieron suficiente, en los cursos de capacitacin, acerca de cmo preparar y planear los proyectos. Sugerencias para la mejora una reforma seria toma en cuenta a todos los participantes. Maestro, escuela general en Chiapas. Los directores y maestros en la mayora de los estados expresaron su deseo de una mayor participacin en el proceso de consulta de la reforma. Lo siguiente fue expresado por un maestro de telesecundaria en Oaxaca, Sera bueno saber un poco acerca de los paradigmas de cada comunidad, ya que ningn pueblo es igual. Un director de Chiapas

48

enfatiz la importancia de asegurar el apoyo de los sindicatos, que afecta enormemente la respuesta a los programas en los estados. Como ejemplo en un nivel ms prctico, un director de Puebla propuso reuniones para evaluar y comentar la RS. Un sentimiento parecido fue expuesto por otro director del estado de Mxico, quien afirm la importancia de recibir informacin sobre los xitos y la manera de superar los obstculos a la implementacin de la RS a nivel nacional. Especficamente, este director propuso lo siguiente: deberan de informarnos si est funcionando. Podra estar funcionando en la escuela, pero necesitamos la informacin a nivel nacional; necesitamos saber que ha pasado en dos, cuatro y seis aos La SEP debera difundir un reporte y asegurarse que llegue a las escuelas que estn trabajando con la RS, para que podamos evaluar la reforma y decir, s, continuaremos trabajando con ella. No fue sorprendente, considerando el nmero de veces que se mencion la falta de recursos durante la discusin sobre los obstculos a la implementacin de la RS, que se hayan mencionado como la sugerencia principal para las mejoras a la RS. Cuando se les pregunt acerca del apoyo adicional que necesitan para la implementacin de la RS, abrumadoramente los directores y maestros mencionaron falta de facilidades y materiales. Lo siguiente fue afirmado por un maestro de Oaxaca: en los nuevos libros se nos pide que naveguemos en internet, que consultemos biografas y recursos la nica manera de mejorar es que se les proporcione a todas las escuelas con al menos los recursos especificados en los textos. Un grupo de maestros del estado de Mxico observ que la puesta a prueba de la reforma se llev a cabo en escuelas grandes con suficientes recursos, la RS no tom en cuenta los retos que enfrentan las escuelas con menos recursos. Los maestros sintieron que los recursos que necesitaban ms fueron los libros de texto. Acceso a tecnologa y otras facilidades, pizarrones de acrlico por ejemplo, y mejoras en la infraestructura tambin fue mencionado. Este mensaje fue particularmente fuerte entre los directores y maestros de Chiapas, Oaxaca y Puebla, al igual que los que trabajan en telesecundarias. La capacitacin tambin se mencion en repetidas ocasiones y los directores y maestros ofrecieron su opinin acerca de cmo se pude implementar mejor la RS. Aquellos que
49

sintieron que no tuvieron suficiente acceso a programas de capacitacin, enfatizaron la importancia de la capacitacin en conocer la teora detrs de la RS y de cmo implementar la RS en el saln de clases. Se mencion la necesidad de cursos de seguimiento y cursos especficos por asignatura. Los maestros de una escuela general en Chiapas destacaron la necesidad de que todos los involucrados sean capacitados en relacin a la RS: Todos deberamos de recibir capacitacin adecuada, desde los niveles ms altos hasta los maestros, Necesitamos capacitacin adecuada para que todos hablemos el mismo lenguaje. Se hicieron comentarios ms especficos acerca de los cursos de capacitacin, que deberan ser de mayor duracin, incluir temas ms prcticos y ser ms avanzados para complementar los cursos introductorios sobre la RS. Estas sugerencias fueron realizadas por directores y maestros de Mxico y Puebla. En todos los estados, directores y maestros, expresaron su opinin sobre quin debera impartir los cursos de capacitacin. Un director de Nuevo Len afirm que maestros con experiencia se quejan de que la reforma se formul por tericos sin experiencia en el trabajo docente. Otros directores y maestros sintieron que la capacitacin de la RS debera ser impartida por sujetos especializados, calificados y con experiencia en la RS. Afirmaron que en su experiencia, esto no ha sido el caso, personal del estado de Mxico y Chiapas porque los programas de capacitacin se haban impartido por otros colegas de la regin que no tenan suficiente experiencia ni conocimiento de la RS. El papel del liderazgo en la escuela Este ha sido un esfuerzo en equipo, al menos en esta institucin, y yo creo que estamos trabajando en armona con la direccin de la escuela mientras que otros pudieran pensar que es exigente, yo creo que la directora debe cumplir con sus responsabilidades y exigir que nosotros tambin demandemos de los alumnos lo que tienen que hacer. Adicional al apoyo de la SEP, durante las entrevistas tambin se les pregunt a los directores y maestros acerca del nivel de apoyo recibido por el director y otros maestros de la escuela. Sus repuestas proporcionan una imagen del papel que tiene en la escuela el liderazgo y la estructura de apoyo dentro de las escuelas para la implementacin de la RS. El apoyo ms sencillo proporcionado por el director fue el darles a los maestros la libertad y flexibilidad en la implementacin de los proyectos, lo que fue valorado por muchos

50

maestros. Otra forma de apoyo fue la de darles oportunidad a los maestros de asistir a las capacitaciones. El apoyo de los directores y de otros maestros en la planeacin de proyectos y la resolucin de problemas se identific como uno de los papeles principales en los que la escuela puede apoyar a los maestros en la implementacin de la RS. Los directores y los maestros proporcionaron ejemplos de juntas regulares que se llevaron a cabo entre el personal para planear y comentar resultados o cualquier situacin que se haya presentado. En las escuelas en las que esto es el caso, los directores se lo atribuan a haber participado en cursos de capacitacin que les ensearon a hacerlo, como lo establece un director de una telesecundaria en Puebla; He participado en todos los cursos que nos han dado desde que se implement la reforma, incluyendo el Curso Diploma para Directores, que me ha ayudado motivar a los maestros y tratar de comprometerlos con la reforma. Entre los maestros, la solucin de los problemas es el papel ms importante en cuanto al apoyo que se proporcionan entre ellos. Los maestros han notado que estn trabajando cada vez ms en colaboracin, ya que tiene que planear los temas que se van a estudiar en ms de una asignatura y se preguntan consejos acerca de cmo incorporar sus temas en los proyectos. Los maestros tambin han dicho que compartir experiencias y escuchar lo que los otros. Los maestros estn haciendo en el saln de clases, es de gran utilidad. Otro de los papeles importantes mencionado por los directores y maestros es el abogar por los recursos que la escuela necesita para la implementacin de la RS, en particular sienten que no han recibido suficiente apoyo por la SEP. Los directores que han logrado recursos es porque establecen contactos y les piden que visiten la escuela y lleven a cabo un curso de capacitacin, obteniendo libros y materiales de otras fuentes, y tambin apoyan a los maestros pagando cursos de computacin. Los maestros de algunas escuelas tambin proporcionaron ejemplos de la falta de apoyo. Estos ejemplos, como se esperara, son lo opuesto de las historias positivas que compartieron otros maestros. En las escuelas en las que no hubo suficiente apoyo para los maestros, su libertad para asistir a cursos de capacitacin fue restringida. Los maestros se sintieron an ms descuidados debido a la falta de recursos al que se enfrentaban. Ejemplos de esto provienen en particular de dos estados, Chiapas y Oaxaca. Como han demostrado los resultados de las entrevistas, estos estados se enfrentan a retos especficos en cuanto a la implementacin de la RS. Cuando se les pregunt acerca
51

de la calidad del apoyo recibido, los maestros en estos estados tambin creyeron que sus directores no estaban recibiendo apoyo de los niveles administrativos ms altos. Observaron que los directores en sus escuelas rotaban, con la mayora de los directores permaneciendo nicamente uno a dos aos. Esto crea un obstculo importante en la implementacin de cambios duraderos, ya que no cuentan con alguien que abogue por el apoyo adicional que requieren. 4. CONCLUSIONES Esta evaluacin de la Reforma de Educacin Secundaria (RS) en Mxico se dise para examinar los cursos de capacitacin y cualquier variacin en su implementacin, al igual que los efectos que la RS y los materiales asociados distribuidos para su apoyo ha tenido en las prcticas docentes y subsecuentemente en el logro de los alumnos. Un anlisis de los documentos que antecedieron a la reforma sugiere que la RS representa es un cambio significativo con respecto al currculo anterior, con la intencin de contar con un currculo moderno orientado al desarrollo de competencias. Informacin recolectada de los cuestionarios para maestros y directores sugiere que, en el nivel ms bsico, la implementacin de la RS se ha alcanzado ampliamente. Casi todos los participantes (93%) y la gran mayora de los maestros (arriba del 86%) afirm entender los propsitos y objetivos de la RS y que es lo que se espera de ellos y de sus alumnos bajo esta reforma. Una gran mayora de los maestros ha participado en al menos un tipo de curso de capacitacin en relacin a la RS. Una evaluacin ms detallada de la informacin encontr una variacin en la manera en la que los maestros perciben la RS. Esto es particularmente visible en los aspectos ms tangibles: los materiales de apoyo para la enseanza (libros de texto, materiales multimedia, etc.) y los programas de capacitacin que fueron proporcionados en apoyo a la RS, La discrepancia en el suministro de esos materiales, representa un gran reto para los directores y maestros en la implementacin de prcticas docentes. Alrededor de la mitad de todos los maestros afirm su deseo de asistir a ms cursos de capacitacin de los que pudieron. Para estos maestros, el tiempo fue la barrera ms comn, seguida por la falta de informacin a tiempo acerca de los cursos disponibles. Los directores y los maestros expresaron opiniones ms especficas acerca de la capacitacin durante las entrevistas. Su inters por un aprendizaje ms profesional acerca de la RS es para entender con mayor profundidad la teora detrs de la RS, y los aspectos prcticos de implementar la RS en el saln de clases, como es la de disear y planear los proyectos.
52

Menos de la mitad de los directores y slo una cuarta parte de los maestros cree haber recibido suficiente material de apoyo docente para poder ensear de acuerdo a la RS. Esto es el caso particular de telesecundarias, dnde ms del 70% de los maestros cree no haber recibido suficiente material. Los maestros de telesecundarias tambin piensan que sus escuelas no tienen las facilidades ni el equipo necesario (computadoras, internet, reproductor de DVD, etc.) para implementar la RS. En diferentes escuelas y en diferentes estados, los maestros afirmaron enfrentar dificultados en obtener los recursos ms importantes para la implementacin de la RS: libros de texto. Un gran nmero de maestros coment que los libros llegaron tarde, algunos observando que los que llegaron eran diferentes a los que haban solicitado, o peor an, que no haban llegado. Los maestros apreciaron el hecho que la RS permite mayor libertad en la investigacin y seleccin de los materiales para usarse en el saln de clases. La escasez de libros adecuados, al igual que el acceso a otros recursos, tales como el internet, presentan un gran reto en su habilidad de aprovechar esta oportunidad. Una variable que diferencia actitudes y exposicin a la RS es el nmero de aos de experiencia docente. Algunos directores notaron que se enfrentaron a la resistencia de los maestros que estaban acostumbrados a su manera habitual de trabajar. Sin embargo, los maestros con ms experiencia estuvieron ms satisfechos con el material docente y los cursos proporcionados en apoyo a la RS, lo que se podra atribuir al hecho de que tambin es ms probable que hayan asistido a programas de capacitacin. Son, sin embargo, ligeramente menos positivos acerca de los posibles efectos de la RS en la enseanza y el aprendizaje. Las entrevistas confirmaron esto, con mayor nmero de directores y maestros afirmando que han pasado por varias reformas y sienten escepticismo acerca de los posibles resultados. La resistencia de los maestros se siente particularmente fuerte en los estados donde ha habido conflictos sindicales. Sin embargo, algunos directores han reportado un cambio gradual de actitud. Ms comprometida, en un rea en la que las escuelas han rechazado pblicamente la RS, los maestros reportaron que aunque no asisten a programas y talleres de capacitacin, estn utilizando los materiales y comenzando a ensear de acuerdo con los principios de la RS. El personal de diferentes escuelas, reconoce que el impacto de la reforma toma tiempo. De la informacin recolectada en este estudio, es claro que la implementacin de la RS es un proceso continuo en el saln de clases y las escuelas. Como se mencion arriba, las
53

escuelas estn enfrentando los retos, en cuanto a los recursos, con los que tienen que trabajar para alcanzar los objetivos delineados por la RS. Se hace ms claro que las escuelas an se encuentran en la implementacin de la RS cuando se examina la informacin sobre la prctica docente. Cuando se les pregunt acerca de las prcticas que ocurren en el saln de clases los maestros afirmaron que aquellas se ajustan a lo que se seala en la RS describir los propsitos de aprendizaje, transversalidad de los temas, trabajo basado en proyectos ocurren con mayor frecuencia en su saln de clases. Aunque este no sea un mtodo infalible para discernir qu es lo que en realidad ocurre en el saln de clases, sugiere que los maestros por lo menos estn familiarizados con el tipo de actividades de aprendizaje que forman parte de la RS. Adicionalmente, algunos maestros pudieron haber estado enseando de esta manera inclusive antes de que la reforma fuera introducida. No es sorprendente que la actitud de los maestros hacia la RS est correlacionada con su prctica docente. Esto no necesariamente quiere decir que una percepcin ms positiva hacia la RS causa un cambio en la prctica docente. Es probable que los maestros que prefieren mtodos de enseanza consistentes con la RS tambin tengan una actitud ms positiva hacia ella. Esta relacin s muestra, sin embargo, que hay un vnculo entre los maestros reportando una perspectiva ms optimista de la RS y uso reportado de las prcticas docentes en lnea con la RS. En menor medida, tambin existe una correlacin ente la actitud de los directores hacia la RS y lo reportado por maestros en relacin a su prctica docente. Adems de reportar acerca de su prctica docente, tambin se les present a los maestros escenarios de enseanza uno relacionado con su asignatura, y el otro basado en proyectos y se les pregunt cmo solucionaran problemas especficos. Sus respuestas a estos escenarios fueron evaluados por separado por especialistas capacitados. Sus puntajes estn correlacionados con las actitudes hacia algunos aspectos de la RS. En este caso, sin embargo, hay una correlacin ms fuerte entre el puntaje de los maestros y la percepcin de los directores de los propsitos y posibles efectos de la RS. Hay una correlacin positiva significativa entre la percepcin de los directores de los propsitos y efectos de la RS, y el conocimiento de los maestros en esa escuela sobre cmo responder a las situaciones de enseanza medidos por los escenarios. El papel que tiene la escuela se ejemplifica con ms detalle con los resultados de las entrevistas: maestros y directores expresaron la importancia de tener un adecuado sistema de apoyo de directores y maestros en la implementacin de la enseanza de la RS. Los directores
54

que han participado en cursos de capacitacin sobre la RS estuvieron particularmente entusiasmados en motivar a sus maestros. Los maestros tambin encontraron til trabajar con sus colegas en la planeacin y evaluacin de los proyectos. Al final, el objetivo de cualquier reforma es mejorar el aprendizaje de los alumnos. Cuando se les pregunt acerca del xito de la RS en cambiar las prcticas de enseanza y aprendizaje, este fue un punto principal en las respuestas de los directores y maestros. Directores y maestros de diferentes estados y modalidades de escuela, compartieron sus observaciones sobre los efectos positivos de la RS en los alumnos. Comentaron los cambios en la actitud de los alumnos, tienen mayor confianza en sus habilidades y ms comprometidos con su trabajo. Atribuyeron este cambio al enfoque del trabajo basado en proyectos que se basa en conceptos de la vida real. Este fue un cambio drstico del currculo anterior donde el enfoque se encontraba en la memorizacin. Un vnculo entre la RS y el logro de los alumnos, de acuerdo con los resultados de la prueba SEP-ISA, no se encontr. Esto no es sorprendente, ya que ha pasado muy poco tiempo desde la implementacin de la RS en todas las escuelas secundarias. Despus de una prueba piloto, la RS slo se generaliz en todas las escuelas de educacin secundaria en el 2009, un ao antes de la conclusin de este estudio. Como reflejan otros resultados producto de este estudio, la RS sigue en el proceso de ser implementada. Debido a factores asociados al momento en que se recolect la informacin para este estudio, la informacin recolectada de los alumnos no se relaciona tan cercanamente con la recolectada de los maestros y directores, como se haba diseado originalmente. Relaciones que requieren investigacin adicional se pueden identificar en la informacin. Sin embargo, hubo para el 2 y 3er grados de secundaria, un incremento en la prueba SEPISA entre el 2008 y el 2010. Cuando se compararon las actitudes de los directores y maestros hacia la RS, la correlacin ms fuerte se encontr para los efectos de la RS, que se concentr en los efectos de la RS sobre la enseanza y el aprendizaje. El inters por enfocarse en este aspecto en particular es muy relevante, de todas las escalas de actitudes, fue la nica que se correlacion con el logro de los alumnos, la correlacin fue pequea, pero estadsticamente significativa. En el 1er grado, los alumnos tuvieron un mejor desempeo en las pruebas de lectura y matemticas, en la escuelas en las que los maestros reportaron que la RS ha tendido un efecto, se encontr un desempeo ligeramente ms alto en los alumnos.

55

Las futuras acciones de la SEP por lo tanto, debern enfocarse en asegurar la continua y efectiva implementacin de la RS. Se deber poner nfasis particular en apoyar las escuelas que enfrentan limitaciones en el acceso a capacitacin y recursos. Este estudi encontr que los directores y maestros en telesecundarias, en particular, reportaron necesitar recursos adicionales para poder ensear de acuerdo a los principios de la RS. Estos maestros tuvieron un desempeo menor al responder los escenarios de enseanza relacionados con la enseanza de acuerdo a la RS. En los documentos de la RS, se destac el mensaje que la introduccin de la RS es un reto compartido (Osorio y Fabin, 2006). Este concepto de tomar un enfoque colaborativo es sensible, con este estudio demostrando que los maestros en las escuelas en las que los directores tienen una opinin ms optimista acera de la RS, tuvieron una puntuacin ms alta en los escenarios de enseanza. Las entrevistas con directores y maestros resaltan la importancia del trabajo colaborativo en la escuela, incluyendo padres de familia y sindicatos. Ms especficamente, las siguientes recomendaciones se basan en los resultados de este estudio: Incrementar el acceso y mejorar el rango y calidad de los cursos de capacitacin. Los cursos de actualizacin, cuyo enfoque fue introducir los principios y propsitos de la RS ya alcanzaron su cometido. Para apoyar a los maestros en la implementacin en su saln de clases de la RS, se requieren cursos ms prcticos sobre cmo ensear de acuerdo a la RS. Se encontr que estos cursos estn relacionados con el conocimiento pedaggico de los maestros. Asegurar la disponibilidad de suficientes recursos que se requieren para cumplir con los propsitos de la RS, en particular en telesecundarias y escuelas rurales. La mayora de los maestros en telesecundarias cree no haber recibido suficiente material de apoyo para ensear de acuerdo a la RS. Tambin tuvieron un desempeo ms bajo que los maestros de otras escuelas, al responder a los escenarios desarrollados para evaluar el conocimiento pedaggico. Aunque dos telesecundarias reportaron resultados positivos por haber participado en el Programa Escuelas de Calidad, otras telesecundarias y escuelas rurales siguen enfrentando la implementacin de la RS en un ambiente de pocos recursos. Trabajar las escuelas sobre cmo pueden apoyar a los maestros a implementar la RS en el saln de clases. Este estudio encontr que la comprensin de los propsitos y las actitudes de los directores hacia los efectos de la RS, estn
56

relacionados con el conocimiento pedaggico de los maestros. Los maestros tambin reportaron que el apoyo de los directores los ha ayudado en poder implementar la RS en su saln de clase de una manera ms eficiente y resolver problemas. Ejemplos de este apoyo fueron las reuniones regulares para compartir experiencias entre los maestros y directores, y que los directores los respalden para que la escuela reciba recursos y facilidades adicionales que necesitan para implementar la RS. Recolectar y compartir los xitos y ejemplos de buenas prcticas para cambiar actitudes. Algunos directores reportaron que la resistencia de los maestros y/o sindicatos es uno de los retos principales a los que se enfrentan en la implementacin de la RS. Sin embargo, an en escuelas donde existe resistencia, hubo reportes prometedores de un cambio gradual en la aceptacin de la RS, con algunos maestros haciendo referencia a los materiales y principios aunque los hayan rechazado pblicamente. Llevar a cabo un estudio de seguimiento sobre el impacto de la RS. Este se deber llevar a cabo 3 a 4 aos despus de la implementacin completa de la RS, enfocndose en la relacin ente los cambios de las prcticas en el saln de clase y el compromiso y logro de los alumnos.

REFERENCIAS BIBLIOGRFICAS SEP, (2006a), Matemticas, Reforma de la Educacin Secundaria Fundamentacin Curricular, Secretara de Educacin Pblica: Mxico, D.F. SEP, (2006b), Ciencias, Reforma de la Educacin Secundaria Fundamentacin Curricular, Secretara de Educacin Pblica: Mxico, D.F. SEP, (2006c), Espaol, Reforma de la Educacin Secundaria Fundamentacin Curricular, Secretara de Educacin Pblica: Mxico, D.F. SEP, (2002), Documento Base, Reforma Integral de la Educacin Secundaria, SEP Subsecretara de Educacin Bsica y Normal, Noviembre.

57