Gua Metodolgica de Seguimiento y Evaluacin de los Planes de Comunicacin de los Programas Operativos del FEDER, Fondo de Cohesin y FSE

2007-2013

Una manera de hacer Europa El FSE invierte en tu futuro

Unin Europea
1

INDICE 1. INTRODUCCIN .............................................................................................................................. 4 2. DESCRIPCIN DEL PROCESO DE EVALUACIN. ....................................................................... 5 2.1 OBJETIVOS...................................................................................................................... 6 2.2 ROLES Y RESPONSABILIDADES................................................................................... 6 2.3 PROCEDIMIENTO DE EVALUACIN............................................................................ 11 2.3.1 OBJETO.................................................................................................................. 11 2.3.2 PERIODICIDAD. ..................................................................................................... 12 2.3.3 HERRAMIENTAS Y TCNICAS DE EVALUACIN. .............................................. 12 2.3.3.1 SISTEMA DE INDICADORES .... 12 2.3.3.2 ANLISIS DOCUMENTAL......................................................................... 16 2.3.3.3 ENTREVISTAS .......................................................................................... 17 2.3.3.4 GRUPOS DE DISCUSIN......................................................................... 18 2.3.4 CRITERIOS DE EVALUACIN ............................................................................. 19 2.3.5 ELABORACIN DEL DOCUMENTO DEL INFORME DE EVALUACIN. ............. 19 2.3.5.1 METODOLOGA EMPLEADA20 2.3.5.2 ANLISIS DE LA PROGRAMACIN DE LA ESTRATEGIA DE COMUNICACIN..20 2.3.5.3 ANLISIS DE LA APLICACIN DE LAS MEDIDAS DE INFORMACIN Y PUBLICIDAD..20 2.3.5.4 VERIFICACIN DE LA INCLUSIN DE LA INFORMACIN Y PUBLICIDAD EN LAS ACTUACIONES DE VERIFICACIN Y CONTROL DE LOS FONDOS FEDER, FONDO DE COHESIN Y FSE..22

2.3.5.5 INCORPORACIN DEL PRINCIPIO DE IGUALDAD DE OPORTUNIDADES EN LAS MEDIDAS DE INFORMACIN Y PUBLICIDAD.22 2.3.5.6 ANLISIS DEL IMPACTO...23 2.3.5.7 CONCLUSIONES Y RECOMENDACIONES: PROPUESTA DE MEDIDAS A ADOPTAR ..23 2.3.5.8 BUENAS PRCTICAS.24 3. ANEXOS...25 ANEXO 1 - NDICE DEL INFORME DE LAS EVALUACIONES DE LOS PLANES DE COMUNICACIN................25 ANEXO 2 - NOTA METODOLGICA SOBRE LOS INDICADORES DE SEGUIMIENTO Y EVALUACIN..............................................26 ANEXO 3 - LISTADO DE PREGUNTAS Y/O COMPROBACIONES DESTINADO A LAS AUTORIDADES DE GESTIN Y/O ORGANISMOS INTERMEDIOS JEFES DE FILA DE LOS FONDOS EN LAS DISTINTAS ADMINISTRACIONES REGIONALES.28 ANEXO 4 - LISTADO DE PREGUNTAS Y/O COMPROBACIONES DESTINADO A RGANOS GESTORES Y/O BENEFICIARIOS.....31 ANEXO 5 LISTADO DE PREGUNTAS Y/O COMPROBACIONES DESTINADO AL PBLICO EN GENERAL....33 ANEXO 6 DISEO MUESTRAL DE LA ENCUESTA DIRIGIDA A LA CIUDADANA.........35

1. INTRODUCCIN
El desafo de la visibilidad y concienciacin de la ciudadana europea a cerca de los beneficios de la poltica regional comunitaria, cofinanciada por los Fondos Estructurales (FFEE) y Fondo de Cohesin, se ha constituido como un reto prioritario para la Comisin Europea en este nuevo periodo de programacin. Los requisitos de la normativa vigente en esta materia establecen entre otros la necesidad de destacar el papel desempeado por la Comunidad y de garantizar la transparencia de la ayuda procedente de los Fondos (Artculo 69 del Reglamento 1083/2006) e incorpora la obligacin de que se evalen los resultados de las medidas de informacin y publicidad en cuanto al grado de visibilidad y concienciacin de los programas operativos (PO), as como del papel desempeado por la Comunidad (artculo 4.2.c del Reglamento (CE) 1828/2006). Hay que sealar que la Comisin Europea no ha proporcionado unas orientaciones indicativas especficas sobre la metodologa de evaluacin a aplicar. Por ello, cada estado miembro est facultado para establecer el desarrollo y la aplicacin prctica de los principios a seguir en esta materia, estableciendo los mismos de acuerdo a la estrategia de comunicacin planteada y bajo su propia responsabilidad. Dada la necesidad de articular este proceso de evaluacin de manera coordinada y coherente se vio necesario que, la Subdireccin General de Administracin del Fondo Europeo de Desarrollo Regional y la Subdireccin General del Fondo de Cohesin y de Cooperacin Territorial Europea de la Direccin General de Fondos Comunitarios (DGFC), del Ministerio de Economa y Hacienda, y la Unidad Administradora del Fondo Social Europeo (UAFSE), del Ministerio de Trabajo e Inmigracin -como Autoridades de Gestin de los Programas Operativos FEDER, Fondo de Cohesin y FSE, respectivamente-, a travs de sus responsables en materia de comunicacin, elaborasen de manera conjunta esta Gua General de Seguimiento y Evaluacin de los Planes de Comunicacin de los Programas Operativos FEDER, Fondo de Cohesin y FSE 2007-1013, que define una propuesta metodolgica para la puesta en marcha del proceso conjunto del seguimiento y de la evaluacin de los distintos Planes de Comunicacin. Esta gua metodolgica, al igual que sucedi con la elaboracin de los Planes de Comunicacin, para los que se dise de manera conjunta una estrategia comn de comunicacin que se plasm, con sus distintas especificidades, en los diferentes Planes de Comunicacin, ser objeto de discusin en el Grupo Espaol de Responsables de Informacin y Publicidad (GERIP) para 4

conseguir que sirva de marco de referencia conjunto a la hora de llevar a cabo la evaluacin de los Planes de Comunicacin de los PO FEDER, FSE y Fondo de Cohesin. Por consiguiente los principales objetivos de la presente Gua metodolgica de evaluacin son: identificar los principales mecanismos necesarios para asegurar el seguimiento del cumplimiento de las actuaciones de informacin y publicidad, en aras de garantizar los mecanismos necesarios para la posterior evaluacin de los Planes, y establecer las directrices necesarias para evaluar las actuaciones de informacin y publicidad contempladas en los distintos Planes de Comunicacin.

2. DESCRIPCIN DEL PROCESO DE EVALUACIN.

El marco de referencia fundamental de la presente gua metodolgica est constituido por el Reglamento General 1083/2006 del Consejo y por el Reglamento (CE) 1828/2006, que en su captulo II Seccin I establece las disposiciones de aplicacin en materia de informacin y publicidad. El Reglamento 1083/2006, en su artculo 69, establece la exigencia de que el Estado miembro y la autoridad de gestin del programa operativo darn a conocer las operaciones y los programas objeto de cofinanciacin y facilitarn informacin al respecto de conformidad con las disposiciones de aplicacin de los PO. Aunque no existen directrices especficas al respecto por parte de la Comisin, sta ha distribuido algunas Fichas metodolgicas orientativas para la evaluacin de las actuaciones de informacin y publicidad en el nuevo periodo de programacin 2007-2013 y en la pgina web de la Comisin Europea (http://ec.europa.eu/regional_policy/country/commu/index_es.htm) se recogen documentos e informes de trabajo de la Comisin, ejemplos particulares de actuaciones de comunicacin y otros elementos en ste mbito con la finalidad de que puedan constituirse como referencia para los pases miembros. Por otra parte, en el seno del GERIP (Grupo Espaol de Responsables en materia de Informacin y Publicidad), para todos los Programas Operativos de los distintos Fondos, en el GRECO-AGE

(Grupo de Responsables de Comunicacin de los Organismos de la Administracin General de Estado), en el que participan tambin algunas Entidades Locales, para los Programas Operativos del FEDER y Fondo de Cohesin y en todas las distintas redes de comunicacin regionales existentes se elabora documentacin y acciones de cara al seguimiento y evaluacin de las actuaciones de comunicacin Regionales FEDER y FSE 2007-2013.

2.1 OBJETIVOS
El procedimiento de evaluacin de los Planes de Comunicacin ha sido configurado de acuerdo con la normativa vigente y con las orientaciones metodolgicas en esta materia en base a: Los objetivos de los Planes de Comunicacin, es decir, visibilidad de los Programas Operativos y concienciacin de la ciudadana acerca del papel que Europa juega, a travs de la aplicacin de la Poltica Cohesin, en la mejora de su calidad de vida. El alcance de la misma a los grupos objetivo de las actuaciones de comunicacin, es decir, los beneficiarios, los beneficiarios potenciales y el pblico en general. El principio de proporcionalidad (artculo 4.3 del Reglamento (CE) 1828/2006).

2.2 ROLES Y RESPONSABILIDADES

De conformidad con los Reglamentos de la Comisin 1083/2006 y 1828/2006 y segn los acuerdos alcanzados a nivel nacional, entre las Autoridades de Gestin y los Organismos Intermedios de los Programas Operativos regionales y plurirregionales, los principales actores implicados en la evaluacin de los Planes de Comunicacin son: 1 - Comisin Europea: de manera general tiene las atribuciones de:
-

Declarar aceptados los Planes de Comunicacin de los distintos Programas Operativos FEDER, FSE y Fondo de Cohesin.

Revisar los resultados de las evaluaciones de los Planes de Comunicacin con motivo de su inclusin en los informes anuales de 2010 y de 2013.

2 - Autoridad de Gestin (Administracin General del Estado): las autoridades de gestin del FEDER, la Subdireccin General de Administracin del FEDER la del Fondo de Cohesin, la Subdireccin General de Fondos de Cohesin y de Cooperacin Territorial Europea ambas de la Direccin General de Fondos Comunitarios del Ministerio de Economa y Hacienda y del FSE, la Unidad de Gestin de la UAFSE del Ministerio de Trabajo e Inmigracin, a travs de las personas responsables en materia de informacin y publicidad, tienen atribuidas las siguientes responsabilidades y funciones conforme a sus respectivas competencias de los fondos europeos y a la funcin de copresidencia del GERIP y del GRECO-AGE:
-

Definir el marco comn de trabajo en materia de Evaluacin para los Planes de Comunicacin del FEDER, Fondo de Cohesin y FSE 2007-2013.

Coordinar, de manera general, el proceso de Evaluacin convocando las reuniones del GERIP y, en su caso del GRECO-AGE cuando se considere oportuno.

Participar en el Grupo Consultivo de seguimiento estratgico y evaluacin para presentar los avances en materia de evaluacin de la comunicacin.

Hacer el seguimiento del sistema de indicadores de seguimiento y evaluacin de la comunicacin definidos para el periodo 2007-2013, instrumentando las instrucciones y mecanismos que debern aplicar los organismos implicados en la cuantificacin de los indicadores y coordinando la cuantificacin de dichos indicadores en el caso de los Organismos Intermedios de la AGE.

Realizar el volcado en Fondos 2007 y FSE 2007 de la cuantificacin de sus propios indicadores

Poner en marcha las evaluaciones de los Planes de Comunicacin de los Programas Operativos Plurirregionales y el del Programa Operativo CohesinFEDER conforme a las pautas acordadas en la presente gua y colaborar en lo que sea preciso en la evaluacin de los Planes de Comunicacin de los Programas Operativos Regionales del FEDER.

Incluir en los informes de ejecucin anuales y final la informacin recogida en el artculo 4.2. del Reglamento (CE) N 1828/2006.

Informar al Comit de Seguimiento acerca del Plan de Comunicacin, sus modificaciones y avances conseguidos.

3 - Los organismos intermedios responsables de los Planes de Comunicacin regionales de la aplicacin del FEDER y Fondo Social Europeo, representados en el GERIP a travs de sus responsables en materia de informacin y publicidad
- Participar, a travs del GERIP; en el proceso de definicin del marco comn de

trabajo en materia de evaluacin de la comunicacin para los PO FEDER, Fondo de Cohesin y FSE 2007-2013,
- Poner en marcha las evaluaciones de los Planes de Comunicacin de los Programas

Operativos Regionales en 2010 y 2013 conforme a las pautas acordadas en la presente gua, para su futura incorporacin en los correspondientes informes anuales.
- Realizar el volcado de la cuantificacin de los indicadores de seguimiento y

evaluacin propios en Fondos 2007 y FSE 2007, instrumentando las instrucciones y mecanismos que debern aplicar los organismos regionales y coordinando la cuantificacin de los indicadores de evaluacin de las actuaciones de los Organismos Intermedios de su administracin regional.
- Realizar el seguimiento de los avances del Plan Comunicacin, en el mbito de sus

competencias, para colaborar en la informacin a facilitar al correspondiente Comit de Seguimiento .

- Colaborar, en el mbito de sus competencias, en la informacin a incluir en los informes de

ejecucin anuales y final segn lo establecido en el artculo 4.2. del Reglamento (CE) N 1828/2006. 4 - Resto de Organismos Intermedios y/o gestores o partcipes de los Programas Operativos regionales y plurirregionales:
-

Asegurar la recopilacin de la informacin y documentacin necesarias para que est disponible para los evaluadores .

Recopilar la informacin pertinente para cumplimentar los indicadores de evaluacin de informacin y publicidad.

Volcar en la aplicacin Fondos 2007 y FSE 2007 la cuantificacin de los indicadores propios del Plan de Comunicacin

Colaborar en el adecuado desarrollo de los trabajos de la Evaluacin de los Planes de Comunicacin

Si as se les solicita, participacin en grupos de discusin o en el proceso de identificacin de buenas prcticas.

Todas las decisiones y resultados en materia de la evaluacin en materia de Comunicacin se pasarn a titulo informativo al Comit Consultivo de Seguimiento Estratgico y de Evaluacin, integrndolas as en el proceso global de evaluacin 5 Equipo de evaluacin Para llevar a cabo las evaluaciones al objeto de que sean incorporadas en los correspondientes informes anuales de los Programas Operativos, para su valoracin y aprobacin por los correspondientes Comit de Seguimiento, se podr solicitar el asesoramiento de un equipo externo especializado o, incluso, la contratacin del mismo para tal fin con cargo a la asistencia tcnica, en funcin de los recursos financieros y humanos. Quienes lleven a cabo la evaluacin, una vez finalizado su trabajo, entregarn sus informes de evaluacin al equipo responsable de llevar a cabo su contratacin. 6 - Comit de Seguimiento. En el seno de los Comits de Seguimiento del Programa Operativo correspondiente a un Plan de Comunicacin se presentarn:
-

Los avances en el Plan de Comunicacin. Las medidas de comunicacin puestas en prctica en el perodo correspondiente, indicando con qu medios de comunicacin se ha contado en el caso de aquellas actuaciones de Publicidad para las que se hubiesen utilizado.

Ejemplos de buenas prcticas en materia de informacin y publicidad.

AGE Administracin General del Estado

Elaboracin Gua Metodolgica Consensuar la gua Poner en marcha Evaluacin Planes de Comunicacin Programas Operativos Plurirregionales del FEDER, Fondo Social Europeo y Fondo de Cohesin

Organismos Intermedios Responsables de los Planes de Comunicacin regionales

Poner en marcha Evaluacin Planes de Comunicacin Programas Operativos Regionales

Definicin de procedimiento de Evaluacin

Otras Redes Regionales Indicadores de Seguimiento (Realizacin y resultados) Indicadores de Evaluacin (Realizacin, resultados e impacto)

Red INFORM

Otros Organismos Intermedios de la AGE

Otros Organismos Intermedios Regionales y/o gestores o participes

Seguimiento

Evaluacin

Red INIO

Comit de Seguimiento

Comit Consultivo de Seguimiento Estratgico y Evaluacin

Para informe

Seguimiento
Resto de Informes

Seguimiento y Anexo de Evaluacin

Informes 2010 y 2013

Comisin 10

2.3 PROCEDIMIENTO DE EVALUACIN

El procedimiento de evaluacin se ha diseado en dos grandes fases: Elaboracin de los indicadores de seguimiento y evaluacin para que stos se incluyesen y cuantificasen en los Planes de Comunicacin, que deban ser declarados aceptados por la Comisin Europea.
-

Elaboracin y distribucin de instrucciones a los rganos implicados en el desarrollo de las actuaciones contenidas en los Planes de Comunicacin para asegurar su cumplimiento.

Cuantificacin de los indicadores incluidos en los Planes de Comunicacin y volcado en las bases de datos Fondos 2007 (FEDER y Fondo de Cohesin) y FSE 2007 (FSE).

Establecimiento de la metodologa y criterios de evaluacin a aplicar. Adems, hay que destacar que se ha decidido que Las instrucciones contenidas en esta gua sern aplicables a las dos evaluaciones de 2010 y 2013, si bien las conclusiones y recomendaciones se ajustarn a la condicin intermedia y final de las evaluaciones, de forma correspondiente. Es decir, la evaluacin de los Planes de Comunicacin que se realice en 2013 partir de los resultados y recomendaciones de la evaluacin efectuada en 2010.

2.3.1 OBJETO. La evaluacin de los aspectos de comunicacin se centra en los Planes de Comunicacin elaborados y finalmente aceptados por la Comisin Europea o, si se hubiesen producido modificaciones en los mismos, el ltimo Plan de Comunicacin vigente . Por ello, las evaluaciones tendrn por objeto analizar el grado de ejecucin y resultados e impactos logrados por los Planes de Comunicacin, existiendo un informe de evaluacin distinto para cada uno de ellos.

11

2.3.2 PERIODICIDAD La Reglamentacin comunitaria establece la necesidad de realizar dos evaluaciones de los aspectos de comunicacin, una en el ao 2010 y otra al final del perodo1. El resultado de estas evaluaciones debern ser un captulo del informe anual de ejecucin del ao 2010 y del informe final. Por ello, las personas responsables de la comunicacin en Espaa han decidido llevar a cabo dos evaluaciones de los Planes de Comunicacin, una en el ao 2010 y otra en al ao 2013, que deben estar disponibles antes del mes de septiembre de dichos aos, para su remisin a la Comisin. Por consiguiente, la puesta en marcha de este proceso de evaluacin debe hacerse teniendo en cuenta los plazos indicados, sin perjuicio de las actuaciones de seguimiento y recopilacin de informacin, de las actuaciones de informacin y publicidad asociadas a los Planes, que debern mantenerse durante todo el periodo de programacin de forma sostenida. La evaluacin del ao 2010 analizar las medidas y actuaciones ejecutadas entre el 1 de enero de 2007 y el 31 de marzo de 2010 y la referida al ao 2013, las que se realicen desde el 1 de abril de 2010 al final del perodo de programacin. En todo caso, esta ltima evaluacin tomar siempre en cuenta las conclusiones y recomendaciones de la anterior

2.3.3 HERRAMIENTAS Y TCNICAS DE EVALUACIN 2.3.3.1 Sistema de indicadores El diseo de indicadores de seguimiento y evaluacin constituye un ejercicio fundamental para la evaluacin del desarrollo y resultados alcanzados por un Programa o Estrategia. De esta manera y, de acuerdo con la lnea de trabajo mantenida por el GERIP, los indicadores de seguimiento y evaluacin han sido elaborados y cuantificados conforme a distintas directrices para ser incluidos en los Planes de Comunicacin de los PO FEDER, Fondo de Cohesin y FSE 20072013. Dichos indicadores, iguales para todos los Planes de Comunicacin, son los que se muestran en la Tabla 1 y se caracterizan por su:
1

A estos efectos, como aparece en los Planes de Comunicacin, se entiende como final el 31 de diciembre de 2013

12

 Diseo: los indicadores de seguimiento y evaluacin han sido homogeneizados en su definicin, (ver ANEXO 2), de acuerdo con:
-

las actividades de informacin y publicidad que se incluyen en cada uno de los Planes de Comunicacin aceptados por la Comisin.

El mbito de actuacin de los Planes de Comunicacin (la evaluacin no est vinculada al Programa Operativo y/o Fondo).

Tipologa: los indicadores se dividen en:

-

Indicadores de realizacin, para conocer el nmero y tipo de actuaciones de informacin y publicidad que se han llevado a la prctica.

Indicadores de resultado, para evaluar los efectos directos y en el corto plazo de las actuaciones de informacin y publicidad contenidas en los Planes.

La estimacin de los valores a alcanzar por cada uno de los indicadores se ha consensuado tambin que:
-

se realice a 2013, puesto que es la referencia de los Planes de Comunicacin y teniendo en cuenta que el carcter de las actuaciones de comunicacin hacen que sus efectos sobre los destinatarios requieran mayor plazo para ser observados.

Se consideren las actividades ejecutadas por los responsables de los Planes de Comunicacin y por los Organismos Intermedios beneficiarios y/o gestores del/los Programas Operativos a los que en ellos se haga referencia.

Proporcionalidad: los indicadores de seguimiento y evaluacin de las actuaciones de informacin y publicidad que se lleven a cabo en los distintos Planes de Comunicacin y que aparecen en los mismos son proporcionales en base a:
-

la cuantificacin estimada de los indicadores. El trabajo complementario de anlisis cualitativo que realicen los evaluadores independientes de los Planes de Comunicacin.

13

Tabla 1. Indicadores de seguimiento y evaluacin de realizacin y resultado de los Planes de Comunicacin de los PO FEDER y FSE 2007-2013.
TIPOS DE ACTIVIDADES 1. ACTIVIDADES Y ACTOS PBLICOS 2. DIFUSIN EN MEDIOS DE COMUNICACIN 3. PUBLICACIONES REALIZADAS INDICADORES DE REALIZACIN (N) EVENTOS REALIZADOS INDICADORES DE RESULTADOS (N) ASISTENTES

(N) ACTOS DIFUSIN (%) PUBLICACIONES (N) PUBLICACIONES EXTERNAS (N) PUNTOS DE DISTRIBUCIN DISTRIBUIDAS/EDITADAS

4. INFORMACIN A TRAVS PGINAS WEB 5. INFORMACIN A TRAVS DE CUALQUIER TIPO DE CARTELERA

(N) PGINAS WEB

(N) VISITAS

(N) SOPORTES PUBLICITARIOS

6. INSTRUCCIONES EMITIDAS HACIA LOS PARTICIPANTES EN LOS PROGRAMAS OPERATIVOS

7. REDES DE INFORMACIN Y PUBLICIDAD. (N) REUNIONES (N) REDES (N) ASISTENTES (N) DOCUMENTACIN INTERNA DISTRIBUIDA (%) ORGANISMOS CUBIERTOS

Adems de estos indicadores de realizacin y resultados, para la evaluacin se han diseado unos indicadores de impacto, que permitan medir los efectos o consecuencias ms a largo plazo de las actuaciones en materia de informacin y publicidad y si esos efectos son atribuibles a dichas intervenciones. En la seleccin de estos indicadores se ha tenido en cuenta la claridad en su delimitacin, la sencillez en su aplicacin y la representatividad en cuanto a los objetivos que pretende la propia evaluacin. As, a travs de estos indicadores, se pretende recoger -en aquellas actuaciones dirigidas a los aspectos ms directamente ligados con la informacin- el grado de transparencia 14

requerida para lograr la seleccin de las mejores actuaciones posibles a cofinanciar a travs de la poltica de cohesin.. En este sentido, en lo que respecta a las actuaciones de los distintos colectivos implicados en la aplicacin de los fondos en cada Programa Operativo se plantean tres indicadores de impacto:
Grado de conocimiento de las obligaciones existentes en la programacin, gestin, seguimiento, control, evaluacin e informacin y publicidad; unidad de medida: porcentaje (%). Tasa de satisfaccin, que indique la valoracin de los beneficiarios/Organismos Intermedios y/o gestores o partcipes respecto a la informacin facilitada; unidad de medida: porcentaje (%) Tasa de utilidad de las actuaciones; unidad de medida: porcentaje (%)

Para ello, cuando el equipo evaluador deba responder a los dos ltimos indicadores, abrir las preguntas 3 y 14 del cuestionario recogido en el Anexo 4 a las siguientes preguntas: 1 La informacin presentada ha servido para adecuar y/o actualizar sus conocimientos sobre los Fondos y/o su aplicacin. Los contenidos presentados son de utilidad prctica La sesin/evento es una herramienta adecuada para informar/formar sobre los Fondos La duracin de la sesin/evento y el nmero de participantes fue el adecuado para cumplir con los objetivos previstos La sesin/evento ha satisfecho mis expectativas
donde el grado de acuerdo con las diferentes afirmaciones se sita en una escala del 1 al 4, cuyos extremos son: 1=mnimo acuerdo 4=mximo acuerdo.

En todo caso, la valoracin tendr que hacerse diferenciando para cada uno de los distintos tipos de actos (gestin, control, evaluacin y/o comunicacin de los Fondos Europeos) y, en el caso en que el entrevistado haya asistido a varios actos de alguno/os de los diferentes tipos deber realizar la valoracin media de los mismos.

15

De cara al conocimiento que la ciudadana tiene de los fondos procedentes de la Unin Europa y del papel que sta juega en la mejora de su calidad de vida, se aaden dos indicadores: Grado de conocimiento de los distintos Fondos Estructurales y del fondo de Cohesin; unidad de medida: porcentaje (%) Grado de conocimiento del papel desempeado por la Unin Europea; unidad de medida: porcentaje (%)

Indicador de Impacto Grado de conocimiento de las obligaciones. Tasa de satisfaccin. Tasa de utilidad de las actuaciones. Grado de conocimiento de los distintos Fondos Grado de conocimiento del papel desempeado por la Unin Europea

Unidad de Medida Porcentaje (%) Porcentaje (%) Porcentaje (%) Porcentaje (%) Porcentaje (%)

2.3.3.2 Anlisis Documental El anlisis documental permitir llevar a cabo el examen del marco de referencia relativo a las actuaciones en materia de Informacin y Publicidad. Por ello, integrar la revisin de aquellos documentos relevantes o claves en la materia. Los documentos que se describen servirn de marco de referencia destacando entre otros los siguientes: Reglamento 1828/2006, Capitulo II Seccin I Planes de Comunicacin de los Programas Operativos FEDER, FSE y FC, 2007-2013, Documentacin emitida por las redes de comunicacin INFORM e INIO de la Comisin Europea Documentacin emitida por el GERIP, el GRECO-AGE y el resto de redes de comunicacin regionales

16

Informacin de seguimiento: Informes de ejecucin anuales, Actas de los Comits de Seguimiento y Manuales de Procedimientos y/o especficos en materia de informacin y publicidad. El anlisis documental se realizar de forma general al inicio del proceso de la Evaluacin de los Planes de Comunicacin puesto que suministra informacin bsica sobre el contexto, estrategia, objetivos y medidas a ejecutar, as como sobre los logros previstos alcanzar en materia de Informacin y Publicidad. 2.3.3.3 Entrevistas El equipo evaluador independiente encargado de las evaluaciones deber llevar a cabo entrevistas, bien directas, bien realizadas a travs de encuestas. Estas entrevistas son una herramienta importante para la obtencin de informacin cuantitativa y permitirn cruzar dicha informacin con la obtenida de los indicadores de evaluacin y analizar con mayor profundidad los efectos directos e indirectos de las medidas de Informacin y Publicidad puestas en marcha. Atendiendo a criterios de equilibrio en cuanto a representatividad y calidad, se entrevistar a la Autoridad de Gestin, a los Organismos Intermedios jefe de fila regionales y a otros Organismos intermedios en su calidad de beneficiarios y/o gestores de los fondos, con la finalidad de obtener informacin no slo cuantitativa sino tambin otra ms cualitativa ligada no slo con la propias medidas de comunicacin llevadas a cabo, sino tambin a la repercusin de la informacin en la mejora de la propia gestin de los Fondos, en ahondar en la consideracin del principio de igualdad de oportunidades y/o en las actuaciones de verificacin y control, etc.

Entrevistas a los responsables de los Planes de Comunicacin

- Propuesta de cuestionario en ANEXO 3 - Entrevistas personalizadas Entrevistas a los rganos Gestores y/o Beneficiarios - Propuesta de cuestionario en ANEXO 4 - Envo masivo de e-mails a partir de los contactos facilitados por quien sea responsable del Plan de Comunicacin

17

- Explotacin de los cuestionarios recibidos y, en el caso que los resultados alcanzados exijan analizar con mayor grado de detalle, complementar con la realizacin de entrevistas personales.

Entrevistas a la ciudadana
Los objetivos de esta encuesta son dar respuesta a lo exigido reglamentariamente, en el sentido de dar transparencia a las actuaciones cofinanciadas a travs de los distintos Programas Operativos para los que se han elaborado los distintos Planes de Comunicacin y contrastar si el pblico en general est concienciado del papel que la Unin Europea juega en la mejora de su calidad de vida. Asimismo, a travs de esta encuesta se pretende evaluar los dos ltimos indicadores de impacto diseados.
-

Propuesta de cuestionario en ANEXO 5 La encuesta ser telefnica, aplicando el sistema CATI (Computer Assisted Telephone Interviewing) El diseo muestral se recoge en el ANEXO 6

2.3.3.4 Grupos de Discusin Los grupos de discusin tienen por finalidad obtener resultados concretos en cuanto a las causas de necesidades o problemas y sus posibles soluciones y, si procede, la propuesta de modificacin de la estrategia en materia de Informacin y publicidad: En ellos podrn participar, los distintos tipos de agentes implicados en la gestin y desarrollo de las actuaciones en materia de informacin y publicidad, aprovechando para ello las distintas redes montadas al efecto. Se propone la celebracin de las siguientes mesas redondas: Sensibilizacin y concienciacin de la Ciudadana: canales, instrumentos, objetivos cubiertos, principales obstculos, xitos. Accesibilidad y calidad en la formacin e informacin proporcionada en materia de Informacin y Publicidad a beneficiarios potenciales.

18

2.3.4 CRITERIOS DE EVALUACIN. Los criterios de evaluacin constituyen el conjunto de aspectos clave que se recomiendan sean analizados en la evaluacin de los Planes de Comunicacin. Para su definicin se ha tenido en cuenta, en primer lugar, el criterio de proporcionalidad, es decir la existencia de una correspondencia entre las actuaciones recogidas en los distintos Programas Operativos y el montante de fondos europeos destinados a su cofinanciacin y las actuaciones en materia de comunicacin que se van a evaluar; as como la pertenencia de cada regin a uno u otro de los Objetivos (Convergencia y Competitividad). Asimismo el criterio de pertinencia de la estrategia de comunicacin definida en cada uno de los Planes de Comunicacin respecto a las directrices al respecto. En este sentido, se valorar la adecuacin de la estrategia de Comunicacin respecto a la documentacin existente en esta materia procedente de las redes de comunicacin INFORM e INIO de la Comisin Europea. Por otra parte, la validez y consistencia interna de los Planes de Comunicacin, comprobando si existe coherencia entre los objetivos del Plan de Comunicacin y si las medidas de comunicacin puestas en marcha responden adecuadamente a dichos objetivos. Valorar la asignacin y adecuacin de los recursos destinados a esta materia. Valorar la consideracin del principio de igualdad de oportunidades.

2.3.5

ELABORACIN DEL DOCUMENTO DEL INFORME DE EVALUACIN

En este apartado se define la estructura a la que se debern ajustar los informes que finalmente remitan los equipos evaluadores con la evaluacin de los distintos Planes de Comunicacin, la descripcin del contenido a desarrollar en cada uno de ellos, especificando las tareas para la recogida y el tratamiento de la informacin y los criterios de evaluacin a realizar. De manera general, se propone que los informes finales de evaluacin de los Planes de Comunicacin se estructuren en ocho captulos relativos a metodologa utilizada y a la consideracin de la informacin y publicidad en la programacin y gestin junto con los logros obtenidos, los casos de xito identificados y las conclusiones y recomendaciones alcanzadas. (ANEXO 1) 19

2.3.5.1 Metodologa empleada Diseo tcnico de la evaluacin

Se indicar, el motivo, el alcance temporal, los agentes implicados y sus responsabilidades, el calendario y la estructura conforme a las instrucciones de esta gua. Mtodos y tcnicas utilizados

Se seguirn las especificaciones de esta gua. Valoracin de lo anterior, indicando los condicionantes y/o lmites encontrados en el desarrollo de los trabajos.

2.3.5.2 Anlisis de la programacin de la estrategia de comunicacin Se tendrn en cuenta los criterios establecidos en esta gua en el sentido de evaluar la pertinencia de la estrategia y la validez y consistencia interna de los Planes de Comunicacin.

2.3.5.3 Anlisis de la Aplicacin de las medidas de informacin y Publicidad Avances en la ejecucin de las medidas de informacin y publicidad En este apartado se estudiarn exclusivamente las medidas y actuaciones en materia de informacin y publicidad. El objetivo es conocer los avances y su relacin con lo previsto en el Plan de Comunicacin. El equipo evaluador deber indicar la adecuacin del presupuesto gastado con relacin al especificado en el Plan de Comunicacin. Integracin de las actividades de informacin y publicidad en los informes anuales de ejecucin Para el periodo de programacin 2007-2013 conforme al artculo 4.2 del Reglamento (CE) N 1828/2006 los informes de ejecucin anual debern incorporar un apartado en materia de informacin y publicidad que recoja algunos ejemplos de medidas de informacin y publicidad

20

llevadas a cabo en el perodo, los avances en la publicacin de la lista de beneficiarios y el contenido de cualquier modificacin importante del plan de comunicacin. En este sentido, el presente apartado deber verificar los siguientes aspectos: El cumplimiento de este requerimiento comunitario. La inclusin de buenas prcticas, conforme a los criterios establecidos en la presente gua para su identificacin. La repercusin de los sistemas de seguimiento en la calidad de la ejecucin de las medidas El conocimiento de los procesos de la puesta en marcha y aplicacin del Programa Operativo y de su Plan de Comunicacin puede ayudar a identificar factores de xito u obstculos cuya consideracin es decisiva para comprender los niveles de realizacin alcanzados, as como los resultados e impactos globales. Con frecuencia, la eficacia de las actuaciones en informacin y publicidad se explica no slo por la mayor o menor bondad del Plan de Comunicacin, sino por la calidad del proceso de implantacin o ejecucin del mismo. Con esta finalidad, se propone la bsqueda y anlisis de informacin relativa a los siguientes aspectos: Existencia de instrucciones a los rganos encargados de la gestin y ejecucin de las actuaciones en materia de gestin, seguimiento, control, evaluacin publicidad informacin y publicidad. Calidad de los procedimientos establecidos. Disposicin de Manuales especficos de gestin, seguimiento, control, evaluacin e e informacin y

informacin y publicidad por parte de las Autoridades de Gestin, Organismos Intermedios y beneficiarios, as como la elaboracin de instrucciones, orientaciones con la finalidad de facilitar la informacin y transparencia. Asignacin y adecuacin de los recursos destinados a los aspectos de comunicacin. Apoyo informtico: disponibilidad y organizacin de aplicaciones informticas que aseguren la calidad del seguimiento y de la ejecucin. Anlisis de la estructura y funcionamiento del GERIP, GRECO-AGE y resto de redes regionales. 21

Comunicacin y coordinacin con otros rganos: cauces de informacin fluidos con los Comits de Seguimiento, Comit Consultivo de Seguimiento Estratgico y Evaluacin. Este anlisis de la calidad de la ejecucin y de los sistemas de seguimiento y evaluacin deber efectuarse sobre el terreno, siendo el trabajo de campo, en particular entrevistas personales, la principal herramienta para la recogida de informacin.

2.3.5.4 Verificacin de la inclusin de la informacin y publicidad en las actuaciones de verificacin y control de los Fondos FEDER, Fondo de Cohesin y FSE En este apartado, se pretende valorar si la Informacin y publicidad se ha observado tambin tanto en la verificacin como en el control. Para ello, se propone realizar un examen de los siguientes aspectos: La inclusin en los procedimientos de control de las operaciones de la aplicacin de las obligaciones en materia I+P en la elaboracin de convocatorias, en la contratacin, etc. Integracin y cumplimentacin de preguntas relativas al cumplimiento de la Informacin y publicidad en los check-list utilizados para el cumplimiento del artculo 13 del Reglamento 1083/2006

2.3.5.5 Incorporacin del principio de Igualdad de Oportunidades en las medidas de informacin y publicidad La forma en la que aparezcan reflejados los objetivos de igualdad y las referencias a las mujeres, el tipo de informacin que se maneje al respecto, o los lenguajes y canales que se utilicen para las actuaciones de informacin y publicidad, puede facilitar una estrategia de igualdad, y tienen una influencia clara en la construccin y fomento de una cultura ms igualitaria. En este sentido, se evaluar, al objeto de cumplir con el principio de igualdad de oportunidades en las medidas de informacin y publicidad recogidas en los distintos planes de Comunicacin, cmo la Autoridad de Gestin, los Organismos Intermedios jefe de fila regionales, representados en el GERIP y los restantes actores implicados contribuyen a travs de sus actuaciones en esta materia a:

22

Visibilizar, de cara a la opinin pblica, la contribucin del Fondo Social Europeo a la igualdad de oportunidades entre hombres y mujeres. Tener en cuenta que se repare sobre las necesidades de las mujeres en el acceso a los diferentes contenidos informativos.
Facilitar informacin a las mujeres sobre las posibilidades de participacin como

beneficiarias de los programas. 2.3.5.6 Anlisis del impacto. A travs de los indicadores de impacto ya definidos, los equipos evaluadores debern extraer los logros y desafos que las actividades en materia de informacin y publicidad han generado.

2.3.5.7 Conclusiones y recomendaciones: propuesta de medidas a adoptar. A partir de la informacin cuantitativa y cualitativa analizada, los informes concluirn con la formulacin de las principales conclusiones y la propuesta de medidas a adoptar en los aos siguientes con la finalidad de obtener la mxima eficiencia de los Planes de Comunicacin. En el caso de que se observen deficiencias en la planificacin o ejecucin de los Planes de Comunicacin debern realizarse las recomendaciones de mejora oportunas. En el informe de 2010 se debern formular conclusiones sobre la adecuacin y pertinencia de la estrategia de comunicacin, sobre la calidad de la ejecucin y el seguimiento y una descripcin de la situacin a fecha de cierre del informe de evaluacin, as como realizar una estimacin de las expectativas de cumplimiento de la planificacin realizada. En base a estos resultados, se realizarn las recomendaciones oportunas. En el informe de 2013 deber realizarse una valoracin previa del avance del Plan y de los resultados alcanzados, a partir de las conclusiones y recomendaciones del informe de 2010.

23

2.3.5.8 Definicin de buenas prcticas Para que sirva de gua no slo a los evaluadores, sino tambin a la propia Autoridad de Gestin y/o Organismos Intermedios y/o beneficiarios en el seguimiento de sus propias actuaciones y para que sirva como referente a la hora de contrastar distintas actuaciones, se presentan a continuacin los criterios que van a permitir una aproximacin al criterio de buenas prcticas en materia de comunicacin. As, toda actuacin que responda a alguno/os de estos criterios podr ser considerada como tal a todos los efectos 1. Uso de recursos innovadores en la presentacin, organizacin y/o desarrollo 2. Adecuacin de los contenidos a los objetivos perseguidos 3. Incorporacin de criterios de Igualdad de oportunidades 4. Adecuacin con el objetivo general de difusin de los fondos 5. Alto grado de cobertura sobre la poblacin objetivo de la accin de comunicacin 6. Evidencia de un alto grado de calidad 7. Uso de nuevas tecnologas de la informacin. Hay que sealar tambin que siempre que se requiera destacar alguna/as buenas prcticas, en particular para presentarla/s en los Comits de Seguimiento y/o que quede reflejada/s en los correspondientes informes anuales, as como en la documentacin que obligatoriamente debern presentar los evaluadores en los aos 2010 y 2013, se deber elaborar un informe que recoja, por una parte, la identificacin de la buena prctica en base a los criterios establecidos en este apartado y tambin una breve descripcin de la misma, apoyando los elementos que justifican y en los que se apoya dicha seleccin. Cada actuacin que sea considerada buena prctica deber contar con el informe correspondiente.

24

3. ANEXOS

ANEXO 1 - ndice del informe de las Evaluacin de los Planes de Comunicacin.

1. Metodologa de evaluacin 1.1 1.2 1.3 Diseo tcnico de la evaluacin Mtodos y tcnicas utilizadas Valoracin de lo anterior

2. Anlisis de la programacin de la estrategia de comunicacin 3. Anlisis de la aplicacin de las medidas de informacin y publicidad 3.1
3.2

Avances en la ejecucin de las medidas Integracin de las actividades de informacin y publicidad en los informes anuales de ejecucin

3.3

La repercusin de los sistemas de seguimiento en la calidad de la ejecucin de las medidas

4. Verificacin de la inclusin de la informacin y publicidad en las actuaciones de verificacin y control de los Fondos FEDER, Fondo de Cohesin y FSE 5. Incorporacin del principio de Igualdad de Oportunidades en las medidas de informacin y publicidad 6. Anlisis del impacto: logros y desafos de las actividades en materia Informacin y publicidad. 7. Conclusiones y recomendaciones: propuesta de medidas a adoptar 8. Buenas prcticas

25

ANEXO 2 - NOTA METODOLGICA SOBRE LOS INDICADORES DE REALIZACIN DE SEGUIMIENTO Y EVALUACIN

1. Actividades y actos pblicos Se recogen el nmero de actos de lanzamiento del/los Programas Operativos para los que se elabora el Plan de Comunicacin, los actos informativos importantes anuales, actos en torno del Da de Europa y cualquier otro evento contemplado para desarrollar las medidas del Plan o transmitir informacin acerca de la poltica comunitaria en Espaa. 2. Difusin en medios de comunicacin En este epgrafe se recogen distintos tipos de acciones de difusin realizadas en los medios (spots en TV, anuncios en prensa, cuas en radio, banner en Internet, notas de prensa en teletipos) utilizados de forma individual o formando parte de una campaa publicitaria con motivo de dar a conocer el Programa Operativo o alguna de sus actuaciones concretas, o la poltica regional europea, entre la ciudadana. 3. Publicaciones realizadas Se recogen cualquier tipo de publicaciones editadas (en soporte papel o electrnico: libros, folletos, revistas, CD, DVD, videos) dirigidos a la ciudadana con la finalidad de dar a conocer el Programa Operativo o alguna de sus actuaciones concretas. As como aquellas relacionadas con la poltica regional europea. 4. Informacin a travs de pginas web Contabiliza las principales web utilizadas para la transmisin de informacin sobre el PO o algunas actuaciones en concreto, as como la relacionada con la poltica regional europea. En el caso de los Programas Regionales se contabilizan slo las relativas a la/as autoridades de gestin y la/as de los Organismos Intermedios regionales responsables de la gestin de los Fondos en las distintas Administraciones regionales 5. Informacin a travs de cualquier tipo de cartelera

26

Se recogen los distintos soportes (psteres, carteles, placas, expositores, stands y/o vallas) utilizados con fines publicitarios, con la finalidad de dar a conocer el Programa Operativo o alguna de sus actuaciones concretas entre la ciudadana. 6. Instrucciones emitidas hacia los participantes de los programas operativos Se incluye toda la documentacin distribuida desde las autoridades de gestin y/o los Organismos intermedios a los Organismos Gestores de los Programas Operativos y/o potenciales beneficiarios/ beneficiarios de los Fondos Europeos aplicados a travs de los distintos Programas Operativos, ( guas metodolgicas, instrucciones, informes.). Se trata de garantizar la transparencia de las actuaciones para conseguir la mayor excelencia en las actuaciones a cofinanciar a travs de los fondos europeos y facilitar el cumplimiento de la normativa comunitaria 7. Redes de informacin y publicidad Se recogen las redes de Comunicacin establecidas para poner en marcha y llevar a la prctica la estrategia de comunicacin plasmada en los distintos Planes de Comunicacin En la lnea de especial sensibilizacin sobre el establecimiento de redes comunitarias, que permitan garantizar el intercambio de buenas prcticas y el intercambio de experiencias en materia de informacin y publicidad En todo caso, hay que sealar que los indicadores propuestos se han diseado respetando el criterio de proporcionalidad y la coherencia con el conjunto de las actuaciones recogidas en los distintos Programas Operativos. Asimismo, se ha tratado de garantizar la transparencia en las actuaciones, para conseguir las mejores actuaciones posibles a cofinanciar a travs de los fondos europeos y de concienciar a la ciudadana del papel que la Unin Europea juega en el incremento de su calidad de vida, resaltando el papel que en ello pueden tener actuaciones concretas recogidas en los distintos Programas Operativos. Para ello se ha tenido muy en cuenta, en los casos que se ha visto necesario, aquellas actuaciones ms novedosas y/o destacadas en el perodo de programacin 2007-2013, como puedan ser las relacionadas con la I+D+i, las relativas al Jeremi, al nuevo Fondo para las Regiones Ultraperifricas.

27

ANEXO 3 - LISTADO DE PREGUNTAS Y/O COMPROBACIONES DESTINADO A LAS AUTORIDADES DE GESTIN Y/O ORGANISMOS INTERMEDIOS RESPONSABLES DE LOS PLANES DE COMUNICACIN EN LAS DISTINTAS ADMINISTRACIONES REGIONALES

CUESTIONARIO
SI

RESPUESTA

Ha elaborado un Plan de Comunicacin para el P.O.?

NO (SI ES PERTINENTE, ACLARAR) SI

Se ha advertido a los beneficiarios de que formar parte de un listado pblico en caso de acceder a una ayuda comunitaria?

NO (SI ES PERTINENTE, ACLARAR)

SI

Ha realizado alguna actividad de lanzamiento del P.O.?

NO (SI ES PERTINENTE, ACLARAR) SI

Ha realizado actividades anuales que presenten los logros y avances del P.O.?

NO (SI ES PERTINENTE, ACLARAR) SI NO (SI ES PERTINENTE, ACLARAR) SI

Ha llevado a cabo el izamiento anual de la bandera de la U.E. en la semana del 9 mayo?

Ha realizado la publicacin electrnica de la lista de beneficiarios?

NO (SI ES PERTINENTE, ACLARAR) SI NO (SI ES PERTINENTE,

Ha informado a travs de Pgina Web del contenido del PO?

ACLARAR) SI

Ha publicado material divulgativo sobre los POs?

NO (SI ES PERTINENTE,

28

ACLARAR) SI

Ha informado acerca de las responsabilidades que los beneficiarios adquieren en NO (SI ES PERTINENTE, materia de gestin, seguimiento, control, evaluacin e informacin y publicidad? ACLARAR) Ha puesto a disposicin de quienes estn interesados los datos de contacto de aquellas unidades administrativas a las que se pueden dirigir para solicitar cualquier tipo de informacin referida al PO?.
SI NO (SI ES PERTINENTE, ACLARAR) SI

Ha proporcionado informacin sobre la normativa, los procedimientos de gestin y sus NO (SI ES PERTINENTE, actualizaciones?
ACLARAR) SI

Ha distribuido instrucciones especficas y/o un manual de requisitos de comunicacin NO (SI ES PERTINENTE, entre los organismos intermedios y/o beneficiarios de las operaciones? ACLARAR) Realiza una recopilacin grfica de las actuaciones informativas y publicitarias llevadas a cabo?
SI NO (SI ES PERTINENTE, ACLARAR) SI

Ha utilizado el lema acordado en el Plan de Comunicacin en el material comunicacin que haya puesto en prctica?

de NO (SI ES PERTINENTE,
ACLARAR) SI

Ha organizado alguna jornada, curso seminario para dar a conocer la gestin del PO y NO (SI ES PERTINENTE, de sus resultados?
ACLARAR) SI

Ha puesto en marcha alguna actuacin de publicidad para hacer ver los logros NO (SI ES PERTINENTE, alcanzados por el PO, o en general por la poltica regional en Espaa? ACLARAR)
SI

Ha aplicado correctamente las exigencias tcnicas para las medidas de informacin y NO (SI ES PERTINENTE, publicidad recogidas en los Reglamentos?
ACLARAR) SI NO (SI ES PERTINENTE,

Ha participado en alguna red de comunicacin relacionada con los Fondos Europeos? ACLARAR)

29

SI

Lleva a cabo un seguimiento de los avances del Plan de Comunicacin, plasmndolo en NO (SI ES PERTINENTE, los informes que se remiten al Comit de Seguimiento?
ACLARAR) SI

Contribuye a la difusin de buenas prcticas de los proyectos recogidos en el/los POs NO (SI ES PERTINENTE, para los que se ha elaborado el Plan de Comunicacin?
ACLARAR) SI

Cumplimenta indicadores de comunicacin (realizacin y/o resultado) como NO (SI ES PERTINENTE, consecuencia de su participacin en el PO? Indique cules. ACLARAR)

30

ANEXO 4 - LISTADO DE PREGUNTAS Y/O COMPROBACIONES DESTINADO A RGANOS GESTORES Y/O BENEFICIARIOS

CUESTIONARIO
SI

RESPUESTA

NO (SI ES PERTINENTE,

Conocen el Plan de Comunicacin del PO en el que participa?

ACLARAR) SI

Ha recibido instrucciones especficas y/o un manual de seguimiento de los Planes de NO (SI ES PERTINENTE, Comunicacin?
ACLARAR) SI

Ha participado en alguna jornada o sesin formativa en relacin con los requisitos de NO (SI ES PERTINENTE, comunicacin en el nuevo periodo de programacin?
ACLARAR) SI

Forma su Organismo parte de alguna red de comunicacin relacionada con los NO (SI ES PERTINENTE, Fondos Europeos? ACLARAR)
SI

Si Vd no es beneficiario, Ha distribuido instrucciones especficas y/o un manual de NO (SI ES PERTINENTE, requisitos de comunicacin dirigido a los mismos? ACLARAR)
SI

Ha aplicado correctamente las caractersticas tcnicas exigidas reglamentariamente NO (SI ES PERTINENTE, para las medidas de informacin y publicidad?
ACLARAR) SI

Ha utilizado el eslogan acordado en el Plan de Comunicacin para el material de NO (SI ES PERTINENTE, comunicacin puesto en prctica? ACLARAR)
SI

En la convocatoria y/o resolucin de las ayudas, convenios, etc. ha mencionado la participacin del FEDER/FSE? En los pliegos de condiciones y clusulas administrativas ha facilitado informacin acerca de los criterios de seleccin de los proyectos, los procedimientos de examen

NO (SI ES PERTINENTE, ACLARAR) SI NO (SI ES PERTINENTE,

31

de las solicitudes y sus tiempos?.

ACLARAR)

SI

Ha difundido a travs de algn procedimiento electrnico las distintas convocatorias NO (SI ES PERTINENTE, existentes en el marco del PO? ACLARAR) Si Vd no es el beneficiario ha informado a ste de las obligaciones que, con carcter SI general, adquiere en materia de informacin y publicidad, y, en concreto, de que pasar a formar parte de la lista de beneficiarios que ser publicada por la Autoridad de Gestin?.
SI NO (SI ES PERTINENTE, ACLARAR)

Ha remitido notas de prensa y/o ha publicado alguna noticia a travs de los medios NO (SI ES PERTINENTE, de comunicacin en relacin con el PO y/o el papel desempeado por la UE?
ACLARAR) SI NO (SI ES PERTINENTE,

Recopila y archiva el material de comunicacin de las actuaciones que gestiona?

ACLARAR)

Ha participado en alguna reunin, jornada y/o curso donde se le haya informado SI acerca de los procedimientos de gestin, control, evaluacin y/o comunicacin de los NO (SI ES PERTINENTE, Fondos Europeos?
ACLARAR) SI

Ha puesto en marcha alguna actuacin de publicidad para hacer ver los logros NO (SI ES PERTINENTE, conseguidos en actuaciones cofinanciadas con fondos europeos? ACLARAR)
SI

Ha organizado alguna jornada, seminario, evento, feria y/o certamen para divulgar su NO (SI ES PERTINENTE, participacin en el PO y/o en general sobre la poltica regional europea en Espaa? Cules son los principales problemas con los que se encuentran a la hora de dar cumplimiento a los requisitos de comunicacin en el desarrollo de sus operaciones? a. Emblema comunitario b. Lema del Fondo indicado en el Plan de Comunicacin c. Comunicar la cofinanciacin europea d. Lista de beneficiarios, los nombres de las operaciones y la cantidad de fondos pblicos asignados a las mismas e. Contenido de las herramientas especficas (vallas, carteles, etc.) f. Otros (especifique)
ACLARAR) SI NO (SI ES PERTINENTE, ACLARAR)

32

ANEXO 5 - LISTADO DE PREGUNTAS Y/O COMPROBACIONES DESTINADO AL PBLICO EN GENERAL

1. Sabe usted que su C.A. recibe dinero de la Unin Europea para contribuir a su progreso econmico y social?
-

Si No

2. Ha odo hablar del

-

. Fondo Europeo de Desarrollo Regional FEDER? Si No

. Fondo Social Europeo FSE? Si No . Fondo de Cohesin Si No

Si ambas respuestas negativas fin de la encuesta 3. Conoce proyectos o inversiones que se han realizado con financiacin europea en su CCAA relativos a (respuesta mltiple)
SI Infraestructuras (carreteras, trenes....) y equipamientos (escuelas, hospitales...) (FEDER) Medio Ambiente (agua, depuradoras, desaladoras, ...)(FEDER) Investigacin, Desarrollo e Innovacin y Sociedad de la Informacin (FEDER y FSE) Ayudas a las empresas (FEDER y FSE) Formacin y Empleo (FSE) Ayudas para disminuir las desigualdades sociales y entre hombres y mujeres (FEDER y FSE) NO

33

Ayudas para luchar contra la exclusin y/o a personas con discapacidad (FSE)

4. Cmo se enter de este tipo de actuaciones? (respuesta mltiple)

SI Ha visto vallas en las carreteras / placas en centros de formacin? Ha visto carteles, posters en la calle? Ha visto/odo anuncios en prensa, radio, televisin? A travs de folletos? A travs de Internet? A travs de terceras personas? He participado en algn curso de formacin financiado por la Unin Europea? NO

5.

Cmo valora Vd el papel jugado por los Fondos Europeos (FEDER, FSE y Fondo de a. Irrelevante b. Positivo c. Muy beneficioso d. Absolutamente crucial 6. El lema y/o lemas Aqu el que parezca en el Plan de Comunicacin le parece que refleja adecuadamente el papel que juega de la Unin Europea, a travs del FEDER, FSE y/O Fondo de Cohesin, en el mayor desarrollo econmico y social de Espaa y/o en concreto de su regin ?
-

Cohesin en el desarrollo de su regin

Si No

34

ANEXO 6 DISEO MUESTRAL DE LA ENCUESTA DIRIGIDA A LA CIUDADANA

El colectivo a investigar sern las personas mayores de 15 aos que residan en la Comunidad o Ciudad Autnoma a la que corresponda el Plan de Comunicacin que se evala. En el caso de los Planes de Comunicacin Pluriregionales sern las que habiten en todo el territorio nacional. El perodo de referencia de los resultados corresponde al momento de la realizacin de cada una de las dos evaluaciones (2010 y 2013) para las que se elabora esta gua de seguimiento y evaluacin. El diseo se ha realizado de forma que permita alcanzar de una manera eficiente los objetivos de la encuesta, considerando una estratificacin por CCAA. El tamao de la muestra terica total se situ en 16.000 unidades. Para proceder a la afijacin de las unidades en cada una de las distintas Comunidades y Ciudades Autnomas y en aras de respetar el principio de proporcionalidad se establecieron dos grupos independientes, en funcin de la pertenencia de cada uno de ellas al Objetivo Convergencia (Convergencia pura y Phasing-out) o al Objetivo de Competitividad (Competitividad pura y Phasing-in). Para decidir el tamao de la muestra en cada grupo se concili el montante de fondos europeos a percibir en el perodo de programacin 2007-2013 y la poblacin residente en las Comunidades y Ciudades Autnomas incluidas en cada grupo. Finalmente, los tamaos fueron de 9.000 y 7.000 unidades respectivamente. En ambos grupos se realiz la afijacin mediante un criterio de compromiso entre la afijacin uniforme y la proporcional. As, en el primer grupo, inicialmente se asignaron 650 unidades por cada una de las distintas Comunidades y/o Ciudades Autnomas y las unidades restantes se repartieron proporcionalmente al nmero de personas de 15 aos en adelante en cada una de ellas, segn los datos de poblacin obtenidos de la revisin del padrn municipal de 2008. En el segundo grupo, se procedi de manera similar, pero con una afijacin inicial de 450 unidades. En el cuadro siguiente se presentan los tamaos muestrales junto a una estimacin del error de muestreo y a la semiamplitud del intervalo de confianza para un nivel de confianza del 95%, considerando la estimacin de proporciones en la peor de las hiptesis (P=Q=0,5). Para la elaboracin de estos datos se ha considerado la hiptesis de seleccin en cada Comunidad

35

Autnoma mediante muestreo aleatorio simple. Se trata por tanto de una estimacin orientativa de los errores a los que finalmente est sujeta esta investigacin. Los errores de muestreo para el total se han obtenido utilizando frmulas para muestreo estratificado. UNIDADES EN LA MUESTRA TERICA Y ESTIMACIONES DEL ERROR DE MUESTREO ERROR DE MUESTREO MARGEN DE ERROR (p=q=0,5) UNIDADES EN LA MUESTRA en porcentaje confianza 95% TOTAL 16.000 0,49 0,98 ANDALUCA 2.479 1,00 2,01 ARAGN 544 2,14 4,29 ASTURIAS (PRINCIPADO DE) 908 1,66 3,32 BALEARS (ILLES) 524 2,18 4,37 CANARIAS 594 2,05 4,10 CANTABRIA 491 2,26 4,51 CASTILLA Y LEN 634 1,50 3,00 CASTILLA LA MANCHA 1.111 1,99 3,97 CATALUA 961 1,61 3,23 COMUNIDAD VALENCIANA 799 1,77 3,54 EXTREMADURA 900 1,67 3,33 GALICIA 1.307 1,38 2,77 MADRID (COMUNIDAD DE) 885 1,68 3,36 MURCIA (REGIN DE) 964 1,61 3,22 NAVARRA (COMUNIDAD FORAL DE) 493 2,25 4,50 PAS VASCO 603 2,04 4,07 RIOJA (LA) 472 2,30 4,60 CEUTA 666 1,94 3,87 MELILLA 665 1,94 3,88

La realizacin de la encuesta en de cada CCAA se llevar a cabo por entrevista telefnica utilizando el mtodo CATI2 (Computer Assisted Telephone Interviewing) y la seleccin de unidades muestrales se llevar a cabo aplicando muestreo sistemtico con arranque aleatorio. Se tomarn medidas para garantizar que dicha muestra aleatoria simple respete las distribuciones poblaciones por sexo y edad observadas en los datos de poblacin utilizados.

Entrevistas telefnicas asistidas por ordenador

36

Se utilizan estimadores de razn para muestreo estratificado considerando como estratos las distintas Comunidades y Ciudades Autnomas. En estas condiciones, la expresin final del estimador para el total de una caracterstica X, se obtiene de la forma siguiente:

Nh X = xh nh h
Donde: h Comunidad o Ciudad Autnoma. Nh nmero de personas de 15 aos en adelante en esa Comunidad o Ciudad Autnoma h obtenidas de las proyecciones demogrficas de poblacin. nh nmero de personas de la muestra efectiva de la Comunidad o Ciudad Autnoma h xh total de personas de la muestra efectiva que poseen una determinada caracterstica X pertenecientes a la Comunidad o Ciudad Autnoma h. Como estimador para la proporcin de una caracterstica X utilizamos el estimador de la razn: N n h xh h P = h N siendo N la poblacin objetivo de la encuesta Para determinar la precisin de los estimadores ofrecidos se han obtenido los correspondientes errores de muestreo. El estimador utilizado para obtener el error de total ha sido la desviacin tpica D( X ) = V ( X ) siendo V ( X ) la varianza de la estimacin de X para muestreo estratificado N h ( N h nh ) 2 Sh V (X ) = nh h donde 1 S h2 = ( x hi x h ) 2 nh 1 i Este error de muestreo permite obtener el intervalo de confianza, dentro del cual, con una determinada probabilidad se encuentra el valor verdadero de la caracterstica estimada. As, la teora del muestreo determina que en el intervalo comprendido entre X 1,96 V X , X +1,96 V X

()

( ))

existe una confianza del 95 por ciento de que se encuentre el valor verdadero del parmetro X.

37