Académique Documents
Professionnel Documents
Culture Documents
Documento de apoyo Observatorios Locales de Democracia Participativa Fase de aplicacin de indicadores Octubre Noviembre 2006
Asistencia de Contenidos
Institut de Govern i Poltiques Pbliques Universitat Autnoma de Barcelona
Octubre, 2006.
www.oidp.net
Nota:
Este documento es publico y esperamos que l sea de enorme utilidad para todas las ciudades/ regiones/ instituciones que de l se utilicen. No obstante, con el intuito de seguir perfeccionando nuestros trabajos y avanzando conectados con la prctica cotidiana de la participacin, pedimos a todos aquellos que hagan servir este documento en la evaluacin de alguna prctica participativa que compartan con nosotros sus reflexiones sobre la aplicabilidad, utilidad, fortalezas y debilidades de los contenidos aqu expresos. Para eso les pedimos que enven sus reflexiones al e-mail oidp@bcn.cat o entren en contacto con la Secretara Tcnica a travs del contacto que se encuentra en www.oidp.net
www.oidp.net
ndice
Introduccin 1. Antecedentes 2. El Marco Conceptual compartido 3. Algunas Reflexiones previas 5 6 8
La Caja de Herramientas 4. Elementos Previos 5. Qu evaluamos a. La tipologa de los objetos de estudio 6. Criterios de Evaluacin de los Procesos Participativos A. Criterios relacionados con la coordinacin del proceso B. Criterios relacionados a quien participa C. Criterios relacionados a sobre qu se participa D. Criterios relacionados a cmo se participa E. Criterios relacionados a las consecuencias del proceso 7. Cuadro Resumen de Criterios de Evaluacin Bibliografa y documentacin propia utilizada ANEXO I Algunos elementos Metodologicos ANEXO II Tabla Resumen 11 13 14 17 18 24 30 32 36 40 41 42 45
www.oidp.net
1. Antecedentes
El presente documento es por un lado un instrumento de trabajo que deber ayudarnos en la ltima fase del proyecto Urb-al Tipo B Observatorios Locales de Democracia participativa, y por otro es un primer resultado de los trabajos de estos casi dos aos de reflexin y prctica compartida. Nuestro compromiso como proyecto subvencionado por el programa de cooperacin descentralizada entre Europa y Amrica Latina era la constitucin de nueve Observatorios Locales de Democracia Participativa y la creacin de unos indicadores de evaluacin de la calidad de las experiencias participativas en nuestras ciudades, siempre con el objetivo de poder mejorar esas experiencias en la direccin de que los ciudadanos y ciudadanas tengan un mayor protagonismo en el gobierno de las ciudades. Durante este proceso hemos detectado la necesidad de ir ms all del objetivo inicial, ya que compartimos la idea de que la tarea de constituir un OLDP como espacio de interaccin y evaluar la participacin a nivel local es ms compleja que la simple aplicacin de un conjunto de indicadores. Eso porque el objetivo final, no lo olvidemos, es mejorar la participacin, y desde ah vemos que es necesario evaluar lo que hacemos para poder mejorarlo. Pero sabemos que las estrategias de evaluacin y los instrumentos disponibles son muchos y diversos; y que las preguntas que rodean la evaluacin son a su vez complejas, pues se mueven en registros distintos (Qu se evala, para qu se evala, cmo se evala, quin evala) unos ms polticos y otros ms instrumentales o metodolgicos. Por eso, en la V Conferencia del Observatorio Internacional de Democracia Participativa (Donosita - San Sebastin, 2005) hemos decidido crear una serie de Grupos de Trabajo, coordinados por un Observatorio Local pero donde podan participar todos los socios del OIDP. Con eso, pretendamos abrir la discusin a un nmero mayor de ciudades y tambin profundizar y ampliar nuestros conocimientos en el mbito de la evaluacin. De ah, nacieron los siguientes grupos de trabajo: Elaboracin de una gua de creacin de un OLDP. Elementos comunes para la definicin del objeto de estudio de los OLDP: mbitos, indicadores e ndice Creacin de una ficha de Buenas Prcticas Tipologa de experiencias a observar
Los grupos de trabajo estn intrnsecamente relacionados con nuestros compromisos iniciales: la constitucin de observatorios locales y la creacin de los elementos comunes de evaluacin de prcticas participativas. No obstante, la reflexin que de ellos deriva nos llev a plantearnos la necesidad de instrumentos de evaluacin ms completos, ms amplios y, consecuentemente, con ms contenido. Por eso, en la ciudad de El Bosque (Cl) en junio de 2006 durante la reunin interna de los Observatorios Locales acordamos un calendario de trabajo que prevea la creacin y la aplicacin de una Caja de Herramientas, donde estuviesen incorporados los indicadores de evaluacin y otros instrumentos que nos apoyasen en la tarea de evaluar-proponer-mejorar nuestras experiencias locales. As, durante los ltimos meses, la coordinacin del proyecto (la Secretara Tcnica) junto con el Institut de Govern i Poltiques Pbliques de la Universitat Autnoma de www.oidp.net
Barcelona, hemos trabajado en la creacin de esa Gua Prctica para la Evaluacin de Procesos Participativos, que es el compendio de las reflexiones de dos de los grupos de trabajo arriba mencionados (Tipologas de experiencias a observar y Elementos comunes para la definicin del objeto de estudio de los OLDP: mbitos, indicadores e ndice) ms una extensin que esperamos pueda servir de apoyo a la ultima fase del proyecto de los Observatorios Locales y, sobretodo, que pueda constituirse como un instrumento de evaluacin y mejora til a todas aquellas ciudades que impulsan procesos de profundizacin democrtica en sus mbitos locales. El documento se estructura de la siguiente manera: Antes de presentar las herramientas de evaluacin, creemos importante resaltar nuestro marco conceptual, algunas ideas que guan nuestras acciones de evaluacin. Pero tambin compartimos dudas, y mantenemos algunos debates en abierto. Esas dos partes constituyen las dos primeras secciones de este documento. Las herramientas de evaluacin se encuentran dentro del apartado llamado Caja de Herramientas. Este apartado est dividido en Elementos Previos, Qu evaluamos? y Criterios de evaluacin de los Procesos Participativos. 1.- Los elementos previos son aquellos que deben ser considerados antes de la evaluacin e intentan abarcar la diversidad de situaciones, contextos, objetivos y temas acerca los cuales se proponga hacer una evaluacin. 2.- En qu evaluamos? hay una breve tipologa de las experiencias ms comunes de participacin para ayudarnos en la tarea de sistematizacin y categorizacin de experiencias. 3.- Los criterios de evaluacin son los criterios consensuados por los socios del proyecto y se refieren a cinco mbitos de los procesos (la coordinacin del proceso, quin participa, sobre qu se participa, cmo se participa y las consecuencias de la participacin). En el apartado correspondiente a cada uno de los cincos mbitos se describe en qu consiste el criterio (a qu aspira) y cmo puede hacerse su evaluacin. Por ltimo, el documento tiene dos anexos: Algunos elementos metodolgicos donde se explica brevemente algunas de las metodologas de evaluacin propuestas y la Tabla resumen, que se constituye como una rpida gua a la hora de planificar un proceso de evaluacin.
www.oidp.net
B) Pueden distinguirse distintos niveles o momentos tcnicos y polticos de evaluacin en funcin de quien la protagonice, la encargue o participe, y en funcin tambin de qu se quiera evaluar: los mtodos utilizados, los objetivos planteados... De aqu se desprende un argumento: que por un lado es imposible un tipo de evaluacin que los abarque todos, en todas sus dimensiones, momentos o niveles (sustantivo, relacional, operativo o intermedio, tcnico, poltico, etc.), y que, por lo tanto, se hace difcil pensar en una propuesta apriorstica y descontextualizada, que sirva para todos y en todo momento, del planteamiento evaluativo y del instrumental a utilizar. Tal modo de operar podra suponer a veces un cors, un constreimiento. C) Puede trabajarse y debe trabajarse con enfoques metodolgicos complejos y complementarios (multiestratgicos) que pongan en relacin metodologas de evaluacin cuantitativa, cualitativa y participativa. D) El OLDP se entiende como un lugar de encuentro, un mbito de interaccin en el que actores diversos pueden reflexionar, debatir, realizar consultas y propuestas sobre los retos de la participacin. El espritu de estos espacios no es transformarse en estructuras tecnocrticas o centros de documentacin pasivos, sino en plataformas activas e inclusivas. Doc. Buenos Aires, Noviembre de 2004. E) Si los OLDP acaban siendo lugares de encuentro y debate entre actores diversos, si quieren ser promotores y no meros observadores pasivos, y si se asume que estamos en un momento de incertidumbre e innovacin en la materia que tratamos, parece aconsejable pensar en configurar un sistema de evaluacin que se componga de instrumentos diversos y se fundamente en estrategias metodolgicas plurales sobre la base de un marco conceptual y operativo comn. F) En definitiva, los OLDP deben constituirse como agentes promotores de la democracia participativa (BA, N-2004).
www.oidp.net
No podemos ignorar algunas tensiones que nuestra tarea trae intrnsecamente y que creemos honesto explicitar, para tenerlas siempre en cuenta en nuestros debates y reflexiones: A) Entre la necesidad de evaluar y la falta de una finalidad clara (para qu?) de la evaluacin. Tenemos la necesidad de evaluar. Ms all del compromiso adquirido en relacin al proyecto Urb-al, y dado tambin ese compromiso. Pero a la vez que vemos clara esa necesidad nos faltan respuestas claras a la pregunta de para qu queremos hacerlo. Hacia dnde focalizamos concretamente la evaluacin? Queremos evaluar para mejorar nuestras prcticas o queremos evaluar para hacer un ranking de ciudades participativas? Queremos evaluar para establecer filtros de calidad sobre lo que es y lo que no es autntica participacin ciudadana o nos inclinamos por establecer criterios gua con los que cada ciudad y cada prctica pueda orientar sus estrategias metodolgicas? B) Entre fijar la atencin en las polticas o en los instrumentos con que estas pueden operar. Este dilema o tensin tiene que ver con el Qu de la evaluacin ms que con el Para Qu. Podramos fijar la atencin en las polticas pblicas sustantivas: urbanismo, educacin, salud, regeneracin urbana, etc. y establecer evaluaciones, estudios, indicadores o lo que sea que nos diga hasta qu punto estas polticas incorporan participacin; o podemos optar por centrar la atencin en ver hasta qu punto determinadas experiencias o instrumentos de participacin tienen o no calidad en si mismo. C) Entre los indicadores como instrumentos y los indicadores como finalidad. A caballo entre el Qu y el Cmo aparece la tensin entre un objetivo: evaluar prcticas y polticas con una finalidad dada, y una cosa que ms que un objetivo parece a veces un objeto soado: la posibilidad de disponer de indicadores relevantes, vlidos, medibles, sensibles, comprensibles y comunicables, realistas y contrastados sobre la democracia participativa. En este sentido no olvidemos que los indicadores son indicativos de alguna cosa que suele ir mas all del propio indicador. Las evaluaciones y los procesos en su conjunto- se desvirtan cuando, en vez de trabajar para alcanzar objetivos, se hacen para satisfacer indicadores (Kaleidos, 2006). D) Entre la necesidad de conocimiento y el desconocimiento: la tensin que genera la incertidumbre. Estamos metidos en una materia a la que ni nosotros ni nuestros entornos institucionales, polticos y tcnicos, estamos suficientemente acostumbrados, pues nos movemos en territorios de innovacin democrtica y de innovacin en la gestin pblica. A menudo, debemos fijar objetivos participativos, y validar instrumentos y metodologas para conseguirlos, sin tener siempre suficiente seguridad en lo que hacemos, y notamos que nos falta ms bagaje, ms experiencia individual y colectiva. Esto apunta en la direccin de que es necesario arriesgar, ensayar cosas, aceptar pruebas y errores, ir construyendo poco a poco y sobre la prctica sistemas de evaluacin. Pero por otro lado queremos contar con instrumentos de evaluacin que no ofrezcan lugar a dudas: los cuantitativos! E) Entre la amplitud de la realidad a la que nos referimos (hablando y www.oidp.net
escribiendo) y lo que realmente podemos abarcar (haciendo, practicando). Construimos el discurso desde conceptos que son maysculos, que abarcan una realidad conceptual y poltica bastsima (Democracia Participativa, Participacin Ciudadana, Ciudadana, y otros por el estilo) y luego nos encontramos con que nuestra realidad, el contexto en el que nos movemos, lo que somos capaces de operativizar y poner en prctica -con sus dificultades, resistencias, contradicciones y limitacionespudiendo ser y significar un gran cambio con respecto a las formas tradicionales de hacer y a lo que cuesta cambiarlas, no nos parece que tenga la suficiente potencia social, colectiva o institucional como para que pueda ser registrado por un sismgrafo que no est un poco trucado.
www.oidp.net
LA CAJA DE HERRAMIENTAS
www.oidp.net
10
4. Elementos Previos
Previamente a cualquier evaluacin se deben identificar una serie de elementos que van a condicionar la ptica desde la cual se lleva a cabo la evaluacin. As, antes de empezar una evaluacin deberamos identificar, como mnimo, las siguientes caractersticas del proceso/experiencia: El contexto El mbito temtico El mbito territorial Los objetivos Los colectivos participantes El tipo de evaluacin
El contexto El contexto social, econmico y poltico en el cual se desarrolla una experiencia participativa resulta de gran relevancia para comprender y analizar muchos de los resultados de su evaluacin.
En funcin del contexto los objetivos de un proceso pueden ser muy distintos y los criterios de evaluacin tambin.
El mbito temtico
En el caso de los procesos ms globales se deber tener en cuenta, por ejemplo, la diversidad territorial de los participantes, cosa que no tiene sentido en procesos ms locales.
Los objetivos Toda evaluacin deber tener muy en cuenta los objetivos del proceso evaluado, pues en muchos casos no tendr sentido evaluar un proceso con criterios que se refieren a objetivos que el mismo proceso no se plantea. www.oidp.net
11
Si bien existen algunos criterios mnimos que deberan ser evaluados en cualquier proceso, hay muchos otros que slo tiene sentido evaluar si forman parte de los objetivos del proceso.
De hecho, para una evaluacin ideal el mismo proyecto debera fijar a priori cules sern los objetivos que sern evaluados para, a posteriori, poder evaluar si se cumplen o no. Los colectivos participantes No todos los procesos se dirigen a los mismos participantes. Hay procesos que se dirigen slo a asociaciones, otros que se dirigen a la ciudadana no organizada, algunos se dirigen a colectivos especficos de la poblacin (como mujeres, nios y nias, poblacin indgena, etc.), algunos que incorporan tcnicos y polticos, otros que no, etc.
En funcin de cules sean los participantes a los que se destina el proceso, los criterios de evaluacin sern unos u otros.
Tipo de evaluacin Existen distintos tipos de evaluacin de procesos participativos y distintas metodologas para llevarlas a cabo. Este documento pretende ofrecer algunas de ellas. Antes de empezar la evaluacin de un proceso participativo es importante decidir qu tipo de evaluacin se desea hacer. En este sentido es importante distinguir entre las evaluaciones internas y externas y decidir en qu grado los participantes del proceso sern tambin partcipes de la evaluacin del mismo.
Orientar la evaluacin hacia metodologas ms cualitativas y participativas puede ser una buena forma de superar muchas de las limitaciones con las que nos hemos ido encontrando siempre que hemos intentado evaluar desde metodologas estrictamente cuantitativas. As, dificultades como la falta de datos, la falta de recuentos o la poca
fiabilidad de alguna informacin, puede ser superada a travs de estas otras metodologas que nos pueden permitir evaluar la participacin ciudadana desde otras pticas. Al mismo tiempo, no debemos olvidar que la evaluacin participativa cuenta
con el importantsimo valor aadido de implicar a los y las participantes de un proceso, as como a representantes polticos y personal tcnico, en la evaluacin del mismo, hecho que nos permite mejorar la participacin a partir de la propia experiencia de los participantes al mismo tiempo que se legitima tanto el proceso evaluado como la
evaluacin y las mejoras incorporadas a partir de esa evaluacin.
www.oidp.net
12
5. Qu Evaluamos
Los objetos de estudio Cuando hablamos de evaluacin de la participacin ciudadana podemos referirnos a distintos objetos a ser evaluados. A partir de la reflexin del conjunto de socios de los Observatorios Locales se ha llegado a la conclusin de que los objetos a conocer por parte de los OLDPs pueden ser los siguientes:
Las polticas pblicas El sistema estable de participacin Los procesos / las experiencias participativas Los actores sociales
En todo este abanico de posibles objetos a observar (evaluar) existe un factor altamente condicionante para decidir qu es lo que vamos a evaluar: el factor de
escala.
No es lo mismo evaluar un proceso concreto de participacin que evaluar la participacin en una gran poltica pblica o la participacin en el conjunto de una ciudad.
Este documento pretende abarcar mbitos de los cuatro objetos de estudio pero se centra, principalmente, en el anlisis de las experiencias participativas, porque entendemos que a partir de este anlisis podemos llegar a elementos concretos y comunes a los otros objetos, que por su vez, son ms difciles de abarcar. Nos centramos pues en ofrecer una serie de criterios y metodologas para la evaluacin de procesos/experiencias participativas. Eso no quiere decir que otros posibles objetos de estudio no sean significativos cuando hablamos de participacin de la ciudadana en la poltica, simplemente se han excluido de este documento para reducir el grado de complejidad del anlisis.
No obstante, entendemos que los criterios aqu presentados son tiles para abordar, en cierta medida, todos los dems mbitos aqu mencionados.
www.oidp.net
13
A. La tipologa de los objetos de estudio La participacin en nuestras ciudades se desarrolla de innumerables maneras. Hemos valorado importante sistematizar las tipologas ms comunes en nuestras experiencias y categorizarlas, creando as un marco general compartido de comprensin y dilogo. A partir de las conclusiones del grupo de trabajo coordinado por la ciudad de La Paz, hemos llegado a las siguientes categoras: Procesos Marco Jurdico Espacios Mecanismos
Los Procesos son todas aquellas acciones encadenadas o secuenciales que se ejecutan durante un tiempo determinado por actores organizacionales, institucionales y sociales en coordinacin con un gobierno municipal o local. El Marco Jurdico es toda aquella normativa destinada a institucionalizar, ordenar, fortalecer, o promover la participacin de la ciudadana y/o sus organizaciones en la gestin municipal y/o en la vida de la comunidad en general. Los Espacios son todo mbito, instancia en los que se materializan y establecen prcticas participativas que permiten la incidencia de la ciudadana y/o sus organizaciones en la gestin municipal y/o en la vida de la comunidad en general. Los Mecanismos son todo medio, herramienta y/o instrumento que permita que se realicen y desarrollen prcticas participativas entre actores institucionales, organizacionales y sociales que se interrelacionan en la gestin pblica municipal o local. Los procesos, espacios y mecanismos de participacin han sido visualizados como objetos de estudio potenciales desde el inicio del proyecto, sin embargo se sugiere la consideracin de otras dos categoras adicionales, tales como el marco jurdico y los modelos de participacin. Esto posibilitar, por ejemplo, determinar si la participacin es considerada como una simple herramienta que tiende a mejorar y/o legitimar la democracia representativa, o bien, se considera como un instrumento eficaz de democracia participativa, definiendo las claves desde las cuales se entiende y practica la participacin, as como la forma en que sta se hace efectiva en los diferentes escenarios de expresin y materializacin de la interrelacin entre el Gobierno Municipal y la Ciudadana. Se presenta a continuacin un cuadro resumen de las tipologas de experiencias participativas que pueden constituirse en objetos de estudio por parte de un OLDP.
www.oidp.net
14
CATEGORA Procesos
METODOLOGA
DESCRIPCIN Desarrollo de Presupuestos Distritales, de Subalcadas, o municipales con la participacin directa de la ciudadana. Elaboracin de visiones estratgicas de crecimiento y desarrollo a largo plazo de una localidad, municipio o regin. Desarrollo, implementacin y seguimiento de planes y acciones tendientes a impulsar la economa local. Procesos participativos que buscan una visin integral y sostenible de la ciudad. Durante el proceso se trazan lineas generales y acciones especficas a ser incorporadas por todos los actores involucrados. Planificacin de polticas locales sectoriales, como la salud, la educacin, el transporte, etc. Planificacin de polticas locales de ordenacin urbana. Sirven para disear estrategias y polticas locales en el mbito de la educacin, pero entendiendo sta en un sentido amplio, ms all de la educacin formal. Legislacin a nivel nacional y con aplicacin local que se refiera o incida en la participacin ciudadana. De tipo presidencial que se refieran o incidan en la participacin ciudadana. De origen en el Legislativo Municipal que se refieran o incidan en la participacin ciudadana. De origen en el Ejecutivo Municipal que se refieran o incidan en la participacin ciudadana. Organizados por temas o por territorios; es un espacio protagonizado sobre todo por asociaciones y representantes de gremios profesionales. Organizados para el tratamiento de temas especficos Vigilan los recursos municipales para que sean invertidos en la poblacin urbana y rural de manera equitativa. Grupos de ciudadanos y ciudadanas organizados en base a vnculos de tipo espacial (barrio, circunscripcin, distrito, zona, etc.) Movimientos no institucionalizados de personas y asociaciones civiles nucleadas alrededor de visiones y objetivos concretos. El Foro est pensado para que se pueda constituir como un organismo independiente, para representar los intereses del conjunto de la comunidad en distintos puntos del proceso de elaboracin y ejecucin de una poltica determinada. Promocionan debates generales sobre el proceso y la participacin de la poblacin local en todas las etapas. Como organismo representante del consenso local, desempea una funcin relevante al ser un grupo de presin por derecho propio, tanto a escala local como ante instancias superiores.
Planes Sectoriales Planes Urbansticos Proyectos Educativos de Ciudad Otros Leyes vigentes o en preparacin Decretos Supremos vigentes o en preparacin Ordenanzas Municipales vigentes o en preparacin Resoluciones administrativas vigentes o en preparacin Consejos Ciudadanos Comisiones de Trabajo Comits de Seguimiento Organizaciones Territoriales /vecinales Redes Ciudadanas Foros
Marcos Jurdicos
Espacios
www.oidp.net
15
Comits Cvicos
Mecanismos
Talleres
Talleres de futuro
Audiencias Referndum Consulta Ciudadana Iniciativas Legislativas Ciudadanas Eleccin directa de autoridades Participacin va medios de comunicacin masivos La teleparticipacin Intervenciones comunitarias Asambleas Ciudadanas
Son aquellos espacios participativos que permiten el ejercicio cotidiano de nuestra capacidad colectiva de proponer, planificar, realizar y evaluar los planes, programas y proyectos que sean necesarios para la relacin entre sociedad civil, organizaciones sociales, instituciones y el Gobierno Municipal. Mecanismo de participacin donde se encuentran uno o diversos grupos de personas para discutir y evaluar posibles escenarios, propuestas de actuacin, etc. El taller de futuro es un ejercicio que permite elaborar planes de accin a partir de las opiniones y los valores de los participantes. Rene durante varias sesiones representantes de diferentes grupos de inters, personas o entidades. La idea es conseguir una visin del futuro compartida por todos, y apuntar los pasos a seguir para alcanzar ese escenario imaginado. Se incluyen aqu las experiencias donde algunas perosnas/ponentes exponen unos resultados o unas propuestas y luego el pblico debate o enmienda dichas propuestas sobre un tema especfico. Consulta que se hace al conjunto de la ciudadana con derecho a voto, que puede participar con un voto igual, libre, directo y secreto. Mediante sistemas de seguimiento y anlisis basados en investigaciones cualitativas y cuantitativas. La Iniciativa Legislativa Ciudadana es un mecanismo que permite a cualquier ciudadano/a presentar una ley ante el Congreso de la Repblica o el Legislativo Municipal, para que sea discutida y, si se da el caso, aprobada. Sistema de eleccin directa de autoridades en espacios geogrficos menores a los de un municipio. Programas de televisin, radio u otros medios masivos que permite que la ciudadana haga llegar opiniones y propuestas directas a las autoridades municipales o locales. Es una frmula reciente que implica una interaccin entre los cargos pblicos y la ciudadana a travs de herramientas telemticas, como Internet o redes locales como medio de comunicacin e interaccin entre la Administracin Pblica y la poblacin. Acciones de co responsabilizacin ciudadana a nivel de gestin, trabajo o recursos econmicos, en determinadas obras, actividades o proyectos municipales o locales Reunin de ciudadanos instauradas en la deliberacin de temas que les atingen y que son elevadas a instancias de decisin poltica
Ps. El cuadro no es extensivo, muchos otros instrumentos participativos se encuentran actualmente en vigor en las comunidades locales. Con este cuadro hemos intentado reflejar los ms comunes.
Estamos trabajando en la revisin de este cuadro para la publicacin final del documento, en la que se van a incluir algunos cambios.
www.oidp.net
16
repartir los recursos y eso har disminuir el grado de profundidad con que analicemos cada una de ellas. En cada criterio propuesto se describe en qu consiste (a qu aspira) y cmo puede hacerse su evaluacin.
Viendo en que consiste el criterio podremos decidir si tiene sentido o no aplicarlo para evaluar nuestro/s proceso/s. Si decidimos aplicarlo, entonces deberemos escoger una o algunas de las metodologas que se proponen para evaluar el grado de cumplimiento del criterio en cuestin. Los criterios se han estructurado de la siguiente forma:
Criterios relacionados con: A. B. C. D. E. la coordinacin del proceso quin participa sobre qu se participa cmo se participa consecuencias/resultados del proceso
www.oidp.net
17
18
informacin es a travs de grupos de discusin internos. Este tipo de evaluacin es preferible que sea realizada de forma externa 2. Transversalidad En qu consiste: Los procesos que consiguen un trabajo interno transversal,
implicando a las distintas reas relevantes para el proceso tanto a nivel tcnico como poltico, son procesos ms eficientes, al mismo tiempo que se reducen las resistencias
a la implementacin de los resultados. La transversalidad es especialmente importante cuando el proceso es liderado por el rea de Participacin y tiene implicaciones sustantivas en otras reas. Tambin es importante cuando el mbito sustantivo tiene un carcter integral y requiere la implicacin de distintas reas. Cmo evaluarlo: a) Grado de implicacin de las distintas reas polticas y tcnicas Analizar el grado de implicacin de las distintas reas polticas y tcnicas relevantes para el proceso
En primer lugar es necesario identificar cules son las reas relevantes para el proceso, de acuerdo con el mbito sustantivo y los objetivos del mismo. Puede obtenerse la informacin a travs de la identificacin de la presencia o ausencia de estas reas en los distintos rganos y espacios de participacin y/o a travs del anlisis de sus aportaciones en el proceso. Tambin puede obtenerse la informacin a travs de entrevistas a los distintos tcnicos y polticos o mediante grupos de discusin internos. Este tipo de evaluacin es preferible que sea realizada de forma externa b) Espacios de transversalidad Analizar si en la planificacin del proceso se contemplan espacios de trabajo transversales el objetivo de los cuales es poner en relacin las distintas reas implicadas en el proceso. Analizar cmo es la transversalidad de estos espacios; si es slo informativa (el rea que lidera el proceso informa a las dems) o si se trata de espacios de codecisin y cogestin del proceso a partir de las distintas reas implicadas. Esta ltima situacin garantiza un mayor grado de transversalidad y de eficiencia. Puede realizarse la evaluacin a travs de grupos de discusin o talleres internos o a travs del anlisis del proyecto.
3. Iniciativa y liderazgo
www.oidp.net
19
En qu consiste: Un proceso participativo puede ser iniciativa de distintos actores: puede ser iniciativa del gobierno, de un rea concreta del gobierno, de algn/a tcnico/a, de la oposicin, de alguna asociacin, de la ciudadana no organizada, etc.
La iniciativa condiciona el desarrollo del proceso pero no debera afectar a su calidad democrtica.
En general los procesos que surgen de iniciativa ciudadana generan una mayor confianza y tienen mayores posibilidades de ser procesos exitosos con mayores niveles de participacin. En todo caso, la iniciativa debe ser liderada polticamente. Slo a travs de un liderazgo poltico slido un proceso participativo ser un proceso legitimado institucionalmente. Esta condicin es indispensable para que los resultados del proceso sean implementados y, por tanto, para que el proceso sea eficaz. Sin embargo, aunque es necesario un liderazgo poltico slido, la existencia de un grupo promotor plural que co-lidere o coordine el proceso puede dotarlo de una mayor eficacia y coherencia, hacindolo al mismo tiempo ms prximo a las dinmicas reales del municipio. Compartir el liderazgo del proceso garantiza que ste sea ms plural y transparente, al mismo tiempo que facilita la neutralidad en la coordinacin del mismo. Cmo evaluarlo: a) Iniciativa Identificar qu actor o actores han promovido el desarrollo del proceso participativo Esta informacin puede obtenerse a travs de entrevistas a informantes clave del proceso. Es importante obtener la informacin por ms de una fuente pues algunos actores pueden tender a apropiarse la iniciativa del proceso. Este tipo de evaluacin es preferible que sea realizada de forma externa b) Liderazgo Identificar la existencia de responsables polticos concretos que se responsabilicen del proceso Esta informacin puede obtenerse a travs de entrevista a los responsables del proyecto. c) Grupo promotor plural Identificar la existencia de un grupo promotor del proceso y analizar su pluralidad
www.oidp.net
20
Un grupo promotor plural es un grupo reducido formado por actores distintos (polticos/as, tcnicos/as y ciudadanos/as) que tiene como funcin hacer avanzar el proceso buscando la mxima extensin del mismo. En caso de existir dicho grupo, debera analizarse su papel en el proceso y validar que realmente tiene atribuidas funciones relevantes. Para el anlisis de la pluralidad el sociograma puede ser una herramienta de ayuda. El anlisis de las funciones y la pluralidad del grupo promotor, si existe, es preferible que sea realizado de forma externa. Puede ser til que el grupo promotor, en caso de existir, realice alguna sesin de autoevaluacin de su funcionamiento a lo largo del proceso. 4. Integracin al sistema participativo municipal En qu consiste: Algunos municipios tienen un sistema de participacin ms o menos estable. En estos casos, conviene analizar hasta qu punto el proceso evaluado se integra o no en este sistema participativo. Los procesos participativos de un determinado municipio no tienen por qu derivarse siempre de su sistema estable de participacin. Sin embargo, conviene
que sean coherentes con el mismo y, en la medida de lo posible, se integren y se coordinen para no duplicar los esfuerzos y no saturar el potencial participativo de la ciudadana. En este sentido, puede ser til aprovechar los rganos y estructuras de
participacin ya existentes en el municipio. Cmo evaluarlo: a) Relacin con otros procesos del municipio Analizar cualitativamente cmo se relaciona el proceso evaluado con otros procesos del mismo municipio. Poner especial atencin en ver si existe o no algn tipo de coordinacin entre los distintos procesos. Este tipo de evaluacin es preferible que sea realizada de forma externa. b) Uso de rganos o estructuras existentes Identificar si el proceso evaluado aprovecha rganos o estructuras participativas ya existentes en el municipio. Analizar cualitativamente la operatividad de este aprovechamiento de estructuras e identificar, si los hay, las dificultades o inconvenientes surgidos de este aprovechamiento. Para hacer la evaluacin puede ser til trabajar con un grupo de discusin con los participantes en estos rganos y estructuras. Este tipo de evaluacin es preferible que sea realizada de forma externa. www.oidp.net
21
5. Claridad de los objetivos En qu consiste: Los objetivos de un proceso participativo deben ser claros para facilitar la tarea tanto de los/las gestores del proceso como de los/las participantes.
La planificacin permite prever las dificultades, organizar la participacin, ofrecer una mayor calidad en el proceso y garantizar una mayor transparencia.
Al mismo tiempo, cuando se planifica un proyecto hay que prever los recursos econmicos y tcnicos que sern necesarios. Un proceso podr obtener una mayor calidad cuando los recurso econmicos y tcnicos sean adecuados a los objetivos planteados
www.oidp.net
22
Cmo evaluarlo: a) Anlisis de la planificacin y de su cumplimiento Identificar si existe o no una planificacin del proceso. Analizar cualitativamente la planificacin. Una buena planificacin debe detallar los siguientes elementos: o Los objetivos del proceso o Las fases o El cronograma o Las tareas previstas para cada fase o Los elementos de difusin o Los recursos necesarios para cada fase y para el conjunto del proceso Analizar cualitativamente el grado de cumplimiento del documento de planificacin. En caso de no cumplimiento de los objetivos, analizar las causas por las cuales no se han cumplido. Los grupos de discusin internos pueden ayudar a hacer este tipo de evaluacin. Este tipo de evaluacin es preferible que sea realizada de forma externa. b) Recursos econmicos Identificar el presupuesto previsto para el proceso Analizar la adecuacin del presupuesto los objetivos del proyecto Esta informacin puede obtenerse del proyecto o a travs del responsable del proceso. c) Personal Identificar la existencia y el volumen de recursos tcnicos, propios y externos, dedicados al proyecto Grado de especializacin y profesionalizacin del personal. Analizar la adecuacin de los recursos tcnicos a los objetivos del proyecto. Esta informacin puede obtenerse del proyecto o a travs del responsable o la responsable del proceso.
www.oidp.net
23
www.oidp.net
24
b) Porcentaje de actores organizados sobre el total de referencia Nmero de actores organizados sobre el total de actores de referencia (en tanto por cien). til para procesos donde los participantes son actores organizados. Tambin puede utilizarse en procesos en los que se combina o se mezcla la participacin de ciudadana organizada con ciudadana no organizada; en este caso el indicador debe referirse nicamente a los participantes organizados. En todos los casos hay que prestar mucha atencin en establecer cules son los actores organizados de referencia (actores a los que va dirigido el proceso). Puede utilizarse para las distintas sesiones o mecanismos de participacin de un proceso o para el conjunto del proceso. En este ltimo caso hay que contabilizar el nmero de participantes sin repeticiones (un participante que asiste a dos sesiones del proceso debe contarse como un participante y no como dos). Tambin puede calcularse la media de participantes por sesin. Este dato puede ser til en rganos estables de participacin y pierde sentido cuando las distintas sesiones de un proceso tienen pblicos u objetivos distintos. Para utilizar este indicador hay que prever al inicio del proceso el recuento de los participantes evitando las duplicaciones en el recuento. c) Porcentaje de asistentes en relacin a los participantes seleccionados: Nmero de asistentes sobre los participantes seleccionados (en tanto por cien) til para procesos cerrados (el nmero de participantes es restringido y estos son seleccionados). En estos procesos los participantes pueden ser organizados, no organizados o una combinacin de ambos tipos. El indicador nos muestra el grado en que los participantes seleccionados participan efectivamente del proceso. Puede utilizarse para las distintas sesiones o mecanismos de participacin de un proceso o para el conjunto del proceso. En este ltimo caso hay que contabilizar el nmero de participantes sin repeticiones (un participante que asiste a dos sesiones del proceso debe contarse como un participante y no como dos). Tambin puede calcularse la media de participantes por sesin. Este dato puede ser til en rganos estables de participacin y pierde sentido cuando las distintas sesiones de un proceso tienen pblicos u objetivos distintos. Para utilizar este indicador hay que prever al inicio del proceso el recuento de los participantes evitando las duplicaciones en el recuento. 8. Diversidad En qu consiste: Un proceso tendr mayor calidad democrtica si es capaz de www.oidp.net
25
incorporar la diversidad de la sociedad en la cual se desarrolla, es decir, si los distintos grupos sociales y los distintos intereses estn representados en el proceso. En este sentido, hay que tener en cuenta los grupos sociales habitualmente subrepresentados en los procesos participativos como son las mujeres, la juventud o los/las inmigrantes (los grupos subrepresentados pueden ser distintos en funcin del contexto social en el que se desarrolle el proceso). Igualmente, para garantizar la diversidad de un proceso hay que fijarse en la participacin de los actores organizados evaluando la diversidad de las asociaciones participantes respeto a las presentes en el territorio, centrando la atencin en la participacin de aquellos actores especialmente relevantes para la temtica sometida a participacin. Como otros criterios, este criterio tendr ms o menos sentido en funcin de los destinatarios del proceso. Cuanto ms selectivos sean estos, menos sentido tendr el criterio. Es decir, si un proceso participativo est destinado a un colectivo muy especfico, por ejemplo las mujeres inmigradas, este criterio tendr menos sentido; pues en estos casos el proceso no busca llegar a la mayor diversidad de poblacin sino que se dirige a un grupo especfico. Cmo evaluarlo: a) Porcentaje de un determinado colectivo o grupo social La evaluacin se realizar comparando el porcentaje de participantes de estos colectivos en el proceso con el porcentaje de estos colectivos en la sociedad de referencia. Algunos colectivos o grupos sociales pueden ser los siguientes: i. Mujeres ii. Distintos grupos de edad (nios, menores de 30, mayores de 65, etc.) iii. Inmigrantes iv. Distintos grados de formacin (bsicos, superiores, etc.) v. Distintas clases sociales vi. Poblacin negra, poblacin indgena, etc. vii. Distintos mbitos territoriales (distritos, barrios, zonas determinadas, etc.) viii. Otros en funcin de las caractersticas del proceso y del contexto Puede utilizarse para las distintas sesiones o mecanismos de participacin de un proceso o para el conjunto del proceso. Para utilizar estos indicadores hay que prever al inicio del proceso el recuento de los participantes recogiendo esta informacin. En algunos casos podemos tener dificultades para obtener algunas de estas informaciones (formacin, clase social). b) ndice de diversidad Para evaluar el grado de diversidad entre los/las participantes de un proceso de forma agregada, pueden agregarse los indicadores del apartado www.oidp.net
26
anterior en forma de ndice. Por ejemplo, tomamos tres colectivos (mujeres, jvenes e inmigrantes) y agregamos su presencia o ausencia en el proceso de la siguiente forma: i. Si el porcentaje de mujeres es igual o superior al porcentaje de mujeres en la sociedad de referencia, se suman 5 puntos, de lo contrario no se suma ningn punto. ii. Si el porcentaje de jvenes es igual o superior al porcentaje de mujeres en la sociedad de referencia, se suman 5 puntos, de lo contrario no se suma ningn punto. iii. Si el porcentaje de inmigrantes es igual o superior al porcentaje de mujeres en la sociedad de referencia, se suman 5 puntos, de lo contrario no se suma ningn punto. iv. El ndice se obtiene de la suma de los tres indicadores. Finalmente podemos decir que la diversidad es alta si el valor del ndice es 15, media si es 10 y baja si es 5 o 0. c) Perfil de las organizaciones participantes Porcentaje de distintos tipos de organizaciones participantes en el proceso (vecinales, empresariales, sindicales, culturales, deportivas, polticas, etc) y evaluacin de su representacin. La evaluacin de su representacin en el proceso es en funcin de: i. La temtica del proceso ii. Los objetivos del proceso iii. La presencia y la representatividad de la distintas organizaciones en el contexto social donde se lleva a cabo el proceso Identificacin de tipologas de organizaciones no participantes y valoracin de la necesidad de su participacin en el proceso til para procesos dnde los participantes son actores organizados. Tambin puede utilizarse en procesos en los que se combina o se mezcla la participacin de ciudadana organizada con ciudadana no organizada; en este caso el indicador debe referirse nicamente a los participantes organizados. Este tipo de evaluacin es preferible que sea realizada de forma externa. d) Identificacin de actores y grupos sociales relevantes Identificar si entre las y los participantes falta algn actor relevante o clave para el tema que se somete a participacin. Para llevar a cabo esta identificacin de ausencia de actores clave puede ser muy til haber elaborado previamente un sociograma. Este tipo de evaluacin es preferible que sea realizada de forma externa.
www.oidp.net
27
9. Representatividad de los participantes En qu consiste: En algunos procesos todos o algunos de los participantes participan en representacin de actores organizados. En estos casos, un criterio de calidad democrtica consiste en garantizar que estos representantes sean realmente portadores de un discurso colectivo. Este es un criterio nicamente aplicable a aquellos procesos en los que se tiene en cuenta, de forma parcial o absoluta, la participacin de actores organizados. Las garantas de que los representantes son portadores de un discurso colectivo vienen dadas por tres tipos de elementos: los relativos al proceso, los relativos a la organizacin y los relativos a las personas que ejercen de representantes. El proceso debe facilitar la posibilidad de que los representantes trasladen la informacin a su organizacin y puedan tener debates internos; las organizaciones deben escoger a sus representantes y participar de los debates internos y los representantes deben participar en el proceso siendo fieles a las aportaciones surgidas de su organizacin, sin hacer aportaciones personales. Cmo evaluarlo: a) Facilidades para el flujo de informacin entre los representantes y los representados Anlisis de la planificacin del proceso (sesiones y cronograma) viendo si este prev que los representantes de las organizaciones pueden trasladar la informacin a la organizacin, generar un debate interno y volver al proceso con las aportaciones de la organizacin Este tipo de evaluacin es preferible que sea realizada de forma externa. b) Eleccin de los representantes Porcentaje de organizaciones que han escogido en asamblea a su representante en el proceso. Este dato puede recogerse a travs de un cuestionario a los participantes que son representantes de organizaciones. c) Fidelidad del discurso de los representantes al discurso de la organizacin Analizar hasta qu punto los discursos de los representantes son fieles a los discursos de sus respectivas organizaciones. Este anlisis puede hacerse mediante entrevistas a miembros de organizaciones que no han ejercido de representantes de la organizacin en el mismo. Para ello ser necesario disponer de las intervenciones en el proceso de los representantes de la misma organizacin (actas). Tambin puede hacerse un anlisis comparativo de actas en el caso que www.oidp.net
28
las organizaciones tengan actas de las sesiones y estas sean accesibles. Esta evaluacin slo tiene sentido si las organizaciones han desarrollado un debate interno en relacin al proceso. Este tipo de evaluacin requiere de un esfuerzo importante. 10. Grado de apertura del proceso En qu consiste: Los procesos participativos pueden ser abiertos a toda la ciudadana o pueden restringir los participantes. En principio, abrir los procesos al mayor nmero
de colectivos y ciudadana mejorar su calidad democrtica; obviamente, tomando siempre como referencia la poblacin a quien se dirige el proceso.
Muchos procesos tienen unos espacios ms restringidos y otros ms abiertos, con distintas funciones y en la mayora de los casos buscando una mayor operatividad en el desarrollo del proceso. As, que un proceso tenga algunos rganos restringidos no implica que el proceso sea restringido si se contemplan tambin espacios de participacin abiertos a toda la ciudadana.
Puede ocurrir tambin que en algunos casos est plenamente justificada la restriccin en la participacin en un proceso: por la temtica tratada, por el pblico destinatario, por el mecanismo de participacin utilizado, etc. Cmo evaluarlo: a) Grado de apertura del proceso Identificar si el proceso es: 1. Abierto: todas la sesiones participativas son abiertas a toda la ciudadana (a la que se dirige el proceso) 2. Mixto: hay sesiones abiertas y sesiones restringidas 3. Cerrado: todas las sesiones de participacin son restringidas a una seleccin de participantes Puede aplicarse tambin a los distintos espacios participativos de un proceso o a los rganos de participacin de un municipio. Este tipo de evaluacin es preferible que sea realizada de forma externa. b) Grado de apertura de los espacios de decisin Identificar si los espacios de decisin en un proceso son restringidos a una seleccin de participantes o abiertos a toda la ciudadana a la que se dirige el proceso. Este tipo de evaluacin slo tiene sentido cuando en el proceso hay espacios de toma de decisin. Este tipo de evaluacin es preferible que sea realizada de forma externa.
www.oidp.net
29
www.oidp.net
30
12. Capacidad de intervencin de la administracin local En qu consiste: Un proceso participativo de mbito local ser ms eficiente si aborda temas sobre los cuales la capacidad de intervencin de la administracin local es muy grande. De no ser as, el gobierno municipal requerir de la complicidad de administraciones supralocales para ejecutar los resultados del proceso. Cmo evaluarlo: a) Competencia de intervencin en la materia Identificar si el tema sometido a participacin es o no competencia municipal En caso de no serlo, identificar si existen o no complicidades con administraciones supralocales para llevar a cabo los resultados del proceso. La informacin puede obtenerse mediante entrevista al responsable del proyecto y, en su caso, validacin con responsables de las administraciones supralocales implicadas en el proceso.
www.oidp.net
31
32
Deliberacin Decisin En algunos casos no es fcil clasificar un proceso participativo dentro de esta tipologa. Una agrupacin de la tipologa, como la que sigue, podra facilitar las cosas: Informacin Comunicacin Consulta Deliberacin Decisin Gestin En general, se considera que los procesos que nicamente tienen elementos de informacin y comunicacin no son realmente procesos participativos. Esta topologa est pensada como una escala de menor a mayor participacin de la ciudadana en la toma de decisiones. Sin embargo,
hay que evitar hacer una asociacin directa entre mayor grado de participacin y mayor calidad democrtica de un proceso. Es cierto que cuanto mayor es el grado de participacin, mayor es tambin la ampliacin de derechos y responsabilidades ciudadanas; pero hay muchos otros elementos que condicionan la calidad democrtica de un proceso participativo.
Procesos deliberativos pueden tener una gran calidad y un enorme potencial pedaggico, mientras que procesos nicamente de decisin pueden ser de muy baja calidad en funcin de quin sean los participantes y qu restricciones haya en la toma de decisiones. Cmo evaluarlo: Analizar cualitativamente el grado de participacin del conjunto del proceso. Analizar tambin cualitativamente qu grados de participacin se han dado a lo largo del proceso (si ha habido informacin, si ha habido deliberacin, etc). Para realizar esta evaluacin puede ser til incorporar la percepcin de las y los participantes a travs de un cuestionario o un taller. Este tipo de evaluacin es preferible que sea realizada de forma externa. 16. Calidad de la informacin En qu consiste: Un buen proceso participativo debe ofrecer a las y los participantes toda la informacin necesaria para poder opinar y decidir. Por ello debe producirse
informacin plural y de calidad. La informacin debe ser clara y til, y conviene que clarifique los objetivos del proceso. Es necesario tambin que se utilicen los canales adecuados para llegar a todos los potenciales participantes. Todos los potenciales participantes deben estar al corriente
Una buena difusin del proceso facilita que todos los potenciales participantes puedan participar en mayores condiciones de igualdad. Cmo evaluarlo: www.oidp.net
33
a) Canales de informacin difusin Identificar los canales utilizados: carteles, cartas, llamadas telefnicas, e-mails, web, etc. Identificar las debilidades en los canales de informacin analizando si esta llega o no a todos los potenciales participantes. Analizar cualitativamente el grado en que los canales de informacin son eficaces para transmitir la informacin a todos/as los y las potenciales participantes. Para hacer esta evaluacin puede ser til trabajar con grupos de discusin internos y/o talleres con los participantes. b) Pluralidad de la informacin producida Analizar la pluralidad en las fuentes de informacin utilizadas en el proceso identificando las distintas fuentes y las distintas visiones y opiniones sobre el tema sometido a participacin. Valoracin subjetiva de los/las participantes. sta puede recogerse a travs de un cuestionario al final del proceso o de algn mecanismo de participacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa. c) Claridad y utilidad de la informacin producida Valoracin subjetiva de los y las participantes. sta puede recogerse a travs de un cuestionario al final del proceso o de algn mecanismo de participacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa. 17. Mtodos y tcnicas de deliberacin En qu consiste: En los espacios deliberativos se acostumbran a generar desigualdades deliberativas y comunicativas entre los diferentes participantes. Para paliar esas desigualdades es recomendable utilizar tcnicas y mtodos especficos que ayuden a reducirlas.
Una de las tcnicas ms habituales es la simple existencia de un/a moderador/a en los debates. Existen, adems, otras tcnicas especficas de trabajo en grupo que facilitan que todos/as los participantes puedan intervenir. Cmo evaluarlo: a) Uso de tcnicas de deliberacin Identificar si en el proceso se han utilizado tcnicas o mecanismos de participacin para paliar las desigualdades en los espacios deliberativos.
www.oidp.net
34
b) Posibilidad de ejercer la propia voz Valoracin subjetiva de los/las participantes. sta puede recogerse a travs de un cuestionario al final del proceso o de algn mecanismo de participacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa.
www.oidp.net
35
18. Resultados sustantivos En qu consiste: Para la legitimidad de un proceso participativo es bsico que haya unos resultados sustantivos que respondan a las necesidades planteadas en el diseo del propio proceso. Cmo evaluarlo: a) Tipo de resultado Identificar la existencia de un documento de resultados sustantivos del proceso. Tipo de resultados obtenidos: actas, diagnosis, planes, acciones concretas, memorias, etc. Analizar el impacto de los resultados en las polticas pblicas. No todos los resultados tienen el mismo impacto. As, las acciones concretas, si son implementadas, probablemente tendrn un impacto mayor que las actas de un proceso consultivo. Para llevar a cabo esta evaluacin puede ser til trabajar con grupos de discusin internos. b) Valoracin subjetiva de los resultados por los participantes Anlisis participada de la utilidad de los resultados del proceso, su impacto y la adecuacin a las necesidades planteadas por el proceso. Valoracin subjetiva de los/las participantes. sta puede recogerse a travs de un cuestionario al final del proceso o al final de algn mecanismo de participacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa. 19.Implementacin de los resultados En qu consiste: Los resultados sustantivos de un proceso participativo deben ser implementados. Para favorecer que los resultados de un proceso sean realmente implementados y lo sean de forma coherente y fiel al debate participado, suele ser comn crear un rgano que haga este seguimiento. Puede ser un rgano de nueva creacin al final del proceso www.oidp.net
36
o se puede aprovechar un rgano ya existente en el proceso (por ejemplo el grupo promotor plural, si es que existe). Normalmente se trata de rganos plurales que representan al conjunto de participantes del proceso. Cmo evaluarlo: a) Implementacin de los resultados Verificar la implementacin de los resultados tangibles Puede ser que la implementacin de los resultados no sea tangible o est prevista para ms adelante. En estos casos puede utilizarse como instrumento de evaluacin la verificacin de si los resultados del proceso han sido ratificados institucionalmente por el Pleno Municipal o algn otro organismo institucional. Esta informacin puede obtenerse del anlisis del proceso o a travs de entrevista al responsable poltico del proceso. b) rganos de seguimiento Identificar la existencia o la revisin de creacin de un rgano de este tipo y analizar su pluralidad. En caso de existir dicho rgano, debera analizarse su papel en el proceso y validar que realmente tiene atribuidas funciones relevantes. Es interesante ver las medidas que toma el rgano si no se sigue la implementacin de los resultados y analizar su capacidad real de presin sobre el gobierno municipal. El anlisis de las funciones y la pluralidad del rgano de seguimiento, si existe, es preferible que sea realizada de forma externa. Puede ser til que el rgano de seguimiento, en caso de existir, realice alguna sesin de autoevaluacin de su funcionamiento a lo largo del proceso. 20. Devolucin de los resultados En qu consiste: Un proceso participativo de calidad debera prever una devolucin de los resultados al final del proceso para que los participantes conozcan los
resultados, los validen y puedan dar por terminado el proceso. Esta prctica es un elemento fundamental de transparencia para garantizar la legitimidad de los procesos participativos e incrementar la confianza de la ciudadana en las instituciones.
Cmo evaluarlo: Identificar si el proceso prev una devolucin Analizar el formato de la devolucin de resultados, si existe: acto presencial, taller de devolucin, documento enviado a los participantes, carta, etc. La devolucin ser ms transparente y gozar de una mayor calidad democrtica si es participada y permite que los participantes no slo www.oidp.net
37
sean informados sino que pedan validar esos resultados. Esta evaluacin es preferible que sea realizada de forma externa. 21. Mejora de las relaciones entre actores En qu consiste: Para fomentar la ciudadana, un proceso participativo no slo debera aspirar a unos resultados sustantivos sino que tambin debera fortalecer las relaciones entre los y las participantes.
Si el proceso est bien gestionado, este fortalecimiento de las relaciones sociales permite superar las dinmicas de conflicto con mayor facilidad
Cmo evaluarlo: a) Mejora de las relaciones ciudadanas Anlisis del impacto del proceso sobre las relaciones sociales: entre ciudadanos/as, entre asociaciones, entre ciudadanos/as y asociaciones, etc. Valoracin subjetiva de los/las participantes. sta puede recogerse a travs de un cuestionario al final del proceso o al final de algn mecanismo de participacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa. b) Mejora de las relaciones entre administracin y ciudadana Anlisis del impacto del proceso sobre las relaciones entre administracin y ciudadana Valoracin subjetiva de los/las participantes. sta puede recogerse a travs de un cuestionario al final del proceso o al final de algn mecanismo de participacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa. c) Mejora de las relaciones internas Anlisis del impacto del proceso sobre las relaciones internas: relaciones entre representantes polticos de distintas reas o distintos grupos, relaciones entre personal tcnico de distintas reas, relaciones entre polticos/as y tcnicos/as, etc. Para llevar a cabo esta evaluacin puede ser til trabajar con grupos de discusin internos. 22. Capacitacin En qu consiste: Un proceso participativo ser de mayor calidad si consigue capacitar a los participantes en el mbito de la participacin ciudadana. La capacitacin puede ser muy concreta para el tema sometido a participacin; ms genrica para lograr un mejor funcionamiento de los procesos participativos en general (capacidad para hablar, entender el funcionamiento de los procesos participativos, conocer el funcionamiento www.oidp.net
38
de la administracin, etc.) o ms abstracta sobre la democracia y sus valores. Cmo evaluarlo: a) Sesiones de capacitacin Identificar si el proceso prev sesiones concretas de capacitacin. Analizar los objetivos y el formato de estas sesiones, si existen. Para llevar a cabo esta evaluacin puede ser til trabajar con grupos de discusin internos. b) Valoracin subjetiva de los participantes Valoracin subjetiva de los/las participantes sobre la capacitacin recibida. sta puede recogerse a travs de un cuestionario al final del proceso o al final de las sesiones de capacitacin. Tambin puede realizarse mediante una evaluacin participativa cualitativa. 23. Generacin de cultura poltica participativa En qu consiste: Un proceso participativo, para fortalecer la ciudadana, debe contribuir a generar una cultura poltica participativa entre los y las participantes. Cmo evaluarlo: Valoracin subjetiva de las personas participantes al final del proceso. Esta valoracin puede referirse a temas como la satisfaccin general con el proceso, la utilidad de la participacin ciudadana o la disposicin a volver a participar. Esta valoracin puede realizarse mediante cuestionario o mediante algn mecanismo cualitativo de evaluacin participada.
www.oidp.net
39
www.oidp.net
40
www.oidp.net
41
Metodologas de anlisis tcnico Registros Para una buena evaluacin de un proceso resulta fundamental registrar a los participantes e identificar algunas de sus caractersticas sociales: sexo, edad, formacin, nacionalidad... Igualmente para los/las participantes organizados/as:
Adems, conviene tambin disponer de otros registros relativos a la poblacin de referencia sobre la cual se realiza el proceso: datos sociodemogrficos del conjunto de la poblacin de referencia, registro de entidades, etc. Anlisis de proyecto y de proceso Algunos criterios de calidad en los procesos participativos pueden evaluarse de forma tcnica por algn experto simplemente a travs de un anlisis del proyecto y del proceso. En estos casos, la evaluacin no requiere de mecanismos de reflexin colectiva, pues consiste en la simple identificacin de algunos elementos en el proyecto o en la implementacin del mismo. El anlisis de proyecto y de proceso consiste en una revisin del proyecto y de su implementacin a lo largo del proceso. Esta revisin analtica conviene que sea realizada por algn/a experto/a en procesos participativos.
www.oidp.net
42
Entrevistas a informantes clave En todo proceso podemos identificar algunas personas clave que nos pueden facilitar mucha informacin sobre la realidad sociopoltica del mbito sometido a participacin.
Una seleccin plural de entre 5 y 10 informantes clave puede proporcionar-nos, a travs de entrevistas en profundidad, mucha informacin sobre el proceso que nos puede ser de gran utilidad para su evaluacin.
Entre los/las informantes clave de un proceso habr algunas personas que nos proporcionarn ms informacin que otras en relacin a la evaluacin del proceso. En este sentido, el/la informante ms relevante para la evaluacin sern las personas responsables polticas y tcnicas del proceso. El sociograma El sociograma es una herramienta que tiene por objetivo identificar el mapa de actores implicados y/o afectados en relacin a la temtica tratada, definiendo las relaciones e influencias entre s. El sociograma no es ms que una representacin grfica donde se proyectan un conjunto de nodos, los actores (en el mbito del Estado, el mercado y la sociedad civil) y las relaciones existentes entre estos. Se trata de una herramienta descriptiva que puede construirse de forma individual o de forma grupal. Resulta interesante construirlo con actores clave que puedan darnos toda la informacin sobre la realidad sociopoltica del mbito sometido a participacin.
Metodologas de autoevaluacin interna Los grupos de discusin internos Para abordar determinados aspectos de la evaluacin de un proceso participativo puede ser interesante llevar a cabo una reflexin colectiva con aquellas personas ms implicadas en la gestin y la coordinacin del proceso. Estos espacios pueden crearse especficamente para la evaluacin, al final del proceso o al final de algunas fases del mismo, y deberan incorporar a los tcnicos y polticos implicados en la coordinacin del proceso. Si existen rganos especficos con funciones de coordinacin o seguimiento del proceso en los cuales, adems de tcnicos y polticos, tambin hay ciudadanos/as; puede ser til aprovechar estos espacios para la evaluacin de carcter interno.
Metodologas de autoevaluacin participada El cuestionario a los/las participantes El cuestionario es una herramienta para obtener percepciones y valoraciones subjetivas www.oidp.net
43
www.oidp.net
44
ANEXO II
Tabla resumen Metodologas de evaluacin
Cuestionario participante Sociograma Entrevistas informante
Criterio
Sistema de evaluacin
Consenso
Aceptacin poltica Aceptacin social Aceptacin tcnica Transversalidad Grado implicacin distintas reas Espacios de transversalidad Iniciativa y Iniciativa liderazgo Liderazgo Grupo promotor plural Integracin Relacin con otros sistema procesos Uso de rganos existentes Claridad objetivos Anlisis de objetivos Cumplimiento de objetivos Planificacin y Planificacin y su recursos cumplimiento Recursos econmicos Personal Cantidad Porcentaje de participantes participantes Porcentaje de actores organizados Asistentes entre la seleccin Diversidad Porcentaje de distintos paricipantes grupos ndice de diversidad Perfil de las organizaciones Actores relevantes Representatividad Facilidades para la comunicacin Eleccin de los/las representantes Discursos de los/las representantes www.oidp.net
x x x
x x x x x x x x x
x x x
Coordinacin
x x x x x
x x x x x x x x x x x x x x x x
Quin participa
x x x
Evaluacin part.
Anlisis de proyecto
Registros
Grupos internos
x x
x x x x
45
Cmo se participa
Capacidad intervencin Diagnosis participativa Capacidad propuesta Grado de participacin Calidad de informacin
Apertura del proceso Apertura de los espacios decisivos Agenda poltica Valoracin ciudadana relevancia Porcentaje presupuesto afectado Competencia Diagnosis participativa Capacidad de propuesta Grado de participacin Canales de informacin difusin Pluralidad de la informacin Claridad y utilidad de la informacin Uso de tcnicas deliberativas Posibilidad de ejercer la propia voz Tipo de resultados Valoracin ciudadana resultados Implementacin rganos de seguimiento Devolucin de los resultados Relaciones ciudadanas Relacin admin ciudadana Relaciones internas Sesiones de capacitacin Valoracin ciudadana capacitacin Cultura participativa
x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x
Mtodos deliberativos
Resultados
Consecuencias
x x x x x x
x x
Capacitacin
x x
Cultura participativa
www.oidp.net
46