Vous êtes sur la page 1sur 55

Suivi et valuation

Communiquer et rendre compte dune valuation


Directives et outils

de Valerie Stetson

Depuis 1943, Catholic Relief Services (CRS) a le privilge de servir les pauvres et les personnes dfavorises dans le monde. Sans distinction de race, de religion ou de nationalit, CRS apporte une assistance durgence la suite de catastrophes naturelles ou causes par lhomme. Par le biais de projets de dveloppement dans des domaines de lducation, la paix et la justice, lagriculture, la microfinance, la sant et le VIH/Sida, CRS travaille faire respecter la dignit humaine et promouvoir une meilleure qualit de vie. CRS travaille aussi aux tats-Unis pour mieux faire connatre aux catholiques et autres personnes intresses les problmes de paix et de justice internationales afin quils agissent en ce sens. Ses programmes et ses ressources rpondent lappel des vques des tats-Unis qui demandent de vivre dans la solidarit, comme une seule famille humaine, par del les frontires, les ocans et les diffrences de langues, de cultures et de conditions conomiques. Par des initiatives mondiales et des programmes au niveau des communauts, la Croix Rouge Amricaine aide les personnes vulnrables partout dans le monde prvenir les catastrophes, les urgences humanitaires complexes et les conditions sanitaires dangereuses, sy prparer et y rpondre. En se concentrant sur la sant au niveau mondial, la prparation et la raction aux catastrophes, la restauration des liens familiaux et la dissmination de la loi humanitaire internationale, la Croix Rouge Amricaine offre une assistance humanitaire rapide, efficace et de grande ampleur aux personnes dans le besoin. Pour raliser ses buts, la Croix Rouge Amricaine travaille avec ses partenaires dans le mouvement international de la Croix Rouge et du Croissant Rouge et avec dautres organisations internationales dassistance et de dveloppement pour dvelopper les capacits locales, mobiliser et habiliter les communauts et tablir des partenariats. Son programme le plus important est actuellement le Programme de Reconstruction aprs le Tsunami, qui amliore la sant communautaire et prvient les pidmies, appuie les communauts pour reconstruire leur vie et rtablir leurs moyens dexistence, et aide les socits concernes de la Croix Rouge et du Croissant Rouge, ainsi que leurs communauts, dvelopper des capacits de prparation aux catastrophes. Publi en 2008 par : Catholic Relief Services 228 W. Lexington Street Baltimore, MD 21201-3413 USA American Red Cross 2025 E Street, NW Washington, DC 20006 USA

Auteur : Valerie Stetson diteur de la srie : Guy Sharrock (CRS) Lecteurs/correcteurs : Carolyn Fanelli, Cynthia Green, Joe Schultz (CRS), and Dina Towbin Traductrice : Odile Adjavon Rvision : Alexandre Diouf Concepteur graphique : Jeanne Ivy Photo de couverture : Sean Sprague Ce module a t produit par CRS et la Croix Rouge Amricaine avec un appui financier des subventions Food for Peace (FFP) de lAgence des tats-Unis pour le Dveloppement International (USAID) : Subvention de dveloppement des capacits institutionnelles du CRS (AFP A-00-03-00015-00) et Subvention de dveloppement des capacits institutionnelles de la Croix Rouge Amricaine (AFP A-00-00007-00). Les points de vue exprims dan ce documents sont ceux de lauteur et ne reprsentent pas ncessairement ceux de lUSAID ou de FFP. Pour voir la srie complte, veuillez aller sur le site : www.crs.org ou www.redcross.org.

Table des matires

iv iv v

Prface Remerciements Sigles Glossaire Rsum excutif

vi vii

Communiquer et rendre compte dune valuation


1 4 Introduction Communiquer et rendre compte de faon efficace
4 6 Pratiques efficaces de communication et de comptes rendus Lthique de lvaluation, la communication et les comptes rendus

Communication et comptes rendus tout au long dune valuation


7 12 12 14 15 Quatre tapes pour bien communiquer et rendre compte des rsultats de lvaluation. Continuer la communication et les comptes rendus avec les par ties prenantes durant lvaluation Promouvoir lutilisation de lvaluation grce la communication et aux comptes rendus Promouvoir lapprentissage grce la diffusion Revoir rgulirement les valuations

16

Directives et outils pour communiquer et rendre compte dune valuation


16 17 18 23 24 27 30 35 Prsenter de faon efficace les informations de lvaluation Choix doptions de comptes rendus Rapports crits Conseils pour la rdaction Directives sur les illustrations Prsentations orales Comptes rendus cratifs Utiliser des formats lectroniques

Table des matires

annexes doutils et de ressources

37 39 41 46 Annexe I Rfrences et suggestions de lectures Annexe II Check-list pour un rapport dvaluation de Gary Miron Annexe III Modle de rsum excutif Annexe IV Brochure

Communiquer et rendre compte dune valuation

iii

Prface
Le suivi et lvaluation (S&E) sont des responsabilits centrales des gestionnaires de programmes de la Croix Rouge Amricaine et de CRS, qui permettent de garantir la qualit de la programmation. Le module Communiquer et rendre compte dune valuation fait partie dune srie de modules de formation et de renforcement des capacits sur laquelle la Croix Rouge Amricaine et CRS ont dcid de collaborer dans le cadre de leurs subventions respectives de dveloppement des capacits institutionnelles. Ces modules sont conus pour rpondre des besoins identifis sur le terrain de directives et doutils particuliers qui ne semblaient pas pouvoir tre trouvs dans des publications existantes. Bien que les exemples des modules concernent principalement les programmes du Titre II, les directives et les outils fournis sont valables en dehors du domaine de la scurit alimentaire. Notre intention, en crivant Communiquer et rendre compte dune valuation tait de donner des informations qui aide les employs des organisations non gouvernementales faciliter lapprentissage des individus, des groupes et des organisations en communiquant et en rendant compte de faon plus efficace des valuations et de leurs rsultats pour que toutes les parties prenantes tirent le maximum de lvaluation des programmes. Ce module a tir une grande partie de son inspiration et des ses ides de Torres et al. (2005). Veuillez envoyer vos commentaires et vos suggestions sur ce module par e-mail m&efeedback@crs.org.
Citation recommande : Stetson, Valerie, 2008. Communiquer et rendre compte dune valuation, Srie de modules sur le S&E, Croix Rouge amricaine/CRS. Croix Rouge amricaine et CRS, Washington, DC, et Baltimore, Maryland.

Remerciements
Lauteur voudrait remercier tous ceux qui ont contribu ce document en partageant leurs ides et leurs perspectives. Elle voudrait aussi insister sur la contribution des correcteurs, en particulier Guy Sharrock (CRS), Alice Willard (qui travaillait pour la Croix Rouge Amricaine) et Carolyn Fanelli (CRS/ Zimbabwe). Nous voudrions aussi reconnatre le travail de Dina Towbin (consultante) dont le travail ditorial a aid guider le document dans ses dernires phases et Joe Schultz et Jeanne Ivy qui taient responsables du travail de prsentation graphique.

Communiquer et rendre compte dune valuation

iv

Sigles
aea CRS FFP MaRP eBu onG S&e SCF uSaiD viH/sida Wv

American Evaluation Association (Association amricaine dvaluation) Catholic Relief Services Food for Peace (Nourriture pour la paix) Mthode acclre de recherche participative Evaluation base sur lutilisation Organisation non gouvernementale Suivi et valuation Fdration Save the Children United States Agency for International Development(Agence des tats-Unis pour le dveloppement international) Virus dimmunodficience humain/syndrome dimmunodficience acquise World Vision

Communiquer et rendre compte dune valuation

Glossaire
Activits de rflexion critique : Quand des individus ou des groupes sont invits interprter des informations comme des rsultats dvaluation y rflchir, les comprendre et les analyser, dans une atmosphre de respect et douverture. Les activits de rflexion critique encouragent le dialogue, un change dides et dopinions qui permet dapprendre plus et de prendre conscience des valeurs, convictions et hypothses sous-jacentes. Apprentissage organisationnel : Cest un processus continu et dynamique de croissance et damlioration qui utilise les informations (comme les rsultats des valuations) pour faire des changements. Communiquer/communication : Cela peut tre dfini comme une transmission linaire dinformations dun metteur, par lintermdiaire dun canal de transmission, un rcepteur ou comme un processus par lequel des informations sont changes entre des individus. Dans ce module, la communication est vue comme un processus dynamique et continu dinteraction significative entre les parties prenantes de lvaluation. Diffusion : La communication des actions par des comptes-rendus crits, oraux et/ou audio-visuels des valuateurs pour que tous les publics qui ont le droit de savoir puissent avoir connaissance des rsultats de lvaluation. La diffusion nest pas lutilisation, bien quelle soit une action importante qui encourage lutilisation. valuation base sur lutilisation : Cest une approche qui offre un cadre conceptuel pratique pour concevoir et mener les valuations de manire amliorer leur utilisation. Elle concerne la fois la faon dont les parties prenantes appliquent les rsultats de lvaluation et la manire dont elles vivent le processus dvaluation. Gestion des connaissances : Comment les constatations et les informations sont saisies, organises et partages, selon un calendrier. Gestionnaire dvaluation : Lemploy de lONG souvent le chef de lunit de S&E ou le directeur du programme dsign par la direction pour grer lvaluation. Ses principales responsabilits sont gnralement de prparer lvaluation (compiler un livre dinstructions, prparer un cahier des charges), daider lquipe dvaluation et le chef dquipe durant lvaluation et de faciliter lutilisation de lvaluation. Le gestionnaire dvaluation est

Communiquer et rendre compte dune valuation

vi

Glossaire

gnralement charg de soccuper de la communication et des comptes rendus de lvaluation. Parties prenantes de lvaluation : Ce sont les individus, les groupes et/ou les organisations qui peuvent influer sur la planification, les activits ou les rsultats de lvaluation ou qui peuvent tre affects par ceux-ci. Public de lvaluation : Les personnes qui reoivent les informations sur lvaluation et ses rsultats. Les publics comprennent, entre autres, les parties prenantes (par ex. les employs dautres organisations non gouvernementales [ONG] qui pourraient bnficier dinformations sur un programme particulier) Rendre compte : Prsenter les informations rsultant dune activit dvaluation. Les rapports bass sur des faits sont une approche de rdaction de rapports o de ce qui est dit des progrs dun projet qui est justifi par des informations vrifiables. Certains rapports insistent beaucoup sur les progrs faits mais apportent peu de preuves justifiant ce qui est crit.

Communiquer et rendre compte dune valuation

vii

Rsum excutif

la comprhension et lapprentissage sont possibles quand on communique

Une stratgie de communication et de rapports comprend un rapport crit final dvaluation ainsi que dautres formes interactives de communication et de rapports pour permettre que lvaluation soit comprise et utilise.

et quon rende compte de faon efficace des processus et des rsultats des valuations. Limplication active des parties prenantes de lvaluation toutes les phases dune valuation en permet lappropriation et lutilisation. Une stratgie de communication et de comptes rendus comprend un rapport crit final dvaluation ainsi que dautres formes interactives de communication et de comptes rendus pour permettre que lvaluation soit comprise et utilise. Communiquer et rendre compte dune valuation a pour objectif daider le personnel des ONG faciliter lapprentissage dindividus, de groupes et dorganisations en communiquant et en rendant compte de faon plus efficace des processus et des rsultats des valuations. Les expriences russies montrent quil faut planifier la communication et les comptes rendus sur une valuation depuis le dbut, leur consacrer un budget et des ressources et quil faut inclure toutes les activits qui seront menes tout au long de lvaluation. Les comptes rendus doivent avoir des formes varies, adaptes ce que veut savoir le public et ils doivent tre fournis au bon moment. Les rapports crits doivent utiliser un langage clair, sans jargon technique et ils doivent comporter des lments visuels, comme des graphiques, des tableaux, des photos et/ou des illustrations. Pour planifier une stratgie efficace de communication et de comptes rendus, les employs de lONG doivent rflchir aux caractristiques des parties prenantes et des publics de lvaluation, lobjectif de la communication et la meilleure faon de communiquer avec eux. Une stratgie de communication et de comptes rendus rflchit aux activits de toutes les phases de lvaluation. Par exemple, pendant lvaluation, on rend compte des progrs et des rsultats prliminaires. Aprs lvaluation, le rapport est diffus vers les publics extrieurs. Un rapport final est la meilleure manire de communiquer une valuation. On peut envisager dautres formats : des communications brves, comme des brochures ou des bulletins, des prsentations orales aux runions de bilan ou des formats cratifs, comme le thtre. Les activits de rflexion critique, comme des sessions de travail, utilisent des mthodes danimation pour aider les parties prenantes et les publics simpliquer activement dans les rsultats de lvaluation. Les formats lectroniques peuvent aider diffuser les rapports un public important. Des communications lectroniques en temps rel, comme des confrences par Internet, permettent des parties prenantes loignes de lire une valuation et den discuter.

Communiquer et rendre compte dune valuation

viii

Introduction
La communication et les comptes rendus la fois sur le processus et sur les rsultats de lvaluation sont cruciaux pour quil puisse y avoir une comprhension, un apprentissage et une utilisation.

lvaluation joue un rle important dans les programmes de dveloppement

bass sur les rsultats. Cest un catalyseur pour lapprentissage organisationnel (McMillan et Willard, 2008 ; Torres et al., 2005 ; Willard, 2008). De nombreuses ONG ont maintenant un ordre du jour dapprentissage organisationnel et ont le personnel ncessaire pour raliser cet ordre du jour. Patton (1997) insiste sur lutilisation et lapplication de nouvelles connaissances tires dune valuation et suggre que la responsabilit dun valuateur est la fois de faciliter lutilisation des rsultats et de les diffuser. La communication et les comptes rendus sur le processus comme sur les rsultats de lvaluation sont centraux pour quil puisse y avoir une comprhension, un apprentissage et une utilisation. Et pourtant, les valuateurs se plaignent rgulirement que leurs rapports dvaluation ne sont pas lus ou ne sont pas partags et, dans certains cas, que les recommandations du rapport ne sont pas utilises (Torres et al., 2005). Les valuateurs, les gestionnaires ou les dirigeants des organisations supposent parfois que les gens vont comprendre les recommandations dune valuation, vont tre daccord avec elles, y faire attention ou envisager dagir sur la base de ces recommandations (Rochow, 2005). lapprentissage organisationnel est un processus continu et dynamique de croissance et damlioration qui utilise des informations telles que les constatations de lvaluation pour faire des changements. la gestion de la connaissance et la manire dont les constatations et les informations sont saisies, organises et partages au bon moment. lutilisation de lvaluation est la manire dont les gens appliquent les rsultats de lvaluation et aussi dont ils vivent le processus dvaluation.

Une implication active des parties prenantes de lvaluation du dbut la fin amliore leur comprhension, leur appropriation et leur utilisation de lvaluation (Patton, 1997). Si les rapports crits finaux sont le produit le plus important de lvaluation, dautres formes de communication et de compte rendus aident la comprhension et lutilisation (Torres et al., 2005).

Lobjectif de ce module et ses utilisateurs prvus


Communiquer et rendre compte dune valuation a pour but daider les employs des ONG faciliter lapprentissage des individus, des groupes et des organisations en communiquant et en rendant compte de faon plus efficace des valuations et de leurs rsultats.

Communiquer et rendre compte dune valuation

Introduction

Presque tous les employs dONG ont des responsabilits de suivi et valuation (S&E) et certains peuvent mme diriger une unit de S&E. En plus de son travail de tous les jours, la direction choisit souvent un employ de S&E de lONG pour jouer le rle de gestionnaire de lvaluation pour dimportantes valuations mi-parcours ou finales menes par un expert ou une quipe externe. Arms des directives pour une communiquer et rendre compte efficacement, les gestionnaires dvaluation des ONG pourront mieux grer les valuateurs externes et faciliter lvaluation pour en amliorer lutilisation. Co module complte une srie en trois partie sur lvaluation : 1. 2. 3. Prparer une valuation Grer et mettre en uvre une valuation Communiquer et rendre compte dune valuation

Communiquer et rendre compte dune valuation envisage toutes les phases dune valuation depuis la planification du dbut jusquau rapport final et la suite. Des ides pour communiquer et rendre compte dune valuation sont contenues dans le premier et le second module. Le prsent module dveloppe ces ides en donnant des directives pratiques dtailles pour des stratgies de communication et de comptes rendus.

Communiquer et rendre compte de lvaluation pour en encourager lutilisation


Les trois modules refltent lapproche de lvaluation base sur lutilisation (EBU) pour maximiser la comprhension, lappropriation et lutilisation des rsultats par les utilisateurs prvus. Comme cela a t dit plus haut, la recherche montre que lutilisation de lvaluation augmente quand les parties prenantes sont activement impliques du dbut la fin (Patton, 1997). Il y a dautres avantages impliquer les parties prenantes de lvaluation dans toutes les phases dune valuation : sensibiliser lvaluateur externe au contexte local du programme, amliorer la prcision des rsultats et identifier des recommandations faisables (Torres et al., 2005). normes dvaluation des programmes pour lvaluation tourne vers lutilisation identification des parties prenantes : Il faut identifier ceux qui sont impliqus dans lvaluation ou affects par elle afin de pouvoir rpondre leurs besoins. impact de lvaluation : Les valuations doivent tre planifies, conduites, communiques et on doit en rendre compte de manire ce que les parties prenantes aillent jusquau bout, pour que lvaluation ait plus de chance dtre utilise. Source : Joint Committee on Standards, 2004

Communiquer et rendre compte dune valuation

Introduction

Les valuations EBU commencent par lidentification des utilisateurs principaux et des informations dont ils ont besoin. On appelle souvent cela une analyse des parties prenantes de lvaluation. Ces parties prenantes participent aux principales activits et dcisions de lvaluation qui vont de la rdaction du cahier des charges llaboration ou la revue des recommandations de lvaluation.

Rles de lvaluateur externe et du gestionnaire dvaluation


Pour appliquer lapproche EBU dans le contexte de lapprentissage, il faut que les valuateurs travaillent en collaboration avec les parties prenantes. Cela a des implications pour le rle et lexpertise des employs de lONG et des valuateurs externes pour ce qui est de la manire dont ils entreprennent une valuation et dont ils la communiquent et en rendent compte. La confiance et le respect y sont cruciaux. La collaboration implique toute une srie de runions et de travaux en petits groupes et il faut donc que les valuateurs utilisent leurs comptences en animation pour promouvoir la rflexion, le dialogue et laction.

Communiquer et rendre compte dune valuation

Communiquer et rendre compte de faon efficace


En apprenant ce que la communaut de lvaluation a dcouvert au cours du temps, les employs des ONG pourront appliquer les bonnes pratiques et tre conscients des difficults possibles (et donc les viter ou les attnuer).
Comment les rsultats de lvaluation peuvent-ils tre lobjet dune

communication et de comptes rendus efficaces ? Quest-ce qui empche de russir ? En apprenant ce que la communaut de lvaluation a dcouvert au cours du temps, les employs des ONG pourront appliquer les bonnes pratiques et tre conscients des difficults possibles (et donc les viter ou les attnuer). Rflchissez vos propres expriences positives de communication et de comptes rendus puis comparez-les aux connaissances rsumes ci-dessous. Cette section du module tudie les pratiques efficaces et les difficults et met en avant certaines pratiques thiques de lvaluation pour communiquer et rendre compte.

Pratiques efficaces de communication et de comptes rendus


Une tude des pratiques de communication et de comptes rendus des valuateurs a rvl un certain nombre de pratiques qui permettaient des expriences russies. Lune des pratiques les plus essentielles est que la communication et les comptes rendus nattendent pas la fin de lvaluation (Torres et al., 2005). Le tableau 1, ci-dessous, dcrit dautres pratiques efficaces.

Tableau 1 : Pratiques efficaces


Contacts frquents et aux bons moments
Ds le dbut, prvoyez une communication et des comptes rendus efficaces et consacrez un budget ce travail. Durant lvaluation, rendez compte de la progression de lvaluation. Vers la fin de lvaluation, faites une communication et des comptes rendus sur les rsultats provisoires de lvaluation et ngociez les recommandations. Une communication frquente et continue est le seul moyen de montrer du respect. Des rsultats dvaluation ngatifs sont beaucoup plus difficiles accepter et utiliser de manire constructive si on ne sy attend pas.

Toutes les formes de communications et de comptes rendus Ce sont les utilisateurs ! doivent tre faites sur mesure pour ce que le public a besoin de

savoir. Les valuateurs doivent comprendre comme diffrentes parties prenantes, individus et groupes, apprennent et traitent les informations. vitez de produire des rapports trop longs et trop thoriques pour des dcideurs trop occups ou de ngliger des parties prenantes analphabtes ou moins puissantes.

Communiquer et rendre compte dune valuation

Pratiques efficaces de communication et de comptes rendus

La varit est le sel de la vie Le contenu doit tre clair et simple

Des comptes-rendus de formes varies permettent de mieux comprendre. Cela va des rapports dvaluation finale et des rsums excutifs des sessions de travail, des sessions de thtre ou des prsentations par affiche. Le Tableau 6, ci-dessous, donne une liste plus complte doptions de formes de comptes-rendus. Les formes crites de comptes-rendus, comme les rapports, les rsums excutifs et les fiches dinformation, doivent utiliser un langage clair et sans jargon technique et comprendre des lments visuels, comme des graphiques, des tableaux ou des illustrations pour communiquer rapidement les informations et les constatations. Il faut prsenter des donnes quantitatives avec des donnes qualitatives. Les recommandations doivent tre classes par ordre de priorit. Elles seront concrtes, spcifiques et faisables.

Planifier depuis le dbut


Il faut commencer planifier la communication et les comptes rendus sur lvaluation et ses rsultats ds la premire runion avec les parties prenantes. Les valuateurs peuvent nettement amliorer lutilit de lvaluation et son impact sur lorganisation en prvoyant ds le dbut la communication, les rapports et leur diffusion (Torres et al., 2005). Dans la section sur les directives et les outils, ci-dessous, vous trouverez des tapes pratiques et des directives pour ce processus.

Collaborer et interagir
Communicating is a two-way street. Collaboration is powerfulnot only does it increase ownership and enhance use by stakeholdersit also is respectful of others and can lead to better evaluation recommendations. Use Table 2 to determine if your communicating and reporting strategies and formats include interactive methods that involve stakeholders.

Tableau 2 : Continuum des formes interactives de communication et de comptes rendus


Moins interactif
Communication crite et rapports dvaluation Communication par les mdias Communication sur Internet

Potentiellement interactif
Prsentations orales Prsentations par affiche Thtre

Plus interactif
Sessions de travail Communications lectroniques en temps rel Discussions en tte--tte

Source : Adapt de Torres et al., 2005.

La collaboration peut tre utilise pendant toutes les phases dune valuation. Par exemple, on peut discuter des formats possibles de comptes rendus durant la phase de planification, les parties prenantes peuvent tre impliques dans linterprtation des rsultats provisoires durant la phase de mise en

Communiquer et rendre compte dune valuation

Pratiques efficaces de communication et de comptes rendus

uvre et on peut tenir des runions pour partager les premires versions des rapports durant la phase finale. Noubliez pas dinclure dans le plan dvaluation le temps et les autres ressources, comme les cots des runions, par exemple, qui seront ncessaires pour ces types dactivits.

Lthique de lvaluation, la communication et les comptes rendus


Les droits des sujets humains dans une valuation sont protgs quand les valuateurs appliquent des pratiques thiques et tout simplement le bon sens et la politesse. Dans la communication et les comptes rendus, les quipes dvaluation doivent faire tout leur possible pour faire les actions prsentes dans le tableau 3 :

Tableau 3 : Garantir des pratiques thiques dans la communication et les comptes rendus
Action
Comprendre les valeurs culturelles et sociales de tous les participants

Exemple de cette action


Utiliser de petits groupes lors des sessions de travail de lvaluation si les subordonns hsitent critiquer un programme devant leurs superviseurs Traduire le rapport final dvaluation (envoy en anglais au bailleur de fonds) dans la langue locale, le franais au Sngal, par exemple, pour que les employs nationaux puissent facilement lire le rapport Utiliser des pseudonymes pour les personnes interroges, pas leur vrai nom Utilisez votre bon sens quand vous communiquez des rsultats dvaluation la presse; gardez les donnes originales dans un endroit sr Distribuez les rapports crits de faon ce quils ne puissent pas tre changs. Fournissez quitablement les rapports tous les groupes affects par lvaluation Invitez un groupe local indpendant de parties prenantes contrler les activits de communication de lvaluation impliquant des enfants.

Sassurer que les communications sont dans la bonne langue

Ne jamais rvler le nom des participants quand vous rendez compte des rsultats de lvaluation Faites attention ce que dautres parties nutilisent pas les donnes pour des objectifs diffrents de ceux qui avaient t accepts par les personnes qui ont fourni les donnes Faites attention la divulgation des rsultats de lvaluation, que ce soit par des communications crites ou orales Protgez les droits des enfants et des adolescents

Sources : Joint Committee on Standards, 2004 ; Schenk et Williamson, 2005.

Communiquer et rendre compte dune valuation

Communiquer et rendre compte tout au long dune valuation


la planification de la communication et des comptes rendus sur une valuation

Rflchir la communication et aux comptes rendus lors de la planification de lvaluation. Il est important dy penser ds le dpart.

commence ds la premire runion avec les parties prenantes de lvaluation et continue tout au long des trois phases de lvaluation. Phase 1 : Planification et prparation dune valuation Phase 2 : mise en uvre et gestion dune valuation Phase 3 : Utilisation des rsultats de lvaluation Traditionnellement, les parties prenantes de lvaluation regardent le rapport final comme le sommet et la distribution du rapport comme le principal mcanisme permettant lutilisation (Patton, 1997). Trop souvent, le bailleur de fonds est considr comme le principal public. Tout en reconnaissant limportance du rapport final dvaluation et du bailleur de fonds du programme, il faut une stratgie de communication et de comptes rendus plus complte pour promouvoir lapprentissage et lutilisation de lvaluation. La pratique montre que si lon implique continuellement les parties prenantes (cest--dire quon noublie pas les partenaires locaux et les communauts) et quon discute de lvaluation, cela mne plus dappui, plus dappropriation, plus dintrt et dutilisation (Torres et al., 2002 ; Guijit et Woodhill, 2002). La prochaine section donne des directives sur la faon de communiquer et de rendre compte tout au long de toutes les phases dune valuation.

Quatre tapes pour bien communiquer et rendre compte des rsultats de lvaluation
Le module Prparer une valuation dcrit lanalyse des parties prenantes de lvaluation comme une tape importante de la planification de lvaluation. Les parties prenantes de lvaluation peuvent aller du bailleur de fonds du projet jusqu un groupe de femmes de la communaut. Elles peuvent avoir accs lInternet haut dbit ou tre analphabtes et vivre dans un village isol sans lectricit. Elles peuvent vouloir suivre la progression de lvaluation, apprendre comment amliorer leurs conditions ou prendre une dcision de financement sur la base des rsultats de lvaluation. Les stratgies de communication et de comptes rendus doivent rpondre aux situations et aux besoins varis des diffrentes parties prenantes et des diffrents publics de lvaluation. Les tapes ci-dessous vous aideront laborer une stratgie ractive de communication et de comptes rendus. Notez que ces tapes ne sont quune partie du plan dvaluation complet.

Communiquer et rendre compte dune valuation

Communication et comptes rendus tout au long dune valuation

Parties prenantes de lvaluation : Ce sont les individus,


les groupes et/ou les organisations qui peuvent influer sur la
planification, les activits ou les rsultats de lvaluation ou tre
affects par ceux-ci.
Public de lvaluation : Ceux qui reoivent les informations sur lvaluation et ses rsultats. Les publics comprennent les parties prenantes, mais dautres aussi, comme par exemple le personnel dONG qui grent des programmes similaires dans dautres pays.

1e tape : Identifier les difficults de communication et de comptes rendus


La premire tape est didentifier les difficults pour communiquer et rendre compte, afin que les parties prenantes puissent apprendre partir des rsultats. Le Tableau 4 donne une liste dobstacles et de difficults.

Tableau 4 : Obstacles et difficults


Obstacle ou difficult
Anxit gnrale vis--vis de lvaluation

Comment cela affecte la communication et les comptes rendus


Rien que le mot valuation peut rendre les employs anxieux et causer une rsistance du fait que les rsultats peuvent avoir une influence sur les emplois ou lallocation des ressources Les valuateurs externes, qui ont besoin de temps pour tablir des relations de confiance, peuvent augmenter lanxit Si on ne communique pas rgulirement avec les parties prenantes, cela peut les amener se dsengager, se dsintresser et, en fin de compte, ne pas utiliser les rsultats. Les quipes dvaluation dcouvrent trop tard quil ny a pas eu de budget consacr la production des rapports, aux prsentations orales ou la distribution Les employs peuvent considrer des rsultats dvaluations ngatifs ou sensibles comme une critique honteuse et rsister discuter ouvertement de ces rsultats. La communication peut tre inefficace du fait de la perte de mmoire institutionnelle cause dun renouvellement rapide du personnel ou pour dautres raisons La circulation des constatations sur la performance est freine par les directeurs que cela rend mal laise de partager de ce type dinformations Lorganisation de systmes dysfonctionnels de partage de linformation, ce qui empche une communication continue durant lvaluation.

Pas de planification ds le dbut

Culture organisationnelle pas optimale cest--dire le style dopration de la direction, la faon dont lautorit et la responsabilit sont assignes ou dont les employs reoivent une formation continue

Communiquer et rendre compte dune valuation

Communication et comptes rendus tout au long dune valuation

Rsoudre les difficults


En thorie, lanxit et la rsistance devraient tre diminues, si on utilise lapproche participative EBU ou si on considre lvaluation comme un occasion de dialogue et dapprentissage et pas seulement comme un jugement. Traiter les parties prenantes avec respect, de manire protger leur dignit, sera aussi utile. Pour attnuer les difficults, les quipes dvaluation doivent passer du temps : 1 Comprendre le contexte et la culture de lorganisation 1 Impliquer les dcideurs et la direction et essayer davoir leur appui 1 Prparer les parties prenantes des rsultats ngatifs ventuels en leur demandant ds le dbut Et si ? (comme Et si lvaluation montre que le projet na pas ralis ses objectifs ? ) 1 Faites un plan de communication et de comptes rendus ds le dpart 1 Gardez un contact troit et frquent grce des mmos intermdiaires, des versions provisoires de rapports et des runions tout au long de lvaluation (Torres et al., 2005, Patton, 1997). Mais en fin de compte, certains facteurs ne peuvent pas tre contrls par lquipe dvaluation. Communiquer et rendre compte des rsultats de lvaluation ne permettra un apprentissage et un changement que si lorganisation et les parties prenantes y sont prpares et veulent le faire (Torres et al., 2005).

2e tape : Dfinir lobjectif de la communication


Une fois que les parties prenantes sont identifies, renseignez-vous sur celles-ci pour voir quelles stratgies de communication et de compte rendu rpondent le mieux leurs besoins et ceux des autres publics et encouragent lutilisation de lvaluation. Pour cela, rflchissez aux caractristiques des individus ou des groupes en rpondant aux questions ci-dessous : Pour chaque individu ou groupe, posez les questions suivantes :
1. Ont-ils besoin dtre informs des activits de lvaluation ? Et, si oui, quand et pour quelle raison ? 2. Ont-ils besoin de voir les rsultats provisoires ou finaux ? Et, si oui, quand et pour quelle raison ?

Pour une conscientisation Pour obtenir un appui Pour montrer du respect Pour voir la progression de lvaluation Pour apprendre et samliorer Pour promouvoir le dialogue et la comprhension parmi les partenaires Pour valuer la probabilit dun appui dans lavenir Pour aider laborer les recommandations Pour sassurer que les recommandations seront utilises

3. Ont-ils besoin dtre impliqus dans la prise de dcisions ? Et, si oui, quand et pour quelle raison ?

Communiquer et rendre compte dune valuation

Communication et comptes rendus tout au long dune valuation

3e tape
Maintenant que les besoins du public ont t identifis, la prochaine tape sera de choisir la meilleure mthode de communication. Relisez lobjectif de lvaluation dans le cahier des charges de lvaluation et voyez ce que les parties prenantes ont exprim comme attentes. Puis, posez aux parties prenantes individuelles ou aux groupes les questions suivantes :
1. Dans quelle mesure connaissent-ils le programme ou le projet quon value ? 2. Quelle exprience ont-ils de lutilisation des rsultats dvaluation? 3. Quel est leur niveau de lecture ?

Trs bien Un peu Pas du tout Une longue exprience Un peu dexprience Pas dexprience Bon Moyen Faible ou ne savent pas lire (analphabtes) ______ pour crire ______ pour lire Facilement Avec un peu deffort Isols

4. Quelle(s) langue(s) utilisent-ils pour communiquer ? 5. Sont-ils accessibles ?

Source : Adapt de Torres et al., 2005

4e tape : Elaborer une stratgie de communication et de comptes rendus


Aprs cette valuation initiale des caractristiques des parties prenantes, et avec une bonne connaissance de leurs besoins en informations, la prochaine tape est dlaborer une stratgie ractive de communication et de comptes rendus. Cette stratgie devra dcrire le qui, quoi, quand et comment de la communication. Utilisez le Tableau 5, ci-dessous, pour planifier cette stratgie.

Tableau 5 : Modle de fiche de planification de la stratgie de communication et de comptes rendus


Groupe ou individu, partie prenante ou public de lvaluation et rsum de ses caractristiques et de lobjectif. De quelles informations (contenu) a-t-il besoin ?
Bailleur de fonds du programme, bas Washington, DC, doit revoir le rapport final dvaluation pour prendre des dcisions sur des financements futurs Rsultats et recommandations

Communiquer et rendre compte dune valuation

10

Communication et comptes rendus tout au long dune valuation

Quel format est le meilleur pour lui.

Rapport final dvaluation avec rsum excutif Une runion de bilan sera tenue au bureau du bailleur de fonds pour prsenter les rsultats, les recommandations et les actions prvues

Quand en aura-t-il besoin ?

15 juin rapport dvaluation 30 juin runion de bilan

Qui prparera et fournira les informations ?

Lquipe dvaluation prparera les rapports crits. Le personnel du sige de lONG prparera lordre du jour et la prsentation de la runion de bilan. Cot dimpression pour 25 exemplaires du rapport crit ; frais de voyage des employs pour aller la runion Washington, DC ; temps de prparation de la runion de bilan

Quels sont les frais ?

Noubliez pas quil est Comme le montre la colonne de important de prvoir ds le droite du Tableau 5, ci-dessus, les dbut le budget pour tous les frais cots de lvaluation sont une partie de lvaluation. importante de la planification de lvaluation. Ceux qui planifient lvaluation oublient souvent de prvoir au budget les cots de limpression, des runions (voyage et lieu de runion) et de la distribution des rsultats de lvaluation. Quand les ressources manquent, il est trop facile doublier de rendre des comptes aux communauts ou dautres groupes de parties prenantes. Les cots de la traduction, de limpression et de lemballage peuvent varier selon le pays et les imprimeries. Il faut discuter des prix assez tt pour sassurer que la stratgie de communication et de comptes rendus est raliste et que lon ne puise pas dans le budget prvu pour dautres activits ncessaires de lvaluation. Le dernier lment dune stratgie de communication et de comptes rendus est la varit des formes et des activits qui seront utilises tout au long de lvaluation, selon le temps et les ressources disponibles. Vous trouverez dans le Tableau 6, ci-dessous, un choix de formats, descriptions et conseils pour communiquer et rendre compte dune valuation. La stratgie de communication et de comptes rendus comprend presque toujours un rapport crit final. Au dbut, prparez pour le rapport un plan qui tienne compte des utilisateurs et autres publics. Ce plan permet de structurer lvaluation, joue le rle de check-list des sujets devant tre couverts et aide lquipe dvaluation avancer dans ce travail prenant. Par exemple, les sections sur la description du programme et la mthodologie peuvent tre rdiges ds que lvaluation a commenc. Faites aussi savoir rapidement aux parties prenantes comment et quand lquipe communiquera avec elles.

Limportance du budget

Communiquer et rendre compte dune valuation

11

Communication et comptes rendus tout au long dune valuationn

Continuer la communication et les comptes rendus avec les parties prenantes durant lvaluation
Durant la mise en uvre de lvaluation, prvoyez des plans pour informer les parties prenantes ou les remercier de leur participation la collecte des donnes, pour communiquer avec elles et leur rendre compte de lavancement de lvaluation et pour prsenter et discuter les rsultats provisoires avec ces personnes ou ces groupes. Les activits de communication et de comptes rendus avec les parties prenantes comprendront, par exemple : Des runions avec les chefs de village et les bnficiaires pour mettre sur pied des entretiens et des runions de feedback un moment qui les arrange

1 De brves runions priodiques o lquipe dvaluation tient un petit groupe de parties prenantes cls (par exemple le reprsentant rsidant de lONG) au courant de lavancement de lvaluation 1 Des e-mails hebdomadaires de lquipe dvaluation sur le terrain dcrivant lavancement et prsentant les ides prliminaires qui sont envoys aux parties prenantes bases dans la capitale ou au sige 1 Des tables rondes mensuelles pour tenir au courant et informer un groupe plus important de parties prenantes (par exemple les ONG et leurs partenaires).

Sur le terrain : Communiquer lavancement de lvaluation


Dans un bureau de pays, lquipe du projet travaillait en proche collaboration avec des consultants qui avaient labor un rapport hebdomadaire de situation pour communiquer la progression du travail au personnel du projet. Ils envoyaient un rsum par e-mail accompagn en pice jointe du rapport sous la forme dun classeur Excel. Pour quil soit facile de voir la progression, il y avait un code de couleurs qui montrait si une tche tait termine (vert), si elle tait en cours (orange) ou si elle tait en retard (rouge). Il y avait aussi une colonne pour les commentaires et les actions.

Pour plus dinformations sur la faon de communiquer et de rendre compte dune valuation, se reporter Willard (2008).

Promouvoir lutilisation de lvaluation grce la communication et aux comptes rendus


Les principales activits de cette phase comprennent llaboration des rsultats et des recommandations de lvaluation, et la communication et les comptes rendus sur ceux-ci. Les recommandations sont le lien formel entre une valuation et son utilisation et elles sont souvent la partie la plus visible dun rapport dvaluation (Torres et al., 2005 ; Patton, 1997).

Communiquer et rendre compte dune valuation

12

Communication et comptes rendus tout au long dune valuation

normes dvaluation des programmes pour les recommandations et les comptes rendus
Demander le feedback de divers participants du programme sur la crdibilit des interprtations, explication, conclusions et recommandations de lvaluation avant de finaliser le rapport. Discuter des erreurs courantes dinterprtation et des dductions fausses qui peuvent tre faites sur les informations collectes. Source : Joint Committee on Standards 2004.

Lapproche de lvaluation base sur lutilisation (EBU) implique les parties prenantes dans llaboration des recommandations. Lquipe dvaluation prsente des recommandations provisoires aux parties prenantes pour quelles les lisent, en discutent et les modifient. Le temps pass faciliter lanalyse et linterprtation des rsultats peut tre rentable parce quil permet une meilleure comprhension des rsultats et un engagement les utiliser. Un autre avantage de cette approche est que les rsultats ngatifs ou controverss peuvent tre communiqus tt. La qualit de lvaluation en est elle aussi amliore parce que les valuateurs peuvent apprendre des choses de linterprtation des donnes par les parties prenantes, ce qui mne souvent des rsultats plus ralistes et faisables (Patton, 1997 ; Gujit et Woodhill, 2002 ; Torres et al., 2005). On peut consulter mme de grands nombres de personnes en utilisant des activits en petits groupes pour les inviter donner leur avis sur la clart du rapport, sa justesse et son format et pour quelles disent si elles pensent que ses conclusions et ses recommandations sont appropries. Grce ce type de consultations, les parties prenantes rflchissent dj aux rsultats de lvaluation (et les utilisent ) (Torres et al., 2005 ; Patton, 1997). Les parties prenantes de lvaluation doivent toujours avoir au minimum loccasion de commenter les constatations de lvaluation ou de rviser la version provisoire du rapport final. Informez aussi les parties prenantes de la manire dont lvaluation sera diffuse. Une fois que les rsultats et les recommandations de lvaluation seront finaliss, ils pourront tre communiqus dautres groupes de parties prenantes, comme les agences qui financent, les organes du gouvernement et des organisations partenaires.

Sur le terrain : Impliquer les parties prenantes dans llaboration des recommandations
Dans une valuation de World Vision, la suite du travail sur le terrain, lquipe dvaluation a produit un rapport provisoire dvaluation. Elle a prvu une runion dinterprtation des donnes, dune dure de deux jours, o elle a fait travailler les employs du programme sur les donnes. Lquipe a rpondu des questions spcifiques, a donn un feedback aux auteurs du rapport sur des points qui ntaient pas clairs et a contest des rsultats qui lui semblaient improbables. Des tableaux de confrence ont t utiliss pour faciliter le travail de groupe sur les donnes et pour noter les ides. la suite de ce travail, les employs du programme connaissaient vraiment bien les donnes de lvaluation. Lquipe dvaluation tait persuade que ce processus permettrait aux employs de comprendre parfaitement les rsultats et quainsi, ils se serviraient du rapport et sy rfreraient. Source : Communication personnelle avec Jamo Huddle, World Vision International

Communiquer et rendre compte dune valuation

13

Communication et comptes rendus tout au long dune valuation

Promouvoir lapprentissage grce la diffusion

La diffusion dune valuation des publics externes est une partie importante de la stratgie de comptes rendus. La diffusion promeut lapprentissage et peut aussi promouvoir la coordination et la coopration entre des organisations surs. Une grande diffusion des recommandations de lvaluation peut viter que ces recommandations ne soient ignores. Le plaidoyer est un autre objectif courant de la diffusion pour augmenter lappui du gouvernement ou des bailleurs de fonds pour un programme particulier ou pour encourager laction des citoyens.
normes dvaluation des programmes pour la diffusion
Quand vous planifiez la diffusion des rsultats, envisagez des mthodes varies comme des rsums excutifs, des rapports imprims, des prsentations audiovisuelles, des auditions, des runions, des confrences, des entretiens, des discussions en panels et des articles de journaux. Les principaux rsultats et rapports dvaluation provisoires seront distribus leurs utilisateurs prvus pour quils puissent les utiliser au bon moment. Source : Joint Committee on Standards 2004.

La diffusion peut tre intgre au processus dvaluation par exemple en impliquant les partenaires dans une valuation ou faite une fois que lvaluation est termine. Comme stratgies de diffusion, on peut prvoir de faire circuler des rapports crits et des fiches dinformations, de faire des prsentations PowerPoint ou de publier des articles spcialiss.

Sur le terrain : Diffusion de lvaluation de la rponse au tsunami


En Indonsie, un programme conjoint dONG, qui valuait sa rponse au tsunami, a diffus ses constatations et ses rsultats comme suit : En organisant une table ronde avec plusieurs parties prenantes o les constatations et les rsultats taient partags avec dautres organisations non gouvernementales internationales, des fonctionnaires du gouvernement et des leaders de la communaut et En soumettant un rapport dvaluation sur le tsunami la base de donnes de lALNAP (Active Learning Network for Accountability and Performance in Humanitarian Action, Rseau dapprentissage actif pour la responsabilit et la performance dans laction humanitaire) qui est ouverte au public. Source : Auteur

Communiquer et rendre compte dune valuation

14

Communication et comptes rendus tout au long dune valuationn

Revoir rgulirement les valuations


La communication ne sarrte pas ds que lvaluation est termine et que le rapport final est distribu. Les valuateurs intelligents ne simaginent jamais que les recommandations seront adoptes sans quil y ait besoin dautre action. Il y a un dbat dans la communaut de lvaluation sur le rle de lvaluateur pour garantir lutilisation de lvaluation, une fois que celle-ci est acheve. Certains suggrent quun suivi actif est gnralement ncessaire pour que les recommandations soient mises en uvre et que les leons apprises soient incorpores dans le processus de prise de dcisions lavenir (Kusek et Rist, 2004 ; Patton, 1997). Dautres ne sont pas daccord et considrent que cela dpasse les responsabilits de lvaluateur.

Sur le terrain : Revue dvaluation et planification de programme


Un programme conjoint multi-site dONG, nomm C-SAFE (Consortium for Southern Africa Food Emergency, Consortium pour lurgence alimentaire en Afrique Australe) a fait une valuation finale. Le travail de production du rapport final comprenait des ateliers de deux jours pour les organisations nongouvernementales membres dans tous les pays pour recevoir un feedback et valider les constatations. En mme temps, les ONG membres planifiaient de nouveaux programmes et utilisaient les rsultats de lvaluation pour ajuster leurs plans pour lanne qui suivait. Source : Maunder, 2005.

Communiquer et rendre compte dune valuation

15

Directives et outils pour communiquer et rendre compte dune valuation


Quand lobjectif est un apprentissage au niveau individuel et au niveau de lorganisation, la stratgie de communication et de compte rendu doit prendre en compte la faon dont les personnes et les organisations apprennent le mieux.
directives, outils et conseils pratiques pour communiquer et rendre compte efficacement dune valuation. Elle est centre sur la faon de prsenter les donnes et les informations diffrents utilisateurs selon leurs caractristiques et leurs besoins dinformations.
Suite aux quatre tapes mentionnes ci-dessus, cette section offre des

Prsenter de faon efficace les informations de lvaluation


Les formats courants pour prsenter les informations dune valuation sont les rapports crits, les rsums excutifs et les prsentations orales. Les valuateurs externes peuvent faire des prsentations des confrences et faire publier les rsultats dune valuation. On peut envisager dautres formats, comme des activits de rflexion critique, du thtre et des communications brves, comme des bulletins ou des brochures (Torres et al. 2005). Quand lobjectif est un apprentissage au niveau individuel et au niveau de lorganisation, la stratgie de communication et de compte rendu doit prendre en compte la faon dont les personnes et les organisations apprennent le mieux. La recherche a montr que les gens apprennent mieux quand ils sont impliqus dans le matriel dapprentissage, quand ils voient, entendent et font quelque chose avec le contenu et quand ils intgrent de nouvelles connaissances quelque chose quils savent dj (Torres et al., 2005). Quel que soit le format utilis, lobjectif est de prsenter les informations de faon succincte pour quelles soient faciles comprendre et quelles impliquent le public. Si lon communique et quon rende compte de rsultats en utilisant autant de format et de mthodes que ncessaire, cela aide atteindre des parties prenantes diverses et promouvoir lutilisation des rsultats de lvaluation. Comme cela a t dit, pour atteindre une large un rapport dvaluation gamme de parties prenantes diverses, doit tre clair et simple. il faut planifier suffisamment tt pour Essayez dviter des revues que le budget et les autres ressources inutiles de la littrature ou de puissent le permettre. longues discussions de thories et de mthodologies (Davidson, 2007).

Communiquer et rendre compte dune valuation

16

Directives et outils pour communiquer et rendre compte dune valuation

Simplicit et clart : Normes pour les comptes rendus


Quel que soit le mdia utilis pour rendre compte, la clart est essentielle pour que le public puisse comprendre, pour que le rapport soit crdible et quil soit appliqu. Pour quune valuation soit utile, il faut quelle soit facile comprendre. Les parties prenantes doivent vraiment comprendre quels taient objectifs de lvaluation, ce qui a t valu, comment lvaluation a t mene, quelles informations ont t obtenues, quelles conclusions ont t tires et quelles recommandations ont t faites (Joint Committee on Standards, 2004).
la simplicit est une vertu
Une valuation peut utiliser des techniques compliques pour confirmer la force de ses rsultats, mais la prochaine chose faire est de trouver une manire crative de transformer ces rsultats en des prsentations simples, directes et comprhensibles. Cela permettra de donner une direction la prsentation et de clarifier les rsultats les plus importants. Faites la diffrence entre la complexit de lanalyse et la clart de la prsentation. Prsentez limage globale sans vous perdre dans les dtails. Source : Adapt de Patton (1997)

Choix doptions de comptes rendus


Un rapport final crit est une manire importante de communiquer et de rendre compte dune valuation. Mais on doit aussi envisager dautres formats (Patton, 1997). Cest rarement lun ou lautre quand on fait un choix de formats. Gnralement, on combine et on utilise lun aprs lautre, diffrents formats pour promouvoir la collaboration par exemple, on crit une premire version du rapport avec les rsultats provisoires puis on fait une runion de travail avec des parties prenantes cls de lvaluation pour valider les rsultats. Choisissez les formats qui sont les plus appropris au contenu de lvaluation. En utilisant adroitement lune aprs lautre une srie de formes de communication, on peut parfois communiquer beaucoup mieux les rsultats et les recommandations dun rapport (Torres et al., 2005). Les publics des rapports de lvaluation peuvent aller de personnes travaillant dans les ministres des employs du bailleur de fonds ou des groupes communautaires. Il est difficile de produire un seul rapport dvaluation qui rponde aux besoins de tous les utilisateurs et de toutes les parties prenantes. La solution est donc de penser prsenter les rsultats de diffrentes manires. Le rapport dvaluation complet est distribu aux employs du programme, aux partenaires, aux fonctionnaires du gouvernement et aux bailleurs de fonds. On peut utiliser dautres formes pour partager les rsultats de lvaluation avec des publics plus large, comme des brochures, des bilans, des prsentations en panel, la presse crite, la radio ou la tlvision, des prsentations vido, du thtre, des prsentations par affiche, des sessions de travail ou des communications lectronique en temps rel. Le tableau 6, ci-dessous, prsente une large gamme doptions de comptes rendus possibles. Il est suivi dune description de chaque option. Utilisez ces informations pour choisir les formats qui correspondent le mieux aux objectifs

Communiquer et rendre compte dune valuation

17

Directives et outils pour communiquer et rendre compte dune valuation

outils et ressources
Check-list pour un rapport dvaluation

de lvaluation et qui rpondent le mieux aux besoins des diffrentes parties prenantes et des diffrents publics (Patton, 1997).

Tableau 6 : Choix doptions de comptes rendus


Rapports crits Prsentations orales
Runions de bilan Prsentations en panel Mdias (radio ou tlvision) Communication informelle

Comptes Rflexions Comptes rendus cratifs critiques rendus utilisant des formats lectroniques
Prsentation Revues Communications vido aprs sur site Internet action Pices de Communications thtre ou Sessions lectroniques en jeux de rles de travail temps rel, comme chats Prsentations rooms, par affiche tlconfrences, Ateliers vidoconfrences dcriture et confrences Internet

Rapport final dvaluation Rsum excutif Rapports intermdiaires ou rapports dactivits Histoires de vie quotidienne, de russites et dapprentissage Brves communications, comme des bulletins, des brochures, des mmos, des e-mails, des cartes postales Communications par les mdias (presse crite)

Sources : Patton, 1997 ; Torres et al., 2005.

Rapports crits
Le rapport final dvaluation prsente toute lvaluation. Il sert de base au rsum excutif, aux prsentations orales et autres formes de comptes rendus et cest une ressource importante pour les archives du programme. De nombreux bailleurs de fonds prescrivent un format pour les rapports quils demandent. Suivez bien ce format. Cependant, de nombreuses ONG ont leur propre format gnrique de rapport quand le bailleur ne demande pas de format particulier. Dans ce cas, le format de lONG devra tre utilis (cf. Stetson et al., 2007). Vous trouverez dans lAnnexe II une check-list pour un rapport dvaluation pour guider les discussions entre les valuateurs et les parties prenantes sur le

Communiquer et rendre compte dune valuation

18

Directives et outils pour communiquer et rendre compte dune valuation

contenu des rapports dvaluation. Pour communiquer de faon efficace des rsultats ngatifs ou sensibles, il est important de les prsenter de manire encourager la rsolution de problmes pour que les parties prenantes ne soient pas sur la dfensive. Vous pouvez prsenter les rsultats positifs en premier, puis numrer les rsultats ngatifs. Utilisez des termes tels que ralisations , russite ou cibles atteintes pour les rsultats positifs et des expressions telles que en progrs , doit tre amlior ou choses sur lesquelles il faudra travailler pour des rsultats qui ne sont pas positifs (Torres et al., 2005). Je suis dsole de vous avoir crit une aussi longue Un rsum excutif est une version lettre. Je navais pas le temps den brve gnralement dune
crire une courte.
quatre pages du rapport final George Bernard Shaw
dvaluation, contenant des versions condenses des principales sections.
Il est plac au dbut du rapport final dvaluation et donne les principales informations de faon prcise et concise. Les rsums excutifs sont gnralement crits pour que des dcideurs trop occups puissent avoir les principales informations sur lvaluation sans devoir lire lensemble du rapport. Le rsum excutif peut tre distribu sans le rapport complet et doit pouvoir tre compris en tant que document indpendant. Le rsum excutif met gnralement en lumire les rsultats et les recommandations de lvaluation mais il peut aussi comprendre une brve prsentation des objectifs, des principales questions et des mthodes de recherche de lvaluation (Torres et al., 2005 ; Kusek et Riste, 2004). Cela peut prendre normment de temps de condenser les 50 pages dun rapport final en un rsum dune page. Utilisez les conseils du cadre cidessous pour faciliter ce travail.

Conseils pour rdiger un rsum excutif


Lisez le document original de la premire la dernire page Commencez le rsum excutif par les conclusions et les recommandations Soulignez toutes les ides cls, les dclarations importantes et les recommandations principales Corrigez les informations soulignes Rcrivez les informations soulignes Corrigez la version rcrite en liminant les mots et expressions inutiles Vrifiez la version corrige par rapport au document dorigine pour voir si les informations principales sont prsentes, y compris les russites et les difficults du projet Vrifiez que le rsum excutif ne contient que des informations venant du rapport dorigine

Les rapports intermdiaires ou les rapports prsentent les rsultats

Communiquer et rendre compte dune valuation

19

Directives et outils pour communiquer et rendre compte dune valuation

intermdiaires, prliminaires ou initiaux de lvaluation. Le calendrier des rapports intermdiaire suit les besoins spcifiques des parties prenantes de lvaluation pour leur permettre de Mettre un visage humain prendre des dcisions. Les rapports sur le S&e intermdiaires peuvent servir En 2003, le bureau Food for Peace rendre une valuation plus utile, (FFP) de lUSAID a demand que mais ils peuvent aussi poser des de brves histoires sur les activits problmes sils sont mal interprts. et les impacts du Titre II soient Pour viter ce problme, commencez incluses dans les rapports annuels les rapports intermdiaires en des rsultats. Dautres bailleurs de prcisant les choses suivantes : fonds sintressent aussi de plus 1 Sur quelles activits de en plus cette faon de mettre un collecte de donnes porte ou visage humain sur les donnes de ne porte pas le rapport S&E dans les rapports. Ces brefs 1 Quand est ce que les textes ou histoires peuvent aussi tre rsultats finaux de utiliss pour le plaidoyer dans des lvaluation seront campagnes mdiatiques (De Ruiter disponibles ? et Aker, 2008 ; Long et al., 2008) Les choses auxquelles les lecteurs doivent faire attention quand ils interprtent les rsultats (Torres et al., 2005).

Les histoires de vie quotidienne, de russites et dapprentissage sont diffrentes manires de communiquer des rsultats dvaluation des publics particuliers. 1 Les histoires de vie quotidienne montrent lexprience de personnes affectes par les projets de lONG et aident personnaliser les russites et les difficults du travail de lONG. 1 Les histoires de russite sont des descriptions de quand, o, quoi, pourquoi et comment un projet a russi atteindre ses objectifs 1 Les histoires dapprentissage racontent des cas de difficults imprvues dans le projet ou dimpacts ngatifs du projet. Elles montrent comment ceux-ci ont t dcouverts et surmonts et ce qui a t appris dutile pour lavenir et pour dautres (De Ruiter et Aker, 2008 ; Long et al., 2008). Elles peuvent tre incluses dans le rapport final ou tre jointes sous forme dannexes. Pour de plus amples informations sur la manire de rdiger ces histoires, veuillez consulter Histoires de vie quotidienne (De Ruiters et Aker, 2008), Histoires de russites et dapprentissage (Long et al., 2008) et Rdaction dune histoire de vie quotidienne en suivi et valuation (Hagens, 2008).

Communiquer et rendre compte dune valuation

20

Directives et outils pour communiquer et rendre compte dune valuation

outils et ressources
Brochure Bridges of Hope

Sur le terrain : Histoires pour documenter ldification de la paix


Des employs sur le terrain dune ONG au Timor Occidental ont racont des histoires pour rendre compte de lvaluation. Un livre a t produit pour documenter les meilleures pratiques tires des expriences de lONG et de ses partenaires quand ils intgraient ldification de la paix et lassistance pour les rfugis du Timor Oriental au Timor Occidental. Ce livre contenait des histoires courtes crites par le personnel sur le terrain et une synthse des leons apprises. Sources : Lederach et al., 2007 ; Visser, 2004.

Brves communications, comme des bulletins, des brochures, des mmos, des e-mails, des cartes postales : Elles servent mettre en lumire les informations sur lvaluation, aident veiller lintrt pour lensemble des rsultats de lvaluation et servent pour les relations publiques de lorganisation. Leur format peut inviter donner son avis, donner des mises jour, rendre compte des activits dvaluation venir ou prsenter des rsultats prliminaires ou finaux. Ces formats seront sans doute moins utiles quand lvaluation est surtout qualitative et quand une description complte du contexte de lvaluation est cruciale pour interprter les rsultats (Torres et al., 2005). Ces trois types de brves communications diffrent les unes des autres parce que : 1 Les bulletins utilisent un format de journal 1 Les communiqus sont des mises jour trs brves, distribues frquemment 1 Les brochures attirent lattention par une couverture colore attrayante 1 Les dossiers utilisent des photos, des donnes, des graphiques et des histoires pour prsenter les rsultats dvaluation. Ces formats doivent tre attrayants du point de vue visuel grce lutilisation de la couleur, de la mise en page, de titres varis et des illustrations. Par exemple, la progression de lvaluation peut tre prsente sous forme de liste puce sous les titres : Travail termin , Travail en cours et Travail venir , ce qui permettra au lecteur de comprendre la progression de lvaluation dun seul coup dil. Les logiciels de publication assiste par ordinateur permettent de faire facilement des bulletins, communiqus et brochures sduisants et attrayants (CDC, 2007 ; Torres et al., 2005). LAnnexe IV prsente une brochure que CRS a labore avec ses partenaires pour Bridges of Hope, un projet de VIH/sida au Cambodge. Les e-mails, mmos, fax et cartes postales aident maintenir la communication avec les parties prenantes de lvaluation en utilisant des messages courts. Ces formes de communication peuvent tre utilises pour tenir les publics au courant de la progression de lvaluation, pour les inviter participer des activits dvaluation venir et/ou pour communiquer la faon dont les recommandations dune valuation vont tre utilises ou mises en uvre. Noubliez pas que lutilisation de communication par e-mails pose le problme de la confidentialit. Il est utile de prvoir une limitation

Communiquer et rendre compte dune valuation

21

Directives et outils pour communiquer et rendre compte dune valuation

de responsabilit au bas de tous les messages e-mail. Si lon doit demander un avis sur des informations confidentielles ou controverses, ces moyens de communication ne sont pas le meilleur choix (Torres et al., 2005).

Sur le terrain : Carte postale pour tenir au courant de la collecte des donnes dune enqute
Lenqute est maintenant termine ; le taux de rponse tait de 79%. Pour la notation du programme, les rponses ont t les suivantes : 39% : trs utile 42% : assez utile 11% : pas trs utile 8% : pas utile du tout Lanalyse complte montrera quelles catgories de participants ont trouv le programme plus ou moins utile et pourquoi ils lont not ainsi. Source : Torres et al. 2005.

Communication par les mdias


Les rsultats dvaluation peuvent tre transmis aux mdias en envoyant des exemplaires du rapport dvaluation ou des communiqus de presse ou grce des interviews de membres de lquipe dvaluation ou de parties prenantes de lvaluation (Torres et al., 2005). En utilisant les mdias, le projet peut toucher un public plus important, comme le grand public ou un groupe professionnel particulier. Lutilisation des mdias peut aussi tre dlicate. On na pas de garanties sur ce qui va rellement tre communiqu. Cest pourquoi il ne faudra contacter les mdias que quand les principales parties prenantes auront vu les rsultats de lvaluation : personne naime avoir la surprise de dcouvrir des choses sur son programme dans la presse.

Conseils pour la rdaction


Pour tre utiles, les rapports dvaluation en viennent tout de suite aux faits. Les utilisateurs ne doivent pas avoir patauger dabord dans la thorie et la mthodologie pour trouver ce quils ont besoin de savoir (Davidson, 2007). Quel que soit le type de rapport crit, assurez-vous quil soit lisible et que son style aide la comprhension. Vous trouverez dans le cadre ci-dessous des conseils pour crire de faon claire.

Communiquer et rendre compte dune valuation

22

Directives et outils pour communiquer et rendre compte dune valuation

Conseils pour crire clairement


viter les termes techniques que le public risque de ne pas comprendre Connaitre son public et choisir le style dcriture appropri Dfinir les termes cls quand cest ncessaire Adopter un style de conversation si cela est appropri pour le rapport (par pour ceux qui seront publis dans des publications techniques) Nutiliser que le nombre de mots ncessaire pour dire ce quon a dire (viter dutiliser trop de subordonnes la suite) Choisir des mots que les lecteurs comprendront crire des phrases courtes et vrifier que les phrases plus longues sont claires en lisant le texte voix haute ventuellement, utiliser des listes puces pour couper les phrases trop longues crire la voix active et viter le passif Utiliser les outils du traitement de texte pour vrifier lorthographe, la grammaire et le style (et le dictionnaire des synonymes du traitement de texte). Il faudra quand mme corriger les preuves Concevoir une structure logique pour les communications et rapports plus longs (format homogne, sous-titres, etc.) Utiliser des puces, des cadres, des zones de texte, des tableaux et des graphiques pour faire passer linformation viter les notes de bas de page trop longues Rdiger et rcrire en sappuyant sur un feedback constructif et en suivant le cahier des charges de lvaluation crire en collaboration pour stimuler la crativit et pour rduire le travail de chacun Prvoir le temps dcrire plusieurs versions successives, de recevoir un feedback et de corriger les preuves. Sources : Torres et al. 2005; CDC 2007.

La plupart des rapports dvaluation sont crits par une seule personne ou par une petite quipe. La rdaction de rapports peut aussi tre une occasion de renforcer les capacits du personnel ou des partenaires. Par exemple, certains employs nationaux seront peut-tre plus laise et produiront des chapitres de meilleure qualit sils les crivent dans la langue locale (McMillan et Willard, 2008).

Directives sur les illustrations


Dexcellentes illustrations peuvent communiquer des ides complexes de faon claire, prcise et efficace. Souvent, la faon la plus efficace de dcrire, dexplorer et de rsumer un ensemble de nombres est de regarder des images de ces nombres (Tufte, 1989). Les illustrations des donnes prsentent de faon visuelle des nombres et des quantits en utilisant des points, des lignes, un systme coordonn, des nombres, des symboles, des mots, des hachures ou des couleurs. Dans les rapports, les rsums excutifs et les documents distribuer ou diapositives PowerPoint utiliss dans les prsentations orales, des illustrations peuvent toujours tre intressantes pour attirer lattention, communiquer des informations importantes dun seul coup dil et permettre

Communiquer et rendre compte dune valuation

23

Directives et outils pour communiquer et rendre compte dune valuation

de mieux comprendre et de mieux mmoriser. Dites-vous que les illustrations donnent au lecteur le plus grand nombre dides, dans le temps le plus court, en utilisant le moins dencre et dans lespace le plus petit (Kusak et Rist, 2006 ; Patton, 1997). Il est important de prsenter les illustrations avec des explications crites ou orales pour sassurer quelles soient bien comprises. Quand vous ajoutez des illustrations dans un texte ou un rapport, dcrivez les informations quelles contiennent ou interprtez la signification des donnes prsentes (Torres et al., 2005). Le tableau 7, ci-dessous, prsente des options dillustrations, le type dinformations que chaque option peut communiquer et des conseils pour utiliser les illustrations de faon efficace.

Communiquer et rendre compte dune valuation

24

Directives et outils pour communiquer et rendre compte dune valuation

Tableau 7 : Prsentations des images


Type dimage
Graphique linaire

Informations communiques
Montre des tendances dans le temps, des mouvements, des distributions et des cycles

Conseils
Donner des noms aux lignes, plutt que dutiliser une lgende Essayer de ne pas utiliser plus de trois lignes Utiliser diffrentes couleurs, ou diffrentes textures si cest en noir et blanc

Diagramme circulaire (camembert)

Montre des parties dun tout

Utiliser au plus six parties Arranger les parties en partant de la plus grande ou de la plus importante partir de midi Utiliser des couleurs vives et contrastes Donner des noms aux parties du camembert

Histogramme ou diagramme Montre les diffrences entre des informations similaires (par exemple groupes de barres
distribution en pourcentages) Les groupes de barres comparent plusieurs lments

Utiliser aussi peu de barres que possible Utiliser la couleur ou la texture pour montrer les aspects des donnes Placer des chiffres montrant la valeur des barres au dessus ou lintrieur de la barre

Montrent les processus, les lments, Autres diagrammes (organigramme, les rles ou des parties dune entit plus chronogramme, diagramme grande de dispersion)

Utiliser efficacement lespace blanc Donner le message dans le titre Ajouter la source des donnes

Tableaux

Dcrivent, classent, montrent des relations et comparent Prsentent de faon pratique de grandes quantits de donnes

Donner un numro en chiffres arabes chaque tableau Placer le titre juste au dessus du tableau Bien dfinir les lignes et les colonnes Montrer la source des donnes

Illustrations (diagrammes, cartes ou dessins)

Transmettent efficacement des messages ou des ides qui sont difficiles exprimer en mots Montrent des structures organisationnelles, dmontrent des flux Montrent une direction Utiliser des organigrammes pour montrer des problmes Utiliser des cartes pour montrer des rsultats comparables dans diffrentes rgions ou pays

Que ce soit simple : sil faut beaucoup dexplications, utiliser plutt un texte Utiliser les illustrations de faon crative car elles aident communiquer Mettre une lgende pour dfinir les symboles utiliss Utiliser lespace blanc

Sources : Torres et al. 2005; Kusek and Rist 2004; Tufte 1989.

Communiquer et rendre compte dune valuation

25

Directives et outils pour communiquer et rendre compte dune valuation

Quand le niveau dalphabtisation est trs bas, des tableaux avec des mots et des chiffres de base peuvent tre transforms en symboles ou en images. Utilisez des objets ronds familiers, comme des oranges, des pices de monnaie ou des melons, pour faire un camembert. Ces symboles familiers aident les gens voir et comprendre les rsultats et sen souvenir (Feuerstein, 1986). Des dessins ou des photos peuvent tre utiliss dans des rapports dvaluation pour aider visualiser des aspects importants de donnes qualitatives. Comme pour les graphiques, assurez-vous que la signification des dessins ou des photos est clairement explique dans le rapport.

Sur le terrain : La puissance des dessins


Dans le cadre dune valuation pour des changements organisationnels prvus, un valuateur a demand des employs du programme de dessiner des images de lancienne organisation et de ce quils espraient pour la nouvelle. A la fin de lvaluation, les rsultats ont t prsents la direction de lorganisation en montrant quelques uns de ces dessins, qui illustraient certains des principaux rsultats de lvaluation. La direction a t frappe par les dessins et surpris de voir les ractions des employs aux changements prvus. Elle a admis quelle navait pas envisag un ventuel feedback ngatif du personnel. Les rsultats de lvaluation, sils avaient t communiqus seulement par des mots, mme avec des citations, nauraient sans doute pas eu le mme impact sur ces gestionnaires. Source : Torres et al. 2005.

Des photos permettent dexpliquer, de clarifier et de renforcer le texte dun rapport crit en illustrant des activits du projet (comme des personnes actionnant une pompe eau) ou le contexte du projet (comme une salle de classe). Les photos aident aussi raconter les histoires de participants du programme. Rapetissez bien les photos pour quelles aient une bonne taille par rapport au texte. Notez aussi que certains bureaux sur le terrain ont du mal tlcharger des rapports contenant trop de photos (Cf. De Ruiter et Aker [2008] pour des conseils sur la faon de prendre des photos).

Communiquer et rendre compte dune valuation

26

Directives et outils pour communiquer et rendre compte dune valuation

Prsentations orales
Les prsentations orales permettent de communiquer la progression ou les rsultats de lvaluation aux parties prenantes et dautres publics. Lavantage est que le public peut poser des questions et que la communication est plus interactive. Les prsentations orales comprenant des discussions avec animateur peuvent conduire un dialogue entre les parties prenantes et un engagement vis--vis des actions (pour de plus amples informations, voir ci dessous la section sur les activits de rflexion critique) (Torres et al., 2005). Les runions de bilan commencent habituellement par une brve prsentation suivie par une discussion des principaux rsultats et dautres questions. On peut faire rgulirement des runions de bilan pour communiquer la progression de lvaluation aux gestionnaires de programmes. Une runion finale de bilan pourra tre tenue avec les parties prenantes pour partager les principaux rsultats et les principales recommandations du rapport final dvaluation et pour en discuter. Les prsentations en panel et les runions communautaires sont dautres exemples de runions de bilan plus formelles. Les prsentations en panel peuvent tre utilises pour runir des parties prenantes de lvaluation pour prsenter dimportants rsultats et dimportantes recommandations de lvaluation ou dautres composantes de lvaluation. Les panels sont gnralement composs de trois quatre panelistes. Chaque personne fait une brve prsentation sur un aspect de lvaluation. Un modrateur facilite ensuite la discussion entre les panelistes et entre les panelistes et le public (Kusek et Rist, 2004). Des runions communautaires rassemblent des parties prenantes de la communaut et les valuateurs ou des employs du projet pour discuter des rsultats de lvaluation et demander lavis des parties prenantes. Une bonne partie des comptes rendus de lvaluation se fait de faon interpersonnelle et informelle. Une communication sur lvaluation peut se faire lors de conversations de couloir, en buvant un th ou un caf, durant des repas la fortune du pot (o chaque personne amne son propre repas), avant ou aprs des runions, au tlphone et par des rseaux informels. La radio et la tlvision peuvent tre utiles quand les rsultats de lvaluation doivent tre diffuss au-del des parties prenantes primaires. Dans des socits analphabtes, la radio est un moyen trs efficace de diffuser des informations. Les stations de radio communautaires (qui ont un mandat pour le dveloppement) peuvent fournir une production bas prix et ont souvent des capacits de traduction dans les langues locales.

Directives pour les prsentations orales


Les prsentations orales peuvent tre utilises seules ou avec un rapport

Communiquer et rendre compte dune valuation

27

Directives et outils pour communiquer et rendre compte dune valuation

crit. Quand vous prparez la prsentation, pensez au type dinformations qui intressera le plus le public et la manire dveiller son attention. Parlez clairement, vitez de prsenter des donnes dtailles. Un conseil pratique bien connu pour les prsentations orales est annoncez au public ce que vous allez dire, dites le, puis rsumez ce que vous avez dit. Cherchez des moyens de transformer les prsentations orales en apprentissage. Par exemple, quand vous prsentez les donnes, voyez avec le public toute lanalyse du dbut la fin et concluez par les rsultats et les recommandations. Expliquez pourquoi une recommandation a t prfre dautres options et encouragez le public donner son avis et participer (Casley et Kumar, 1987). Quelques ides pour impliquer le public durant une prsentation orale : Au dbut, demander ce quils attendent et invitez-les poser des questions

1 Poser des questions ouvertes aux membres du public, crites sur des tableaux de confrence, et notez leurs rponses 1 Ajuster la prsentation selon les ractions du public et son langage corporel 1 Prvoir du temps pour des questions, rponses et discussions en petits groupes 1 Demander lavis des membres du public sur la prsentation et demandez de quelles autres informations ils ont besoin (Torres et al., 2005). Des documents distribuer ou des prsentations PowerPoint donnent un appui visuel et aident le public comprendre. Ne distribuez pas les rapports complets dvaluation au dbut dune prsentation orale parce que le public va passer son temps lire le rapport au lieur dcouter la prsentation (Torres et al., 2005). Mais de brefs documents daccompagnement, distribus avant la prsentation, peuvent la rendre plus efficace. Le cadre ci-dessous donne des conseils pour prparer et prsenter des diapositives PowerPoint.

Communiquer et rendre compte dune valuation

28

Directives et outils pour communiquer et rendre compte dune valuation

Conseils pour les prsentations PowerPoint


1Utiliser le mme style et le mme format pour toutes les diapositives 1Utiliser un thme de mise en page qui aide comprendre les informations sans dtourner lattention de celles-ci 1Prsenter les informations sur la diapositive en utilisant quelques mots, pas des phrases compltes (sauf pour des citations) 1Utiliser de grands caractres, 20 points ou plus 1Prvoir 1 minute par diapositive 1Time the presentation at one slide per minute 1Prparer tout le matriel lavance et le tester pour vrifier que tout fonctionne bien avant le dbut de la prsentation

Communiquer et rendre compte dune valuation

29

Directives et outils pour communiquer et rendre compte dune valuation

Comptes rendus cratifs


Pensez utiliser des formes de communication cratives, mais moins traditionnelles, pour rendre compte des rsultats de lvaluation. Ces formats peuvent tre importants quand il sagit de donner des informations des parties prenantes analphabtes car ils montrent votre respect pour les traditions locales de communication, comme lhistoire orale. On trouvera ci dessous des informations sur lutilisation de prsentations vido, dactivits de rflexion critique, de pices de thtre ou jeux de rles, de prsentations par affiche, dateliers dcriture, de revues aprs action et de sessions de travail.
les prsentations vido combinent le poids des images visuelles, du

mouvement et du son. Les vidos peuvent tre tournes en format numrique, dites sur ordinateur et diffuses sous forme de CD-Rom ou de DVD. Bien quil soit intressant davoir un prsentateur, des vidos peuvent tre distribues et visionnes par un grand nombre de publics. Les vidos sont particulirement utiles pour : 1 prsenter des rsultats qualitatifs dvaluation, comme des interviews 1 documenter les processus de lvaluation 1 prsenter les rsultats de lvaluation de nouveaux programmes 1 partager les rsultats dvaluation avec des groupes qui ne peuvent pas lire les rapports dvaluation (Torres et al., 2005). Vous trouverez dans le cadre ci-dessous des conseils pour produire et prsenter des vidos.

Conseils pour la production et la prsentation de vidos


Dterminer quels sont lobjectif de la vido et les critres de choix pour les vnements du programme qui seront films Demander lautorisation des participants du programme avant de filmer Sassurer que les vidos qui seront prsentes seules contiennent suffisamment dinformations de contexte sur le programme et lvaluation Voir quel est le public vis pour dterminer la longueur de la vido. Des vidos assez courtes (20-30 minutes) auront plus de chance dtre incluses dans lordre du jour dune runion

les activits de rflexion critique permettent de valider les informations issues de lvaluation, danalyser les rsultats et dutiliser ces connaissances pour prendre des dcisions en connaissance de cause. Les activits de rflexion critique peuvent avoir lieu tout au long de lvaluation, par exemple durant des runions hebdomadaires de revue, ou la fin, pendant un atelier sur les leons apprises.

Une succession de questions ouvertes est utilise dans la rflexion critique

Communiquer et rendre compte dune valuation

30

Directives et outils pour communiquer et rendre compte dune valuation

pour encourager les gens discuter, rflchir et analyser les informations. Un dialogue authentique demande aussi que lanimateur ou le groupe tablissent un environnement de confiance, de respect et de collaboration entre les valuateurs et les parties prenantes. La rflexion critique est plus efficace quand les gens : 1 posent des questions pertinentes et font preuve de curiosit, 1 admettent ce quils ne savent pas, 1 dcouvrent et examinent les convictions, les suppositions et les opinions par rapport aux faits et aux preuves, 1 scoutent attentivement les uns les autres, 1 changent dopinion compte tenu des faits nouveaux dcouverts, 1 examinent les russites et les problmes avec attention et de faon approfondie
les pices de thtre et les jeux de rles sont dexcellentes manires de

montrer les rsultats de lvaluation et dillustrer des applications potentielles des recommandations. Torres et al. (2005) dcrivent trois formes de thtre o les rsultats de lvaluation sont prsents et utiliss pour faire natre un dialogue. Il sagit : 1. des sketches traditionnels qui sont labors partir des donnes de lvaluation (en particulier des entretiens ou des groupes focaux). Ils peuvent aussi dcrire les rsultats de lvaluation. Les acteurs jouent un sketch puis sortent. Le sketch est suivi par une discussion entre les membres du public, dirige par un animateur. 2. Des sketches interactifs qui sont des petites scnes provocantes qui poussent les membres du public penser aux problmes et aux rsultats de lvaluation et en parler. la suite dun sketch interactif, le public discute de ses ractions avec les acteurs qui restent dans leur rle. L encore, la discussion est guide par un animateur qui fournit aussi des donnes tires de lvaluation. Aprs les discussions diriges, les acteurs rptent le sketch, en le changeant selon les rsultats de la discussion du public. 3. Des ateliers de thtre en forum qui utilisent le jeu de rles. Un animateur prsente les rsultats de lvaluation. Les participants peuvent tre soient des acteurs, soient des membres du public. Les participants crent de petites scnes sur la base des rsultats de lvaluation et de leur propre exprience. Les ateliers sont dynamiques dans ce sens que les membres du public peuvent devenir acteurs et les acteurs devenir public et aussi parce que les acteurs peuvent changer de stratgie au milieu dune scne. Un animateur pose ensuite des questions et dirige les discussions propos de chaque mini-scne. Le thtre est suivi dune succession de questions ouvertes, comme : Quest-ce qui sest pass ici ? Pourquoi est-ce que cela sest pass ? Comment cela se passe-t il dans notre situation ? Quest-ce que nous pouvons y faire ? Cest une manire trs efficace de communiquer les rsultats dune valuation, surtout sur des sujets sensibles pour le groupe. Par exemple, ce type de jeux de rles a t

Communiquer et rendre compte dune valuation

31

Directives et outils pour communiquer et rendre compte dune valuation

utilis en Ouganda et ailleurs en Afrique pour communiquer des rsultats sur lopprobre associe au VIH et au sida.
les prsentations par affiche donnent des informations rapides, visuelles et faciles lire des publics qui ne connaissent pas, ou peu, le programme ou lorganisation. La prsentation par affiche peut tre complte par une prsentation orale. Les prsentations comprennent habituellement des photos, des diagrammes, des graphiques, des tableaux, des chartes, des dessins et des textes affichs sur des panneaux. Les prsentations par affiche sont souvent utilises lors de grandes confrences comprenant plusieurs sessions. Elles y prsentent des informations condenses sur lvaluation. Les membres du public peuvent regarder la prsentation ou sarrter pour une brve discussion. Les valuateurs peuvent tre prsents aux prsentations par affiche pour communiquer les principales ides et les principaux problmes et rpondre aux questions, mais la prsentation par affiche peut aussi tre un lment indpendant (Torres et al., 2005).

Conseils pour les prsentations par affiche


Les gens doivent pouvoir lire laffiche de loin Les affiches doivent transmettre les ides principales de faon claire et concise, par exemple en utilisant les titres du rapport avec des listes puces Les affiches doivent contenir des lments visuels et des illustrations ainsi que des couleurs pour attirer lattention Penser placer des photos des participants ct de citations tires dentretiens Quand on prpare des affiches avec un budget limit, utiliser des feuilles de tableau de confrence avec des lignes et de trs gros marqueurs pour crire clairement Source : Torres et al. 2005.

un atelier dcriture est une technique novatrice pour impliquer des parties

prenantes peu alphabtises du projet dans la rdaction de rapports. Cela aide les participants au projet tre des crateurs actifs dinformations et non simplement des fournisseurs passifs. Les ateliers dcriture sont des ateliers de deux ou trois jours o des participants au programme, des employs de lONG et des artistes travaillent ensemble. Les employs de lONG interrogent les participants pour obtenir des histoires qui clarifient des rsultats dvaluation, des meilleures pratiques ou des leons apprises. Celles-ci sont retranscrites et corriges. Les artistes prparent des illustrations selon les instructions des participants. Les rapports sont ensuite publis et les preuves sont revues par les participants et les facilitateurs de lONG pour vrifier le contenu et la langue et voir si elles sont appropries (cf. la zone de texte plus bas).
les revues aprs action sont une srie dactivits de rflexion qui peuvent

tre utilises durant une valuation pour traiter les rsultats initiaux de

Communiquer et rendre compte dune valuation

32

Directives et outils pour communiquer et rendre compte dune valuation

lquipe dvaluation ou pour voir les progrs ou les obstacles dans le travail dvaluation. Comme pour dautres activits de rflexion critique, les revues aprs action doivent tre menes dans un environnement sr o les gens peuvent exprimer ouvertement leurs ides. Un animateur sera l pour poser des questions ouvertes et diriger la discussion du groupe. Les revues aprs action sont menes quand les souvenirs sont encore frais. Lanimateur pose une srie de questions, comme celles ci-dessous, et note les principales remarques du groupe : 1 Quest-ce qui tait suppos se passer ? 1 Quest-ce qui sest pass en ralit ? 1 Pourquoi y a-t-il eu des diffrences ? 1 Quavons-nous appris ? 1 Quelles ont t les russites ? Les insuffisances ? 1 Que devrions-nous faire pour maintenir les russites et amliorer les insuffisances ?
les sessions de travail avec les parties prenantes de lvaluation sont la marque dune valuation collaborative et participative. Elles peuvent tre faites nimporte quel moment de lvaluation (Torres et al., 2005). Pour avoir des sessions de travail efficaces, il faut appliquer les principes dapprentissage des adultes, comme ceux qui sont utiliss pour les ateliers.

Communiquer et rendre compte dune valuation

33

Directives et outils pour communiquer et rendre compte dune valuation

Directives pour la planification et la facilitation dune session de travail efficace


Dfinir clairement lobjectif de la session Prparer un ordre du jour Choisir des procdures adaptes, comme un remue-mninges ou des activits en petits groupes, et prparer tous les matriels ncessaires, comme les tableaux de confrence ou les tableaux blancs et les marqueurs pour noter les ides, les dossiers distribuer et les documents. Installer la salle de runion de manire encourager les changes et les discussions Choisir pour la runion un moment qui arrange les participants Partager lordre du jour bien lavance et le revoir au dbut de la runion Utiliser de petits jeux pour aider les participants faire connaissance Inviter les participants poser des rgles ou des normes de base pour la faon dont tout le monde travaillera ensemble Prciser les rles de chacun : qui fait lanimation, qui note les ides, etc. Utiliser des techniques danimation, ou recruter un animateur comptent, pour paraphraser les commentaires, synthtiser et intgrer les ides, encourager lmergence de points de vue diffrents, grer le temps, inviter le groupe revenir au sujet, le cas chant, et arriver un consensus Trouver lquilibre entre le dialogue et la prise de dcisions Planifier et exprimer les prochaines choses faire la fin, demander des avis et utiliser ces informations pour amliorer la prochaine session de travail. Source : Torres et al. 2005.

Que leur tribu croisse


Cette illustration est tire dun atelier dcriture que CRS a tenu en Inde pour une histoire intitule Que leur tribu croisse. Des femmes appartenant des groupes dautopromotion (qui recevaient laide de CRS) ont prpar des histoires sur leurs rponses une inondation au Gujarat en 2004. Lhistoire dcrit les rsultats de lvaluation qui montrent que les villages recevant laide des groupes dautopromotion (SHG) sen sont mieux sortis lors de la catastrophe parce que les gens ont reu laide ncessaire temps et nont pas t dplacs.

Communiquer et rendre compte dune valuation

34

Directives et outils pour communiquer et rendre compte dune valuation

Utiliser des formats lectroniques

Communications sur des sites Internet


Les rapports crits et les documents de lvaluation peuvent tre diffuss un public plus large sils sont mis sur des sites Internet adquats ou distribus par lintermdiaire dune des listes de diffusion qui sont souvent lie des sites Internet. Ces sites peuvent tre hbergs par un bailleur de fonds, une communaut particulire de dveloppement (assistance, dification de la paix, sant publique, communications, etc.), un consortium dONG, un groupe de travail des Nations Unies ou dun gouvernement et/ou un centre de ressources. Parmi les choses quon peut mettre sur Internet, on peut citer les rapports, les vidos, les prsentations PowerPoint, les bulletins, les calendriers de runions et les communiqus de presse. Dans la communaut de ldification de la paix, un certain nombre de sites Internet ont commenc publier des valuations de projets ddification de la paix (Lederach et al., 2007).

Communications lectroniques en temps rel


Pour communiquer et rendre compte dune valuation, on peut communiquer avec des parties prenantes situes dans des lieux diffrents grce de systmes de communication par Internet et des logiciels de tlconfrence. En ligne, on peut tenir des runions en face face, des runions en petits groupes et des runions virtuelles en direct par tlconfrence. Cela permet des parties prenantes, qui peuvent se trouver lautre bout de la plante, de travailler facilement ensemble (Torres et al., 2005). Voici quelques options : 1 un chat room est un endroit sur Internet o deux personnes ou plus peuvent avoir en temps rel une conversation par clavier interpos. Cette mthode est idale pour des conversations de routine sur la collecte des donnes ou des procdures dvaluation. 1 Des tlconfrences peuvent tre organises par des fournisseurs de services de communication. On donne tous les participants un mme numro appeler. On utilise gnralement des tlphones avec haut-parleurs pour pouvoir faire participer plus de monde. Les tlconfrences sont particulirement utiles pour discuter et pour demander des avis sur des documents de lvaluation qui ont t distribus aux participants et tudis par eux avant lappel. 1 Des vidoconfrences sont des runions entre des personnes se trouvant dans des lieux diffrents, en utilisant un systme compos de moniteurs, de camras, dquipement informatique et autres appareils. On peut utiliser les vidoconfrences la place de runions en face face avec les parties prenantes de lvaluation. On notera quune technologie fiable de vidoconference peut coter trs cher utiliser et quon a besoin dexpertise technique ou dinformaticiens professionnels pour faciliter une bonne vidoconfrence.

Communiquer et rendre compte dune valuation

35

Directives et outils pour communiquer et rendre compte dune valuation

1 les confrences par internet sont des runions entre des personnes se trouvant dans des lieux diffrents par lintermdiaire dune connexion Internet. Elles leur permettent de visionner le mme document ou la mme prsentation en mme temps sur des crans dordinateur et davoir une communication audio. Les spcifications des logiciels de confrences par Internet diffrent et peuvent comprendre un chat room ou permettre une communication vido ou audio. Les confrences par Internet peuvent tre utilises pour planifier, prsenter des informations, demander des avis et des ractions et corriger des plans ou rapports dvaluation. Les confrences par Internet peuvent tre organises par des compagnies spcialises dans ce service ou par Internet. 1 les podcasts sont une srie de dossiers digitaux qui sont distribus par Internet pour pouvoir tre lus sur des lecteurs portables (par ex. des iPods) ou des ordinateurs. Les podcasts permettent aux valuateurs de communiquer avec les parties prenantes et de rendre compte dune valuation tout moment. Par exemple, si une partie prenante ne peut pas assister une runion finale de bilan, un podcast de la runion lui permet de tlcharger le podcast de lvnement. Bien quil ne soit encore que trs peu utilis, ce format lectronique promet beaucoup pour lavenir.

Sur le terrain : Partager des rsultats en ligne


Save the Children utilise un format en ligne pour partager les rsultats des programmes partout en Afrique, dans le cadre dune nouvelle initiative de conception, suivi et valuation qui a t lance entre les bureaux de pays. Ce format en ligne encourage lapprentissage entre les quipes de programme situes dans des pays diffrents.

Communiquer et rendre compte dune valuation

36

Annexe I

Rfrences et suggestions de lectures


American Evaluation Association (AEA). 2004. Guiding Principles for Evaluators. Fairhaven, Massachusetts: AEA. Aubel, J., 1999. Participatory Program Evaluation Manual : Involving Program Stakeholders in the Evaluation Process, 2nd ed. Child Survival Technical Support Project et Catholic Relief Services (CRS). CRS, Baltimore. Casley, D. J., et K. Kumar, 1987. Project Monitoring and Evaluation in Agriculture. Baltimore : The Johns Hopkins University Press. Centers for Disease Control and Prevention (CDC), 2007. Impact and Value : Telling Your Programs Story. Atlanta : CDC, National Center for Chronic Disease Prevention and Health Promotion, Division of Oral Health. Davidson, E. Jane, 2007. Editorial : Unlearning Some of Our Social Scientist Habits. Journal of MultiDisciplinary Evaluation 4 (8) : iii vi, octobre. De Ruiter, F., et J. Aker, 2008. Histoires de vie quotidienne : Directives et outils pour crire de bons rapports. Srie de modules sur le S&E, Croix Rouge amricaine/CRS. Croix Rouge amricaine et CRS, Washington, DC, et Baltimore, Maryland. Feuerstein. M., 1986. Partners in Evaluation : Evaluating Development and Community Programmes with Participants. Royaume Uni : Teaching Aids at Low Cost. Guijt, I., et J. Woodhill, 2002. Managing for Impact in Rural Development : A Guide for Project M&E. Rome : International Fund for Agricultural Development (IFAD). Gullickson, A., et D. Stufflebeam, December 2001. Feedback Workshop Checklist. Evaluation Checklists Project. Disponible sur : www.wmich.edu/evalctr/checklists. Hagens, C., 2008. Shortcuts : Suivi valuation et thique. Srie de modules sur le S&E, Croix Rouge amricaine/CRS. Croix Rouge amricaine et CRS, Washington, DC, et Baltimore, Maryland. Kusek, J. A., et R. C. Rist, 2004. Ten Steps to a Result-Based Monitoring and Evaluation System : A Handbook for Development Practitioners. Washington, DC : Banque Mondiale. Lawrenz, F., A. Gullickson, et S. Toal, 2007. Dissemination : Handmaiden to Evaluation Use. American Journal of Evaluation 28 (3) : 27589. Lederach, J. P., R. Neufeldt, et H. Culbertson. 2007. Reflective Peacebuilding : A Planning, Monitoring and Learning Toolkit. Notre Dame : The Joan B. Kroc Institute for International Peace Studies. Long, T. et al., 2008. Histoires de russites et dapprentissage : Directives et outils pour crire de bons rapports sur limpact des projets Srie de modules sur le S&E, Croix Rouge amricaine/CRS. Croix Rouge amricaine

Communiquer et rendre compte dune valuation

37

Annexe I Rfrences et suggestions de lectures

et CRS, Washington, DC, et Baltimore, Maryland. Management Systems International (MSI), 2006. Constructing an Evaluation Report. MSI, sous contrat de lAgence des tats-Unis pour le dveloppement international (USAID), Washington, DC. Maunder, N, 2005. C-SAFE Program Review, Year Three, Final Report. CARE, Catholic Relief Services, et World Vision, Johannesburg, Afrique du Sud, octobre. McMillan D. E., et A. Willard. 2008. Prparer une valuation : Directives et outils pour la planification avant lvaluation. Srie de modules sur le S&E, Croix Rouge amricaine/CRS. Croix Rouge amricaine et CRS, Washington, DC, et Baltimore, Maryland. Patton, M. Q., 1997. Utilization-Focused Evaluation, 3rd ed. Thousand Oaks, Californie : Sage Publications. Rochow, G., 2005. The Key Role of Communication Theory in Reporting Evaluation Findings in MultiInstitutional International Evaluations. 2005 , confrence conjointe dvaluation, Canadian Evaluation Society / AEA, Toronto, Ontario, Canada. Schenk, K., et J. Williamson, 2005. Ethical Approaches to Gathering Information from Children and Adolescents in International Settings : Guidelines and Resources. Washington, DC : Population Council. Stetson, V., S. Hahn, D. Leege, D. Reynolds, et G. Sharrock. 2007. ProPack II : Le dossier projet de CRS. Guide pour la gestion et la mise en uvre de projets pour les gestionnaires de projets et de programmes de CRS. Catholic Relief Services, Baltimore. The Joint Committee on Standards for Educational Evaluation, avec J. R. Sanders, prsident, 1994, 2004. The Program Evaluation Standards, 2nd ed. Thousand Oaks, Californie : Sage Publications. Torres, R.T., H. Preskill, et M. E. Pionte,. 2005. Evaluation Strategies for Communicating and Reporting : Enhancing Learning in Organizations. Thousand Oaks, CA : Sage Publications. Tufte, E. R., 1989. The Visual Display of Quantitative Information. Cheshire, Connecticut : Graphics Press. Visser, P. 2004. Conflict as the Beginning of Peace. Jakarta : Catholic Relief Services. Willard, A. 2008. Grer et mettre en uvre une valuation Srie de modules sur le S&E, Croix Rouge amricaine/CRS. Croix Rouge amricaine et CRS, Washington, DC, et Baltimore, Maryland. Wilson, P., et D. Reilly, 2007. Report: CARE, CRS, SCF and WV/Indonesia : Joint Evaluation of their Responses to the Yogyakarta Earthquake. CARE, Catholic Relief Services, Save the Children Federation, et World Vision, Jakarta, juillet.

Communiquer et rendre compte dune valuation

38

Annex II

Evaluation Report Checklist


CHECK-LIST DE RAPPORT DEVALUATION Gary Miron
Septembre 2004

Cet check-list de rapport dvaluation est prvue pour deux applications, toutes deux en lien avec la gestion de lvaluation : cest (1) un outil pour guider une discussion entre les valuateurs et leurs clients sur le contenu dsir pour les rapports dvaluation et (2) un outil pour fournir un feedback formateur aux rdacteurs des rapports. Les valuateurs peuvent noter leur propre progrs durant la phase de rdaction. Ils peuvent aussi utiliser la check-list pour dterminer quels sont les points forts et les domaines auxquels il faudra remdier dans leur(s) rapport(s) dvaluation. Quand deux personnes, ou plus, travaillent sur le mme rapport, la check-list peut servir doutil pour dlguer, coordonner et suivre la progression des contributeurs. Cette check-list nest pas prvue pour tre utilise comme outil de mtavaluation. Les rapports dvaluation varient beaucoup pour ce qui est de leur objectif, de leur budget, des attentes et des besoins du client. Si on utilisait cette check-list pour valuer des rapports rels ou faire des comparaisons entre des rapports, on devrait valuer ou pondrer les points de vrification dans chaque section et pondrer limportance relative de chaque section. Cette check-list se base, et base sa rflexion, sur The Program Evaluation Standards (Joint Committee on Standards for Educational Evaluation, 1994). Instructions: Notez chaque lment du rapport en utilisant les rubriques suivantes. Noircissez les cercles ou cochez la cel lule qui correspond votre note pour chaque point. Si un lment ou un point de vrification nest pas applicable au rap port, cochez la cellulle NA droite. On peut ajouter des points de vrification, selon ce qui est dcid par les personnes utilisant la check-list.

1= non abord, 2= abord en partie, 3= tout fait abord, NA= non applicable

1. Page de titre
A. Le titre est suffisamment clair et concis pour faciliter lindexation B. Le nom de lauteur ou des auteurs et leurs affiliations sont prciss C. La date de prparation est note D. Le titre prcise ce qui a t valu, y compris la population cible, le cas chant E. Le nom du client ou du (des) financeur(s) est mentionn F. Le texte et les illustrations de la page de titre sont bien arrangs, de faon claire G. Commentaires :

1
1 1 1 1 1 1 1

2
2 2 2 2 2 2 2

3
3 3 3 3 3 3 3

NA

Communiquer et rendre compte dune valuation

39

Annexe III Check-list pour un rapport dvaluation

1. Rsum excutif
A. Description du programme/projet B. Questions dvaluation et objectifs de lvaluation C. Brve description des mthodes et de la stratgie analytique (le cas chant) D. Rsum des principaux rsultats E. Implications des rsultats F. Recommandations, le cas chant G. Commentaires :

1
1 1 1 1 1 1 1

2
2 2 2 2 2 2 2

3
3 3 3 3 3 3 3

NA

tlchargez ce document en ligne. Evaluation Report Checklist by Gary Miron (Excel) http://crsprogramquality.org/pubs/ME/Communication_Verification_list_French.pdf

Communiquer et rendre compte dune valuation

40

Annexe III

Modle de rsum excutif


Executive Summary
1. Introduction
Following the earthquake in Yogyakarta on May 27, 2006, CARE, Catholic Relief Services (CRS), Save the Children (SC) and World Vision Indonesia (WVI) responded separately to the disaster. Although the agencies worked independently of each other, it was felt that a joint evaluation (JE) of the response would demonstrate greater accountability and the results would be taken more seriously. The objectives of the JE were to assess individual agencies on:
The impacts of their responses and identify promising practices and indicators on impact measurement. The appropriateness of agency responses. Whether the responses had helped the recovery of people and communities. The level of agency accountability to local people. Organisational preparedness to respond to emergencies. In addition, learning on joint evaluations was assessed.

2. The Context
The Yogyakarta earthquake killed an estimate 5,700 people and injured 27,000. Over 300,000 houses were destroyed or severely damaged and a further 200,000 suffered minor damage. 1.6 million people were left homeless. An additional 1.1million people were affected1.

Recovery is now well underway in the affected areas, as those affected have been provided with some form of shelter assistance, health and education services are operating, and children are back in school and say they feel less traumatised. However, many gaps still remain, particularly due to the limited recovery of economic livelihoods.

3. The Response by the four agencies

At the time of the earthquake, three of the agencies had teams on the ground responding or preparing to respond to a potential eruption of the Mount Merapi Volcano. They began assessments and redeployed NFI kits from the Mount Merapi crisis to earthquake-affected areas. The fourth agency began their response on May 29th 2006. Many staff employed in Yogyakarta had worked in their agencys emergency response program in Aceh Province. They were able to apply their learning from Aceh to the more recent disaster in Java
Source: UNDP: The Cluster Approach in Yogyakarta and Central Java One Year Review, 2007, p.1. vii

A Joint Evaluation of the Yogyakarta Earthquake Response July 2007

Communiquer et rendre compte dune valuation

41

Annexe III Modle de rsum excutif

and work more effectively with local government and community structures in distributing aid to affected people.

All four agencies were credited with working in remote areas that were damaged severely. The agencies carried out rapid assessments and NFI distributions of shelter, hygiene, clothing, household and clean up kits. WVI provided extensive support to reactivate health services at sub-district and village levels. CRS, SC and WVI implemented activities to protect children and reduce their trauma. SC and WVI provided support for elementary schools to restart classes in mid-July 2006 as well as support for schools to operate effectively. CARE, CRS and WVI implemented transitional or permanent housing programs, while water and sanitation activities were implemented by CARE and CRS. The largest activity by each agency was NFI distribution and collectively the agencies reached around 20% of all affected people with shelter and other NFI kits.

4. Conclusions

Conclusions are based the views expressed most frequently by aid recipients, local government officials and staff from village level up to district level.

Appropriateness: Most activities were considered appropriate and justified. The friendliness of staff was appreciated and the fact that all these agencies arrived at the start of the emergency and responded quickly. Agencies were also commended for the high quality of the goods they provided and the fact that they tended to monitor distributions, the selection of beneficiaries and the use of their assistance regularly. Concerns raised were related to the overall response and distribution process. Oversupply and undersupply occurred in some villages. In addition, officials and villagers noted that assessments were carried out in the same location by different agencies, indicating a lack of coordination. Respondents said coordination between agencies on their emergency response needs to improve. Another concern was about the way agencies work with affected people. While noting the positive impacts of assistance, informants said assistance created conflict and dependency in some village locations. Concerns over distribution, and the importance of it being fair and not creating conflict were raised in seven out of the nine villages visited.

Impact2: Agency activities did contribute to positive impacts. As there were many agencies and actors responding to the emergency, impacts cannot be attributed to the specific agencies who participated in this evaluation. The impacts mentioned most often by recipients and village leaders were:
NFI support helped meet the basic survival needs of affected people. CRS, SC and WVI childrens activities helped to reduce childrens trauma and increase their selfesteem and confidence. SC and WVI elementary school support ensured that schools could restart in mid-July and work effectively thereafter.

2 The definition of impact used is from the Impact Measurement and Accountability in Emergencies: The Good Enough Guide, page 4. The Guide also informed the teams review of accountability. viii A Joint Evaluation of the Yogyakarta Earthquake Response July 2007

Communiquer et rendre compte dune valuation

42

Annexe III Modle de rsum excutif

Recovery: Agency activities did help affected people and communities to recover. Recovery levels reflect the support provided by all emergency responders and not just these agencies. Villagers said the contribution by the Government of Indonesia (GOI) to recovery was 50-60%, by the NGOs 25-30% and by others around 10%.

WVIs health sector support helped ensure that local people had access to basic health care services quickly. CARE and CRS water and sanitation activities helped to improve peoples access to clean water and increase their knowledge of hygiene. Agencies implementing shelter programs helped families to have a place to live that is more earthquake resistant. CARE and CRS were credited with working in ways that helped increase cooperation and solidarity at community level.

Villagers and leaders said that the elementary school system is 90% recovered. The work of SC and WVI was credited with contributing to this level of recovery. The childrens activities implemented by CRS, SC and WVI were credited with helping children to recover from trauma and respondents said trauma had decreased, though no percentage was given. Drinking water sources were said to be back to normal though sanitation and access to latrines was said to have recovered by only 50%. In most villages housing reconstruction is only between 30-50% and similar figures were given for economic recovery. Accountability to local people: The four agencies did work with local leaders and involved them in assessments, planning, monitoring and decision-making while at the same time involving the communities to varying degrees in these processes.

However, women in villages where three of the agencies worked said they wanted to be more involved and have more information on agency activities. All informants stressed the importance of regular information to all in a community, backed up by on going monitoring of the assistance programs implemented to ensure fairness and to avoid conflicts.

Monitoring and Evaluation (M&E): Of the regular M&E activities, there were some good practices which are exemplary. Of note was the child-led evaluation carried out by SC, in which children were trained to actually do a program evaluation. Other agencies had carried out internal reviews and one agency also conducted an external evaluation of their post emergency program. All agencies were able to produce solid input and output data, and some like CRS had some easy to use outcome level indicators.

Emergency preparedness: The overall speed at which the agencies responded to the disaster was significant, mainly due to the fact that three of the agencies were already mobilized on the ground in Yogyakarta to respond to a potential eruption of the Mount Merapi Volcano. Otherwise, the response time may not have been so swift. Joint evaluation: The joint evaluation had advantages, in bringing together the organizations involved and providing them opportunities to learn from one another about each others programs. Results are more holistic than a single agency evaluation. The way the process was carried out enabled these agencies to be accountable to government, affected people and others working in
A Joint Evaluation of the Yogyakarta Earthquake Response July 2007

ix

Communiquer et rendre compte dune valuation

43

Annexe III Modle de rsum excutif

the Yogyakarta response. However, such evaluations need to be done one or two months after an emergency program work ends.

Recommendations

Recommendations on activities for future sudden onset emergencies a) Continue to do the type of programme activities carried out in this response. Carry out assessments to ensure aid meets the needs of affected people and to agree with them procedures for distribution and beneficiary selection. Provide good quality items, distribute quickly and follow simple procedures. b) Better coordinate NFI programs between all actors/stakeholders to ensure equal distribution across areas and application of distribution methods that promote fairness. Monitor the assistance well by ensuring that staff participate in distributions and beneficiary selection processes. c) Carry out joint assessments so that the same information is not collected a number of times in the same location by different organizations. d) Start recovery activities earlier e.g. transitional and permanent housing plus activities to restore livelihoods.

e) Complete a study on the transitional and permanent housing designs and approaches used by these four agencies, other INGOs and the GOI in Yogyakarta to draw out learning that can be applied in Indonesia when responding to future emergencies where shelter is a huge need. Recommendations on economic recovery activities a) Provide more support in helping affected HHs and communities to restore their economic livelihoods. b) Learn from work done in other countries prone to sudden onset emergencies to identify appropriate economic livelihood activities to support in future emergencies in Indonesia. Recommendations on local accountability

a) Provide information to the wider community: men, women, beneficiaries and non-beneficiaries, on a regular basis so that people are aware of the work being conducted by the agency with them so reducing opportunities for misuse of information. b) Establish a complaints system that clearly defines how people can complain about the work being done by an agency if they need to do so. Recommendations on emergency preparedness c) From the start, involve women as well as men in planning, implementation and evaluation of programs. a) Complete country emergency preparedness and contingency plans and ensure that all staff are aware of their existence and content. This could be done through country program emergency

A Joint Evaluation of the Yogyakarta Earthquake Response July 2007

Communiquer et rendre compte dune valuation

44

Annexe III Modle de rsum excutif

b) Create a joint database on the capacity of different agencies regarding the location and type of pre-positioned NFIs. Examine the feasibility of holding joint stock in shared warehousing. c) Better prepare staff who do not have emergency experience and ensure new hires receive appropriate training and supervision. Recommendations on joint evaluations

response simulations, followed by an interagency simulation once all agencies are comfortable with their own plans.

a) Once joint assessments are complete, plan for a joint evaluation to start within one to two months of emergency program completion. Use the Good Enough Guide s to inform the JE process.

b) Commit enough experienced program staff to the entire period3 of the JE so that the team has sufficient experience for an in-depth review of a few sector specific activities.

3 The two CRS team members were highly qualified emergency staff and did an excellent job. Transfer of knowledge as one member turned over their work to the other in the middle of the evaluation proved challenging. A Joint Evaluation of the Yogyakarta Earthquake Response July 2007 xi

tlchargez ce document en ligne Joint Evaluation of The Yogyakarta Earthquake (PDF) http://crsprogramquality.org/pubs/ME/yogyakarta.pdf
Communiquer et rendre compte dune valuation

45

Annexe IV

Brochure Bridges of Hope


CAMBODIA D

ONS

easons nal bridge ns) loyment perinterprises

support oenter-

erence osure to g es of ation. ity sup-

vision of ort (e.g. ng index to times up com-

BRIDGES OF HOPE: SOCIOECONOMIC REINTEGRATION


Report of a Follow-Up Survey with Clients Living with HIV and AIDS

o.crs.org

tlchargez ce document en ligne Bridges of Hope (PDF) http://www.crs.org/publications

Communiquer et rendre compte dune valuation

46

Vous aimerez peut-être aussi