Sanitation by dandanhuanghuang

VIEWS: 37 PAGES: 42

									 Suivi, Evaluation & Reporting
Renforcer la gouvernance locale
 pour une prestation de services
AEPHA durables et en faveur des
            pauvres
        Objectifs de la session
 Sensibiliser à l’importance du suivi, de l’évaluation
  et du reporting pour améliorer les services
  d’AEPHA
 Partager une compréhension commune des
  concepts et des principes de S&E et connaître
  les approches innovantes de S&E
 Identifier les défis majeurs et les opportunités de
  S&E pour améliorer les services AEPHA dans les
  contextes nationaux et régionaux des participants
    Accès à l’assainissement de base

                                                                             Pakistan                             China
                                                                  Turkey                                                             DPR Korea
                                                                      Iran
                                                                                                 Nepal                                   Republic of
                                                  Morocco
                                                                                                                                         Korea
                               Haiti
                                                          Niger
                               Dominican                              Yemen
                                                                                                         Bangladesh
                               Republic         Burkina Faso                             India

                  Venezuela
                                                          Nigeria
                                       Cote d’Ivoire
                          Colombia
                                                                             Ethiopia                                      Viet Nam
                                                 Ghana                                                        Cambodia             Philippines
                              Peru
                                                         DRC
                                       Brazil                                                                         Malaysia


                                                                                                                         Indonesia



                                                                              Zimbabwe




La superficie du territoire montre la proportion des résidents qui n’ont pas accès
                      à un assainissement de base (toilettes)
Map Source: World Mapper,
http://www.sasi.group.shef.ac.uk/worldmapper/display.php?selected=183
Data Source: UNDP Human Development Report 2004
      Accès fiable à l’eau potable
                                                                        Romania

                                                                            Turkey                                      China
                                                                                      Pakistan                                             DPR Korea
                                                                                 Iran
                                                                           Syria
                                                        Morocco                                                                               Republic of
                                                                          Egypt                    Nepal
                                                                                                                                              Korea
                                    Haiti                       Niger
                                                                                   Yemen
                                    Dominican
                                                      Burkina Faso
                                    Republic                                                     India
                                                                                                                 Myanmar
                                                                                                                           Viet Nam
                                                                Nigeria
                                          Venezuela                               Ethiopia
                               Colombia                                                                                               Philippines
                                                                                                                     Cambodia
                                                        Ghana
                                  Peru                                                                   Sri Lanka      Malaysia
                                             Brazil
                                                                DRC
                                                                                                                            Indonesia


                                                                               Zimbabwe




   La superficie du territoire montre la proportion des résidents qui n’ont pas un
                              accès fiable à l’eau potable.
Map Source: World Mapper, http://www.sasi.group.shef.ac.uk/worldmapper/display.php?selected=186
Data Source: UNDP Human Development Report 2004
Des indications montrent que ces données mondiales
        surestiment le taux réel de couverture

Qu’est-ce que cela signifie pour la
  gouvernance des services d’AEPHA:
 Quelle que soit la manière dont on considère la
  situation, il y a beaucoup à faire !
 Des décennies de travaux pour approvisionner
  en eau et équiper en toilettes n’ont pas conduit à
  des solutions durables en faveur des pauvres.
 Le renforcement de la gouvernance locale des
  services AEPHA est essentiel pour atteindre les
  pauvres et parvenir à des solutions durables.
       Programme de la session
   Introduction au suivi, à l’évaluation, au reporting et à
    l’évaluation d’impact
   Principes de base pour le suivi, l’évaluation et la
    production d'information comptable
   Tendances et innovations en S&E
   Renforcement de la gouvernance locale AEPHA à travers
    un suivi, une évaluation et une production d'information
    comptable améliorée
   Planification d’action sà partir des résultats de S&E
   Méthodes innovatrices en S&E
   Défis et opportunités
                 Le suivi
Une fonction en cours qui vise à donner aux
responsables de la prestation de services
d’AEPHA, et aux autres principaux acteurs (y
compris les usagers), des indications précoces
sur l’état d’avancement , les résultats, les
objectifs et les cibles de l’intervention dans le
secteur AEPHA.
         L’évaluation
Une famille de méthodes de
recherche visant à “examiner
systématiquement l’efficacité des
interventions sociales…dans des
conditions qui améliorent les
conditions sociales” (Rossi, Freeman
et Lipsey, 1999:20)
        Types d’évaluation
 Evaluation (Bilan) d’impact: la politique
 (programme, intervention) fonctionne-t-
 elle? Quelle est la dimension de l’effet
 probable?

 L’évaluation (formatrice) du processus:
 comment, pourquoi, et sous quelles
 conditions fonctionne la politique, le
 programme ou l’intervention?
Indicateurs et points de référence
“Ce qui nous aide à comprendre où nous sommes, où nous
    allons, et la distance qui nous sépare de l’objectif”

Indicateurs:
 Un indice, une indication de quelque chose de changeant
 Une présentation de mesures, ou de portions d’informations
  qui résument les caractéristiques des systèmes ou qui
  mettent l’accent sur ce qui se passe dans un système.

Point de référence:
 Processus d’identification de la “meilleure pratique” en
  relation à la fois avec les produits (tels que les services
  d’AEPHA) et les processus (tels que la gouvernance) grâce
  auxquels ces produits sont crées et livrés.
                   Métrique
…un système de paramètres, ou voies, d’évaluation
 quantitative et périodique d’un processus à
 mesurer, y compris les procédures pour exécuter
 une telle mesure et pour l’interprétation de
 l’évaluation à la lumière des évaluations
 précédentes ou comparables.
…souvent spécialisé dans des domaines
 spécifiques, valables uniquement à l’intérieur d’un
 certain domaine et ne peut être directement
 référencé et interprété en dehors de lui.
              L’impact
“Effets positifs et négatifs, primaires et
secondaires à long terme, produits par une
intervention de développement,
directement ou indirectement, voulus ou
non voulus”
      (DAC Evaluation Glossary June 2002)
Contribution • Production • Résultat •
               Impact
contribution           Production               Résultat         Impact




                          Les produits, les                    Les effets positifs
 Les ressources                                   Les effets       et négatifs,
                        biens d’équipement
   financières,                                 probables ou       primaires et
                         et les services qui
    humaines,                                    réalisés de   secondaires à long
                            venant d’une
    matérielles                                                terme produits par
                            intervention;        court terme
  utilisées pour                                               une intervention de
                       peuvent comprendre         et de long
  l’intervention                                                développement ,
                         des changements          terme des
         de                                                      directement ou
                           qui viennent de      productions
 développement                                                   indirectement ,
                   .   l’intervention qui est
                                                     d’une        voulus ou non
                          appropriée pour
                            l’atteinte des      intervention          voulus
                               résultats
        Évaluation d’impact
Une évaluation des effets (positifs ou négatifs, voulus ou
non) sur les ménages individuels, les institutions, et
l’environnement suite à une activité de développement
donnée telle qu’un programme ou un projet (Baker 2000;
Banque mondiale, 2005).


L’évaluation d’impact se réfère à l’impact final (long terme)
de même que les effets (moyen terme) au niveau du
résultat.
                  …et le reporting
…la mise à disposition de synthèses de résultats de suivi pour des
objectifs d’évaluation
…une méthode de réflexion et de dissémination d’informations sur
l’évolution et l’effectivité des cibles et des objectifs politiques/ de
projet recueillis à partir des activités de suivi et d’évaluation
…implique la mise à disposition systématique et à temps
d’informations essentielles au suivi de l’évolution des projets ou
programmes
…offre une base d’informations aux acteurs pour la gestion de l’état
d’avancement
…donne aux acteurs les informations de gestion nécessaires pour
appuyer la prise de décision au niveau du programme ou de la
politique et pour planifier l’action (corrective)
         Les objectifs S, E & R

Objectifs des gouvernements partenaires:
 Mesurer les résultats des politiques
 Responsabiliser le gouvernement envers les
 usagers finaux, les contribuables et les
 gouvernements donateurs quant aux résultats
 et à la qualité des processus
 Donner et reporter des informations
 Comprendre comment les initiatives affectent la
 vie des différents groupes d’usagers finaux
                Les objectifs S, E & R

Buts des donateurs
 Décaissements financiers
   Mesure des résultats
   Imputabilité envers les contribuables et les pays partenaires de
    l’UE pour les résultats et les processus

Buts du projet ou du programme:
 Donner aux différents groupes d’usagers la possibilité de
  s’exprimer sur la manière dont les services (ou leur absence)
  affectent leurs vies
 Tirer partie des expériences pour améliorer la planification/
  participation
 Réduire la corruption/ malhonnêté
 Améliorer les résultats et la durabilité.
Pourquoi “faisons” nous le suivi,
   l’évaluation et le reporting
   Apprendre à partir des expéreinces ce qui fonctionne et ce qui ne
    fonctionne pas et reformuler des politiques, des projets et des
    programmes plus efficaces
   Rendre compte auprès des divers usagers et donateurs
   Vérifier que nous faisons ce que nous avons prévu de faire – c’est-à-
    dire atteindre l’objectif de prestation de services d’AEPHA durables,
    équitables et en faveur des pauvres.
   S’assurer que nos efforts n’ont pas d’impacts négatifs inattendus/
    imprévus, sur les groupes vulnérables en particulier
   Évaluer l’impact de l’intervention par rapport aux objectifs des
    politiques ou programmes d’orientation.
   Effectivité de l’investissement / efficacité financière.
               Apprentissage et cycle
                  d’amélioration
  1. Identification of
 1. Identificationof
                          2. Tracking
                          2. Tracking         3. Reporting
                                              3. Reporting
objectives-- Indicators
objectives Indicators




  5. Definition of
  5. **Definition of
                                        4. Analysis
                                        4. **Analysis
       actions
       actions



Les résultats de l’analyse doivent
conduire à une action (corrective)
  S&E des services AEPHA: suivi à
    différents niveaux au Malawi
                                     • recensement national – bureau de
                                     • recensement national
     Niveau national                  •Base de données socio-économiques du Malawi
                                      (MASEDA) – bureau national des statistiques
                                              • enquêtes demandées par le
                                                     gouvernement
                                                 (échantillons représentatifs)

     Niveau intemédiaire                   Rapport régulier soumis par le
     (ville / District / Province)         responsable de l’eau (du district) via
                                           l’unité de Suivi et d’évaluation du
                                           bureau régional au niveau du ministère
                                        Suivi régulier par les communautés et les
  Niveau communautaire                  comités villageois de la santé et de l’eau,
                                        performance et qualité des services de
                                        l’eau assistés par les vulgarisateurs

Source: WaterAID 2005
   Systèmes de S&E dans votre
             pays

Quels systèmes de S&E AEPHA
sont mis en place dans votre pays
au:
• niveau national
• niveau intermédiaire
• niveau local
Systèmes et procédures de suivi
          évaluation
   Le S&E est-il budgetisé et planifié dès le début?
   Quelles agences sont impliquées dans le S&E?
   Quels sont les indicateurs pour lesquels les données ont été collectées?
   Les informations sur TOUS les groupes d’acteurs ont-elles été réunies et
    analysées?
   Les données Genre sont-elles désagrégées par sexe et par classe?
   Quelles sont les méthodes utilisées pour collecter les données?
   Qui collecte les données?
   Qui interprète les données?
   Y a-t-il des calendriers et des délais standards pour la production d’informations
    comptables?
   Qui vérifie la qualité des informations, et les rapports?
   Des mesures correctives ont-elles été planifiées et prises?
         Complément: principes de
                S,E&R
   Transparence & imputabilité
   Inclusion sociale des groupes marginalisés dans les
    procédures de prestation de services et de suivi
   Genre & équité (y compris la désagrégation des données
    par sexe et statut socio-économique)
   Méthodes participatives de S&E
   Coordination éfficace
   Durabilité des services
   Gestion de qualité du S&E pour des résultats fiables
   Vérification des conclusions avec ceux qui ont un intérêt
    dans les services améliorés.
Résumé: S,E & R pour le renforcement
 de la gouvernance locale d’AEPHA
   Les fonctions au niveau intermédiaire comprennent la prospective, la
    planification et la prestation de service d’eau et d’assainissement et leur
    suivi et appui. A ce niveau, des décisions sont prises sur la construction
    d’infrastructures, la maintenance, l’approvisionnement en pièces de
    rechange, l’appui communautaire, la construction de la base des
    connaissances et la responsabilité envers les instances au niveau
    national et communautaire.
   Des organisations actives au niveau intermédiaire comprennent les
    postes de surveillance de l’agence nationale au niveau de la province, du
    district, de la municipalité et autre administration locale, du moyen au
    petit secteur privé, les groupes des usagers, les coopératives, les
    fédérations, les ONG et les centres de ressources
   L’administration locale au niveau régional, district, et municipal a le
    mandat légal pour s’assurer que les services de l’eau de
    d’assainissement sont fournis et appuyés.
                       Que suit-on?
Le suivi doit être cadré par exemple sur les points qui fonctionnement
   souvent mal dans un secteur.

Voici quelques exemples:
     La planification des services n’impliquait pas les représentants des
       principaux groupes d’acteurs.
     La planification s’est basée sur des informations insuffisantes.
     Les groupes locaux de gestion ne sont pas mis en place ou ils n’ont
       pas les capacités
     Offre et acquisition malhonnêtes
     Mauvaise qualité de la construction
     Les bénéfices n’atteignent pas le groupe prévu
     Pas de précautions pour la durabilité (réparations, recouvrement des
       coûts…)

Il est beaucoup plus rentable d’orienter le suivi sur ces préoccupations
    majeures.
            Qui fait le suivi?
 Ceux qui ont un enjeu dans des services
 améliorés
 Ceux qui sont chargés de la prestation de
 services
Tendances mondiales – les OMD
        Huit Objectifs du millénaire pour le
          Développement (OMD)
        “Les Objectifs du millénaire pour le Développement
           et les cibles viennent de la Déclaration du
           Millénaire signée par 189 pays avec 147 chefs
           d’Etats et de gouverments en septembre 2000

        La date butoire de 2015

        Les objectifs et les cibles sont liés et doivent être
          perçus comme un tout. Ils représentent un
          partenariat entre les pays développés et les pays
          en développement “ pour créer un
          environnement – tant au niveau national que
          mondial - favorable au développement et à
          l’élimination de la pauvreté”
        (http://www.un.org/millennium/declaration/ares552e.htm)
    Tendances mondiales – les OMD
 Les objectifs, cibles et indicateurs d’AEPHA


Objectif 7: Réduire de moitié la proportion de gens sans accès durable
à l’eau potable
Cible 10: Réduire de moitié d’ici à 2015, la proportion de gens
sans accès durable à l’eau potable et à des services
d’assainissement de base.
   Indicateur 30: La proportion de la population ayant un accès
   durable aux sources d’eau améliorées en milieu rural et urbain
   Indicateur 31: La proportion de la population ayant un accès
   à des services d’assainissement amélioré en milieu rural et
   urbain
        Tendances mondiales – Programme
             de Suivi Conjoint (PSC)
   Le Programme de Suivi Conjoint
   Objectifs:
   • Rendre compte du statut de l’approvisionnement en eau et de
   l’assainissement, et
   • appuyer les pays dans leurs efforts pour suivre le secteur, pour améliorer
   la planification et la gestion.

   Les évaluations du PSC ont été faites en 1991, 1993, 1996 et 2000.
   2004: l’évaluation à mi parcours a mesuré l’évolution vers les cibles des OMD
   pour l’eau potable et l’assainissement.

   Le rapport 2006 , Atteindre la cible des OMD pour l’eau potable et
   l’assainissement : le défi de la décennie pour le milieu rural et urbain,
   analyse comment l’accès à l’eau potable et à l’assainissement évolue.

   Un accent spécifique est mis sur les tendances observées en milieux urbain et
   rural et leurs relations avec les moyens de subsistance
Source: WHO & UNICEF, http://www.wssinfo.org/en/welcome.html
Website Updated: August 2006, Data verified: 2004
             Tendances mondiales - le PSC
                                                                    Les Systèmes d’élimination des excreta
              definition of access for sanitation
Access to adequate sanitation facilities is the percentage of the
                                                                    sont considérés suffisants s’ils avec les
population using "improved" sanitation.                             excreta humains sont privés et s’ils évitent
             Improved                         Not improved
                                                                    tout contact humain
> connection to a public sewer         > public or shared latrine   L’accès aux services d’approvisionnement
> connection to a septic system        > open pit latrine           en eau est défini comme la disponibilité
> pour-flush latrine                   > bucket latrines            d’au moins 20 litres par personne par jour
> simple pit latrine                                                venant d’une source améliorée qui se situe
> ventilated improved pit latrine                                   à moins d’un kilomètre de l’usager. Une
                                                                    source améliorée est susceptible de
        definition of access for water supply
Access to safe drinking-water is the percentage of the              donner de l’eau potable, (raccordement
population using "improved" water sources.                          des ménages, forage, etc). Les
          Improved                        Not improved              informations actuelles ne nous permettent
> household connection              > unprotected well              pas d’établir une relation entre l’accès à
> public standpipe                  > unprotected spring            l’eau potable et l’accès aux sources
> borehole                          > vendor provided water
                                                                    améliorées, mais l’OMS et l’UNICEF
> protected dug well                > bottled water
                                                                    examinent cette relation.
> protected spring                  > tanker truck water
> rainwater collection



                                                                     Source: http://www.wssinfo.org/en/122_definitions.html
           Les tendances régionales –
                 Afrique & Asie
  Systèmes d’information et de suivi du secteur (SIMS),
  Afrique
  Le Dispositif de l’Eau de l’Afrique (AWF) & WSP appuient le SIMS - une
  approche systématique pour intégrer le suivi de performance à la planification
  stratégique de WSS et l’allocation de budget au niveau national à travers le
  développement de systèmes appropriés d’information et de suivi du secteur qui
  suivent l’évolution et améliorent la performance avec le temps


  Système d’information de l’assainissement (SIS), Bangladesh
  Dishari est un projet conjoint de WSP-SA, Plan International, WaterAid et
  la mission de Dhaka Ahsania pour promouvoir l’assainissement dans 80
  unions (le plus bas niveau de l’administration locale au Bangladesh). Dans
  ce projet, l’outil de suivi du SIS a été déployé pour suivre l’évolution de
  l’assainissement et aider à l’analyse spatiale en créant des cartes en
  couleur codées et des graphiques pour suivre l’évolution



Source: ACCESS News for the Water and Sanitation Community, WSP, June 2007
                            Les défis
   Planifier le S&E dès le début
   Définir les “vrais indicateurs”
   Choisir les méthodes les mieux adaptées pour la collecte des données
   Évaluer les données appropriées sur les plus pauvres et les groupes les
    plus vulnérables
   Impliquer les gens “qu’il faut” pour participer à la collecte de données
    (comme les collecteurs, les sources d’informations ou les reporters)
   Jouer la transparence – capter la vraie image, avec la vraie information
    et la partager ouvertement
   Mettre en relation les différents niveaux des processus de suivi et
    d’évaluation et les résultats pour la prise de décision
   Reporter
   Planifier l’action pour traiter les points chauds
    Autres?
            Les “méga” défis?
Les chiffres de couverture peuvent montrer qu’un territoire
administratif donné est “couvert”. Cela masque la faible
couverture de zones où les pauvres/les personnes
défavorisées vivent en majorité.
La politique du gouvernement à placer les administrations
locales en situation de compétition pour obtenir un statut, i.e.
être le premier district sans défécation à ciel ouvert.
La pression politique pour satisfaire ou améliorer la position
de la nation en relation avec les cibles extérieures
(internationales) définies; exemple: les OMD, les indicateurs
de développement humain et les indicateurs de réduction de
la pauvreté.
                 Opportunités
•  Vérifier quelles femmes et quels hommes ont
réellement accès en utilisant des critères localement
définis sur la pauvreté, plutôt que des critères
standards fixés au niveau national
• Vérifier la couverture en fonction de critères
géographiques de préférence aux limites
administratives
• Vérifier les quantités d’eau disponible en distribution
au lieu du nombre de points d’eau (dont bequcoup ne
fonctionnent pas ou insuffisamment)
              Opportunités

• Vérifier la contribution des projets (financés par
des fonds extérieurs) à la couverture par rapport à
celle des programmes appuyés par le
gouvernement

• Présenter une analyse sur ceux qui manquent
d’équipements et donner les raisons pour
lesquelles ces équipements manquent.
                      Échantillon du cadre
                         d’évaluation                                                                Cadres d’évaluation
                                                                                       engagements de performance
                                                                                      internationaux convenus
                                                                                     (OMD, EFA…)
                                                                                                     sous les relations
                                                                                                     basées sur l’aide
                         Cadre d’évaluation de performance
                                             Impact à long t
                                             erme sur la société                                   Formulation de                    PRS
                                       l




                                                                                      Evaluation
                      s
                       Résultat fina                                                               Politique sectorielle   suivi du secteuret
                      outcome
Impact                                                                                                                     Autres systèmes d’
                                                                                                                           De performance
                    résultats               Effets                                                      Planification
                     intermédiaires           intermédiaire                                             stratégique
Efficacité



                                                                   examen et suivi
(production aux
)
résultats
                     productions           Résultats concrets



                                                                                                     gestion
Efiiciency(inputs
to outputs)          activités             Mise en oeuvre                                              et
                                                                                                     budgetisation


                                            utilisation
                       apports             Rde ressources
                                                Et coûts
Méthodes et approches innovantes
 Suivi de l’action pour l’efficacité
 MPA / QIS – Notation ordinale descriptive et
  quantification des données qualitatives
 Etats des lieux des points d’eau de WaterAID
 Référentiel de processus
 Changement le plus significatif
 Etat des lieux des incidences
 Évaluation participative en milieu rural
   Mais: quelles approches et
 quelles méthodes devons-nous
           utiliser???
 Combinaison de méthodes pour obtenir
 des données qualitatives et quantitatives
 Choisir des méthodes à partir :
   Du problème faisant l’objet de suivi
   De l’objectif de politique, du programme et du
    projet affiché
 Liens avec d’autres thèmes de gouvernance
    Capacités
               Themes to achieve good governance for WASH services
 suffisantes pour                                                                             Transparence &
  S&E? résultats                                                                               efficacité des
    diffusés?                         Participatory                                           mécanismes de
                                               and strategic
                                               approach to                                      financement
                                                   local
                            Advocacy and                       Financing and
                                               governance
                            communication                      cost recovery




 Services        Monitoring
                                                                                                    Campagne
                                                                                Sector
  AEPHA             and                                                      knowledge             effective de
abordables       evaluation                                                  sharing and            promotion
 et utilisés                                                                   learning            de l’hygiène
                                                Good
par les plus
                                            governance for
  pauvres                                   WASH services
                 Support to                                                   Sanitation,
                 community                                                       school
                 institutions                                                sanitation and
                                                                                hygiene


                                                                                                   Capacités
 Genre OBC                  Transparency                                                          accrues pour
                             gender and                          Capacity
représentatif                  equity
                                                               development                         la mise en
                                              Multiple use
et qui atteint                                 services                                            oeuvre de
   les plus                                                                                         services
  pauvres?                                                                                            d’ass.
Gardez à l’esprit…


          Le suivi doit améliorer le
          programme dans le court terme.
          Le suivi sans action est la
          même chose que le reporting
          Est-il éthique de collecter des
          données à partir desquelles
          aucune action n’est entreprise?
Et souvenez-
vous…


                 …que trop
                 d’information peut
                 conduire à peu de
                 connaissance




               Ne suivre que ce qui
               est nécessaire
    Pour plus d’informations sur
             le S&E …
                           www.irc.nl

Autres favoris et contributeurs:
  WaterAID UK
http://www.wateraid.org/uk/what_we_do/policy_and_research/4922.asp
 Réseau des réseaux
http://www.worldbank.org/ieg/nonie/
 Centre International de Recherche pour le Développement
http://www.idrc.ca/en/ev-26597-201-1-DO_TOPIC.html
 Chronic Poverty Research Centre
http://www.chronicpoverty.org/CPToolbox/IA.htm
 Centre pour le développement global
http://www.cgdev.org/

								
To top