Atelier APEIE – Accra, Mai 2010

1. Évaluation d’Impact Subventions aux COGES Niger Atelier APEIE – Accra, Mai 2010

2. Sommaire • Contexte et Justification • Motivation pour l’évaluation • Interventions: Subventions aux COGES • Questions pour informer la politique éducative • Stratégies d’évaluation • Durée et Équipes • Résultats préliminaires • Difficultés et Limites de l’étude • Étapes subséquentes

3. Contexte et Justification • Programme Décennal de Développement de l’Éducation au Niger (PDDE): • Meilleure gestion du système éducatif • Plus grande participation des communautés • Décentralisation • AGEPA: • Resserrer le lien entre moyens et résultats • Création de COGES Projet Pilote de Subventions aux COGES

4. Motivation pour l'évaluation • Informer les politiques du gouvernement pour une extension éventuelle du programme au niveau national. • Évaluer l’impact de la mise à disposition de ressources aux communautés sur la qualité des services éducatifs • Renforcer la capacité du MEN en vue de mettre en place des évaluations d’impact (formations théoriques et application pratique)

5. Interventions • Subvention à 500 COGES dans 2 régions • Minimum 50,000 FCFA (approx. US$100) • Moyenne 100,000 FCFA (approx. US$200) • Soutenir les plans d’actions de COGES • 3 Groupes • Subvention seule • Subvention avec liste de dépenses interdites • Subvention avec annonce de contrôle financier probable

6. Questions pour informer la politique éducative • Quelles type d’école bénéficie de subventions? Rurales ou Urbaines? Grandes ou Petites? Etc. • Quels type d’élève en bénéficie ? Filles ou Garçons ? CI ou CM2 ? Etc. • Quelles dépenses ont un plus grand impact? Construction de salle ou achat de matériel? Etc. • Le COGES fonctionne-t-il de la ma même manière? Participation de la communauté; Composition des comités; Etc.

7. 500 COGES témoins 500 COGES subventionnés Stratégie d’évaluation • Méthodologie • Randomisation des écoles situées à moins de 100km des Inspections – 2 régions • Stratification au niveau des IEB, milieu rural/urbain et soutien par projet • 1000 écoles représentatives des régions de Tahoua et Zinder Échantillon 1000 COGES

8. Collecte de Données - Indicateurs • Questionnaires écoles – COGES • Observations dans les écoles • Tests de niveau des acquis scolaires • Contrôle Financiers dans 84 écoles • Données collectées par la DSI • Présence des élèves – enseignants • Mobilisation de fonds et dépenses par COGES • Activités réalisées dans les plans d’actions • Niveau des élèves

9. Durée et Équipes • Subventions prévues en Octobre 2007 et Octobre 2008 • Réalité : Évaluation d’une seul subvention, fin 2007/début 2008 • Questionnaires et Tests élèves prévus en Avril/Mai 2008 et Avril/Mai 2009 • Réalité : Avril/Mai 2008 • Contrôle Financier Janvier/Février 2009 • Équipe • Ministère de l’Éducation (MEN) - AGEPA • Banque Mondiale • 2 agences de collecte de données

10. Résultats Préliminaires • Subventions arrivées • Très peu d’erreur de montant ou d’école • Gestion par les COGES: • Projets réalisés sont dans le plan d’action • Diversité des projets réalisés • Constructions, « investissements », manuels scolaires • Plus de constructions de salles de classes et clôtures • Plus grande utilisation des fonds par COGES ayant reçu une formation sur la gestion financière

11. Distribution des dépenses

12. Difficultés et Limites de l’étude • Retard de mise en place des subventions • Intervention interrompue après 1 an • Comité de pilotage peu opérationnel (stabilisation des membres) • Une seul collecte des données • Importance des données administrative dans l’analyse • Validité interne: pas d’écoles a plus de 100km des IEB • Validité externe: seulement 2 régions du pays

13. Difficultés et Limites de l’étude • Comité de pilotage peu opérationnel (stabilisation des personnes); • Intervention interrompue après 1 an • Une seul collecte des données • Importance des données administrative dans l’analyse • Validité interne: pas d’écoles a plus de 100km des IEB • Validité externe: seulement 2 régions du pays

14. Étapes subséquentes • Analyse des données – en cours • Rapport d’évaluation d’impact – en cours • Note sur la Gestion des écoles par les COGES • Dissémination des rapports et résultats

15. Qu’en est-il de la suite? • BM/MEN  Suspension des subventions (il est nécessaire de clarifier les responsabilités de chacun des partenaires); • Mais l’objectif initial de développer des compétences en évaluation d’impact de l’éducation demeure  Reste à définir des nouveaux créneaux opérationnels (TBE et TBA à recentrer dans le cadre du suivi pédagogique/gestion de l’école)

16. Merci à vous!Questions & Contributions

17. Stratégie d’évaluation (2/2) • Calcul de Puissance : Subventions • Puissance: 80%, Niveau de Confiance: 95% • Rétention et Acquis Scolaire • Considérations: • Corrélation Intra-cluster • Possibilité que les subventions n’arrivent pas dans toutes les écoles • Calcul de Puissance : Interventions d’information au sein du groupe du traitement • Suffisamment pour détecter un effet « moyen » • Pas possible d’élargir l’échantillon • Contrôles financiers sont cher, donc pour justifier généralisation il faut un grand effet