Country: France
Closing date: 18 Mar 2018
Mission d’évaluation externe du projet mis en œuvre par Renaître Romania (Communes d’Orăştie, Geoagiu et Pricaz- Roumanie)
Termes de référence
1.Présentation générale des constituants l’évaluation
1.1.Présentation des parties prenantes
1.1.1. Partage
Créée en 1973, Partage est une association française de solidarité internationale, apolitique et non confessionnelle, de soutien à l’enfance. Sa mission est de contribuer à atténuer la souffrance des enfants dans le monde à travers un soutien technique et financier à des associations partenaires. Le cœur des ressources de l’association repose sur le parrainage, permettant à toute personne de contribuer à l’amélioration des conditions de vie d’enfants vivant dans les pays défavorisés.
Pour atteindre les objectifs relatifs à sa mission sociale Partage a principalement recours à l’organisation et la gestion de parrainage d’enfants, ce qui entraine certaines contraintes sur les activités réalisées. Cependant, les bénéfices des programmes sont collectifs et non discriminatoires, sans distinction entre enfants bénéficiaires parrainés et non parrainés. Partage soutient aujourd’hui 30 partenaires locaux dans 20 pays.
1.1.2. Renaître Romania
Renaître Romania est une association roumaine créée en 2000. Elle travaille dans le département d’Hunedoara, principalement sur les communes d’Orăştie, Geogiu et Pricaz. Ses domaines d’intervention sont l ’éducation, l’accompagnement juridique et social, la santé, la nutrition et le plaidoyer pour les familles et enfants défavorisés de ces zones.
1.1.3. Partenariat Partage/Renaître Romania
Partage est partenaire et soutient financièrement les actions de Renaître Romania depuis 2005.
Depuis 2016, Partage finance un projet à trois ans (2016-2018) « De la survie à l’autonomie personnelle ». En parallèle à ce projet à trois ans, Partage appuie un plan de renforcement de capacités (16.600€) sur trois ans qui comprends un appui à l’élaboration du plan stratégique, des formations d’équipe (recherche de financement, communication, suivi et évaluation) et un appui au travail au réseau.
Un rapport narratif et financier réalisé par Renaître Romania pour Partage est remis tous les six mois.
Partage est le bailleur principal de Renaître Romania, l’apport de Partage représentant 80% du budget total du partenaire pour l’année 2018.
1.2.Présentation de l’action à évaluer
1.2.1 Informations générales sur le contexte d'intervention
Renaître Romania travaille avec des familles en situation de précarité et d’isolement (principalement des familles Roms) des communes d’Orăştie, Geogiu et Pricaz. Les zones d’intervention et les familles sont sensiblement les mêmes depuis le début du projet.
Depuis la création de l’association, Renaître Romania a géré différents projets, certains n’ont pas été reconduits (formation agricoles, centre d’intégration socio-professionnel pour adolescentes, foyer d’accueil) tandis que les projets menés actuellement sont les mêmes depuis plusieurs années (soutien scolaire journalier depuis 2000, maternelle depuis 2005, conseil, aide et accompagnement des familles depuis 2003). Partage a commencé la collaboration officielle avec Renaître Romania en 2005 avec un budget de 35.000€, le montant de budget a augmenté progressivement jusqu’à atteindre son montant actuel, de 100.000€ par an en 2014. Depuis 2016, Partage travaille en plans à trois ans avec ses partenaires, 2018 est la dernière année du projet 2016-2018 « De la survie à l’autonomie personnelle » pour un budget sur trois ans de 300.000€.
1.2.2. Objectifs de l'action, stratégie d'intervention
Objectif 1 – Réduire le risque d’abandon scolaire parmi les enfants de 3 à 17 ans d’Orăştie et des environs.
Résultat 1.1 – Le passage en classe supérieure et le prolongement des études jusqu’à la fin de l’enseignement obligatoire.
Actions 1.1.
-1 La surveillance de la présence à l’école par des discussions hebdomadaires avec les professeurs et la famille.
-2 L’organisation des activités de soutien qualifié dans la réalisation des devoirs et des devoirs supplémentaires 4 fois par semaine.
-3 L’organisation des activités de soutien qualifié dans la réalisation de devoirs supplémentaires hebdomadaire.
Résultat 1.2– Réduire les absences à cause de l’hygiène et de l’alimentation précaire des enfants.
Actions 1.2.
-1 Organisation des sessions d’éducation pour santé avec thématique, méthodologie et contenu adapté aux groupes d’âge mensuellement.
-2 Organisation des sessions individuelles pour le lavage de corps hebdomadaire.
-3 Préparation du déjeuner pour les préscolaires et d’un repas chaud pour tous les enfants qui fréquentent le centre de jour.
Résultat 1.3– Réduire les absences à cause des déficiences matérielles.
Actions 1.3.
-1 Identifier les enfants avec des déficiences matérielles qui peuvent affecter la fréquentation scolaire et leurs besoins spécifiques.
Résultat 1.4– Le développement du sens de responsabilité envers sa propre personne et le respect envers les autres.
Actions 1.4.
-1 Organisation des activités de groupes récréatif-éducatifs hebdomadaires.
Objectif 2 – Soutenir le développement d’un milieu familial sain et propice à l’éducation, à l’intégration sociale et au développement psychologique, cognitif et affectif approprié aux enfants.
Résultat 2.1 - La croissance de l’importance de l’éducation parmi les familles d’enfants bénéficiaires.
Actions 2.1.
-1 Le suivi du milieu familial et des conditions de vie qui peuvent affecter la fréquentation scolaire des enfants par de visites périodiques en famille.
-2 L’organisation de réunions thématiques mensuelles avec les familles d’enfants bénéficiaires (les sujets veulent stimuler l’importance de l’éducation et aussi le rôle des parents dans l’éducation des enfants).
-3 L’organisation mensuelle des activités récréative-éducatives qui impliquent parents et enfants ensemble.
-4 Soutenir les parents qui veulent continuer les études jusqu’au niveau minimal nécessaire pour l’emploi (8 classes) afin d’accéder au programme éducationnel la seconde chance.
Résultat 2.2– La croissance de l’information à l’égard de l’importance, l’utilisation et les méthodes de planning familial, l’hygiène de grossesse et la santé physique et psychique du nouveau-né.
Actions 2.2.
-1 Organiser des sessions d’éducation pour santé/ planning familial pour adolescents et jeunes.
-2 Organiser des réunions périodiques d’information/ formation en ce qui concerne les responsabilités parentales et les besoins spécifiques des enfants afin d’accroitre la responsabilité parentale pour assurer des moyens de subsistance nécessaires pour les enfants.
-3 Organiser des réunions périodiques de formation en ce qui concerne le soin et l’alimentation des nouveau-nés pour les femmes enceintes et les mères de nouveau-nés.
-4 Accorder du soutien matériel aux femmes enceintes et les mères des nouveau-nés pour assurer une alimentation saine de mère et enfant et les vêtements pour les nouveau-nés.
Résultat 2.3– Augmenter l’estime de soi, le désir, la confiance et les chances d’intégration sociale pour les parents des enfants bénéficiaires.
Actions 2.3.
-1 Accorder du soutien matériel (accessoires, vêtements, chaussures, soutien pour être en bonne santé, chauffage) selon les besoins identifiés et selon le système pour accorder le soutien matériel.
-2 Accorder du soutien juridique aux familles d’enfants bénéficiaires pour les documents, les droits sociaux et/ou médicaux, obtenir un emploi.
-3 Organiser des sessions individuelles ou de groupe pour obtenir un emploi / participation aux échanges de travail.
Objectif 3 – Le développement d’un esprit communautaire responsable, tolérant et centré sur l’intérêt des enfants.
Résultat 3.1 - La croissance des connaissances et acceptation mutuelle entre la communauté locale générale et la communauté des bénéficiaires de l’association.
Actions 2.1.
-1 Organisation de campagnes de communication qui exposent les bénéficiaires de l’association de manière positive devant la communauté et qui rassemblent les bénéficiaires et les autres membres de la communauté locale (concours, actions de rue, activités culturelles) sujets veulent stimuler l’importance de l’éducation et aussi le rôle des parents dans l’éducation des enfants).
Pour atteindre ses objectifs, l’intervention de Renaître Romania est dirigée à 1.072 bénéficiaires qui se répartissent dans 2 centres, à Orăştie et Geoagiu.
Les deux centres reçoivent de 8h à 12h les enfants de maternelle et de 12h à 16h les bénéficiaires du soutien scolaire. Les enfants participant à la maternelle et au soutien scolaire sont bénéficiaires d’un appui en hygiène (douches) et en nutrition (repas chaud à Orăştie et froid à Geoagiu).
Les familles sont accompagnées au travers de donations, de soutien juridique, mais aussi de formations (groupes mères-bébés, planning familial, femmes enceintes).
2. Objectifs de l'évaluation
2.1.Contexte de l’évaluation
La volonté de réaliser cette évaluation nait de plusieurs origines :
· Partage a renforcé son système de suivi évaluation au travers de la réalisation d’évaluations externes plus systématiques chez tous ses partenaires.
· 2018 est la dernière année du projet à trois ans 2016-2018 avec Renaître Romania.
· Renaître Romania a reçu des contrôles de la part de l’Etat sur la tenue des activités mais n’a pas fait d’évaluation externe depuis le début du projet.
· Partage est le bailleur principal du projet et de l’association dans son ensemble.
· Il existe, depuis quelques années des questionnements sur comment améliorer la méthodologie d’intervention et de l’impact des programmes de Renaître Romania.
2.2.Attentes et caractéristiques principales de l’évaluation
Cette évaluation a pour but principal de contribuer à l’amélioration de la pérennité, de l’impact et de la qualité des programmes de Renaître Romania, les recommandations seront utilisées pour pouvoir définir au mieux les modalités d’intervention pour le prochain plan à trois ans, 2019-2021.
2.3.Questions évaluatives
Les évaluateurs auront à remplir leurs tâches en faisant référence à des questions relatives à la pertinence de l’action, son efficacité et son efficience et la pérennité des résultats obtenus.
Questions concernant la pertinence de l’action
- Les différentes activités (classes de maternelles, de soutien scolaire, le soutien complexe, l’accompagnement des familles…) mises en œuvre sont-elles cohérentes, pertinentes par rapport au contexte (contraintes relevées dans la zone, situation des bénéficiaires…) et au cadre institutionnel (politique étatique dans le secteur, moyens mis en œuvre…) ?
- Le cadre logique du projet est-il cohérent en regard de ses composantes : l'objectif de développement, les objectifs spécifiques, les résultats attendus, les activités et les indicateurs ?
Questions concernant l’efficacité et l’efficience de l’action
- Les ressources humaines des programmes de Renaître Romania sont-elles adaptées et réparties au mieux pour la meilleure efficacité et efficience des activités ?
- Les différentes activités (classes de maternelles, de soutien scolaire, le soutien complexe, l’accompagnement des familles…) mises en œuvre sont-elles cohérentes vis-à-vis des objectifs de l’association ? Sont-elles efficientes vis-à-vis des moyens limités de l’association ?
- Quels sont les résultats qui ont été atteints ? Dans quelle proportion ?
- Le projet a-t-il eu des effets positifs ou négatifs non prévus ?
Questions concernant la pérennisation des résultats de l’action
- Quel est le niveau d’implication des bénéficiaires (parents / enfants) ?
- Quelles perspectives pour le futur du projet ?
2.4.Aspects sur lesquels des recommandations sont attendues
· Des recommandations sont attendues sur la stratégie d’intervention de Renaître Romania.
· Des recommandations sont attendues sur l’amélioration (pertinence, efficacité et efficience) des activités mises en place par l’association (classes de maternelles, de soutien scolaire, le soutien complexe, l’accompagnement des familles…) pour pouvoir adapter au mieux les activités de l’association à ses objectifs pour le prochain plan à trois ans.
· Des recommandations sont attendues pour améliorer la pérennité des activités de l’association et l’implication des bénéficiaires.
3.Méthodologie
3.1.Sources d’information disponibles
· Proposition de projet, cadre logique, budget à trois ans
· Budgets annuels et plans annuels
· Rapports Narratifs semestriels et annuels
· Plan stratégique de Renaître Romania
· Rapports de mission
· Analyse des bénéficiaires issue des dernières enquêtes sociales (document en roumain)
· Dossier social type d’une famille (document en roumain)
· Rapport de suivi évaluation du service social du ministère de la protection sociale (document en roumain)
3.2.Principaux acteurs à rencontrer
· Salariés de l’association
· Bénéficiaires (enfants et adultes)
· Bénévoles
· Membres du CA
· Ecoles primaires publiques
· Ecoles maternelles publiques
· Autres organisation ou réseau travaillant sur des problématiques similaires à Renaître Romania (FONPC)
· Mairie d’Orăştie et de Geoagiu dont le service d’aide sociale
· Médecin travaillant avec les familles
3.3.Eléments méthodologiques
L’évaluation doit être participative. Pour ce faire, les évaluateurs devront adopter une méthodologie facilitant la participation active de tous les acteurs impliqués dans la mise en œuvre du projet.
Nous recommandons le recours à des techniques de diagnostic participatif (observation directe, focus groupe …) qui permettront non seulement de quantifier les résultats et objectifs de l’action, mais aussi de capter la perception et les appréciations des différents acteurs de la conduite de l’action.
Nature et durée des principales étapes de l’évaluation
Travail en France : 3 jours
- Revue documentaire : Prise de connaissance des principaux documents existants sur ce programme: document de projet, rapports annuels, etc.
- Réunion de cadrage (à Compiègne ou à distance)
- Note de cadrage
Mission en Roumanie : 8-10 jours
Pour la restitution : 4 jours
- 2,5 jours pour la rédaction du rapport provisoire
- 0.5 jour pour la restitution (présentation orale) du rapport provisoire
- 1 jour pour la rédaction du rapport final
4.Aspects pratiques de l’évaluation
4.1.Organisation de l’interface commanditaire / évalué / évaluateur
Un comité de pilotage assurera le suivi de la réalisation de cette évaluation. Ce comité est composé :
· De la directrice de Renaître Romania
· De la chargée suivi-évaluation de Partage
· Du responsable de suivi de programmes Roumanie de Partage
Le comité de pilotage s’occupera de la sélection de l’équipe d’évaluation et de la préparation du cadre de l’évaluation avec l’équipe sélectionnée (envoi des documents nécessaires à l’évaluation, rencontre avec le ou les consultants pour échanger sur l’évaluation, validation du planning de visite terrain et des rencontres à prévoir). Renaître Romania s’occupera de l’appui logistique à l’équipe d’évaluation durant la mission terrain en fonction des besoins de visite.
Pendant la mission terrain, des entretiens Skype pourront être réalisées si nécessaire avec Partage pour échanger sur les avancées de l’évaluation.
4.2.Calendrier
Le calendrier prévisionnel de l’évaluation est le suivant (dates au plus tard) :
- 20 février: Publication de l’offre
- 18 mars: Date limite de réception des propositions
- 31 mars: Analyse des propositions et choix des évaluateurs
- 9 avril: Envoi de la documentation aux évaluateurs
- 23 avril: Réunion de cadrage (à Compiègne ou à distance)
- 26 avril: Remise de la note de cadrage
- 2ème quinzaine mai: Mission terrain avec restitution locale
- 15 juin: Remise du rapport provisoire
- 26 juin: Restitution du rapport provisoire (à Compiègne ou à distance)
- 8 juillet: Remise du rapport final
4.3.Composition de l’équipe d’évaluation
L’équipe d’évaluation sera composée de deux membres : un expert international et un expert local.
Il est fait appel à des consultants disposant d’une expérience en évaluation de projets.
L’équipe devra par ailleurs avoir une bonne connaissance et une expérience opérationnelle dans les thématiques suivantes :
· Education
· Travail social
· Travail avec des populations Rom
4.4.Rendus attendus
Il sera demandé à l’équipe d’évaluation de réaliser :
Une note de cadrage, en français, envoyée au Comité de pilotage avant le départ sur le terrain, fera le point des premières investigations sur la base des lectures documentaires et des entretiens réalisés en France : elle présentera notamment les questions et hypothèses que les évaluateurs traiteront sur le terrain (en version électronique sous format Word)
Un rapport provisoire en français, concluant l’évaluation, sera remis au Comité de pilotage avant la restitution (en version électronique sous format Word).
Une restitution des principales conclusions et recommandations sera réalisée au siège de Partage/par Skype. Elle sera l’occasion d’échanger sur celles-ci avec le Comité de pilotage qui pourra formuler ses remarques sur le rapport provisoire.
Suite à la restitution et l’envoi des éventuelles remarques sur le rapport provisoire par le Comité de pilotage, un rapport définitif intégrant ces remarques sera envoyé en version électronique.
Ce rapport final comprendra:
a) Un rapport principal qui comprendra :
un rappel de la méthodologie employée ;
les observations et résultats de l’évaluation, selon les termes définis plus haut ;
l’analyse de l’impact et de la perception par les bénéficiaires, par les institutions et autres acteurs impliqués dans le secteur ;
les perspectives et conditions de pérennisation du projet ;
des recommandations concrètes (liées aux observations et résultats de l’évaluation) et constructives à adresser aux parties prenantes.
b) Une synthèse – résumé exécutif (5 pages maximum) reprenant, après une présentation générale rapide, les principales conclusions et recommandations.
Annexes
Annexe 1 : Canevas de la proposition technique
La réponse aux Termes de Référence devra s’organiser autour des 3 sections suivantes :
1. Compréhension des Termes de Référence
Cette section décrira entre autre la compréhension que l’équipe proposée a :
des Termes de Référence présentés ;
du contexte ;
du projet
2. Méthodologie de travail et résultats attendus
Cette section décrira entre autre :
la méthodologie proposée pour atteindre les objectifs de l’évaluation de façon documentée, argumentée ;
un chronogramme indicatif ;
les résultats attendus ;
les limites de l’évaluation ;
Toute autre information permettant une bonne compréhension de la méthode utilisée
3. Composition de l'équipe évaluatrice
Cette section décrira entre autre :
la composition de l’équipe,
le profil des experts,
la complémentarité des deux experts,
les points forts de l’équipe proposée
4. Annexes
Les CV des experts
le devis de la prestation
How to apply:
Modalités de candidature
Les offres techniques et financières sont à envoyer par e-mail avant le 18 mars 2018, à Julie Saturné, chargée suivi-évaluation, julie.saturne@partage.org en précisant l’objet «EVAL/ROUMANIE».
Pour être étudiées les candidatures devront obligatoirement comporter une proposition technique respectant le canevas fourni en annexe, les CV des consultants proposés ainsi qu’une proposition financière (devis).