« Entreprises sociales, pourquoi et comment mesurer votre impact social? » Table ronde n°4 Comment mesurer l’impact social? Quelle démarche et quels outils adaptés de mesure d’impact social Evaluation des impacts de l’alphabétisation: une mesure de l’impact social? Anne Godenir, Lire et Ecrire en Wallonie Comité économique et social européen Bruxelles le 11 février 2014 Lire et Ecrire Issue des mouvements ouvriers chrétien et socialiste, Lire et Écrire a pour mission de > attirer l’attention sur la persistance de l’analphabétisme / l’illettrisme > promouvoir le droit à une alphabétisation de qualité pour tous, dans une perspective d’émancipation et de participation des personnes et de changement social pour plus d’égalité > militer pour une meilleure prise en compte des personnes en situation d’illettrisme dans toutes les sphères de la vie 2 L’alphabétisation, telle que LEE la conçoit, ne se limite pas à la lecture – écriture, mais a des dimensions sociales, culturelles, politiques, économiques Elle repose en FWB sur un faisceau de politiques aussi diverses que l’éducation permanente, l’insertion socioprofessionnelle, la cohésion sociale, l’action sociale Elle suit une démarche d’éducation permanente non programmatique: les objectifs sont définis avec les personnes – pas de prescription par rapport aux résultats 3 Pourquoi évaluer l’impact de l’action d’alphabétisation? A) Les pouvoirs publics nous demandent de plus en plus de rendre des comptes sur les résultats de l’action B) Nous avons besoin, dans le cadre de l’évaluation interne de notre action, d’évaluer l’impact afin de pouvoir procéder à des réorientations éventuelles C) Nous avons besoin, dans le cadre de notre travail de sensibilisation, de données permettant de montrer à quoi sert l’action d’alphabétisation 4 A quoi sert l’alpha? • Premier questionnement dans le cadre de l’évaluation du contrat programme Education permanente, 2010 •Voir le rapport: http://communaute-francaise.lire-et-ecrire.be/content/view/198/84/ L’alpha est-elle utile à la cohésion sociale? • Second questionnement dans le cadre de l’évaluation des plans de cohésion sociale, 2012 •Voir la publication: http://communaute-francaise.lire-etecrire.be/images/documents/pdf/analyses2012/compr_pcs_wallon.pdf Evaluation menée auprès des participants aux formations: Quels sont les impacts de l’alpha ? 5 Dispositif d’évaluation Recours à l’outil MOTUS1 (publication de l’Atelier de pédagogie sociale LE GRAIN Asbl) dans le cadre d’ un entretien de groupe 1. Voir: http://www.legrainasbl.org/index.php?option=com_content&view=category&id=83&layout=blog&Itemid=93 6 Choix individuel de 5 vignettes exprimant ce que l’alphabétisation change ou a changé dans sa vie 7 Après l’expression individuelle, discussion (points de convergence, divergence) … > Qu’est-ce qui vous frappe / vous étonne dans ce qui a été dit ? > Quels sont les changements qui sont partagés par tous ? > Quels sont les changements pour lesquels tout le monde n’est pas d’accord ? 8 Modalités d’évaluation > Dans le cadre du temps de formation > A partir d’une question simple, ouverte, suivie d’un débat > Avec une phase individuelle et une phase collective > Avec prise de note systématique de tous les propos > Et compilation des données en vue d’une analyse secondaire 9 Analyse secondaire des données >> Classement de ces réponses en catégories >> Taux de réponses dans les différentes catégories 10 Exemples de catégories d’impacts > Insertion professionnelle, travail > Insertion sociale et vie quotidienne > Participation citoyenne, école, culture > Estime de soi, restauration identitaire > Compétences et savoirs de base 11 Exemples de réponses Je lis mon courrier, le compteur d’électricité, je sais qui m’écrit Insertion sociale, vie quotidienne Je fais du sport Je vais à la banque, dans les magasins, à la commune Je peux m’expliquer avec le médecin, l’avocat Je vais au Forem, je veux trouver du travail Insertion professionnelle, travail Je comprends mieux ce que mon patron me demande Je vais entrer en formation J’ai mon permis de conduire Je peux suivre les devoirs de mes enfants, je p arle avec l’institutrice Participation citoyenne, école, culture Je com prend s mes droits, com ment fonctionne la Belgique, je m anifeste J’écou te des chansons, je rega rde de s films en français. Je vais en bib liothèque 12 Avantages et inconvénients de l’évaluation participative Avantages Inconvénients Elle accroît les chances de réussite du processus et d’utilisation des résultats Sa complexité peut poser des difficultés de mise en œuvre et compromettre l’avancée du processus évaluatif Elle prend en compte la pluralité des points de vue et augmente la connaissance produite L’investissement en temps peut être un frein quand la participation entre en concurrence avec la charge de travail quotidienne des acteurs Elle renforce les capacités des acteurs en matière d’élaboration de politiques et en gestion de projets La désirabilité sociale peut fausser les résultats Plus démocratique, elle permet la participation citoyenne et vise l’émancipation des personnes Elle risque de s’apparenter à un processus de fausse démocratie si les acteurs qui y participent ne sont pas parties prenantes des décisions 13 Publications de LEEW en lien avec le sujet • • • • Lire et Écrire, « Évaluation de l’impact des actions d’alphabétisation sur la vie des personnes. Résultats d’une enquête menée par Lire et Ecrire auprès des personnes en formation entre mars et juin 2010 », décembre 2010: http://communaute-francaise.lire-et-ecrire.be/content/view/198/84/ Anne Godenir, « Impacts de l’alphabétisation sur la vie des personnes : premières analyses des variations selon que les personnes ont fait leur scolarité en Belgique ou dans un pays étranger non francophone », décembre 2011: http://communaute-francaise.lire-etecrire.be/images/documents/pdf/analyses2011/analyse29_impact_alpha_scolarite.pdf Anne Godenir et Aurélie Storme, « Prendre en compte les personnes en situation d’illettrisme dans un contexte d’évaluation d’une action politique auprès des publics bénéficiaires – note méthodologique », mars 2012 : http://wallonie.lire-etecrire.be/images/documents/note_m%E9thodo_%E9val_action_politique_aupr%E8s_des_b %E9n%E9ficiaires_prise_en_compte_des_personnes_illettr%E9es_2012_03_19_final.pdf Anne Godenir, Aurélie Storme, « Prendre en compte les personnes en situation d’illettrisme dans un contexte d’évaluation d’une action politique auprès des publics bénéficiaires – Le cas de l’évaluation des plans de cohésion sociale en Région wallonne », novembre 2012 : http://communaute-francaise.lire-etecrire.be/images/documents/pdf/analyses2012/compr_pcs_wallon.pdf 14 http://wallonie.lire-et-ecrire.be/ 15