JOURNÉE ETP Plateforme ETP29 L’évaluation en éducation thérapeutique : Un enjeu pédagogique Jérôme Foucaud Dr. En Sciences de l’Education Brest Le 6 décembre 2016 LA PÉDAGOGIE Sens étymologique : du grec ancien « enfant » et « conduire, mener, élever ». Franc Morandi : la pédagogie est « étude et mise en œuvre des conditions d‘apprendre »(1) (1) Franc Morandi, Pratiques et logiques en pédagogie, Nathan Université, 2002, p. 5. ÉVALUER Collecter des informations pertinentes, fiables, valides Les analyser Les comparer à des éléments de référence ou normes : normes objectives ou subjectives internes ou externes à l’éducation thérapeutique en vue de prendre des décisions d’ordre thérapeutique, éducationnel, organisationnel, stratégique ou politique. ÉVALUATION EN ETP : PRINCIPES ET OBJECTIFS Revêt une dimension thérapeutique formative et d’apprentissage Est au service : des patients (intégrée à la démarche d’éducation) des professionnels de santé impliqués dans les activités éducatives, pour leur permettre d’améliorer leurs pratiques. Elle doit être participative. DÉMARCHE D’ÉVALUATION Avant l’intervention 1. 2. Définition des objectifs, choix des interventions/ définition des objectifs intermédiaires, choix des activités Définition des indicateurs de résultats (liés aux objectifs), de processus, de moyens et élaboration d’un référentiel Au cours et/ou au décours de l’intervention 3. 4. 5. Mesure des différents indicateurs Comparaison des résultats obtenus au référentiel Adaptation du programme LA DÉFINITION DES OBJECTIFS Donne le sens à l’action Préfigure Permet les stratégies d’établir un « arbre d’objectifs » dont procéderont les questions évaluatives ÉLABORATION D’UN PROTOCOLE/RÉFÉRENTIEL Document contenant tous les éléments scientifiques, techniques, organisationnels, etc. Pour les résultats, activités et moyens, lister Indicateurs Résultats attendus (contenu dans l’objectif) Comment mesurer (source, mode de recueil…) Si l’objectif a été bien rédigé… le travail est fait en partie ADAPTATION DU PROGRAMME A l’issue de l’évaluation (si elle a lieu au cours du programme), des adaptations du programme peuvent être proposées et discutées avec les acteurs = évaluation intermédiaire = enjeu formatif L’ÉVALUATION DE QUOI ? L’évaluation du projet L’évaluation du programme L’évaluation des séances L’évaluation de l’impact du programme DIFFÉRENTS TYPES D’ÉVALUATION EN ETP Évaluation de processus (1) Évaluation des effets Évaluation pedagogique Évaluation biomédicale Évaluation psychosociale …. (1)Evaluation annuelle/quadriennale Évaluation du processus L’ÉVALUATION DE PROCESSUS A pour objectif de vérifier que l’on a bien fait ce que l’on avait prévu de faire Vise à analyser le projet/le programme d’éducation afin d’améliorer la démarche Est indispensable pour assurer la pérennité de la qualité des activités proposées aux patients EVALUATION DU FONCTIONNEMENT ET DE L’ACTIVITÉ PRODUITE La réalisation des différentes actions du projet Articulation des actions du projet Conventions de partenariat Dispositifs de pilotage … Les sources de financements EVALUATION DU FONCTIONNEMENT DU PROGRAMME Accessibilité géographique Horaire Stratégie de communication Statistiques d’activité globale : file active annuelle de patients bénéficiant d’activités éducatives au sein du programme de séances éducatives assurées par les différents professionnels impliqués EVALUATION DU FONCTIONNEMENT ET DE L’ACTIVITÉ PRODUITE Descriptif des principales caractéristiques des activités mises en place : planning des séances et périodicité nb moyen de patients par séance collective nb moyen de patients par session techniques d’animation utilisées outils pédagogiques utilisés EVALUATION DE LA QUALITÉ DU PROCESSUS ÉDUCATIF Proposition aux patients de méthodes éducatives variées (individuelles et collectives, EAO...) Démarche structurée : recueil des besoins et attentes du patient (ou « diagnostic éducatif » partagé) définition concertée d’objectifs mise en œuvre d’activités éducatives suivi du patient comprenant une évaluation des activités suivies et de l’évolution des besoins. EVALUATION DE LA QUALITÉ DU PROCESSUS ÉDUCATIF Possibilités d’implication des proches du patient Personnalisation possible des activités au sein du programme en fonction des besoins individuels du patient (le programme est-il fixe et identique pour tous les patients, ou adaptable ?) Utilisation d’un dossier éducatif LES OUTILS Tableau de bord PV de réunion Diagramme de Gantt … PROCESSUS ET PÉDAGOGIE Effets pédagogiques pour : les membres de l’équipe de l’équipe projet les les membres du programme patients et entourages ayant participés à l’élaboration du programme Évaluation Évaluation des effets pédagogique Évaluation biomédicale Évaluation psychosociale Méta-analyses / impact de l’ETP hospitalisations consultations non programmées absentéisme scolaire et professionnel symptômes de la maladie (?) symptomatologie dépressive (?) anxiété état (?) connaissances sur la maladie soutien social perçu contrôle perçu AEPP (?) coping (?) adhésion thérapeutique qualité de vie Évaluation pédagogique EVALUATION PÉDAGOGIQUE Permet d'appréhender les apprentissages du patient susceptibles de générer des compétences dans la gestion de la maladie. Il s'agit notamment : des connaissances (vocabulaire médical, compréhension de la physiopathologie, résolution de problèmes, prise de décisions, connaissance de soi, du système de soin…) EVALUATION PÉDAGOGIQUE Il s'agit aussi : Des savoir-faire (maîtrise des techniques et gestes d'auto surveillance, des gestes de soin) Des compétences perceptives (perception précoce des petits signes annonciateurs d'un déséquilibre de la pathologie…). LES OUTILS Entretien (guide d’entretien structuré) Carte de Barrows Observation (check-list de l’utilisation d’un inhalateur) Questionnaires QCM/QCM (cas clinique, vrai faux, échelles) Les sentinelles Cartes sémantiques (non abordés) EVALUATION PÉDAGOGIQUE ET PÉDAGOGIE Effets pédagogiques pour : les membres du programme les patients et entourages ayant participés programme Vigilance Préférer les entretiens au questionnaire Privilégier une coévaluation : amener le patient à se questionner/ l’approche Tout outil d’évaluation peux être utilisé comme support pédagogique ÉVALUATION BIOMÉDICALE L’évolution de la maladie si des variables pertinentes sont disponibles pour la pathologie concernée par exemple : Hb1c pour le diabète ; IMC pour les obèses ; pression artérielle pour les hypertendus ; taux de lipides des coronariens ; réduction du nombre d'état critique pour les diabétiques, asthmatiques, HTA. ÉVALUATION BIOMÉDICALE nombre de ré-hospitalisations ou consultations en urgence à cause de la maladie amélioration de « l'observance »/ de l’adhésion : médicamenteuse nutritionnelle activité physique… LES OUTILS - - - Examens médicaux Dossier médical (conso de soins…) Entretiens (traitement, recours aux soins, adhésion thérapeutique…) Questionnaires (idem…) Echelles de mesures (observance/adhésion) Mouchards/ piluliers électroniques Achats de médicaments EVALUATION BIOMÉDICALE ET PÉDAGOGIE Effets pédagogiques pour : les membres du programme les patients et entourages ayant participés programme Vigilance certaines approches soulèvent des questionnements étiques/pas d’effet pédagogique Absence d’impact sur les variables biomédicale n’est pas forcement une absence compétences EVALUATION PSYCHOSOCIALE Apprécier les modifications de certains aspects de la vie ou du vécu du patient : par exemple, le sentiment de contrôle l’anxiété/dépression le soutien social le coping l'interface sociale (retransmission de savoirs à l'entourage, amélioration des relations avec l'entourage et les professionnels) la qualité de vie LES OUTILS - Les échelles de mesure - Les échelles spécifiques - Les échelles générales - - Les entretiens cliniques EVALUATION PSYCHOSOIALE ET PÉDAGOGIE Effets pédagogiques pour : les membres du programme les patients et entourages ayant participés programme Vigilance les outils le traitement des données CONCLUSIONS Réajuster objectivement les projets déjà flexibles Vérifier des résultats attendus Le but de toute intervention de santé est de : préserver un état de santé ou modifier sa trajectoire prévisible d’évolution en agissant sur un certain nombre de déterminants CONCLUSION L’Evaluation en ETP est un processus d’amélioration de la démarche éducative Ce n’est pas du contrôle Rester critique sur la portée de l’évaluation d’impact Elle sera surtout pédagogique ou non en fonction de ce que vous en ferez