Guide pratique pour les participants à l’enquête Mener une enquête formative d’autoévaluation En quoi consiste le PEC ? Le programme d'évaluation des compétences (PEC) est une combinaison de diverses méthodes d'évaluation d’une partie bien définie d’un cours/ d’un programme1 / d’une formation: par exemple, un semestre, un module, un bloc, la première phase d’une formation, ou la totalité du cours / du programme. Le PEC présente les caractéristiques suivantes: 1. Il contient toutes les évaluations utilisées à des fins sommatives et formatives2 dans un domaine d’application défini. Attention: nous avons tendance à oublier les évaluations formatives car elles ne sont pas notées. 2. La combinaison réelle des méthodes d'évaluation utilisées dans un PEC dépend des compétences évaluées et de l'ampleur du programme d'enseignement (un cours spécifique, un semestre, une année scolaire, etc.). Le questionnaire en ligne est spécifiquement conçu pour évaluer la qualité d'une combinaison d'évaluations et non pas des méthodes individuelles (ce qui signifie qu'il ne doit PAS être utilisé pour évaluer un examen spécifique par exemple). Pourquoi: tous les types d'évaluation ont leurs points forts et leurs faiblesses. Il est possible que différentes formes d'évaluation au sein d'un PEC se compensent mutuellement. Par conséquent, lorsque l'on évalue la qualité du PEC, il est 1 Un programme de master se compose de différents cours. Nous sommes cependant conscients qu'un programme de master dans une institution quelconque peut être appelé un cours de master dans une autre. 2 L’objectif d’une évaluation sommative est de valider et de classer les étudiants. Ce type d’évaluations attribue un score qui comprend toutes les preuves jusqu’à un certain point, par exemple, l’examen final pour l’obtention du diplôme/certificat. Le but de l'évaluation formative, au contraire, est de s'assurer que la preuve de la réussite des étudiants est produite, interprétée et utilisée par les enseignants, les étudiants, ou leurs pairs pour prendre conscience de l'existence d'un «fossé» entre le niveau réel des travaux évalués et la norme requise. En outre, l'évaluation formative fournit aussi une indication de la façon dont le travail peut être amélioré pour atteindre la norme requise. Une caractéristique essentielle est que chaque étudiant / enseignant utilise les informations obtenues résultant en une amélioration de l’apprentissage ou de l’enseignement. Guide pratique pour les participants à l’enquête important de mesurer la qualité du programme d'évaluation dans son ensemble3. L’objectif spécifique de l’enquête formative d’auto -évaluation L’auto-évaluation atteindra idéalement les objectifs suivants: 1. En remplissant le questionnaire en ligne, les intervenants ont l'occasion de réfléchir au sens de chaque critère (les observations par critère démontrent ce qu’il signifie concrètement)4. 2. En procédant par après à (aux) une (des) entrevue(s) de groupe, vous aurez accès à plus d'informations pour répondre à la question «dans quelle mesure mon PEC répondra-t-il aux différentes exigences de qualité» et vous aurez une vue plus claire sur les questions / problèmes qui doivent être considéré(e)s pour améliorer la qualité du PEC. 3 Il est normal que les interviewés ne connaissent qu’une partie du PEC. Après avoir compilé toutes les réponses, l’assesseur aura une d’ensemble de tout le programme. 4 Vous trouverez une description succincte des 12 critères de qualité du PEC aux pages 5 & 6. Partie 1 Le PEC : une liste des méthodes d’évaluation utilisée dans le cours/le programme/la formation sélectionnés (cette liste devrait inclure toutes les méthodes d’évaluation reprises dans le questionnaire en ligne). Méthode d’évaluation L’objet de l’évaluation? Qui évalue? P.ex. test des connaissances (QCM, T/F, etc.), projet, observations pendant le stage,… Quelles compétences/ tâche principale / flux de travail P.ex. enseignant / experts sur le terrain / collègues Quand/nombre de fois une Pour des fins sommatives et/ou évaluation est-elle effectuée? formatives? P.ex. à la fin de la séquence de cours/ plusieurs fois par séquence ☐ seuls les scores ☐ les réactions individuelles/du groupe ☐ ni commentaires/ni résultats ☐ seuls les scores ☐ les réactions individuelles/du groupe ☐ ni commentaires/ni résultats ☐ seuls les scores ☐ les réactions individuelles/du groupe ☐ ni commentaires/ni résultats ☐ seuls les scores ☐ les réactions individuelles/du groupe ☐ ni commentaires/ni résultats ☐ seuls les scores ☐ les réactions individuelles/du groupe ☐ ni commentaires/ni résultats 3 Glossaire Ci-dessous vous trouverez les 12 critères de qualité du Programme d’Evaluation des Compétences avec une description succinte. Il suffit de cliquer sur un des critères pour accéder à la page des indicateurs de ce critère. Cette page peut vous aider à la fin de l’interview pour réfléchir aux questions suivantes: “Quels critères ont été appliqués dans le PEC?” et “Quels critères devraient être appliqués à l’avenir?”. Pertinence Mise en décisions Clarté Les objectifs et méthodes d’évaluation utilisés doivent être compatible avec l’objectif de l’enseignement défini d’un cours/d’un programme ou d’une formation. oeuvre des Une combinaison de plusieurs assesseurs, tâches et situations d’évaluation. Les évaluations sont claires et compréhensibles pour toutes les parties concernées (étudiants, évaluateurs et agences externes). Par exemple, dans le cas des étudiants ce critère implique qu’ils connaissent les critères de classement, les objectifs et les normes de l’évaluation ainsi que les évaluateurs. Acceptabilité Tous les acteurs concernés doivent approuver les critères de l’évaluation et la procédure du PEC pour qu’il se déroule tel que prévu. Comparabilité Le PEC doit être réalisé de manière cohérente et responsable. Les conditions dans lesquelles l'évaluation est effectuée devraient être, autant que possible, comparables pour tous les étudiants. Les notes doivent être conformes avec l’utilisation des mêmes critères pour tous les étudiants. Equité Les étudiants doivent avoir une chance équitable de démontrer leur compétence. Par exemple, en leur permettant de s'exprimer de différentes manières et en s'assurant que les évaluateurs ne montrent pas de biais. Adapté à l’autoévaluation/à la réflexion Ce critère souligne que le PEC doit stimuler des activités d’apprentissage autonomes et devrait inclure des méthodes spécifiques pour y parvenir, comme la pratique de l'auto-évaluation par les pairs et de laisser les étudiants formuler leurs propres objectifs d'apprentissage. Signification Le PEC devrait susciter un feedback utile et intéressant et des expériences d'apprentissage pour les élèves et 4 les éducateurs (par exemples les enseignants ou les tuteurs). Complexité Cognitive Le PEC devrait permettre aux étudiants de démontrer les différents niveaux de compétences cognitives et les processus de pensée. Authenticité Le PEC devrait ressembler au futur contexte professionnel. Conséquences l’apprentissage Coûts et temps pour Le PEC a un effet positif sur l’enseignement et l’apprentissage et l’effet négatif devrait être minimalisé. L'élaboration et la mise en œuvre du PEC sont réalisables en termes de temps et de coût. Les PEC sont généralement plus complexes que les tests de connaissances traditionnels et plus difficiles à réaliser. On doit prouver que les investissements en temps et en ressources supplémentaires sont justifiés par les résultats positifs, comme l'amélioration de l'apprentissage et de l'enseignement. N’hésitez pas à contacter Lai Jiang: [email protected] si vous avez des doutes ou des interrogations. 5