Tirer parti des évaluations des étudiants pour améliorer les processus de rétroaction à l'université de Witwatersrand avec Explorance Blue

À propos de l'université du Witwatersrand

L'université du Witwatersrand (Wits University) est une université publique à plusieurs campus située dans la partie nord du centre de Johannesburg. Avec cinq facultés et 34 écoles, Wits compte environ 3 700 enseignants à temps plein et plus de 40 000 étudiants.

Le défi : passer des enquêtes papier aux enquêtes en ligne et faire évoluer la culture du retour d'information

À Wits, les objectifs du retour d'information des étudiants sont doubles : la responsabilité (soutenir l'assurance qualité et la progression de carrière) et le développement (soutenir la pratique réflexive pour l'apprentissage professionnel et l'amélioration des cours).

Ceci s'appuie sur le cadre d'assurance qualité pour l'offre éducative (WQAFEP) de Wits, qui fournit un large éventail de paramètres pour garantir et améliorer la qualité de l'offre éducative. Dans le cadre du WQAFEP, les éléments du système qui contribuent directement à la qualité de l'expérience d'apprentissage des étudiants comprennent l'offre académique, l'enseignement, l'apprentissage et l'engagement des étudiants, le soutien aux étudiants, ainsi que les services, les installations et les ressources.

Le Bureau de la qualité et de la planification académique (QAPO) de l'université, anciennement le Centre pour l'apprentissage, l'enseignement et le développement (CLTD), recueille diverses formes de données auprès d'un éventail de parties prenantes sur leur expérience et leur contribution à l'offre éducative, notamment : les évaluations des étudiants, les évaluations par les pairs de l'enseignement, les rapports des examinateurs externes et des modérateurs internes, les taux de réussite, les contributions des délégués de classe et du Conseil des représentants des étudiants, les comités consultatifs, les rapports des conseillers pédagogiques de la faculté, les tickets d'assistance et les courriels.

C'est le CLTD qui, au cours de l'année universitaire 2018-2019, a identifié la nécessité d'une plateforme externe pour mener les évaluations des étudiants et passer des évaluations papier aux évaluations en ligne. Le CLTD a recommandé aux enseignants d'utiliser les commentaires des étudiants comme une opportunité formative, car les résultats offrent des indicateurs utiles sur les tendances, mais ont une valeur limitée pour comprendre les pratiques de facilitation. Ils sont en revanche plus utiles lorsqu'ils sont contextualisés dans des informations obtenues à partir de formes d'évaluation plus qualitatives, car les notes peuvent souvent être le résultat de multiples facteurs.

La solution : aller de l'avant dans le processus d'évaluation des étudiants avec Explorance Blue

En 2019, Wits a d'abord choisi Explorance Blue pour automatiser de bout en bout ses évaluations de l'enseignement et pour exploiter l'analyse de texte afin de découvrir les informations cachées dans les commentaires ouverts des étudiants et d'enrichir ses capacités de reporting.

Blue a été lancé dans toutes les facultés en 2020, ce qui signifie que tout le personnel académique doit utiliser le système en ligne pour mener les évaluations des étudiants. La personnalisation des questions et le suivi du taux de réponse étaient deux des outils jugés particulièrement utiles, car le CLTD et désormais le QAPO soutiennent les différents acteurs qui utilisent le système, notamment les enseignants et les étudiants.

Nompumelelo Mazibuko, coordinatrice des évaluations du QAPO, a supervisé le processus d'évaluation des étudiants avec Explorance Blue. « Au départ, il a fallu beaucoup de travail préparatoire pour obtenir l'adhésion de l'établissement et convaincre les enseignants de passer d'un système papier à un système en ligne », se souvient-elle. « Cependant, les enquêtes papier posaient de nombreux problèmes, notamment en ce qui concerne la manipulation des données et le travail que cela impliquait, car nous devions scanner manuellement les formulaires d'enquête. Nous avons commencé par discuter avec les enseignants et les étudiants de leur opinion sur les questions fondamentales que nous posions et sur le système de retour d'information, les lacunes et les changements nécessaires. »

À la suite de révisions guidées par la littérature et les commentaires du personnel, des questions fondamentales et une politique ont été élaborées, puis approuvées au niveau institutionnel. D'autres travaux ont été menés pour collecter des données auprès de différentes facultés, former et soutenir le personnel administratif et les enseignants, et nettoyer et vérifier les données. Toutes ces données ont ensuite été intégrées dans Blue, qui effectue les évaluations et analyse les données, qui sont ensuite stockées dans une application spécifique à l'établissement, appelée « Course Teacher App ».

« Grâce à Blue, nous disposons d'évaluations facultatives, dans le cadre desquelles les enseignants décident, en fonction des « besoins », de mener ou non des évaluations, sur quatre cycles d'évaluation pour les cours à temps plein », explique Nompumelelo. Cela aide les enseignants à évaluer les cours pendant qu'ils les dispensent, et ils aident les étudiants plutôt que de tout laisser pour la fin. Nous proposons des questions personnalisées, donc en plus des questions de base, nous donnons aux enseignants la possibilité d'ajouter ou de concevoir leurs propres questions en fonction de leur contexte d'enseignement. Cela aide les enseignants à créer des évaluations auxquelles les étudiants peuvent répondre.

Nous surveillons également la participation des étudiants à l'aide du tableau de bord Blue, auquel les enseignants ont accès pour voir comment les étudiants remplissent les évaluations, tout en pouvant envoyer des rappels. Les rapports, pour les écoles et l'ensemble de l'établissement, sont ensuite consultés avant la clôture du cycle de rétroaction.

Le résultat : de la source à l'analyse, améliorer la qualité et la fiabilité des évaluations

Le parcours de Wits en matière d'évaluations, de la source à l'analyse, a consisté à exploiter les données pour améliorer les processus de retour d'information. L'engagement des enseignants et des étudiants tout au long du processus d'évaluation, facilité par Blue, a été crucial.

« Dans l'ensemble, notre objectif est d'améliorer la participation des étudiants afin d'améliorer la qualité et la fiabilité des évaluations », a déclaré Nompumelelo. « Explorance a soutenu le changement dans les pratiques d'évaluation des étudiants (conception d'évaluations et d'analyses de données adaptées), a exploré la participation des enseignants à l'élaboration d'enquêtes et à la conception de bonnes questions grâce à la personnalisation des questions, et nous a aidés à réfléchir à la manière dont nous pouvons nous engager différemment pour une meilleure expérience. Bien qu'il reste encore du travail à faire, nous disposons désormais d'un système qui nous permet de communiquer avec les étudiants sur la manière dont les commentaires sont/ont été utilisés, et d'utiliser les commentaires des étudiants pour réfléchir à l'enseignement et à la réussite des étudiants.

Elle a ajouté : « Une question clé tout au long du processus a été : « Comment influencer la culture institutionnelle afin de tirer parti des possibilités offertes par le système Blue pour garantir de meilleurs processus d'évaluation ? » Nous avions besoin d'une approche systémique pour commencer à changer la façon dont nous envisagions les évaluations sous plusieurs angles, et c'est ce que nous commençons à mettre en place aujourd'hui. »