Dans le cadre de la première d'une série de conversations régulières avec les vice-chanceliers des universités clientes d'Explorance Blue, nous avons rencontré le professeur Alastair Robertson, vice-président chargé de l'apprentissage et de l'enseignement à la Glasgow Caledonian University (GCU), pour discuter de l'approche de son institution en matière de capture de la voix de l'étudiant (https://explorance.com/solutions/student-experience-management/).
**Exploration : La voix des étudiants est de plus en plus reconnue comme un outil puissant au sein des établissements d'enseignement supérieur. Quelles mesures l'Université Glasgow Caledonian prend-elle pour s'assurer que la voix des étudiants est non seulement entendue mais aussi exploitée pour avoir un impact significatif sur l'efficacité de l'enseignement et de l'apprentissage ?
**Nous sommes tout à fait déterminés à écouter la voix des étudiants et à en tirer parti : Nous sommes absolument déterminés à écouter la voix des étudiants et nous avons un partenariat solide et bien établi avec notre corps étudiant. Nous sommes en train d'actualiser notre accord de partenariat avec les étudiants (élaboré conjointement par l'université et l'association des étudiants), ce qui est essentiel pour nous en ce qui concerne les changements, la qualité de l'expérience et l'adoption d'une approche de l'enseignement et de l'apprentissage axée sur l'amélioration. Les questionnaires d'évaluation des modules (MEQ), distribués par Explorance Blue (https://explorance.com/solutions/course-evaluations/), constituent une partie importante de la manière dont nous recueillons les commentaires des étudiants, combinés à de nombreuses autres approches pour faciliter un échange significatif.
Explorance : Fermer la boucle du retour d'information est un élément important pour améliorer l'efficacité de la réponse à la voix des étudiants - les étudiants ont besoin de voir quelles mesures ont été prises à la suite de leur retour d'information, que ce soit de la part de l'université ou au niveau du programme académique/module.
Alastair : Il est dans la nature humaine de s'attendre à voir le résultat si l'on s'engage et si l'on consacre du temps à donner un retour d'information. Un récent audit interne de l'université a examiné nos systèmes et processus de collecte des commentaires des étudiants et a rapporté que fermer la boucle du retour d'information (https://explorance.com/blog/closing-the-feedback-loop-within-an-academic-setting/) a fourni un mécanisme efficace pour communiquer les actions aux étudiants.
La communication et l'engagement avec les étudiants en ce qui concerne les MEQ ont également été jugés solides. Les étudiants reçoivent des communications formelles avant le lancement de l'évaluation, en plus des rappels informels et des discussions en classe avec les responsables de module. L'audit a également montré que le GCU utilise les médias sociaux pour impliquer les étudiants dans le processus de retour d'information en utilisant son compte "Student Life". Ce point de vue a été réitéré par les représentants des étudiants, qui estiment que la communication et l'engagement relatifs au retour d'information des étudiants ont été suffisants.
**Exploration : Quelles sont les mesures utilisées pour s'assurer que les taux de réponse représentent les voix de la population étudiante ?
Alastair : L'augmentation des taux de réponse aux MEQ est un objectif stratégique pour l'Université. Au cours du trimestre B en 2021-22, nous avons enregistré une réduction des taux de réponse des étudiants, en partie à cause de la lassitude générale du secteur et de la société à cette époque en raison de la pandémie. Ici, en Écosse, beaucoup d'études étaient encore en ligne en raison des restrictions liées à la pandémie, qui se sont atténuées plus tard qu'en Angleterre. Le personnel doit prévoir du temps dans les cours, qu'ils aient lieu en personne ou en ligne, pour que les étudiants puissent remplir leurs questionnaires - s'ils laissent aux étudiants le soin de le faire dans leur temps libre, les taux de réponse sont inévitablement plus faibles.
Nous planifions une campagne avec Explorance pour l'année académique 2022-23 ciblant la participation à l'enquête MEQ parmi nos étudiants afin de mener à bien nos objectifs d'amélioration. Nous voulons que les taux de réponse aux enquêtes internes atteignent 50 %, car ils n'étaient que de 30 % en 2021-22, contre 38 % en 2020-21. Dans ce cadre, nous avons déjà adapté certaines échelles d'enquête afin de les rendre plus claires pour nos étudiants. Par exemple, pour la question "Le retour d'information sur mon travail s'est fait en temps voulu", nous avons précisé la signification en disant "s'est fait en temps voulu conformément à la politique d'évaluation de l'université".
**Exploration : Comment vous assurez-vous que ce que vous mesurez est utile en termes d'objectifs stratégiques institutionnels mais aussi de normes nationales ?
Alastair : À GCU, nous utilisons les échelles NSS dans nos enquêtes d'évaluation de module internes (https://explorance.com/solutions/course-evaluations/). Les MEQ nous aident à comprendre le sentiment que suscitent les questions de la NSS et nous permettent d'approfondir notre compréhension de la NSS. Nous avons obtenu de très bons résultats lors de l'ENA 2020 (85 %), puis nous sommes tombés à 78 % en 2021 et à 79 % en 2022. Dans mon établissement précédent, nous utilisions également des enquêtes d'évaluation des modules pour apprendre aux étudiants à fournir un retour d'information constructif. À GCU, nous envisageons maintenant de fournir des conseils supplémentaires, par exemple un modèle de diapositives de présentation pour informer les étudiants sur nos enquêtes, de la manière pratique d'y accéder à l'importance d'un retour d'information constructif et aux avantages plus larges des enquêtes sur les modules".
Exploration : L'adhésion et l'engagement du personnel dans les MEQ sont essentiels car les questionnaires sont utiles pour évaluer les performances du personnel. Cependant, les évaluations sont souvent perçues comme négatives par le personnel. **Quelles sont les mesures prises par GCU pour impliquer le personnel dans les MEQ ? Quels sont les résultats obtenus ?
Alastair : À GCU, nous avons insisté sur le fait que les enquêtes n'avaient pour but que d'améliorer la qualité de l'enseignement. D'autres universités du secteur ont clairement indiqué que ces enquêtes étaient également utiles pour évaluer les performances du personnel.
Les évaluations positives du personnel sont très motivantes pour les collègues. Ils constatent que les étudiants reconnaissent leurs efforts, surtout s'ils les intègrent dans le programme d'amélioration et à des fins de développement uniquement, plutôt que de les utiliser comme un bâton universitaire pour les battre. Nous examinons les résultats de l'ensemble des modules, ce qui nous permet d'identifier les aspects qui posent problème au personnel et les défis communs à la salle de classe qui ont été soulevés par les commentaires des enquêtes sur les modules. En conséquence, nous pouvons fournir un soutien approprié en matière de développement.
Certains membres du personnel ont remis en question les résultats des enquêtes avec des taux de réponse plus faibles, mais à des fins d'amélioration, les données peuvent encore fournir des informations très utiles et peuvent être triangulées avec d'autres sources de données. Nous aimons également examiner les tendances longitudinales pour voir s'il y a des tendances à la hausse ou à la baisse sur plus d'une année, plutôt qu'un simple effet de cohorte. L'analyse est possible grâce à notre tableau de bord de données et sera reprise par les responsables et les chefs de service.
Le récent audit interne des commentaires des étudiants a également souligné que le fait de boucler la boucle a été largement bien accueilli par le personnel. Il approuve l'approche que nous adoptons et fournit des recommandations sur l'importance de boucler la boucle du retour d'information pour l'engagement des étudiants.
**Exploration : Comment les MEQ et plus particulièrement la voix des étudiants ont-ils contribué aux initiatives stratégiques au niveau institutionnel ?
Alastair : Nous nous concentrons sur l'amélioration, avec une attente et un lien clairs entre les MEQ et nos processus de qualité et l'importance de la voix des étudiants.
Des rapports de synthèse, produits par notre équipe de planification stratégique et d'intelligence économique, sont envoyés à ces forums chaque trimestre et contiennent les thèmes découlant du retour d'information des MEQ. Les thèmes clés résultant des commentaires des étudiants pour une série d'enquêtes trimestrielles donnée sont transmis à la direction générale et discutés dans les forums appropriés de l'université, notamment le conseil d'administration, le comité des politiques et pratiques académiques, les comités de gouvernance des écoles et le sous-comité d'amélioration de l'apprentissage. Les rapports comprennent des données clés au niveau institutionnel, ainsi qu'une analyse comparative entre les écoles et les modules. En outre, les rapports comprennent des comparaisons détaillées des résultats avec les années précédentes, ainsi que les taux de réponse. Les entretiens menés avec le personnel et les représentants des étudiants dans le cadre de l'audit interne sur le retour d'information des étudiants ont montré que les rapports étaient de grande qualité et qu'ils appréciaient les informations qu'ils fournissaient.
L'un des impacts institutionnels les plus importants de notre approche du retour d'information des étudiants et de l'utilisation des MEQ concerne les questions de l'enquête nationale sur la communauté d'apprentissage :
Suite à notre performance sur ces échelles dans notre enquête interne sur les modules 2020-21, nous avons fait un effort concerté pour fournir au personnel des conseils sur la socialisation et le partage des bonnes pratiques. En conséquence, le score a augmenté de 17 points dans notre enquête interne 2021-22. Il s'agit d'un véritable effort stratégique, dont la récompense peut être mesurée par les développements introduits par notre équipe d'administration centrale ainsi que par les écoles.
**Exploration : Alors, à quoi ressemble l'avenir du retour d'information des étudiants pour GCU ? Qu'attendez-vous de ce que vous avez appris jusqu'à présent ?
Alastair : GCU travaille avec Explorance depuis plusieurs années, avant mon arrivée en avril 2020. Nous avons mené des enquêtes internes pendant un certain temps, principalement sur papier, mais Explorance a suscité un réel intérêt en raison des fonctionnalités qu'il offre et de la façon dont il soutient notre communauté universitaire. Dans dix ans, nous ne devrions plus avoir de discussions sur la valeur des enquêtes MEQ et sur la nécessité de les réaliser ou non. Les progrès de l'IA et de la technologie vont avoir un impact significatif en aidant à une analyse/compréhension des commentaires qualitatifs plus sophistiquée (https://explorance.com/products/blueml/). De même, grâce à l'amélioration de l'analyse des données et à la capacité d'extraire des données de sources multiples, nous pourrions voir apparaître des enquêtes Pulse plus sophistiquées, pouvant être réalisées à tout moment choisi par le personnel.
Lire le premier article de cette série "Capturer la voix des étudiants à l'université de Bristol : Pro Vice-Chancellor Perspectives" (https://explorance.com/blog/capturing-the-student-voice-at-the-university-of-bristol-pro-vice-chancellor-perspectives/)