L’Université Kingston crée une culture d’amélioration continue appuyée par les analyses grâce à Blue

L’Université Kingston est classée parmi les 50 meilleures universités du Royaume-Uni par le guide 2020 des universités de The Guardian et parmi les 250 meilleures au monde pour les affaires et l’économie par le Times Higher Education World University Rankings 2019. En 2017, l’université a remporté le prix d’excellence en enseignement universitaire du Guardian.

L’université a réintroduit les questionnaires d’évaluation de module en 2017 avec l’aide de Blue, qui est intégré avec l’environnement d’apprentissage virtuel et le système d’information sur les étudiants de l’établissement. En 2018, ils sont passés d’un processus papier à en ligne.

Un unique questionnaire d’évaluation est utilisé, et les rapports destinés aux étudiants et au personnel sont publiés pour chaque module et des rapports agrégés produits à plusieurs niveaux. De plus, ces données sont intégrées au processus annuel de suivi et d’amélioration de l’université. « L’utilisation de la rétroaction étudiante fait partie des processus d’assurance et d’amélioration de la qualité d’un établissement », affirme le Dr Tim Linsey, directeur des systèmes académiques et des évaluations à l’Université Kingston. « La façon dont ces commentaires sont utilisés pour soutenir les équipes de cours à travers un processus d’amélioration continue en proposant une conception de cours efficace et en améliorant l’expérience des étudiants en matière d’apprentissage, d’enseignement et d’évaluation est un domaine clé de discussion dans le secteur de l’enseignement supérieur au Royaume-Uni. »

« L’utilisation de la rétroaction étudiante fait partie des processus d’assurance et d’amélioration de la qualité d’un établissement »

 

Dr Tim Linsey, directeur des systèmes académiques et des évaluations

À Kingston, les questionnaires d’évaluation sont un élément important d’une approche conçue pour être cohérente, pour garantir que le développement et la prise de décision sont guidés par des preuves, et que les bonnes pratiques sont reconnues et partagées. « Nous utilisons 12 questions standards, y compris deux questions à développement, à l’échelle de l’université pour assurer la constance des étudiants à travers plusieurs modules et pour mettre en évidence les changements au fil du temps, avec Blue comme environnement », explique Dr Linsey. « Les étudiants ont un accès flexible aux sondages et peuvent les remplir à leur guise en utilisant leurs appareils personnels (47 % de nos sondages 2018-2019 ont été complétés sur des appareils mobiles). Dans les heures qui suivent la clôture du sondage, des rapports résumant les commentaires sont automatiquement générés et publiés dans notre environnement d’apprentissage virtuel avec des versions personnalisées du rapport disponibles pour le personnel et les étudiants. Le programme est soutenu par des représentants de cours qualifiés et une vidéo explicative a été créée par notre syndicat étudiant. » 

« Dans les heures qui suivent la clôture du sondage, des rapports résumant les commentaires sont automatiquement générés et publiés dans notre environnement d’apprentissage virtuel avec des versions personnalisées du rapport disponibles pour le personnel et les étudiants. »

 

Dr Tim Linsey, directeur des systèmes académiques et des évaluations

 

À travers le parcours institutionnel – et son objectif constant de parvenir à un système essentiellement automatisé – le Dr Linsey a souligné l’importance de l’échéancier, qui est rendu possible par le logiciel Blue. « Les rapports sur les résultats du questionnaire sont publiés pour les étudiants et le personnel pendant que le module est toujours en cours, ce qui permet de prendre en compte les résultats en classe », confie-t-il. « Cette discussion ajoute de la valeur et génère des informations supplémentaires. La planification et la publication automatiques de sondages étudiants par courriel et sur notre environnement d’apprentissage virtuel contribuent à faciliter ce processus. Nous reconnaissons également que la prise de décision de haut niveau basée sur les résultats d’un seul ou d’un petit nombre de questionnaires serait problématique, surtout en l’absence de connaissances « locales » du module. Nous nous assurons donc que notre prise de décision s’appuie sur de multiples sources de preuves et de mesures, y compris les résultats des questionnaires au fil du temps, des informations sur les modules telles que les taux de progression, et des sources supplémentaires telles que les rapports d’examinateurs externes. »

Les rapports sommaires qui montrent les données du module sont soigneusement présentés par l’équipe universitaire supervisant les évaluations. Par exemple, les comparaisons et les classements fournis aux comités supérieurs de l’université comparent des modules comparables (par exemple, par niveau et par faculté) et incluent un indicateur supplémentaire de signification statistique basé sur le taux de réponse et la taille de l’échantillon. « Pour garantir que la rétroaction des étudiants est efficacement intégrée dans nos processus d’assurance et d’amélioration de la qualité, les données de l’évaluation, ainsi que d’autres sondages institutionnels, notre propre sondage auprès des étudiants de Kingston et le National Student Survey (NSS), sont également publiés automatiquement dans les tableaux de bord de l’université et sont disponibles pour tout le personnel », explique le Dr Linsey. « Le tableau de bord des évaluations permet aux membres du personnel de consulter les données quantitatives aux niveaux du module et de l’établissement, et de comparer les données des années précédentes. »

Des tableaux de bord supplémentaires résument d’autres mesures clés de module et de cours comme les taux de progression, les taux d’achèvement et les résultats à valeur ajoutée. Cet accès rapide aux mesures et aux commentaires des étudiants soutient de manière significative la réflexion, la planification et la prise de décision menées par les équipes de modules et de cours ainsi qu’à un niveau stratégique au sein de l’université. « Ce processus est encore amélioré grâce à la pré-saisie automatique de données dans les plans de processus de suivi et d’amélioration annuels achevés au niveau du module et du cours », affirme le Dr Linsey. « Les plans d’amélioration des modules sont automatiquement remplis avec des réponses quantitatives des questionnaires et des données de progression, par exemple. Le ou la responsable du module complète son plan prérempli en réfléchissant sur les performances du module et en identifiant les actions pour l’année universitaire en cours, qui sont étayées par ces données préremplies et d’autres sources de preuves. »

Les plans d’amélioration des cours sont également préremplis avec des données NSS, des données de sondages effectués auprès des étudiants de Kingston et d’autres mesures, ce qui signifie que les responsables de cours peuvent ensuite élaborer des plans d’action citant les preuves utilisées, y compris les plans d’amélioration des modules individuels. De cette façon, l’université utilise les commentaires des étudiants et d’autres mesures clés pour résoudre des problèmes tels que la rétention des étudiants et pour garantir que tous les étudiants réalisent leur plein potentiel. Le Dr Linsey ajoute : « Nos objectifs originaux à travers le projet d’évaluation Blue étaient de créer une culture de l’amélioration continue soutenue par les analyses, une approche cohérente intégrée dans les processus d’évaluation et d’assurance de la qualité, et d’impliquer efficacement les étudiants tout au long du programme d’études – en fermant la boucle de rétroaction et en valorisant la voix étudiante. En tant qu’indicateur principal de l’IRC de la qualité de notre enseignement institutionnel, la valeur que nous avons tirée d’Explorance a été énorme. »

« En tant qu’indicateur principal de l’IRC de la qualité de notre enseignement institutionnel, la valeur que nous avons tirée d’Explorance a été énorme. »

 

Dr Tim Linsey, directeur des systèmes académiques et des évaluations