Des scientifiques de premier plan se réunissent à l’ETS pour explorer la personnalisation de l’évaluation au service de l’équité

« Nous devons essayer de mesurer les connaissances et compétences de chaque individu de la manière qui leur convient le mieux. »
- Randy Bennett, titulaire de la chaire ETS Norman O. Frederiksen en innovation en évaluation

En théorie, l’évaluation personnalisée semble tellement... évidente. Nous pouvons tous nous accorder sur ce qui est nécessaire, mais c’est la « manière dont nous procédons » qui a suscité des défis et des opportunités qui obligent la communauté des évaluateurs à redéfinir l’évaluation future et à développer des solutions pour mesurer ce que chaque individu sait et peut faire, indépendamment de son origine, de son intérêt, de sa langue maternelle ou de son identité culturelle.

Chez ETS, nous vivons et respirons chaque jour l’avenir de l’évaluation. Et bien que nous ayons le privilège d’avoir certains des chercheurs de premier plan et des esprits innovants travaillant sur l’apprentissage personnalisé, parmi d’autres domaines clés de recherche, nous savons que nous ne pouvons pas seuls remodeler le paradigme actuel de l’évaluation.

« Cet événement est l’une des nombreuses étapes que nous entreprenons pour explorer collectivement le potentiel des évaluations personnalisées pour le bien commun », a déclaré Kadriye Ercikan, vice-présidente de la recherche chez ETS.

L’événement a déclenché un dialogue dynamique, favorisant des discussions sur ce qu’il faudra pour concrétiser les évaluations personnalisées qui servent l’équité. Il s’agissait de la première des quatre réunions prévues cette année, en accord avec le nouvel agenda de recherche de l’ETS ; voici ce que nous avons entendu lors de notre premier événement :

Randy Bennett,
Chaire Norman O. Frederiksen en innovation en évaluation, ETS

« Les États-Unis, ainsi que de nombreux autres pays dans le monde, ont connu des niveaux de changement démographique sans précédent. Ce changement a évolué vers une plus grande diversité dans de nombreux domaines, mais particulièrement sur des lignes raciales/ethniques, linguistiques et socioéconomiques. Toutes ces dimensions apportent des niveaux significatifs d’hétérogénéité culturelle. Les tests d’aujourd’hui n’ont pas été conçus pour tenir compte des niveaux de diversité culturelle que nous, ou de nombreux autres pays, connaissons. Ce conflit motive le besoin de nouvelles conceptions de l’évaluation, y compris la personnalisation au service de la réponse à la diversité.

Si ce n’est pas fait intentionnellement pour atteindre des objectifs d’équité, la personnalisation pourrait tout aussi bien produire des niveaux d’inégalités plus élevés. Qui fait le développement compte, les méthodes qu’ils choisissent comptent, les variables qu’ils choisissent pour personnaliser selon la question, les échantillons participants qu’ils utilisent comptent. La démographie de ceux qui développent des tests et de ceux qui développent des systèmes d’apprentissage par IA ne ressemble en rien à celle des populations scolaires publiques aux États-Unis ou dans de nombreux autres pays. C’est un problème dans le contexte de la conception de la personnalisation pour l’équité. »

Matthew L. Bernacki,
Professeur associé en sciences de l’apprentissage et études psychologiques, Université de Caroline du Nord à Chapel Hill, Donald et Justeen Tarbet Distinguished Scholar

« Les chercheurs en éducation ont passé des décennies à étudier comment les conceptions pédagogiques peuvent bénéficier à des apprenants spécifiques, et il existe de nombreuses théories psychologiques sur l’apprentissage qui peuvent servir de manuels pour que les enseignants et les concepteurs réfléchissent à la manière dont une leçon peut intégrer ou exploiter un atout qu’un apprenant apporte à une expérience d’apprentissage. Plutôt que de construire ces connaissances, les experts en personnalisation doivent intégrer la base de connaissances existante dans leur schéma de conception afin qu’ils personnalisent les bonnes caractéristiques de l’apprenant, connues pour améliorer l’impact des évaluations sur l’expérience et les résultats de l’apprenant. ... Adopter la personnalisation comme prisme pour le design peut nous aider à construire une représentation plus complète de l’individu en concevant des expériences d’apprentissage et d’évaluation qui offrent à chaque individu une opportunité équitable de démontrer et de développer ses connaissances et compétences. »

Okan Bulut,
Professeur associé de mesure et science des données, Université de l’Alberta

« À mesure que nous passons des évaluations universelles aux évaluations personnalisées, nous devrons repenser les concepts fondamentaux de la mesure éducative, tels que la fiabilité et la validité. Avec des définitions plus larges et plus inclusives pour ces concepts, nous pouvons mieux soutenir l’adoption massive d’évaluations personnalisées. La personnalisation a le potentiel de répondre aux problèmes sociétaux en favorisant un environnement d’apprentissage plus équitable et inclusif. Les évaluations personnalisées permettront aux apprenants de démontrer authentiquement ce qu’ils savent et peuvent accomplir à travers leurs propres expériences et choix d’apprentissage. »

Neil Heffernan,
fondateur et président du conseil d’administration de The ASSISTments Foundation ; Professeur William Smith Dean d’informatique et directeur du programme de troisième cycle en sciences et technologies de l’apprentissage, Worcester Polytechnic Institute

« Ce fut un plaisir de rejoindre ETS et mes pairs pour parler de la personnalisation au service de l’équité. Les évaluations formatives resteront importantes, et j’ai eu l’honneur de rejoindre ce groupe pour expliquer comment ma plateforme de mathématiques en ligne, ASSISTments.org, personnalise l’apprentissage. »

Serena Magrogan,
Directeur principal, AP^® Curriculum, Instruction et Évaluation The College Board^®

« La clé de l’évaluation personnalisée est l’apprentissage prescriptif. Les opportunités d’apprentissage prescriptif, avec des paramètres clairs de sortie et des grilles d’évaluation initiaux, peuvent aider les élèves à prendre responsabilité, à assumer la responsabilité et même à être fiers du résultat de leur travail. Et de cette façon, l’évaluation joue en leur faveur, et non contre eux. »

Kyndra c. Middleton,
Directeur des études supérieures Professeur de psychologie de l’éducation,
Université Howard

« Au cours des dernières années, nous avons assisté à des développements passionnants et prometteurs dans la personnalisation de l’apprentissage et de l’évaluation. La personnalisation a le potentiel de bénéficier à chaque élève tout en offrant un accès équitable. Cependant, la personnalisation implique la responsabilité d’assurer une mesure adéquate, mais actuellement, ce mouvement prend une direction positive ! »

Robert J. Mislevy,
Professeur émérite, Université du Maryland, ancien titulaire de la chaire Frederic M. Lord en mesure et statistiques, ETS

« La personnalisation et l’évaluation socio-culturellement réactive (SCRA) tirent parti des milieux personnels, sociaux, culturels et linguistiques des élèves selon le besoin pour mieux montrer ce qu’ils savent et peuvent faire. Mon exposé présente un cadre de raisonnement preuveur pour soutenir la conception, l’utilisation et l’analyse des propriétés des évaluations de divers types en appliquant ces principes à diverses fins. J’examine des conceptions qui offrent des compromis différents entre la validité locale des interprétations des scores en matière d’apprentissage et la comparabilité des scores pour les programmes de tests à grande échelle. Les avancées en science et technologie de l’apprentissage rendent possibles une gamme d’approches qui augmentent la validité, et donc l’équité, pour des usages ciblés des scores. »

Jesse R. Sparks,
Chercheur principal, ETS

« Il existe de nombreux défis et opportunités autour de la personnalisation de l’évaluation au service d’une plus grande équité. La manière dont nous mettons en œuvre la personnalisation peut varier en étendue et en qualité selon le cas d’utilisation — par exemple, il peut y avoir plus d’opportunités d’intégrer la personnalisation dans les évaluations conçues pour soutenir l’enseignement et l’apprentissage. Il est essentiel pour nous de comprendre comment et quand nous devons personnaliser et dans quelle mesure un soutien personnalisé peut conduire à un accès plus équitable à la participation à l’évaluation et contribuer à des résultats et opportunités éducatives plus équitables. »

Ye Tong,
Vice-président principal des opérations d’évaluation, NBME

« Les évaluations personnalisées ont un potentiel considérable dans le domaine formatif pour accompagner les apprenants sur leur chemin vers la réussite. Cependant, nous devons être conscients des aspects culturels et sociaux de la conception et de la mise en œuvre de l’évaluation lors de la personnalisation. D’une part, nous devons fournir des évaluations équitables qui offrent à chacun des opportunités équitables de démontrer ce qu’il sait et peut faire, quel que soit son parcours. D’autre part, nous devons utiliser les évaluations comme outil pédagogique pour sensibiliser les apprenants non seulement à leur propre culture et à leurs valeurs, mais aussi aux autres. »