Série de blogs pour stagiaires d’été NAEP : Découvrir l’équité et l’équité dans l’évaluation

8 décembre 2021

Tout au long de l’été, nous mettons en lumière les expériences de certains de nos stagiaires du NAEP, selon leurs propres mots. 

L’article de cette semaine est du point de vue de Janine Jackson et Christopher Terrazas. Cet été, Janine collabore avec Catherine Millett, chercheuse principale et conseillère stratégique de l’ETS, au sein du Policy Evaluation and Research Center (PERC) de l’ETS, sur un projet explorant les profils des futurs étudiants en doctorat. Christopher collabore avec les chercheurs de l’ETS, Geoffrey Phelps et Cara Cahalan Laitusis, ainsi qu’avec Jhan Doughty-Berry, conseiller principal du programme NAEP, sur un projet analysant le potentiel d’explorer les perspectives enseignant et étudiant au sein du NAEP à l’aide de cartes d’empathie. Voici leur dernier point de vue sur ce qu’ils ont appris de notre personnel concernant l’équité et l’équité dans l’évaluation :

Janine Jackson :

D’abord, permettez-moi de dire que je prie continuellement pour que le temps ralentisse car l’été passe bien trop vite et je ne veux pas que cette expérience se termine. Avoir l’opportunité et l’espace de rencontrer et de parler avec des personnes qui partagent ma passion pour tout ce qui concerne la « mesure » est absolument inspirant. Ces dernières semaines ont été tout simplement incroyables, mais cette semaine en particulier a été spectaculaire.

Mes collègues stagiaires et moi avons rencontré les membres du personnel de recherche et développement d’ETS, Michael Walker, Cara Cahalan Laitusis, Randy Bennett et Haley Lemp, pour en apprendre davantage sur l’équité, l’équité et l’accessibilité dans l’évaluation et l’apprentissage. Il est encourageant de noter que la question de l’équité et de l’équité dans l’évaluation est depuis longtemps un sujet de priorité pour ETS. Selon le panel, un effort a toujours été fait pour « ne pas nuire », c’est-à-dire pour identifier, éliminer et prévenir les biais via l’analyse du fonctionnement différentiel des items (DIF) et la revue du contenu des items. En plus de travailler continuellement pour ne pas nuire, il existe une volonté supplémentaire de créer des outils d’apprentissage et de produits d’évaluation qui contribuent à la justice sociale. De plus, du point de vue de l’IA, beaucoup de travail est en cours chez ETS pour garantir que les produits soient conçus du début à la fin avec une expérience utilisateur accessible et équitable, grâce à l’intégration des connaissances issues du cadre Universal Design for Learning (UDL). Ce type de travail demande beaucoup de réflexion et de recherche, et des efforts sont mis en place pour s’assurer qu’une variété de voix et d’expériences soient incluses dans la discussion. C’était juste lundi.

Mardi, nous avons découvert la « vie d’un item ». De la conceptualisation à l’administration, en passant par la notation et le rapport, des mois de travail sont consacrés à la création d’un seul item de test. Qui l’aurait cru ?! En tant que psychométricienne en herbe, apprendre chaque étape en détail auprès d’une organisation reconnue pour son excellence dans le développement des évaluations a considérablement approfondi ma compréhension de façon exponentielle.

Cette semaine également, nous avons été mis en relation avec des membres du personnel d’ETS partageant nos parcours et centres d’intérêt, et nous avons eu du temps loin de nos projets pour discuter de leur parcours vers l’emploi chez ETS, de leur expérience professionnelle quotidienne ainsi que des succès et défis liés à ce travail. J’ai eu la chance d’être mis en relation avec Kelsei Thomas du développement de nouveaux produits, et nous avons eu une conversation agréable et instructive. Comme tous les membres du personnel que j’ai rencontrés jusqu’à présent, Kelsei a écouté mes idées et points de vue et m’a présenté à d’autres membres de l’équipe d’ETS qui peuvent m’apporter des éclairages sur mes recherches. Pour cela, je lui en suis reconnaissant.

Pour clore la semaine, nous avons pu rencontrer des anciens élèves de nos collèges et universités respectifs. Ce fut très passionnant de rencontrer Aisha Torres, également diplômée de Morgan State University, qui a partagé comment sa formation et son expérience à l’université l’avaient préparée à son travail à l’ETS. Nous avons parlé en détail de l’alignement des programmes, du réseautage et de la formation à la diversité, et à la fin de notre conversation, j’étais encore plus fière d’être étudiante diplômée à l’HBCU et trésor national qu’est Morgan State University.

Chaque semaine, l’expérience à l’ETS s’améliore. Je sais que je contribue à des recherches qui peuvent avoir un impact significatif sur d’autres. Mes mentors et membres d’équipe au Policy Evaluation and Research Center (PERC), Catherine Millett, Marisol Kevelson et Anjali Srivastava, m’ont aidée à grandir en si peu de temps en tant qu’écrivaine et analyste de données. C’est formidable de se lever le matin et d’être enthousiaste à l’idée d’aller travailler. J’attends la semaine prochaine avec impatience.

Christopher Terrazas :

La semaine dernière a été une période où j’ai pu participer à un séminaire qui abordait l’équité et l’équité dans l’évaluation. C’est un sujet qui me tient beaucoup à cœur, car j’ai passé les trois dernières années à travailler comme enseignante en classe. Dans ce domaine, j’ai pu créer et nourrir un environnement qui valorisait la voix, l’expérience et l’identité des jeunes. C’était l’équité au travail.

Michael Walker, nommé par le président et directeur du Centre de recherche sur la validité, l’équité et l’équité dans l’apprentissage et l’évaluation de l’ETS, a dirigé la session et, ce faisant, il a donné du temps à chaque stagiaire pour partager un peu sur lui-même. Ce faisant, il a créé un espace offrant à tous les stagiaires l’accès à la voix, aux expériences et à l’identité vécue des autres. Il a créé une atmosphère bienveillante et puissante. Il a fait exactement ce que j’ai fait en tant qu’enseignant en classe. Michael a également fait un commentaire percutant. Il a déclaré : « Car un effort important que fait ETS pour promouvoir l’équité est d’inviter un groupe diversifié de stagiaires à travailler avec nous et à nous enseigner ce que vous savez ; à rester en contact et à collaborer avec nous à l’avenir pour faire avancer le domaine dans la bonne direction. » Une autre membre de l’ETS lors de l’appel était la chercheuse principale responsable Cara Cahalan Laitusis. Cara a mentionné un commentaire à nous tous pendant la séance, et je l’ai trouvé puissant. Elle a déclaré : « ... c’est plus que d’avoir une équipe diversifiée, mais aussi donner aux gens le pouvoir de s’exprimer. »

Ce type de commentaires tenus lors de notre réunion démontre la valeur que ces deux ETSers et ETS ont pour accroître l’équité et l’équité dans l’évaluation de l’éducation. Il est évident que ce travail est plus important que jamais lorsque les institutions sont remises en question.

Janine Jackson est stagiaire NAEP-Summer Pre-Doctoral Research Experience (SPRE) qui poursuit actuellement son doctorat en psychométrie à la Morgan State University à Baltimore, Maryland. Christopher Terrazas est stagiaire NAEP-Summer Pre-Doctoral Research Experience qui poursuit actuellement son doctorat à l’Université du Texas à Austin.