Les bases psychométriques du test TOEFL^® Essentials™

8 décembre 2021

Le test TOEFL^® Essentials™ a été développé pour fournir des informations valides et fiables sur la maîtrise de l’anglais d’un candidat, en utilisant un design ciblé pour son niveau de compétence, avec un format convivial et engageant, nécessitant un court temps de passage du test. La base psychométrique et l’approche utilisées pour mesurer le niveau de maîtrise de l’anglais des candidats sont essentielles pour garantir une mesure précise des compétences en anglais de l’examinateur. Une discussion plus complète sur la psychométrie sous-jacente au test TOEFL Essentials est proposée dans le cadre de conception du test TOEFL^® Essentials™ 2021.

Utilisation d’une approche adaptative multi-étapes pour la mesure

Pour assurer une mesure de haute qualité, précise et efficace sur un large éventail de niveaux de maîtrise linguistique, les sections Écoute, Lecture et Écriture du test TOEFL Essentials sont conçues comme des tests adaptatifs à plusieurs étapes (MST). C’est-à-dire que chaque test est composé de deux parties (étapes) où la performance de la première partie est alignée sur les tâches réalisées lors de la seconde partie.  Un avantage clé de l’approche MST est qu’elle permet un assemblage ciblé du contenu des tests, combiné à une révision rigoureuse de toutes les sections par des spécialistes psychométriques et experts avant l’administration. De plus, cette approche facilite l’intégration efficace du design basé sur les tâches que l’on observe dans tous les tests de la famille d’évaluations du TOEFL, où les tâches du test reflètent ceux que les candidats sont susceptibles de rencontrer en utilisant l’anglais dans les contextes académiques et de la vie quotidienne.^®

Application des MST dans le test TOEFL Essentials

Le MST pour chaque section du test TOEFL Essentials, à l’exception de la section Oral, se compose de deux parties. La première partie, ou étape, présentée aux candidats consiste en des tâches considérées comme de difficulté moyenne, la seconde partie contenant des tâches à un niveau de difficulté qui « s’adapte » selon la performance de la première partie. Par exemple, si un candidat obtient de très bons résultats dans la première partie de la section Écoute, la seconde partie de la section Écoute présentée au candidat sera de niveau de difficulté plus élevé.

Le contenu de la deuxième étape pour les sections Écoute Orale et Lecture est classé en trois niveaux de difficulté (faible, moyen et haut). Pour la section Écriture, la deuxième étape est classée en deux niveaux de difficulté (faible et moyen/élevé), les tâches d’examen étant la deuxième étape de difficulté moyenne/élevée conçue pour être accessible aux individus de toute une large gamme de grilles de compétence et de notation qui différencient les niveaux moyens et élevés.

Contrairement aux sections Écoute, Lecture et Écriture, la section Expression orale utilise une approche non adaptative, ou linéaire, où tous les candidats reçoivent les mêmes questions pour l’ensemble du test, avec des tâches conçues pour être accessibles à un large éventail de compétences et offrant de nombreuses occasions pour le candidat de démontrer ses compétences orales. Une gamme de difficultés combinée à de multiples possibilités de mesure permet de couvrir l’ensemble de la maîtrise linguistique sans avoir besoin d’étapes séparées.

Utilisation de méthodes psychométriques et statistiques innovantes

Pour chaque section test, des méthodologies psychométriques et statistiques établies et innovantes sont employées afin d’assurer la cohérence de la difficulté et la comparabilité des scores entre les différentes versions. Dans chacune des quatre sections du test, les candidats peuvent recevoir des scores allant de 1 à 12. Les notes pour les sections Écoute, Lecture et Écriture prennent en compte les performances sur les deux parties, ainsi que le niveau de difficulté. Les scores de la section Expression orale sont basés sur la performance globale à toutes les tâches.

Il est important de noter que tous les aspects de ces conceptions de tests TOEFL Essentials sont guidées par le riche héritage de la recherche et du développement de l’ETS dans le domaine de la psychométrie et des tests de langage, y compris l’innovation dans la conception et la mise en œuvre de la MST pour des évaluations à grande échelle. Comme pour toutes les évaluations de l’ETS, les Normes ETS pour la Qualité et l’Équité ainsi que les tests pilotes étendus avec un large éventail de candidats ont informé les détails et la mise en œuvre de la conception finale afin de répondre au mieux aux besoins des candidats et des utilisateurs des scores, tout en maintenant l’intégrité psychométrique des résultats. Le suivi statistique et les études de recherche seront en cours après le lancement afin de soutenir la validité et la fiabilité continues des résultats des tests.

Pour en savoir plus sur le test TOEFL Essentials, rendez-vous sur https://www.ets.org/toefl/score-users/essentials.html

Venessa Manna est directrice exécutive de l’analyse psychométrique et de la recherche (PAR) chez ETS.