Relier la prise de parole du TOEFL à la prise de parole à l’université

Prendre la parole est essentiel pour réussir dans les études universitaires. Les étudiants de licence comme de master utilisent la langue orale pour gérer une variété de tâches sur le campus et en dehors. Les étudiants en master enseignent ou donnent aussi fréquemment de soutien aux étudiants de premier cycle ou travaillent dans des laboratoires de recherche collaborative.

La version mise à jour du TOEFL iBT propose deux tâches de prise de parole : Écouter, répéter et passer une interview. Listen & Repeat exige que les candidats écoutent une phrase et la répètent aussi précisément que possible, tandis que l’entretien virtuel consiste en des réponses ouvertes à une série de questions liées à la vie académique.

Nous avons récemment mené des recherches sur ces tâches ici à l’Université d’Hawaï à Mānoa. En tant que professeurs enseignants, mentors et encadrements d’étudiants internationaux, nous savons à quel point les compétences orales sont importantes pour la réussite des étudiants. En tant que chercheurs, nous nous intéressons vivement à la manière dont les tâches de test, comme celles présentées dans les examens TOEFL, se rapportent fortement aux capacités de parole réelles.

Les tests de langue servent à prendre des décisions concernant de vraies personnes. Lors de l’utilisation de tests linguistiques pour les admissions à l’enseignement supérieur, la principale préoccupation est de s’assurer qu’un futur étudiant sera capable de répondre aux exigences linguistiques de l’apprentissage anglophone. Ainsi, lorsqu’un score de test est utilisé pour prendre une décision d’admission, nous supposons que ce score nous indique quelque chose sur la capacité d’un étudiant à utiliser l’anglais à l’université.

Les résultats des tests sont basés sur les résultats aux tests. Pour la prise de parole, les performances des élèves peuvent inclure des performances très contraintes, comme les tâches Lire à voix haute et Écouter & Répéter où ce que l’élève doit dire est présenté sous forme écrite/auditive, ainsi que des performances plus spontanées et créatives, comme des réponses aux questions de la tâche Entretien Virtuel.

Pour accroître la confiance dans ce que les résultats des tests nous révèlent sur les capacités concrètes, examiner les qualités des candidats sur les tâches et autres tâches en dehors du test a une valeur. Essentiellement, nous voulions savoir que la fluidité et la précision avec lesquelles les élèves parlent lors du test est indicative de leur capacité à produire un langage fluide et précis dans la communication réelle.

Nous avons recruté 149 étudiants internationaux, tous utilisateurs de l’anglais langue seconde. Pour garantir que nous représentions la large gamme de compétences, nous avons inclus des étudiants engagés dans des programmes intensifs à temps plein d’anglais langue seconde, des étudiants inscrits simultanément à des cours universitaires et des cours d’anglais académique, ainsi que des étudiants de licence et de master pleinement inscrits.

Chaque élève a accompli des tâches de prise de parole administrées sur la plateforme opérationnelle de tests ETS. ETS nous a fourni leurs partitions orales et enregistrements audio. Nous avons également demandé à chaque participant de réaliser deux tâches académiques de prise de parole en laboratoire en présentiel. Ces tâches consistaient (1) à décrire un graphe et (2) à écouter un cours de 8 minutes sur le bilinguisme, puis à répondre aux questions du chercheur.

Les étudiants devaient également enregistrer et soumettre un devoir de parole lié à leurs programmes académiques. Quatre-vingt-dix-neuf étudiants l’ont fait, avec 65 soumissions formelles.

Nous avons analysé tous les échantillons de parole pour détecter une gamme de caractéristiques de complexité, de précision et de fluidité liées à la grammaire, au vocabulaire et à la prononciation. Nous avons également eu des enseignants expérimentés de l’anglais langue seconde qui ont évalué l’efficacité communicative des échantillons de discours non testés.

En comparant les scores des tâches individuelles aux évaluations de l’expression orale des deux tâches de laboratoire et de la tâche orale basée sur le cours, nous avons trouvé de fortes corrélations positives (Tableau 1).

Tableau 1.

Corrélations entre les scores de parole du TOEFL et les évaluations non issues des tests.

Note. Toutes les corrélations étaient statistiquement significatives au niveau p < 0,001.

Pour les caractéristiques linguistiques, les résultats étaient plus complexes. D’une part, certaines caractéristiques linguistiques comme la diversité lexicale (diversité de l’utilisation du vocabulaire) n’étaient pas pertinentes pour la tâche Écouter et Répéter, qui présentait des réponses très contraintes.

Certaines caractéristiques linguistiques présentaient de fortes corrélations positives entre les tâches de parole TOEFL et celles non test, telles que celles liées à la fluidité et à la précision de la production orale. D’autres caractéristiques linguistiques présentaient des corrélations positives faibles à modérées, comme les caractéristiques de complexité (par exemple, le nombre de mots ou de propositions par phrase prononcée). D’autres fonctionnalités avaient peu d’association entre les tâches.

En résumé, il est apparu que des aspects de la production de paroles liés à la capacité générale à traiter l’anglais, tels que la fluidité et la précision de la grammaire, du vocabulaire et de la prononciation, étaient fortement corrélés entre les performances aux tests et hors tests. Les aspects de la parole plus influencés par les exigences de la tâche, comme la grammaire et le choix de vocabulaire, étaient moins fortement corrélés. 

Nos recherches suggèrent fortement que les élèves qui obtiennent de bons scores dans des tâches comme Écouter et Répéter et Passer un entretien sont capables de communiquer efficacement en dehors du contexte d’un test. Cette constatation s’est vérifiée aussi bien pour les tâches académiques simulées en laboratoire (description de graphe et réponse au cours) que pour les présentations authentiques liées aux cours des étudiants.

Alors que la tâche Prendre une interview, qui présente une production linguistique plus spontanée et créative par les candidats au test, avait tendance à présenter les plus fortes corrélations avec les tâches non testées, la tâche Écouter et Répéter présentait des corrélations tout aussi fortes dans la plupart des cas. Notamment, il semblait capturer efficacement les aspects liés à la fluidité et à la précision de la capacité d’expression orale des candidats qui sont en jeu dans tous les contextes parlés.

Dans l’ensemble, nous avons constaté que les deux types d’items étaient de bons indicateurs de la performance des élèves sur les tâches académiques simulées et réelles.

Daniel R. Isbell est professeur associé au département d’études des langues secondes de l’Université d’Hawaï à Mānoa, où il mène des recherches et enseigne des cours axés sur l’évaluation du langage.

Dustin Crowther est professeur associé au département d’études des langues secondes à l’Université d’Hawaï à Mānoa. Il mène des recherches sur l’intelligibilité de la parole en langue seconde, avec un accent principal sur les anglais globals.