Relier la prise de parole du TOEFL à la prise de parole à l’université

La prise de parole est essentielle à la réussite des études universitaires. Les étudiants de premier cycle comme de master utilisent la langue orale pour gérer diverses tâches, sur le campus et en dehors. Les étudiants en master enseignent ou tutorent aussi fréquemment des étudiants de premier cycle ou travaillent dans des laboratoires de recherche collaborative.

La mise à jour du TOEFL iBT propose deux tâches orales : Écouter & Répéter et Passer un Entretien. Écouter et Répéter exige que les candidats écoutent une phrase et la répètent aussi précisément que possible, tandis que l’Entretien Virtuel consiste en des réponses ouvertes à une série de questions liées à la vie académique.

Nous avons récemment mené des recherches sur ces tâches ici à l’Université d’Hawaï à Mānoa. En tant que professeurs enseignants, mentors et encadrements d’étudiants internationaux, nous savons à quel point les compétences orales sont importantes pour la réussite des étudiants. En tant que chercheurs, nous nous intéressons vivement à la manière dont les tâches de test, comme celles présentées dans les examens TOEFL, sont liées aux capacités d’expression orale réelles.

Les tests linguistiques servent à prendre des décisions concernant de vraies personnes. Lors de l’utilisation des tests linguistiques dans les admissions dans l’enseignement supérieur, la principale préoccupation est de s’assurer qu’un futur étudiant sera capable de répondre aux exigences linguistiques de l’étude anglophone. Ainsi, lorsqu’un score de test est utilisé pour prendre une décision d’admission, nous supposons que ce score nous indique quelque chose sur la capacité d’un étudiant à utiliser l’anglais à l’université.

Les scores des tests sont basés sur les performances des tests. Pour la prise de parole, les performances des élèves peuvent inclure des performances très contraintes, comme les tâches Lecture à voix haute et Écouter & Répéter où ce que l’élève doit dire est présenté sous forme écrite/orale, ainsi que des performances plus spontanées et créatives, comme les réponses aux questions de la tâche d’Entretien Virtuel.

Pour accroître la confiance dans ce que les résultats des tests nous révèlent sur les capacités concrètes, examiner les qualités des candidats lors des tâches et tâches en dehors du test a de la valeur. Essentiellement, nous voulions savoir que la fluidité et la précision des élèves lors du test est révélatrice de leur capacité à produire un langage dans la communication réelle.

Nous avons recruté 149 étudiants internationaux, tous utilisateurs de l’anglais langue seconde. Pour représenter la large gamme de compétences, nous avons inclus des étudiants engagés dans des programmes intensifs d’anglais langue seconde à temps plein, des étudiants inscrits simultanément à des cours universitaires et des cours d’anglais académique, ainsi que des étudiants de licence et de master pleinement inscrits.

Chaque étudiant a réalisé des tâches orales administrées sur la plateforme opérationnelle de test ETS. L’ETS nous a fourni ses scores d’expression orale et des enregistrements audio. Nous avons également demandé à chaque participant de réaliser deux tâches académiques de prise de parole en laboratoire en présentiel. Ces tâches consistaient (1) à décrire un graphique et (2) à écouter un cours magistral de 8 minutes sur le bilinguisme, puis à répondre aux questions du chercheur.

Les étudiants devaient également enregistrer et soumettre un devoir de discours lié à leurs programmes académiques. Quatre-vingt-dix-neuf étudiants l’ont fait, dont 65 soumissions étaient des présentations officielles.

Nous avons analysé tous les échantillons de parole pour détecter une gamme de caractéristiques de complexité, de précision et de fluidité liées à la grammaire, au vocabulaire et à la prononciation. Nous avons également fait évaluer l’efficacité communicative des enseignants expérimentés de l’anglais langue seconde des échantillons de discours non testés.

En comparant les scores des tâches individuelles aux évaluations de l’expression orale des deux tâches de laboratoire et de la tâche orale basée sur le cours, nous avons trouvé de fortes corrélations positives (Tableau 1).

Tableau 1.

Corrélations entre les scores de parole du TOEFL et les évaluations non issues des tests.

Note. Toutes les corrélations étaient statistiquement significatives au niveau p < 0,001.

Pour les caractéristiques linguistiques, les résultats étaient plus complexes. D’une part, certaines caractéristiques linguistiques comme la diversité lexicale (diversité de l’utilisation du vocabulaire) n’étaient pas pertinentes pour la tâche Écouter et Répéter, qui présentait des réponses très contraintes.

Certaines caractéristiques linguistiques présentaient de fortes corrélations positives entre les tâches orales TOEFL et les tâches non test, telles que celles liées à la fluidité et à la précision de la production orale. D’autres caractéristiques linguistiques présentaient des corrélations positives faibles à modérées, comme les caractéristiques de complexité (par exemple, le nombre de mots ou de propositions par phrase prononcée). D’autres caractéristiques avaient peu d’association entre les tâches.

En résumé, il est apparu que certains aspects de la production du discours liés à la capacité générale à traiter l’anglais, tels que la fluidité et la précision de la grammaire, du vocabulaire et de la prononciation, étaient fortement corrélés entre les performances aux tests et hors tests. Les aspects de la parole plus influencés par les exigences des tâches, tels que la grammaire et les choix de vocabulaire, étaient moins fortement corrélés. 

Nos recherches suggèrent fortement que les étudiants qui obtiennent de bons scores dans des tâches comme Écouter, Répéter et Passer un Entretien sont capables de communiquer efficacement en dehors du contexte d’un test. Ce résultat s’est vérifié aussi bien pour les tâches académiques simulées en laboratoire (Description du graphique et Réponse au cours) que pour les présentations authentiques liées aux cours des étudiants.

Alors que la tâche Prendre un Entretien, qui présente une production linguistique plus spontanée et créative par les candidats au test, avait tendance à présenter les plus fortes corrélations avec les tâches non liées au test, la tâche Écouter et Répéter présentait des corrélations tout aussi fortes dans la plupart des cas. Notamment, elle semblait capturer efficacement les aspects liés à la fluidité et à la précision de la capacité orale des candidats qui sont en jeu dans tous les contextes parlés.

Dans l’ensemble, nous avons constaté que les deux types d’items étaient de bons indicateurs de la performance des élèves sur les tâches académiques simulées et réelles.

Daniel R. Isbell est professeur associé au département d’études des langues secondes de l’Université d’Hawaï à Mānoa, où il mène des recherches et enseigne des cours axés sur l’évaluation du langage.

Dustin Crowther est professeur associé au département d’études des langues secondes de l’Université d’Hawaï à Mānoa. Il mène des recherches sur l’intelligibilité de la parole langue seconde, avec un accent principal sur les anglais globals.