Avaliação das Qualificações em Língua Inglesa: Como o TOEFL iBT® Cumpre os Principais Padrões de Avaliação do Inglês

No Reino Unido, a BUILA (a International Liaison Association das Universidades Britânicas) e a BALEAP (British Association of Lecturers in English for Academic Purpose) são duas organizações profissionais que colaboram em questões relacionadas com o recrutamento de estudantes internacionais e o uso do inglês em contextos académicos.

Recentemente, a BUILA, que representa os escritórios internacionais das universidades britânicas, e a BALEAP, um grupo que apoia professores e investigadores, uniram forças para apresentar um conjunto de recomendações para medir a eficácia de um teste de inglês académico.

Esta publicação, English Language Good Practices Guide: Testing Qualifications and English for Academic Purposes in Higher Education, oferece orientações práticas para universidades que pretendem garantir que os estudantes internacionais têm competências académicas suficientes em inglês para terem sucesso nas salas de aula modernas.

A Secção 1 do Guia, "Avaliação das Qualificações da Língua Inglesa", levanta algumas questões-chave sobre a qualidade global dos testes que as instituições de ensino superior devem considerar antes de aceitarem um teste de inglês. Neste artigo, partilhamos como o TOEFL iBT responde a cada questão-chave levantada por esta valiosa orientação BUILA-BALEAP.

O TOEFL iBT baseia-se em mais de seis décadas de investigação em avaliação em inglês para medir as competências essenciais de comunicação que os alunos devem usar nos ambientes académicos atuais. Exemplos de como o conteúdo do TOEFL reflete as exigências linguísticas e de comunicação dos contextos académicos e profissionais modernos incluem: 

• Leitura de passagens relevantes em contextos académicos, como manuais escolares, jornais e revistas
• Uma amostra de artigos em websites e publicações nas redes sociais que oferecem uma estrutura relevante para testar a compreensão de significados implícitos, opiniões e outros aspetos pragmáticos da comunicação que são vitais nas salas de aula de hoje
• Palestras académicas e palestras (entrada monológica), bem como interações de grupo (entrada dialógica) relevantes em ambientes dinâmicos de sala de aula e contextos de aprendizagem experiencial
• Respostas escritas para situações comuns, como escrever um email a um professor ou colega, bem como escrever para uma discussão académica online (exigindo a síntese de contributos tanto de um professor como de colegas)
• Uma entrevista com um interlocutor simulado – no contexto de uma interação académica

Cada tarefa individual no TOEFL iBT trabalha em conjunto com as outras tarefas de cada secção para abordar uma variedade de competências relevantes, permitindo-nos obter uma medição precisa e útil da capacidade de leitura, escuta, escrita e fala em cada secção do teste.

Pesquisas independentes mostraram, para usar um exemplo, que as tarefas de oratória no TOEFL iBT são indicadores muito bons de desempenho em tipos típicos de discurso académico. Este, claro, continua a ser o objetivo central de uma avaliação de inglês de alto risco como o TOEFL.

Outro exemplo desta abordagem holística de medição: na nossa secção de Escuta, vários tipos de tarefas desempenham funções diferentes e apresentam diferentes tipos (e durações) de entrada. Estas tarefas permitem medir muitas competências (por exemplo, capacidade de compreender significados implícitos), contextos (por exemplo, interação profissional e académica) e géneros (por exemplo, conversas; palestras).

Mas uma análise mais atenta dos tipos individuais de itens também mostra a sua representatividade na comunicação académica que os alunos encontrarão em ambientes do mundo real. Mais exemplos são apresentados abaixo.

• Na secção de Leitura, Ler uma Passagem Académica oferece uma visão da capacidade do estudante para obter informação e compreender o significado de textos complexos, como é comum no estudo académico.
• Na secção de Escrita, Escrever para uma Discussão Académica, que ocorre no contexto de uma discussão em aula provocada por um professor, pede ao aluno que expresse as suas próprias opiniões, apoiadas por raciocínio, conhecimento ou experiência relevantes. Espera-se também que os alunos respondam às contribuições dos colegas.
• Take an Interview, uma das duas tarefas de Speaking, pede aos alunos que participem numa conversa simulada com um entrevistador pré-gravado. A entrevista decorre em várias situações académicas, como a participação num estudo de investigação. As perguntas iniciais focam-se em informação factual e experiência pessoal; As perguntas posteriores pedem aos alunos que expressem e apoiem opiniões sobre questões mais amplas.
• Na secção de Escuta, a nossa tarefa de Conversa Académica mede a capacidade do aluno para compreender uma aula monológica. Esta tarefa é usada em conjunto com tarefas como Ouvir uma Conversa para medir a capacidade de um aluno ter sucesso em ambientes modernos de sala de aula, onde participar ativamente em discussões de grupo é frequentemente tão importante como ouvir unidirecionalmente numa sala de aulas.

O envolvimento de uma vasta gama de processos cognitivos – não apenas a compreensão ou recordação superficiais – continua a ser o cerne do design do TOEFL. As tarefas do TOEFL iBT também testam operações cognitivas, como análise, síntese e pensamento crítico, que são esperadas em contextos académicos rigorosos – a nível global e no Reino Unido.

Para começar, as tarefas de Escrita no TOEFL atual envolvem uma vasta gama de processos cognitivos, incluindo micro-planeamento, macro-planeamento, monitorização e síntese de informação.

As tarefas de leitura do TOEFL medem processos cognitivos como compreender vocabulário académico, integrar informação textual entre frases, inferir a situação implícita num texto, compreender o ponto de vista do autor e inferir o significado da linguagem figurativa.

A compreensão auditiva do TOEFL testa a capacidade do aluno para identificar ideias principais e detalhes de apoio, derivar relações entre ideias, tirar inferências, compreender o propósito e a atitude do orador, e processar dispositivos de fala e organização prolongados. Os alunos também devem utilizar informação fonológica, significado lexical e gramatical, e informação pragmática.

E o TOEFL Speaking mede a capacidade de processar rapidamente e produzir linguagem falada, planear e organizar uma resposta oral, avaliar e formar uma opinião, e criar um argumento estruturado. Também requer estratégias metacognitivas (como monitorizar a pronúncia ao falar) e gestão do discurso (controlar o ritmo e a entoação; usar transições).

Sim, o teste avalia as quatro competências linguísticas — leitura, escuta, escrita e fala — como componentes separados. Ao mesmo tempo, as tarefas de teste exigem que os candidatos combinem múltiplas competências de inglês, como compreensão auditiva ou leitura, para fornecer respostas faladas ou escritas de forma eficaz às perguntas do teste. 

Esta integração entre competências linguísticas torna estas tarefas de teste ferramentas vitais para medir a proficiência em inglês dos candidatos.

Desde o desenvolvimento de itens e tarefas até ao desenvolvimento da pontuação e avaliação, o teste TOEFL iBT está fortemente alinhado com cada um dos níveis do CECR. Em primeiro lugar, os níveis do CECR são essenciais para o desenvolvimento e alinhamento direcionados dos itens como evidência para as afirmações e declarações de "possíveis", conforme articulado nas Especificações de Teste.

O desenvolvimento da escala de pontuação por faixas (1-6) também reflete cada um dos seis níveis do CEFR (A1-C2). A escala tem um benefício adicional de consistência e facilidade de interpretação, pois as mesmas pontuações são fornecidas nas quatro pontuações das secções do teste, bem como na pontuação global (que é a média arredondada das pontuações das secções). Por exemplo, uma pontuação de 4 está alinhada com o nível B2 do CECR em Leitura, Compreensão Oral, Escrita, Fala, bem como com a pontuação global.

O desenvolvimento à escala foi multifacetado e incluiu metodologias de mapeamento, incluindo ligação vertical, avaliação de conteúdos e alinhamento entre tarefas e descritores CEFR, bem como definição de normas. Como os tipos de tarefas e o número de itens disponíveis em cada secção de teste variam, a metodologia para mapear as pontuações dos testes aos níveis do CECR também variou nas secções de teste que avaliavam competências linguísticas receptivas e nas secções de teste que avaliavam competências linguísticas produtivas.

Estes métodos são descritos num artigo de investigação, que documenta ainda como o teste TOEFL iBT reflete as competências associadas à proficiência em inglês, conforme descrito nos níveis do CECR, do A1 ao C2. Está planeada investigação independente para apoiar estes esforços na última edição do TOEFL iBT e beneficiará de dados operacionais como prova de verificação.