Avaliação das Qualificações em Língua Inglesa: Como o TOEFL iBT® Cumpre os Principais Padrões de Avaliação do Inglês

No Reino Unido, a BUILA (a International Liaison Association das Universidades Britânicas) e a BALEAP (British Association of Lecturers in English for Academic Purpose) são duas organizações profissionais que colaboram em questões relacionadas com o recrutamento de estudantes internacionais e o uso do inglês em contextos académicos.

Recentemente, a BUILA, que representa os escritórios internacionais das universidades britânicas, e a BALEAP, um grupo que apoia professores e investigadores, uniram forças para apresentar um conjunto de recomendações para medir a eficácia de um teste de inglês académico.

Esta publicação, English Language Good Practices Guide: Testing Qualifications and English for Academic Purposes in Higher Education, oferece orientações práticas para universidades que pretendem garantir que os estudantes internacionais têm competências académicas suficientes em inglês para terem sucesso nas salas de aula modernas.

A Secção 1 do Guia, "Avaliação das Qualificações em Língua Inglesa", levanta algumas questões-chave sobre a qualidade global dos testes que as instituições de ensino superior devem considerar antes de aceitarem um teste de inglês. Neste artigo, partilhamos como o TOEFL iBT aborda cada questão chave levantada por esta valiosa orientação BUILA-BALEAP.

O TOEFL iBT baseia-se em mais de seis décadas de investigação em avaliação em inglês para medir as competências essenciais de comunicação que os estudantes devem usar nos ambientes académicos atuais. Exemplos de como o conteúdo do TOEFL reflete as exigências linguísticas e de comunicação dos contextos académicos e profissionais modernos incluem: 

• Leitura de passagens relevantes em contextos académicos, como manuais escolares, jornais e revistas
• Uma amostra de artigos em websites e publicações nas redes sociais que oferecem uma estrutura relevante para testar a compreensão de significados implícitos, opiniões e outros aspetos pragmáticos da comunicação que são vitais nas salas de aula de hoje
• Palestras académicas e palestras (entrada monológica), bem como interações de grupo (entrada dialógica) relevantes em ambientes dinâmicos de sala de aula e contextos de aprendizagem experiencial
• Respostas escritas para situações comuns, como escrever um email a um professor ou colega, bem como escrever para uma discussão académica online (exigindo a síntese de contributos tanto de um professor como de colegas)
• Uma entrevista com um interlocutor simulado – no contexto de uma interação académica

Cada tarefa individual no TOEFL iBT trabalha em conjunto com as outras tarefas de cada secção para abordar uma variedade de competências relevantes, permitindo-nos obter uma medição precisa e útil da capacidade de leitura, escuta, escrita e fala em cada secção do teste.

Pesquisas independentes mostraram, para usar um exemplo, que as tarefas de Expressão Oral no TOEFL iBT são muito bons indicadores de desempenho em tipos típicos de fala académica. Este, claro, continua a ser o objetivo central de uma avaliação de inglês de alto risco como o TOEFL.

Outro exemplo desta abordagem holística de medição: Na nossa secção de Escuta, vários tipos de tarefas desempenham funções diferentes e apresentam diferentes tipos (e duração) de entrada. Estas tarefas permitem a medição de muitas competências (por exemplo, capacidade de compreender significados implícitos), contextos (por exemplo, interação profissional e académica) e géneros (por exemplo, conversas; palestras).

Mas uma análise mais atenta dos tipos individuais de itens também mostra a sua representatividade da comunicação académica que os estudantes encontrarão em ambientes do mundo real. Mais exemplos são apresentados abaixo.

• Na secção de Leitura, Ler uma Passagem Académica oferece uma visão da capacidade do estudante para obter informação e compreender o significado de textos complexos, como é comum no estudo académico.
• Na secção de Escrita, Escrever para uma Discussão Académica, que ocorre no contexto de uma discussão em aula provocada por um professor, pede ao aluno que expresse as suas próprias opiniões, apoiadas por raciocínios, conhecimentos ou experiência relevantes. Espera-se também que os alunos respondam às contribuições dos colegas.
• Take an Interview, uma das duas tarefas de Speaking, pede aos alunos que participem numa conversa simulada com um entrevistador pré-gravado. A entrevista decorre em várias situações académicas, como participar num estudo de investigação. As perguntas iniciais focam-se em informação factual e experiência pessoal; as perguntas posteriores pedem aos alunos que expressem e apoiem opiniões sobre questões mais amplas.
• Na secção de Escuta, a nossa tarefa de Conversa Académica mede a capacidade do aluno de compreender uma aula monológica. Esta tarefa é usada em conjunto com tarefas como Ouvir uma Conversa para medir a capacidade do aluno de ter sucesso em ambientes de sala de aula modernos, onde participar ativamente em discussões de grupo é muitas vezes tão importante como ouvir unidirecionalmente numa sala de aulas.

O envolvimento de uma ampla gama de processos cognitivos – não apenas a compreensão ou recordação superficiais – continua a ser o centro do design do TOEFL. As tarefas do TOEFL iBT também testam operações cognitivas, como análise, síntese e pensamento crítico, que são esperadas em contextos académicos rigorosos – a nível global e no Reino Unido.

Para começar, as tarefas de Escrita no TOEFL atual envolvem uma vasta gama de processos cognitivos, incluindo micro-planeamento, macro-planeamento, monitorização e síntese de informação.

As tarefas de leitura do TOEFL medem processos cognitivos como compreender vocabulário académico, integrar informação textual entre frases, inferir a situação implícita num texto, compreender o ponto de vista do autor e inferir o significado da linguagem figurativa.

A compreensão oral do TOEFL testa a capacidade do aluno para identificar ideias principais e detalhes de apoio, derivar relações entre ideias, tirar inferências, compreender o propósito e a atitude do orador, e processar dispositivos de fala e organização prolongados. Os alunos também devem utilizar informação fonológica, significado lexical e gramatical, e informação pragmática.

E o TOEFL Speaking mede a capacidade de processar e produzir rapidamente a linguagem falada, planear e organizar uma resposta falada, avaliar e formar uma opinião, e criar um argumento estruturado. Também requer estratégias metacognitivas (como monitorizar a pronúncia enquanto se fala) e a gestão do discurso (controlar o ritmo e a entoação; usar transições).

Sim, o teste avalia as quatro competências linguísticas — leitura, escuta, escrita e fala — como componentes separados. Ao mesmo tempo, as tarefas do teste exigem que os candidatos combinem múltiplas competências em inglês, como compreensão auditiva ou leitura, para fornecer respostas faladas ou escritas de forma eficaz às perguntas do teste. 

Esta integração entre competências linguísticas torna estas tarefas de teste ferramentas vitais para medir a proficiência em inglês dos candidatos.

Desde o desenvolvimento de itens e tarefas até ao desenvolvimento e avaliação da pontuação, o teste iBT do TOEFL está fortemente alinhado com cada um dos níveis do CEFR. Em primeiro lugar, os níveis do CEFR são parte integrante do desenvolvimento e alinhamento direcionados dos itens como evidência das afirmações e declarações do que se pode fazer, conforme articulado nas Especificações do Teste.

O desenvolvimento da escala de pontuação por faixas (1-6) também reflete cada um dos seis níveis do CECR (A1-C2). A escala tem o benefício adicional da consistência e facilidade de interpretação, pois as mesmas pontuações são fornecidas nas quatro pontuações das secções do teste, bem como a pontuação global (que é a média arredondada das pontuações das secções). Por exemplo, uma pontuação de 4 está alinhada com o nível B2 do CECR para Leitura, Escuta, Escrita, Fala, bem como a pontuação global.

O desenvolvimento da escala foi multifacetado e incluiu metodologias de mapeamento, incluindo ligação vertical, avaliação de conteúdos e alinhamento entre tarefas e descritores CECR, bem como definição de padrões. Como os tipos de tarefas e o número de itens disponíveis em cada secção de teste variam, a metodologia para mapear os resultados dos testes para os níveis CECR também variou para as secções de teste que avaliam competências linguísticas receptivas e as secções de teste que avaliam competências linguísticas produtivas.

Estes métodos são descritos num artigo de investigação, que documenta ainda como o teste TOEFL iBT reflete as competências associadas à proficiência em inglês conforme descritas nos níveis do CEFR, do A1 ao C2. Está planeada investigação independente para apoiar estes esforços na última edição do TOEFL iBT, que beneficiará de dados operacionais como evidência de verificação.