Validade do Teste por Design: Um Quadro para o Teste Essencial™ do TOEFL^®

2 de junho de 2021 

Como pode um teste ser simultaneamente uma medida válida e fiável da proficiência em inglês, ao mesmo tempo que proporciona aos candidatos uma experiência conveniente e amigável para os alunos? Por design. O recentemente lançado teste TOEFL^® Essentials™ foi concebido especificamente para proporcionar a combinação ideal – a qualidade que as instituições confiam e o acesso acessível que os candidatos desejam. Embora oferecer informação válida e fiável não seja um conceito novo, o teste recentemente lançado consegue isso num curto tempo, a um preço acessível, utilizando um formato que pretende ser amigável e envolvente para os candidatos. Juntamente com o lançamento do novo teste, vem uma publicação de 50 páginas, Design Framework for the TOEFL^® Essentials™ Test 2021 (PDF), que apresenta o conteúdo do teste e os seus procedimentos de pontuação, apresentando uma agenda detalhada de investigação que apoia a utilização das pontuações.

Como o quadro apoia a validade das pontuações dos testes

A estrutura de design do teste foi publicada para mostrar às instituições que podem confiar no teste TOEFL Essentials devido à sua abordagem inovadora ao desenho do teste. O desenho do teste TOEFL Essentials resulta da colaboração entre investigadores de aprendizagem de línguas, desenvolvedores de conteúdos, psicometristas e líderes focados em negócios da ETS dentro do ^{programa TOEFL®} . Foi também informado por contributos de extensas pesquisas de mercado, incluindo cerca de 250 utilizadores de pontuação de instituições dos Estados Unidos, Canadá e Reino Unido e mais de 7.000 candidatos em todo o mundo.

O novo teste inclui tarefas que foram testadas com milhares de candidatos em todo o mundo e que abrangem duas dimensões-chave da proficiência linguística: aspetos fundamentais da competência linguística e a capacidade comunicativa baseada em tarefas em contextos académicos e do dia a dia. Ao combinar estas dimensões-chave, o teste TOEFL Essentials mede o que os candidatos podem fazer ao usar inglês, e não apenas o seu conhecimento de inglês. Ao contrário das tarefas limitadas e inautênticas encontradas noutros testes linguísticos realizados a partir de casa, as tarefas do teste TOEFL Essentials são concebidas para fornecer informação direta sobre o sucesso dos candidatos no mundo real. Por exemplo, os candidatos terão de contribuir para uma conversa focada na academia ou escrever aos seus professores e amigos.

Para além da sua abordagem ao desenho de testes, o TOEFL Essentials também apresenta uma metodologia inovadora de teste adaptativo em múltiplos estágios. Esta metodologia permite uma medição eficiente da proficiência linguística, administrando as secções de escuta, leitura e escrita em duas partes para melhor corresponder à capacidade linguística individual dos candidatos. A primeira parte contém tarefas de teste de dificuldade média, e as respostas a esta parte determinam a dificuldade das tarefas da segunda parte. Ao contrário dos testes caseiros que dependem da adaptividade "em tempo real", a metodologia adaptativa multiestágio do teste TOEFL Essentials permite-nos realizar tarefas robustas de comunicação, elaboradas para cada etapa por especialistas em avaliação e direcionadas ao nível de proficiência do candidato.

Um legado de investigação

A estrutura de design do teste apresenta inúmeras razões pelas quais os utilizadores podem confiar no teste, para além das suas provas de validade. Com procedimentos de segurança abrangentes, informação transparente das pontuações e inclusão de uma Declaração Pessoal em Vídeo, estes elementos tornam o teste TOEFL Essentials um teste digno de confiança e amigável para os candidatos a demonstrar as suas competências em inglês. Durante mais de 50 anos, a Família de Avaliações TOEFL tem sido apoiada por investigação rigorosa e de alta qualidade, e o teste TOEFL Essentials não é exceção. Tal como todos os outros testes da Família de Avaliações TOEFL, o programa de investigação para o TOEFL Essentials testa todas as fases do desenvolvimento, interpretação de pontuação e utilização das pontuações. O programa de investigação segue uma abordagem baseada em argumentos para a validação dos testes, apresentada numa série de perguntas que ditam a evidência empírica que deve ser recolhida. Este programa de investigação é supervisionado pelo Comité de Examinadores do TOEFL (COE), um painel de 11 especialistas de todo o mundo, cada um dos quais alcançou reconhecimento profissional numa área académica relacionada com o ensino, aprendizagem e avaliação do inglês como segunda língua ou língua estrangeira. 

Para saber mais sobre o teste TOEFL Essentials, visite https://www.ets.org/toefl/score-users/essentials/about.html.  

Spiros Papageorgiou é investigador sénior responsável na ETS.