Este artigo descreve as motivações por detrás do desenho das avaliações TOEIC Bridge redesenhadas para medir as quatro competências de comunicação, os objetivos das avaliações e como definimos a proficiência em inglês em compreensão oral, leitura, fala e escrita em contextos do dia a dia para alunos básicos a intermédios. Esta informação fornece uma base para o desenvolvimento de testes e subsequente investigação sobre validade.

Ler mais

Os testes TOEIC Bridge redesenhados foram desenvolvidos utilizando uma metodologia de desenvolvimento de avaliações chamada desenho centrado em evidências (ECD). Este artigo documenta como o ECD foi usado para desenhar tarefas que suscitaram evidências da proficiência em inglês dos candidatos ao nível básico a intermédio, e como várias fontes de dados obtidas ao longo do processo de desenvolvimento do teste influenciaram as decisões de conceção de itens e testes.

Ler mais

Este artigo apresenta os resultados de um estudo de campo que contribuiu para o desenvolvimento dos testes TOEIC Bridge redesenhados. As análises estatísticas fornecem evidências iniciais para apoiar afirmações de que as pontuações redesenhadas dos testes TOEIC Bridge são consistentes e que as pontuações dos testes são indicadores significativos da proficiência em inglês dos níveis básico a intermédio.

Ler Mais

Este artigo descreve dois estudos que examinaram a relação entre as pontuações redesenhadas dos testes TOEIC Bridge e as autoavaliações da proficiência linguística. Os resultados fornecem evidências que apoiam as afirmações de que as pontuações dos testes são indicadores significativos da proficiência linguística, e que as pontuações podem ser usadas para diferenciar de forma significativa os níveis de proficiência linguística, conforme definido por normas de proficiência linguística, como o Quadro Europeu Comum de Referência para Línguas (CECR).

Ler Mais

Este estudo investigou se as pontuações dos testes TOEIC^® Speaking eram bons preditores da eficácia comunicativa dos candidatos, conforme avaliado por profissionais no local de trabalho internacional. Profissionais de 10 países participaram num inquérito no qual avaliaram a eficácia comunicativa dos candidatos em diferentes cenários comunicativos. Os resultados fornecem evidências de que as pontuações dos testes TOEIC Speaking são uma avaliação significativa da proficiência que se compara com a forma como os profissionais percebem a eficácia comunicativa.

Ler Mais

Este estudo investigou se as pontuações do teste de escrita do TOEIC eram bons preditores da "adequação funcional" (ou eficácia comunicativa) das competências de escrita dos candidatos, conforme avaliadas por profissionais no local de trabalho internacional. Profissionais de 10 países participaram num inquérito no qual avaliaram a adequação funcional da escrita dos candidatos em diferentes cenários comunicativos. Os resultados fornecem evidências de que as pontuações do teste de escrita do TOEIC são uma avaliação significativa da proficiência que se compara à forma como os profissionais percebem a adequação funcional da escrita.

Ler Mais

Este artigo resume o "argumento de validade" para os testes TOEIC Bridge redesenhados. O argumento da validade consiste em quatro grandes afirmações sobre consistência da pontuação, validade e justiça, uso adequado dos testes e impactos positivos; em conjunto, isto fornece uma narrativa coerente sobre a qualidade da medição e os usos pretendidos das pontuações dos testes. Ao considerar as alegações e as evidências de apoio apresentadas no argumento da validade, os leitores deverão conseguir avaliar melhor se os testes TOEIC Bridge redesenhados são adequados para a sua situação.

Ler mais

Este artigo fornece uma visão geral não técnica do desenvolvimento de testes e dos projetos de investigação realizados para garantir que as pontuações dos testes TOEIC servem como indicadores válidos das competências dos candidatos para comunicar inglês em ambientes de trabalho globais.

O principal valor dos testes TOEIC reside na sua validade, que pode ser definida como a medida em que os testes fazem aquilo que afirmamos que podem fazer.

Ler mais

Através da análise das pontuações dos testes, esta investigação concluiu que os testes TOEIC medem competências distintas mas relacionadas, e que, em conjunto, fornecem uma imagem razoavelmente completa da proficiência em inglês. Esta conclusão fornece evidências adicionais de que a abordagem de quatro competências para a avaliação da proficiência linguística é crucial.

Ler mais

As avaliações de proficiência em inglês são concebidas para uma população-alvo do teste e podem incluir candidatos de diferentes origens demográficas, socioculturais e educativas. Assume-se que o teste é justo e as pontuações obtidas por diferentes subgrupos de candidatos têm o mesmo significado. Uma forma de avaliar a justiça do teste é produzir um teste ligado para cada subgrupo e comparar os resultados das pontuações do teste ligado com as pontuações do teste original que fizeram.

Ler Mais

Para compreender melhor o significado das pontuações dos testes e facilitar a tomada de decisões, os utilizadores das pontuações podem precisar de compreender como as pontuações de dois testes diferentes estão relacionadas. A relação entre as pontuações de dois testes diferentes é normalmente resumida numa "tabela de concordância" que indica a correspondência entre as pontuações dos dois testes. Infelizmente, algumas tabelas de concordância são produzidas e distribuídas sem qualquer apoio de investigação, o que pode levar a decisões imprecisas e injustas sobre os candidatos.

Ler Mais

Este estudo utilizou uma técnica estatística chamada "análise fatorial" para determinar qual o modelo estatístico que melhor explicava o desempenho no teste de Compreensão e Leitura do TOEIC. Os investigadores descobriram que um modelo (modelo de dois fatores) em que as competências de leitura e escuta eram representadas como capacidades distintas melhor explicava o desempenho, consistente com a forma como as pontuações devem ser interpretadas.

Ler Mais

Nos programas de teste, múltiplas formas de um teste são usadas em diferentes administrações para evitar a sobreexposição dos formulários de teste e reduzir a possibilidade de os candidatos adquirirem conhecimento prévio do conteúdo do teste. Como podem ocorrer pequenas diferenças na dificuldade estatística dos formulários alternativos, um procedimento estatístico conhecido como ligação de pontuação de teste tem sido frequentemente utilizado para ajustar estas diferenças de dificuldade, de modo a que os formulários de teste sejam comparáveis.

Ler Mais

Tradicionalmente, os investigadores têm usado o termo "autenticidade" para se referir ao grau em que as tarefas de um teste de língua correspondem às usadas no mundo real, sendo a autenticidade uma característica desejada das tarefas e testes. Este white paper explica como o formato de várias perguntas no teste TOEIC Speaking foi expandido para incluir uma maior variedade de situações do mundo real.

Ler Mais

Este artigo explica como os testes linguísticos de quatro competências são a melhor forma de avaliar se alguém consegue comunicar em inglês, e explica como esta abordagem pode:

• resultar numa avaliação mais justa para os candidatos
• melhorar a qualidade das decisões dos utilizadores de teste
• criar um impacto mais positivo para decisores, professores e alunos

Ler Mais

O teste de Escuta TOEIC inclui itens ou tarefas relacionadas com o local de trabalho global e com uma variedade de contextos autênticos. À medida que a necessidade de um número cada vez maior de formulários de teste aumentou, um objetivo importante para o teste de Escuta TOEIC tem sido aumentar a eficiência das gerações de itens, mantendo um grande conjunto de itens em diversos contextos, tendo sido um objetivo importante para o teste de Escuta TOEIC.

Ler mais

Este estudo investigou se a proficiência numa determinada competência linguística (por exemplo, fala) poderia ser melhor estimada considerando não só as pontuações dos testes TOEIC correspondentes a essa competência, mas também as pontuações dos testes TOEIC para outras competências. Os resultados apoiaram esta afirmação, sugerindo que as pontuações nos testes TOEIC de quatro competências fornecem em conjunto uma medida mais válida da proficiência em inglês do que qualquer competência isolada.

Ler mais

Este estudo investiga:

• A medida em que as pontuações dos testes TOEIC de uma capacidade se correlacionam com as autoavaliações dos candidatos sobre as suas capacidades de inglês em todas as quatro competências
• Se uma competência de inglês (por exemplo, leitura) pode ser estimada ou prevista com maior precisão usando múltiplas outras pontuações de testes TOEIC, ou seja, escuta, fala e escrita

Ler mais

O funcionamento diferencial dos itens (DIF) é um procedimento estatístico utilizado para identificar itens ou tarefas que estejam inesperadamente enviesados de alguma forma, favorecendo inadequadamente um grupo de candidatos em detrimento de outro. Um dos desafios para os testes de fala e escrita é a ausência de técnicas DIF comprovadas e práticas que possam ser usadas para analisar testes baseados em desempenho ou testes de "resposta construída". Este artigo investiga várias dessas técnicas e ilustra como a investigação está a ser conduzida para garantir a justiça das interpretações das pontuações.

Ler mais

Este artigo compara o conteúdo, fiabilidade e dificuldade dos clássicos e dos testes de Compreensão e Leitura do TOEIC redesenhados em 2006. Embora os testes redesenhados incluíssem tipos de itens ligeiramente diferentes para refletir melhor os modelos atuais de proficiência linguística, os testes foram considerados semelhantes entre as várias versões.

Ler Mais

O Design Centrado na Evidência (ECD) é uma metodologia de desenvolvimento de avaliações que clarifica explicitamente o que uma avaliação mede e apoia interpretações de competências com base nas pontuações dos testes. Este artigo descreve os processos de ECD usados para desenvolver os testes de Expressão e Escrita do TOEIC. As evidências recolhidas através do processo de desenho do teste forneceram apoio fundamental para a validade das interpretações das pontuações dos testes de Fala e Escrita do TOEIC.

Ler Mais

Este artigo apresenta os resultados de um estudo-piloto que contribuiu para o desenvolvimento do teste de fala e escrita do TOEIC. A análise da fiabilidade das pontuações dos testes encontrou evidências de vários tipos de consistência de pontuação, incluindo fiabilidade entre avaliadores (concordância de vários avaliadores sobre uma pontuação) e consistência interna (uma medida baseada na correlação entre itens do mesmo teste).

Ler Mais

Para garantir que os testes continuem a responder às necessidades dos examinadores e utilizadores das pontuações, é importante que os programas de avaliação revisem periodicamente as suas avaliações. Por esta razão, para acompanhar o uso em constante mudança do inglês e as formas como os indivíduos comunicam habitualmente no local de trabalho global e no dia a dia, foi concebido e lançado pela primeira vez em maio de 2016 um teste atualizado de Escuta e Leitura do TOEIC.

Ler Mais

Após qualquer projeto de redesenho do teste — como a reformulação do teste TOEIC de Compreensão e Leitura em 2006 — é importante apresentar evidências de que as pontuações dos testes ainda podem ser interpretadas de forma significativa. Este estudo analisou a relação entre as pontuações no redesenho do teste de Compreensão e Leitura do TOEIC e as perceções dos examinados sobre a sua própria proficiência em inglês. Os investigadores encontraram correlações moderadas entre as pontuações dos testes e as perceções dos candidatos, fornecendo evidências de que as pontuações nos testes redesenhados de Compreensão e Leitura do TOEIC são indicadores significativos da capacidade em inglês.

Ler Mais

Este estudo procurou comparar as pontuações do TOEIC Bridge com as autoavaliações dos candidatos sobre as suas próprias capacidades de realizar tarefas linguísticas do dia a dia em inglês. Os resultados sugerem que as pontuações dos testes se correlacionaram bem com as autoavaliações dos candidatos, fornecendo mais evidências a favor das pontuações do TOEIC Bridge como indicadores válidos e justos de proficiência em inglês.

Ler Mais

Este estudo examina a relação entre as pontuações de Compreensão Oral e Leitura do TOEIC e as pontuações de Expressão Oral e Escrita do TOEIC para determinar se as pontuações de Compreensão Oral e Leitura devem ser usadas como preditoras das pontuações de Fala e Escrita e vice-versa. Os resultados apoiam a validade das pontuações dos testes para as competências medidas (por exemplo, as pontuações dos testes de Compreensão Oral e Leitura fornecem interpretações significativas das competências de Compreensão Oral e Leitura).

Ler Mais

Este estudo procurou comparar as pontuações nos testes de Fala e Escrita do TOEIC com as autoavaliações dos alunos sobre as suas capacidades de realizar tarefas diárias em inglês. Os investigadores relataram correlações relativamente fortes entre as pontuações dos testes e as autoavaliações. Esta conclusão contribui com mais evidências a favor das pontuações dos testes de Fala e Escrita do TOEIC como indicadores de proficiência em inglês. Este estudo foi também publicado como Powers, Kim, Weng, e Van Winkle (2009).

Ler Mais

A ancoragem de escala é um processo que agrupa as pontuações dos testes em intervalos de pontuação ou níveis de proficiência. Utiliza uma combinação de métodos estatísticos e julgamento especializado para produzir descrições das competências e conhecimentos tipicamente exibidos pelos candidatos em cada nível de proficiência. Este relatório de investigação descreve o processo de ancoragem de escalas para os testes de Compreensão e Leitura do TOEIC, o que facilita interpretações significativas das pontuações.

Ler Mais

Este relatório descreve os objetivos e resultados de um projeto para atualizar o teste de Compreensão e Leitura do TOEIC em 2016. O uso do inglês para comunicação, particularmente em contextos internacionais de trabalho, está em constante evolução. Por isso, o teste de Compreensão e Leitura do TOEIC é revisto periodicamente para garantir que o conteúdo do teste reflete a comunicação atual no local de trabalho e no dia a dia, apoiando assim interpretações significativas sobre as competências da língua inglesa e promovendo um impacto positivo no ensino e aprendizagem do inglês.

Ler Mais

Com o passar do tempo, torna-se importante rever o desenho de um teste para garantir que a sua conceptualização da proficiência linguística está alinhada com a teoria atual e as tarefas do teste continuam a ser indicativas das tarefas do mundo real. Este relatório descreve os objetivos, alinhamento teórico, procedimentos e resultados de um esforço de redesenho para o teste de Compreensão e Leitura do TOEIC.  

Ler Mais

Este artigo descreve os resultados de um estudo de campo para os testes de Escuta e Leitura do TOEIC redesenhados em 2006, que inclui análises da dificuldade do item e do teste, fiabilidade e correlações entre as secções do teste e os clássicos testes de Compreensão e Leitura do TOEIC. Os resultados são consistentes com outro estudo de comparabilidade (Liao, Hatrak e Yu em 2010), que encontrou evidências da fiabilidade dos testes redesenhados e sugeriu que as pontuações do teste redesenhado poderiam ser interpretadas e usadas de forma semelhante às pontuações clássicas dos testes de Compreensão e Leitura do TOEIC.

Ler Mais

Este estudo comparou as pontuações do TOEIC Bridge com as avaliações dos professores sobre a capacidade dos candidatos para realizar tarefas linguísticas do dia a dia em inglês. Os autores relataram correlações moderadas entre estas avaliações e as pontuações dos testes, que fornecem evidências de apoio da validade das pontuações do TOEIC Bridge como indicadores de proficiência em inglês.

Ler Mais

Este estudo procurou avaliar o grau em que as pontuações do TOEIC Bridge correspondem às autoavaliações dos alunos e às avaliações dos professores dos alunos, duas medidas de proficiência em inglês. As pontuações do TOEIC Bridge mostraram-se moderadamente correlacionadas com estas medições, um achado que fornece validade de que as pontuações do TOEIC Bridge podem ser interpretadas de forma significativa como indicadores de proficiência em inglês.

Ler Mais

Este estudo investigou a relação entre as pontuações do TOEIC Bridge e as avaliações dos alunos sobre a sua própria proficiência em inglês. As pontuações do teste TOEIC Bridge foram encontradas correlacionadas com competências de leitura e escuta auto-reportadas, fornecendo evidências de que as pontuações do teste TOEIC Bridge são indicadores válidos ou significativos de proficiência em leitura e compreensão auditiva em inglês.

Ler Mais