Aplicações Personalizadas para o Motor de Pontuação do e-rater

Para utilizar a tecnologia e-rater^® , a ETS oferece experiência em escrita, avaliação e pontuação a instituições que incorporam tecnologia de avaliação ETS nos seus cursos e serviços online. Pode usar escrita padrão e prompts criados por instrutores ou optar por desenvolver a sua própria.

Se usar os prompts padrão que seguem as diretrizes do ETS, as respostas dos ensaios são submetidas aos modelos de pontuação do ETS por nível de ano e recebem uma pontuação holística.

Se optar por desenvolver os seus próprios temas de escrita personalizados, terá de recolher respostas de ensaios a esses prompts, pontuá-los e enviá-los ao ETS para que um modelo de pontuação possa ser construído e certificado. O ETS irá ajudá-lo a desenvolver os prompts e a pontuar as respostas para que um modelo personalizado de avaliação do e-rater possa ser construído seguindo os requisitos abaixo.

Desenvolvimento de tópicos

• Os especialistas ETS podem ajudar no desenvolvimento de temas personalizados para ensaios que reflitam os padrões nacionais, estaduais ou distritais.
• A ETS pode fornecer aconselhamento especializado enquanto desenvolve os seus próprios temas personalizados, realiza sessões de avaliação e analisa a pontuação da escrita.
• Ou os especialistas em desenvolvimento do ETS podem realizar o trabalho de desenvolvimento e realizar as sessões de pontuação pré-teste, de acordo com as especificações da organização.

Pontuação de ensaios

• A ETS pode realizar sessões de avaliação de ensaios e recolher dados para construção personalizada de modelos, incorporando metodologias de avaliação e procedimentos de garantia de qualidade.
• Para além de tratar do recrutamento, formação e monitorização de leitores, a ETS oferece um sistema de pontuação online que instrutores e leitores treinados podem usar para pontuar respostas a ensaios processados por texto.
• Quando a pontuação está concluída, os ficheiros de ensaio e as partituras dos leitores podem ser transmitidos para o motor de pontuação para construção automática de modelos.

Garantia de qualidade

• Antes de construir o modelo de pontuação para um tema, a tecnologia do e-rater será treinada analisando ensaios escritos sobre esse tema.
• Os ensaios precisam de receber duas pontuações de leitores independentes que tenham aplicado padrões consistentes e justos de pontuação.
• O conjunto de ensaios pontuados também precisa de representar toda a escala de pontuação (por exemplo, uma escala de 1 a 6), para que o motor do e-rater possa ser treinado para reconhecer ensaios em cada pontuação.

Requisitos dos modelos de motores e-rater

• Normas de pontuação claramente definidas num guia de pontuação
• Um tema de ensaio que reflita a tarefa de escrita representada no guia de pontuação
• Uma população estudantil idêntica ou semelhante à população que irá utilizar o tema
• Duas pontuações independentes para cada resposta de ensaio (os leitores devem ser treinados para usar o guia de pontuação)
• Pelo menos 350 respostas de estudantes por tema num ficheiro eletrónico, formatado de acordo com as especificações da ETS