Posso confiar num teste em casa?
24 de agosto de 2020
Quando a pandemia do coronavírus fechou os centros de teste em todo o mundo, a procura por uma solução virtual para avaliações de alto risco tornou-se essencial. Sabíamos que os nossos candidatos precisavam de uma solução imediata para concluir os exames, de modo a cumprir prazos críticos para as suas jornadas educativas e profissionais.
Em apenas seis semanas, fomos os primeiros da indústria a entregar uma solução supervisionada remotamente, com colaboração do líder da indústria, ProctorU®, para o GRE® General Test e o teste TOEFL iBT, e desde então expandimos a nossa oferta para incluir o exame HiSET® e os testes Praxis®. Tanto os examinadores como os utilizadores das pontuações institucionais confiam nas nossas avaliações para fornecer uma medida precisa e fiável do que os candidatos sabem e podem fazer — pelo que manter a segurança e a integridade dos resultados continua a ser tão importante quanto utilizar o método de entrega correto.®
Mas como é que se pegam em estratégias construídas em torno de décadas de testes presenciais e as colocam online, de forma segura e tudo em apenas algumas semanas?
A ETS tem vasta experiência na modernização dos formatos de avaliação. Ao avançar para soluções remotas, voltámos simplesmente ao básico, integrando protocolos rigorosos e uma pesquisa extensa sobre o comportamento dos examinadores com tecnologia de ponta. Fazemos grandes esforços para continuar a garantir a mais alta qualidade das nossas avaliações e para dissuadir riscos. Aqui estão apenas algumas das formas como garantimos a segurança dos testes durante os nossos exames em casa:
Verificação de Identidade
Antes do início do exame, a identidade dos candidatos é verificada para garantir que o candidato que se apresenta para completar corresponde ao nome do registo. Isto ajuda a dissuadir os 'profissionais' de concluir o teste e comprometer o material do teste. As fotos dos candidatos são comparadas com a sua identificação oficial emitida pelo governo. Ao longo do teste, é utilizada inteligência artificial (IA) para garantir que o mesmo candidato permanece sentado e para evitar a entrada de uma segunda pessoa na sala. Para os testes, incluindo o teste TOEFL iBT, também utilizamos biometria por voz para comparar a voz do candidato às gravações registadas, de modo a evitar batota e identificar potenciais casos de usurpação de identidade.
Varredura Ambiental
Antes de os candidatos começarem o exame, os supervisores remotos realizam uma revisão detalhada e 360 graus do espaço do exame usando uma câmara web para garantir que o candidato está sozinho e que não há dispositivos ou materiais suspeitos presentes. Esta ligação mantém-se ativa durante toda a sessão e é gravada em vídeo do início ao fim, para que a equipa do ETS possa também assistir ao candidato em direto ou em vídeo numa data posterior. A equipa da ProctorU monitoriza diligentemente comportamentos ou movimentos invulgares. O supervisor também analisa o dispositivo do candidato à procura de software e navegadores abertos ou a funcionar no computador, para garantir que nenhum software não autorizado está a correr ativamente em segundo plano durante a duração do teste.
Inteligência Artificial
Sobrepondo a diligência humana à IA e aos dados de processo, o fiscal é suportado por tecnologia que analisa continuamente irregularidades, reforçando e avançando a sua supervisão. O supervisor tem acesso visual total tanto ao ecrã do candidato como ao observá-lo visualmente através da webcam. O teste pode ser cancelado imediatamente se houver qualquer tentativa de fraude, abrir um novo navegador, usar software ou dispositivos não autorizados, ou comunicar com outros durante o teste.
Análise de Dados de Processo
Em estreita colaboração com os nossos analistas de dados de Investigação e Desenvolvimento e psicometristas, analisamos toda a atividade de testes e processamos os dados recolhidos ao longo de cada sessão de teste para identificar padrões e aberrações que possam ajudar a detetar comportamentos suspeitos ao longo do tempo. Estes dados são críticos não só para a fiabilidade dos testes, mas também para compreender o comportamento dos examinadores, de modo a podermos atualizar consistentemente a tecnologia que utilizamos para garantir a segurança dos nossos exames e a privacidade dos examinadores.
A nossa transição para testes remotos deu-nos a oportunidade de aprender, evoluir e continuar a encontrar os nossos candidatos onde eles estão. Centenas de milhares de candidatos concluíram com sucesso os nossos exames em casa para continuar as suas jornadas educativas e profissionais. Ao continuar a integrar a nossa experiência profunda construída ao longo dos anos na área com tecnologias emergentes, continuaremos a desenvolver as nossas capacidades e a melhorar a experiência dos nossos candidatos.
Ray Nicosia é diretor executivo do Gabinete de Integridade dos Testes na ETS.