Como o mecanismo e-rater se compara aos avaliadores humanos?
O mecanismo e-rater usa PLN para identificar recursos relevantes para a proficiência de redação em ensaios de treinamento e sua relação com as pontuações humanas. O modelo de pontuação resultante, que atribui pesos a cada variável observada, é armazenado off-line em um banco de dados que pode ser usado para pontuar novos ensaios de acordo com a mesma fórmula.
O mecanismo e-rater não tem a capacidade de ler, portanto, não pode avaliar os ensaios da mesma forma que os avaliadores humanos. No entanto, as características usadas na pontuação do e-rater foram desenvolvidas para serem tão substancialmente significativas quanto podem ser, considerando o estado da técnica em PLN. Eles também foram desenvolvidos para demonstrar uma forte confiabilidade, muitas vezes maior do que os próprios avaliadores humanos.
Saiba mais sobrecomo funciona.