Detecção e Avaliação de Cola em Provas Escolares Utilizando Mineração de Texto: um Estudo de Caso

Abstract

A mineração de texto tem sido utilizada para diversos propósitos, como na extração, classificação e categorização de documentos. Dentro desse contexto, este trabalho apresenta um estudo de caso realizado na Universidade Federal de Campina Grande, em que se utilizou do modelo de vetor de espaços e da métrica de similaridade por cosseno na construção de um modelo classificador capaz de inferir o nível de cola existente entre provas escolares. A inferência do modelo foi comparada à detecção tradicional (humana) de cola e quantificada estatisticamente pelas seguintes métricas: acurácia, variação da acurácia, precisão, recall, F-measure e índice Kappa. Os resultados apontam que o modelo criado apresentou uma boa qualidade na detecção do nível de cola entre provas, tornando possível sua utilização em situações de ensino reais.