Dissertação de Cíntia Pinho – Classificação de Fuga ao Tema em Redações.

ANÁLISE DE TEXTOS COM APLICAÇÃO DE TÉCNICAS DE INTELIGÊNCIA ARTIFICIAL: ESTUDO COMPARATIVO PARA CLASSIFICAÇÃO DE FUGA AO TEMA EM REDAÇÕES

RESUMO

O processo de correção manual de redações acarreta algumas dificuldades, dentre as quais aponta-se o tempo dispendido para a correção e para a devolutiva de resposta ao aluno. Para instituições como as universidades e o Exame Nacional do Ensino Médio (ENEM), que se utilizam de redação como avaliação para o ingresso no ensino superior, além das escolas de ensino básico, tal atividade demanda tempo e custo para a avaliação dos textos produzidos. A fuga ao tema é um dos itens avaliados na redação do ENEM e, quando o estudante comete tal falha, sua redação é anulada por não ter desenvolvido os conceitos solicitados na proposta do tema estipulado para a redação. Neste contexto, a análise automática de redações com a aplicação de Processamento de Linguagem Natural (PLN), Mineração de Textos (MT) e outras técnicas de Inteligência Artificial (IA) tem se revelado promissora no processo de avaliação automatizada da linguagem escrita. Face ao contexto exposto, o objetivo desta pesquisa é comparar diferentes técnicas de IA para classificação de fuga ao tema em textos e identificar aquelas que trouxeram melhores resultados. Esta é uma pesquisa aplicada e experimental executada por meio da aplicação de algoritmos e mensuração dos resultados obtidos. Os experimentos delinearam em especial a classificação de 1320 redações de língua portuguesa com 119 temas diferentes. Além da PLN e MT, a pesquisa se utilizou das seguintes técnicas inteligentes de classificação: Redes Neurais Convolucionais (RNC), Multilayer Perceptron (MPL), Árvores de Decisão, Florestas Aleatórias, Gradiente Boosting, Ada Boost, Stochastic Gradiente Descent, Support Vector Machines e outras técnicas para identificar padrões na base de dados por meio de algoritmos não supervisionados como a clusterização. Os experimentos trouxeram os melhores resultados para o classificador RNC, que obteve acurácia de até 89%, com taxa de Falso Positivo (FP) de 5,7% e Verdadeiro Positivo (VP) de 49%. Outros classificadores com resultados satisfatórios foram MLP e Gradiente Boosting, com acurácia de 90% e 74%, VP de 33% e 51% e média de FP de 4% e 20%, respectivamente. Espera-se que a solução desenvolvida nesta pesquisa contribua para impactar positivamente o trabalho de professores e instituições de ensino, por meio da redução de tempo e custos associados ao processo de avaliação de redações.

Como adicionar em sua Bibliografia:

PINHO, Cintia Maria de Araújo (2021). Análise de textos com aplicação de técnicas de inteligência artificial: estudo comparativo para classificação de fuga ao tema em redações. 2021(152 p.) Dissertação ( Mestrado em Informática e Gestão do Conhecimento) –
Universidade Nove de Julho – UNINOVE,2021.

 

Nessa dissertação você encontrará um breve contextualização da área de correções de redações, no capítulo 2 uma análise bibliométrica da área de estudo com a finalidade de entender o crescimento de publicações e técnicas de IA mais utilizadas, em seguida o referencial teórico explicando como a fuga ao tema é analisada no ENEM, seguido da explicação de cada Técnica utilizada nos experimentos. 

Os próximos capítulos tratam da Metodologia e resultados adquiridos com os experimentos, todos realizados em Python.