Avaliação de Sistemas de Indexação Automática Aplicados a Artigos Científicos na Área de Ciência da Informação

Abstract

Avalia sistemas de indexação automática em um corpus em português de artigos científicos na área de Ciência da Informação. Como objetivos específicos: investiga a avaliação de software que realize a indexação automática; constrói um corpus em português de artigos científicos na área de Ciência da Informação; propõe método de avaliação de sistemas de indexação automática associado ao corpus criado; avalia comparativamente sistemas de indexação automática presentes na literatura científica quanto à qualidade na indexação automática do corpus proposto. A pesquisa tem caráter exploratório quanto aos objetivos, e quanto aos métodos a pesquisa tem caráter bibliográfico e experimental. O experimento computacional consistiu em analisar comparativamente a consistência, precisão, revocação e medida F obtidas na indexação automática do corpus pelos softwares SISA e OGMA. A partir da comparação dos resultados obtidos pelos sistemas de indexação automática avaliados, pode-se perceber que o SISA se sobressaiu ao OGMA em consistência, precisão e medida F, já o OGMA apresentou melhor revocação. Conclui-se que o SISA é o melhor sistema de indexação automática, não descartando a necessidade de aperfeiçoamento de ambos os sistemas.