Avaliação de Versões do Software SISA na Indexação Automática por Atribuição de Artigos Científicos da Área de Ciência da Informação

Abstract

Avalia duas versões do SISA (Sistema de Indexação Semiautomática), sendo a versão WINDOWS/DESKTOP 2.0 e a versão WEB 4.0. Utiliza os dados de pesquisa da dissertação de mestrado de Sâmela R. B. Silva (2020) e do artigo científico de Silva, Corrêa e Gil-Leiva (2020) sobre o SISA WINDOWS 2.0, e realiza um experimento computacional na plataforma do SISA WEB 4.0 em um corpus artigos científicos em português na área de Ciência da informação. Como objetivo de avaliar de forma direta e conjunta esses sistemas de indexação automática, partindo de um percurso já definido e realizando suas etapas na avaliação de desempenho do SISA WEB nas configurações propostas. A pesquisa se classifica como bibliográfica e empírica, pois a experimentação envolve a indexação automática do Corpus de 60 artigos criado por Souza (2005), auxiliado por um vocabulário controlado (TBCI) como linguagem de indexação e uma lista de palavras vazias. Foi construída uma planilha de resultados para o cálculo de métricas de avaliação considerando número descritores em comum, consistência, precisão, revocação e medida F. Conclui-se que houve um desempenho “BOM” na indexação automática por atribuição do corpus por ambas as versões, sendo os resultados muito similares, para SISA WEB resultados médios de 3,55 de descritores em comum, 26,93% de consistência, 55,60% de precisão, 35,47% de revocação e 40,78% de medida F, e para o SISA DESKTOP resultados médios de 3,35 de descritores, 28% de consistência, 64% de precisão, 33% de revocação e 42% de medida F.