Mapeamento sistemático sobre replicação de estudos empíricos em engenharia de software

Abstract

Contexto Muitos autores consideram replicação de estudos empíricos como uma atividade essencial para a construção do conhecimento em qualquer ciência empírica. Em engenharia de software, os primeiros estudos de replicação datam de meados de 1990, portanto são relativamente recentes. Embora o entendimento sobre replicação em engenharia de software tenha evoluído ao longo dos anos, os estudos e o debate científico sobre replicação ainda se encontram em um estágio inicial. Os trabalhos publicados ainda não fazem uso claro de termos e conceitos associados à replicação e nenhuma base abrangente de conhecimentos tem sido publicada para fornecer material sobre replicação. Objetivo - Analisar as pesquisas relacionadas à replicação de estudos empíricos em engenharia de software e trabalhos conceituais e teóricos sobre replicações. Nesta pesquisa são apresentadas as conclusões desta análise, concentrando-se nas informações dos estudos sobre replicações e estudos originais relacionados. Método - Aplicou-se a metodologia de revisão sistemática para realizar um mapeamento sistemático sobre o estado atual dos trabalhos de replicação de estudos empíricos realizados em engenharia de software. Resultados - Foram analisados 16.126 artigos, a partir dos quais foram extraídos 93 artigos, com 125 replicações e 76 estudos originais, realizadas entre 1994 e 2010. Mais de 60% das replicações foram realizadas nos últimos seis anos e 71% dos estudos foram replicações internas. Os tópicos de construção de software, testes e manutenção concentram em torno de 50% dos trabalhos de replicação, enquanto os tópicos de projeto de software, gerenciamento de configuração, ferramentas de software e métodos são os temas com menos replicações. Conclusões - O número de replicações cresceu nos últimos anos, mas o número absoluto de replicações ainda é muito pequeno, em particular considerando a amplitude dos temas relacionados com engenharia de software. Incentivos para executar replicações externas e melhorar os padrões dos relatórios de estudos empíricos e suas replicações ainda são necessários