Revisão Sistemática da Literatura em Engenharia de Software: Teoria e Prática

Questão 6: Quais são as vantagens, desvantagens e limitações de RSs?

Questão 6: Quais são as vantagens, desvantagens e

limitações de RSs?

Embora a revisão informal da literatura tenha importância na condução de uma pesquisa, principalmente quando realizada com subsídios de boas práticas, ela apresenta como principal desvantagem a falta de rigor científico, o que pode ser influenciado por vieses durante a investigação. Por outro lado, a condução de uma revisão com base em uma abordagem sistemática, como é o caso de RSs e MSs, resulta em um processo controlado e rigoroso, garantindo que a mesma seja passível de auditoria, repetível e imparcial aos interesses dos envolvidos. Outros benefícios de uma RS são:

• Uma RS bem-planejada evita vieses na sumarização dos estudos primários.

• Uma RS permite responder questões de pesquisa que não são possíveis de serem respondidas por um

único estudo primário.

• Uma RS permite identificar com mais precisão lacunas na pesquisa atual e, como consequência,

identificar possíveis linhas de pesquisa para investigação futura.

• Os resultados dos estudos selecionados podem ser utilizados para comparação com os resultados

obtidos em um trabalho em desenvolvimento.

• Uma RS pode ajudar a avaliar hipóteses teóricas que possivelmente nunca foram ou nunca poderiam

ser testadas por meio de estudos primários.

• Uma RS pode beneficiar a indústria de software no apoio à tomada de decisões relacionadas com o

que será adotado no futuro. Por exemplo, profissionais podem usar resultados de uma RS para compreender a eficácia e eficiência de um método ou tecnologia específica, ou então, apontar o que funciona e o que não funciona quando um método é aplicado sob diferentes circunstâncias.

RSs também apresentam dificuldades e limitações:

• A execução de uma RS requer mais esforço do que uma revisão informal, por exemplo, na fase de

planejamento, que inclui a definição do protocolo, o que não é necessariamente definido na revisão informal.

• Atividades como a formulação das questões de pesquisa, a escrita da string de busca e a definição das

bases de busca são consideradas difíceis.

• A seleção dos estudos é uma das principais dificuldades. Pesquisadores normalmente determinam a

relevância dos estudos primários com base em seu título e resumo. No entanto, tanto o título quanto os resumos de muitos estudos não apresentam informação suficiente para essa finalidade. Outras partes dos estudos devem, então, ser lidas para determinar a relevância dos estudos para a pesquisa em questão.

• Nem sempre os estudos estão disponíveis para livre acesso (no caso, o texto completo), o que pode

causar atrasos na execução da RS.

• A avaliação da qualidade dos estudos primários, bem como a extração de dados para responder às

questões de pesquisa são um desafio, uma vez que muitos estudos não apresentam em mais detalhes o trabalho realizado.