Revisão Sistemática da Literatura em Engenharia de Software: Teoria e Prática
Questão 6: Qual é o objetivo e itens relacionados com a seção ?
Questão 6: Qual é o objetivo e itens relacionados com a
seção Síntese dos dados e apresentação dos resultados?
O objetivo da seção Síntese dos dados e apresentação dos resultados é documentar como serão extraídos os dados dos estudos considerados relevantes para responderem às questões de pesquisa da RS e como esses dados serão sumarizados e divulgados. Assim, contém itens como estratégia de extração e sumarização de dados e estratégia de publicação.
O formulário de extração de dados contém os itens que deverão ser coletados dos estudos primários
considerados relevantes para responder às questões de pesquisa. Esse é formado por campos definidos pelos pesquisadores para que os dados a serem extraídos sejam registrados de maneira uniforme para todos os estudos e, em atividades posteriores, analisados e sumarizados.
Dados gerais sobre a RS, como o título, autores, ano, objetivos, entre outros, que fazem parte do
formulário de extração de dados e são fáceis de serem coletados, podem ser extraídos pelo pesquisador (para cada estudo primário) no momento da seleção final, ou seja, durante a leitura do texto completo. No entanto, o ideal seria uma nova leitura exclusivamente dedicada para refinar os dados extraídos e fazer o preenchimento dos demais campos do formulário.
Os campos de um formulário de extração podem permitir:
• Respostas descritivas: por exemplo, a universidade ou grupo de pesquisa envolvido no estudo
primário.
• Respostas exclusivas de uma lista predefinida: por exemplo, para a questão “O estudo relata a
técnica X?”, a opção exclusiva de resposta seria sim ou não.
• Respostas não exclusivas de uma lista predefinida: por exemplo, para a questão “Qual ou quais
técnicas o estudo relata?”, as opções não exclusivas de respostas seriam as técnicas possíveis de
serem aplicadas (duas ou mais).
Kitchenham e Charters (2007) afirmam que, se os critérios de qualidade forem utilizados de maneira
complementar aos critérios de inclusão e exclusão, então um formulário à parte deve ser criado referente à avaliação da qualidade. No caso dos critérios de qualidade serem utilizados para auxiliar na síntese dos dados, é passível a criação de apenas um formulário.
É importante destacar que, como o formulário de extração é definido na fase de planejamento de uma
RS, pode ocorrer que, no momento da execução da atividade de extração de dados dos estudos relevantes, surja a necessidade de inclusão de novos campos ou de alteração dos existentes. Isso ocorre por conta da identificação de alguma informação lida no texto completo de algum estudo que não era de ciência dos pesquisadores ou não havia sido pensada por eles quando o protocolo foi criado. Assim, a alteração do formulário de extração no protocolo faz-se necessária, mas é preciso tomar cuidado com os estudos que já tiveram seus dados extraídos anteriormente à alteração. Em tal situação, recomenda-se que os estudos anteriores sejam revisitados para verificar se o campo criado ou alterado não precisa ser
novamente preenchido para esses estudos (FABBRI et al., 2013).
A sumarização dos dados coletados pode ser qualitativa (ou descritiva) ou quantitativa, por meio da
aplicação de métodos estatísticos (por exemplo, meta-análise) (KITCHENHAM & CHARTERS, 2007). O importante é que, durante essa atividade, as questões de pesquisa sejam claramente respondidas. A sumarização qualitativa pode fazer uso de tabelas para exibir informações extraídas dos estudos, mostrando suas similaridades e diferenças, se os resultados são homogêneos ou heterogêneos e as razões encontradas no caso de heterogeneidade, mas sempre com foco nas questões de pesquisa para não desviar do contexto da revisão.
A sumarização quantitativa também pode incluir tabelas para auxiliar na apresentação dos resultados. Quando possível, os resultados de diferentes estudos primários devem ser mostrados de forma comparativa. Dados provenientes de campos do formulário de extração com listas de respostas predefinidas, como Sim/Não, podem ser calculados com base em alguma medida estatística, como probabilidade (risco) ou razão de chances (odds ratio), entre outras. A utilização de gráficos é de grande valor para um melhor entendimento dos resultados e, nesse contexto, um dos gráficos indicados
por Kitchenham e Charters (2007) é o de floresta (forest plot). No caso de uma RS que envolva tanto estudos primários, que apresentam resultados qualitativos, quanto estudos que apresentam resultados quantitativos, a síntese dos resultados deve ocorrer separadamente; além disso, deve-se investigar se, por exemplo, os qualitativos podem ajudar a explicar os quantitativos. Isso resultaria em uma integração e
composição final dos resultados muito interessante (KITCHENHAM & CHARTERS, 2007).
Depois de sumarizados, os resultados de uma RS devem ser divulgados aos possíveis interessados. Assim, faz-se necessário que uma estratégia de divulgação dos resultados obtidos seja definida e documentada no protocolo. No meio acadêmico, a publicação em conferências e revistas científicas são as principais alternativas disponíveis, mas outras formas podem ser consideradas, tais como relatórios técnicos, pôsteres, páginas web e livros. Em relação à formatação do relatório principal de uma RS, vale dizer que, no caso de publicação em artigos ou revistas científicas, normalmente, há um template a ser seguido e o pesquisador deve publicar conforme a exigência do evento selecionado. Em outros meios, o formato é definido pelos próprios pesquisadores. Uma estrutura de conteúdo mínimo para divulgação dos
resultados de RSs é apresentada em Kitchenham e Charters (2007), e envolve os itens: Título, Autores, Resumo, Contexto, Questões de Pesquisa, Métodos de Revisão, Estudos Incluídos e Excluídos, Resultados, Discussão, Conclusão, Agradecimentos, Conflitos de Interesse, Referências e Apêndices. Detalhes sobre estratégias para extração/sumarização dos dados e publicação dos resultados são tratados
no Capítulo 5.