Introdução àRevisão Sistemática

Rafael Leonardo Vivianrlvivian.uem [at] gmail [dot] comUniversidade Estadual de MaringáDepartamento de InformáticaLaboratório de Desenvolvimento Distribuído de Software

Tópicos

● Introdução

● Revisão Sistemática

– Objetivos– Revisão Tradicional x Revisão Sistemática– Características

● Processo de Revisão Sistemática

– Planejamento– Condução– Documentação

● Considerações Finais

Introdução à Revisão Sistemática : Tópicos 02

Introdução

● Descoberta e proposta de ideias

● Estado da Arte do tema em questão

● Obter o Estado da Arte:

– ler artigos– participar de eventos– consultar pesquisadores

● Considerar:

– como garantir a aquisição do maior número possível de textos sobre o tema?

– como foi documentada a busca?

Introdução à Revisão Sistemática : Introdução 03

Introdução

● Para apoiar a busca pelo Estado da Arte:

– usar os conceitos da Revisão Sistemática– medicina e áreas relacionadas fazem uso intensivo de

Revisão Sistemática [Kitchenham, 2004]

Introdução à Revisão Sistemática : Introdução 04

Revisão SistemáticaObjetivos [Kitchenham, 2004]

● Identificar, avaliar e interpretar todas as pesquisas disponíveis em relação a um tema ou assunto específico

● Sumarizar as evidências existentes sobre um tratamento ou tecnologia

● Identificar lacunas na pesquisa atual

● Fornecer um arcabouço para posicionar novas pesquisas

Introdução à Revisão Sistemática : Objetivos 05

Revisão SistemáticaRevisão Tradicional x Revisão Sistemática

● Revisão Tradicional [Pai et al., 2004]:

– métodos para coletar e interpretar estudos são informais e subjetivos

– tendência para citar seletivamente literatura que reforça noções preconcebidas

– não descreve a busca, a seleção e a avaliação da qualidade dos estudos

Introdução à Revisão Sistemática : Revisão Tradicional x Revisão Sistemática 06

Revisão SistemáticaRevisão Tradicional x Revisão Sistemática

● Revisão Sistemática [Pai et al., 2004]:

– busca abrangente e exaustiva por estudos primários seguindo uma questão

– critérios de qualificação claros e reproduzíveis para a seleção de estudos

– avaliação crítica dos estudos e síntese dos resultados de acordo com um método explícito e pré-determinado

Introdução à Revisão Sistemática : Revisão Tradicional x Revisão Sistemática 07

Revisão SistemáticaCaracterísticas [Kitchenham, 2004]

● Começa pela definição do protocolo de revisão

● Baseada sobre uma estratégia de busca definida que visa detectar o máximo de literatura relevante possível

● Estratégia de busca documentada para que os leitores possam avaliar o rigor e a completude

● Critérios de inclusão e exclusão explícitos para avaliar cada estudo

● Especifica a informação a ser obtida de cada estudo

● Pré-requisito para meta-análises quantitativas

Introdução à Revisão Sistemática : Características 08

Processo de Revisão Sistemática[Biolchini et al., 2005]

Introdução à Revisão Sistemática : Processo de Revisão Sistemática 09

Processo de Revisão Sistemática[Kitchenham, 2004]

1) Planejamento:

– identificação da necessidade de uma revisão sistemática– desenvolvimento de um protocolo de revisão

2) Condução:

– identificação da pesquisa– seleção dos estudos– avaliação da qualidade dos estudos– extração dos dados– síntese dos dados

3) Documentação

Introdução à Revisão Sistemática : Processo de Revisão Sistemática 10

Processo de Revisão SistemáticaPlanejamento [Kitchenham, 2004]

● A necessidade por uma revisão sistemática:

– quais são os objetivos da revisão?● Desenvolvimento de um protocolo de revisão:

– questões de pesquisa: primária e secundárias– estratégia de busca: termos e fontes– critérios e procedimentos de seleção dos estudos: inclusão e

exclusão– procedimentos para avaliação da qualidade dos estudos– estratégia de extração dos dados– síntese dos dados extraídos– cronograma

Introdução à Revisão Sistemática : Planejamento 11

Processo de Revisão SistemáticaPlanejamento [Kitchenham, 2004]

● Revisar o protocolo:

– IMPORTANTE: o protocolo deve ser revisado por especialista ou orientador!

Introdução à Revisão Sistemática : Planejamento 12

Processo de Revisão SistemáticaPlanejamento [Travassos e Biolchini., 2007]

Introdução à Revisão Sistemática : Planejamento 13

Descrever o problema

Especificar as questões de pesquisa

Desenvolver o Protocolo de Revisão

Avaliar o Protocolo de Revisão

Processo de Revisão SistemáticaCondução [Kitchenham, 2004]

● Identificação da pesquisa:

– fontes:– bases de dados eletrônicas– lista de referências– revistas (periódicos), relatórios técnicos,

trabalhos em andamento e anais de eventos– registros de pesquisas– consulta com especialistas da área

– string de busca com operadores booleanos AND e OR

Introdução à Revisão Sistemática : Condução 14

Processo de Revisão SistemáticaCondução [Kitchenham, 2004]

● Identificação da pesquisa:

– documentação do processo de busca

Introdução à Revisão Sistemática : Condução 15

Fonte de Dados Documentação

Base de dados eletrônica Nome da base de dadosEstratégia de busca para cada base de dadosData da buscaAnos cobertos pela busca

Busca manual em periódicos

Nome do periódicoAnos procuradosAlguma questão não procurada

Anais de conferências Título dos anaisNome da conferência (se for diferente)Tradução do título (se necessário)Nome do periódico (se publicado como parte de um periódico)

Esforços para identificar estudos não publicados

Grupos de pesquisas e pesquisadores contatados (nome e detalhes de contato)Web sites de pesquisa procurados (data e URL)

Outras fontes Data de busca/contatoURLAlguma questão específica relativa à busca

Processo de Revisão SistemáticaCondução [Kitchenham, 2004]

● Seleção dos estudos:

– critério de seleção deve ser definido no protocolo– critérios de inclusão e exclusão devem ser baseados

nas questões de pesquisa– evitar exclusões baseadas no idioma– pré-seleção: exclusão baseada sobre o título e resumo– seleção: exclusão baseada na leitura completa do texto

Introdução à Revisão Sistemática : Condução 16

Processo de Revisão SistemáticaCondução [Kitchenham, 2004]

● Avaliação da qualidade dos estudos:

– orientar a interpretação dos resultados de análise e síntese dos dados

– checklist de fatores que precisam ser avaliados para cada estudo

– comunicação, rigor, credibilidade e relevância [Dyba et al., 2007]

Introdução à Revisão Sistemática : Condução 17

Processo de Revisão SistemáticaCondução [Kitchenham, 2004]

● Extração dos dados:

– projetar formulários de extração de dados obtidos dos estudos

– registrar: detalhes de referências e informações que tratam as questões de pesquisa

– gerenciador de referências bibliográficas:

JabRef (http://jabref.sourceforge.net/)

Introdução à Revisão Sistemática : Condução 18

Processo de Revisão SistemáticaCondução [Kitchenham, 2004]

● Síntese dos dados:

– sumarização dos resultados dos estudos incluídos– síntese descritiva– síntese quantitativa (meta-análise)– apresentação em tabelas e gráficos

Introdução à Revisão Sistemática : Condução 19

Processo de Revisão SistemáticaCondução [Travassos e Biolchini., 2007]

Introdução à Revisão Sistemática : Condução 20

Identificar as pesquisas relevantes

Selecionar estudos primários

Auferir a qualidade do estudo

Extrair dados requisitados

Síntese dos dados

Processo de Revisão SistemáticaDocumentação [Kitchenham, 2004]

● É importante transmitir os resultados de uma revisão sistemática

● A revisão sistemática deve ser relatada em pelo menos duas formas:

– relatório técnico ou seção de tese/dissertação– artigo de periódico ou conferência

Introdução à Revisão Sistemática : Documentação 21

Processo de Revisão SistemáticaDocumentação [Travassos e Biolchini., 2007]

Introdução à Revisão Sistemática : Documentação 22

Escrever relatório da Revisão Sistemática

Avaliar relatório

Considerações Finais

● Revisão Sistemática:

– mais rigorosa e criteriosa do que revisão tradicional– maior consumo de tempo

● Limitações:

– restrições das máquinas de busca– esforço de execução da Revisão Sistemática

Introdução à Revisão Sistemática : Considerações Finais 23

Referências

Biolchini, J.; Mian, P.G.; Natalli, A.C.C.; Travassos, G.H. (2005). Systematic Review in Software Engineering. Technical Report RT-ES 679/05, COPPE/UFRJ. Disponível em http://alarcos.inf-cr.uclm.es/doc/MetoTecInfInf/Articulos/es67905.pdf

Dyba, T.; Dingsoyr, T.; Hanssen, G.K. (2007). Applying Systematic Reviews to Diverse Study Types: An Experience Report. First International Symposium on Empirical Software Engineering and Measurement, IEEE. Disponível em http://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=4343750

Kitchenham, B. (2004). Procedures for Performing Systematic Reviews. Joint Technical Report, TR/SE-0401 and NICTA 0400011T.1, Keele University. Disponível em http://www.idi.ntnu.no/emner/empse/papers/kitchenham_2004.pdf

Pai, M.; McChulloch, M.; Gorman, J.D.; Pai, N.; Enanoria, W.; Kennedy, G.; Tharyan, P.; Colford, Jr., J.M. (2004). Clinical Research Methods – Systematic reviews and meta-analyses: an illustrated, step-by-step guide. The National Medical Journal of India, v. 17, n. 2. Disponível em http://www.medepi.net/meta/guidelines/Pai_NMJI_2004_Systematic_reviews_illustrated_guide3.pdf

Travassos, G.H.; Biolchini, J. (2007). Revisões Sistemáticas Aplicadas a Engenharia de Software. Tutorial SBES 2007, COPPE/UFRJ. Disponível em http://wiki.dcc.ufba.br/pub/Aside/SeminarioRevisaoSistematicaEm17Out2008/sbes2007_revisaosistematica.pdf

Introdução à Revisão Sistemática : Referências 24

Perguntas?

● Apresentação disponível em:

http://www.din.uem.br/~pg45189/introducao-revisao-sistematica.pdf

Introdução à Revisão Sistemática : Perguntas? 25

Obrigado!

Rafael Leonardo Vivianrlvivian.uem [at] gmail [dot] comUniversidade Estadual de MaringáDepartamento de InformáticaLaboratório de Desenvolvimento Distribuído de Software