Revisão Bibliográfica

Transcrição

1 Revisão Bibliográfica Ricardo de Almeida Falbo Metodologia de Pesquisa Departamento de Informática Universidade Federal do Espírito Santo 2010/1

2 Agenda Escolha do Tema Revisão Bibliográfica A Leitura Sistematizando a Revisão Bibliográfica Revisões Sistemáticas Estudo Baseado em Revisão Sistemática Metodologia de Pesquisa /1 2

3 Etapas do Trabalho de Pesquisa Pesquisa Bibliográfica Preparação do Trabalho de Pesquisa Condução da Pesquisa Análise e Discussão de Resultados Redação do Trabalho Científico Apresentação do Trabalho Científico Metodologia de Pesquisa /1 3

4 Preparação do Trabalho de Pesquisa Escolha (e refinamento) do tema Pesquisa Bibliográfica Pesquisa Bibliográfica Formulação do Problema Definição de Objetivos e Hipóteses Justificativa Definição do Método de Pesquisa Identificação de Resultados Esperados e Limitações Metodologia de Pesquisa /1 4

5 Escolha do Tema O que é tema de pesquisa? É uma área de conhecimento ou um aspecto de uma área de conhecimento que se deseja investigar e desenvolver. É a área na qual se vai trabalhar (WAZLAWICK, 2009). Tema não é objetivo. Metodologia de Pesquisa /1 5

6 Escolha do Tema A escolha do tema corresponde à definição de uma parcela delimitada de um assunto, estabelecendo limites e restrições para o desenvolvimento da pesquisa pretendida (Moresi, 2003). Em um curso de pós-graduação stricto-sensu, a escolha do tema está relacionada à linha de pesquisa à qual o aluno está vinculado e depende substancialmente do interesse do aluno e do orientador (WAZLAWICK, 2009). Metodologia de Pesquisa /1 6

7 Escolha do Tema Aspectos a serem considerados na escolha do tema (Moresi, 2003): atualidade e relevância, conhecimento do aluno a respeito, sua preferência e aptidão pessoal para lidar com o tema, tempo e recursos disponíveis, seja viável em termos de levantamento de informações. Metodologia de Pesquisa /1 7

8 Escolha do Tema Recomenda-se que o aluno procure manter o mesmo tema ao passar da graduação para o mestrado e do mestrado para o doutorado (WAZLAWICK, 2009). O tema pode surgir, também, de situações pessoais ou profissionais. Pode-se utilizar e ampliar algum trabalho desenvolvido em uma disciplina ao longo do curso (Moresi, 2003) ou algum trabalho desenvolvido previamente por outro aluno (ou pelo próprio aluno em um nível anterior). Metodologia de Pesquisa /1 8

9 Refinando o Tema O tema deve ser refinado até um nível de especificidade que seja adequado para a condução da pesquisa. Quanto mais amplo o tema, maior a quantidade de livros e artigos a serem lidos (WAZLAWICK, 2009). Metodologia de Pesquisa /1 9

10 Refinando o Tema Deve-se evitar escolher temas vagos, que, devido à sua extensão e generalidade, não permitem um tratamento sério e com profundidade (Moresi, 2003). Ao definir o tema, procure se referir a poucas coisas, de forma detalhada e consistente, ao invés de tratar de muitas coisas de forma genérica e superficial (Moresi, 2003). Metodologia de Pesquisa /1 10

11 Revisão Bibliográfica O que é? Refere-se à fundamentação teórica que visa dar sustentação ao desenvolvimento da pesquisa. É o processo de levantamento e análise do que já foi publicado sobre o tema de pesquisa escolhido, permitindo efetuar um mapeamento do que já foi escrito e de quem já escreveu algo sobre o tema da pesquisa (Moresi, 2003). A revisão bibliográfica não produz conhecimento novo. Ela apenas supre as deficiências de conhecimento do pesquisador no tema de pesquisa (WAZLAWICK, 2009). Metodologia de Pesquisa /1 11

12 Revisão Bibliográfica É um processo iterativo que permite refinar o tema de pesquisa, identificar problemas de pesquisa, definir e refinar objetivos. Não se esgota quando os objetivos são estabelecidos, mas sim continua ocorrendo ao longo de todo o trabalho de pesquisa. Metodologia de Pesquisa /1 12

13 Revisão Bibliográfica Escolher / Refinar o tema Formular problema de pesquisa Revisão Bibliográfica Definir / Refinar objetivos Conduzir a pesquisa Metodologia de Pesquisa /1 13

14 Revisão Bibliográfica Pode ser conduzida com os seguintes objetivos (Luna apud Moresi, 2003): Determinação do estado da arte: visa identificar o que já se sabe sobre o tema, quais as lacunas existentes e onde se encontram os principais entraves teóricos ou metodológicos; Revisão teórica: visa inserir o problema de pesquisa dentro de um quadro de referência teórica para explicá-lo. Metodologia de Pesquisa /1 14

15 Revisão Bibliográfica Revisão empírica: procura explicar como o problema vem sendo pesquisado procurando responder questões como: quais os procedimentos normalmente empregados no estudo desse problema? Que fatores afetam os resultados? Que propostas têm sido feitas para explicá-los ou controlá-los? Que procedimentos vêm sendo empregados para analisar os resultados? Revisão histórica: busca recuperar a evolução de um conceito, tema, abordagem ou outros aspectos, fazendo a inserção dessa evolução dentro de um quadro teórico de referência. Metodologia de Pesquisa /1 15

16 Revisão Bibliográfica Como conduzir a revisão bibliográfica? É recomendável que se adote uma metodologia de pesquisa bibliográfica, o que envolve: Planejamento da revisão, definindo como abordar o tema, as fontes de informação e formas de se chegar às publicações. Obtenção, seleção e leitura. Registro da leitura (ficha de leitura). Metodologia de Pesquisa /1 16

17 Fontes de Informação Livros Teses e Dissertações Artigos Metodologia de Pesquisa /1 17

18 Livros Normalmente, contêm informação mais completa, didática e bem amadurecida (WAZLAWICK, 2009). O objetivo de um livro é precisamente apresentar uma determinada área de conhecimento de forma didática e bem fundamentada (WAZLAWICK, 2009). A maioria dos livros procura apresentar apenas a informação já consolidada (WAZLAWICK, 2009). Metodologia de Pesquisa /1 18

19 Teses e Dissertações Além de apresentarem um trabalho de pesquisa, têm geralmente uma boa fundamentação, base para o trabalho, relacionada à pesquisa efetuada. Trazem a visão do autor sobre o tema e o aluno-pesquisador deve evitar ficar limitado a essa visão. São boas fontes de referências. Metodologia de Pesquisa /1 19

20 Artigos Na área de Computação, bons artigos podem ser encontrados tanto em periódicos quanto em eventos científicos (WAZLAWICK, 2009). Em geral, artigos em eventos têm informações mais atuais, enquanto artigos de periódicos tendem a apresentar resultados mais consolidados e terão sido mais arduamente revisados e lapidados (WAZLAWICK, 2009). Metodologia de Pesquisa /1 20

21 Artigos Problema: Qual a qualidade efetiva de um trabalho publicado em um artigo? Procurar trabalhos em periódicos e eventos reconhecidos pela comunidade. Procurar trabalhos de autores reconhecidos pela comunidade. Metodologia de Pesquisa /1 21

22 Revisão Bibliográfica: Por onde começar? Se o pesquisador for praticamente um iniciante no tema, começar por trabalhos mais abrangentes que deem uma visão geral da área, tais como artigos na forma de surveys e livros (WAZLAWICK, 2009). Surveys apresentam o estado da arte da área de pesquisa e sua evolução histórica, indicando as principais realizações e diferentes desdobramentos (WAZLAWICK, 2009). Metodologia de Pesquisa /1 22

23 Revisão Bibliográfica: Por onde começar? Trabalhos clássicos também devem ser lidos, sendo eles normalmente destacados nos surveys (WAZLAWICK, 2009). Trabalhos muito citados têm sua importância aumentada. Trabalhos clássicos são precisamente aqueles que são muito citados. Metodologia de Pesquisa /1 23

24 Revisão Bibliográfica À medida que o pesquisador ganha familiaridade com o tema, deve buscar fontes mais recentes, chegando ao que tem sido feito correntemente. Metodologia de Pesquisa /1 24

25 Revisão Bibliográfica Quando se faz uma pesquisa em que alguma técnica ou abordagem é aplicada a uma área de conhecimento, é necessário que se faça uma revisão (WAZLAWICK, 2009): sobre a abordagem em si, sobre a área de aplicação e principalmente, sobre as aplicações que já foram tentadas com essa abordagem (ou abordagens semelhantes) na mesma área ou em áreas afins. Um trabalho que não atende ao último item sofre da síndrome da intersecção esquecida (WAZLAWICK, 2009). Metodologia de Pesquisa /1 25

26 Revisão Bibliográfica Deve-se evitar o fundamento vazio, i.e., dizer que seu trabalho é original porque você não encontrou nada parecido. É imprescindível apresentar algo como referência. Deve-se mostrar o que os outros fizeram e depois comparar seu trabalho com essas referências, indicando o que é diferente, melhor ou pior (WAZLAWICK, 2009). Metodologia de Pesquisa /1 26

27 A Leitura Deve ser crítica, ou seja, a leitura não pode ser encarada apenas como aprendizado. O pesquisador deve exercer espírito crítico, questionando a validade das informações registradas nos textos lidos. A aceitação passiva não gera no pesquisador o espírito de busca por novas informações (WAZLAWICK, 2009). Metodologia de Pesquisa /1 27

28 A Leitura Algumas perguntas podem ajudar o leitor a fazer uma leitura rica e geradora de ideias, bem como a avaliar a qualidade do trabalho sendo lido (WAZLAWICK, 2009): De onde o autor parece tirar suas ideias? Quais as suas referências? Quais os resultados obtidos? Como este trabalho se relaciona com outros? Qual seria um próximo passo para dar continuidade a este trabalho? Que ideias de áreas próximas poderiam ser aproveitadas neste trabalho? Metodologia de Pesquisa /1 28

29 Registrando a Leitura Se você leu um trabalho e não fez nenhum registro (anotação, resumo, ficha de leitura), então não leu o trabalho... Durante todo processo de leitura é fundamental fazer anotações. Depois de ler algumas dezenas de trabalhos, será difícil lembrar de onde saíram determinadas ideias (WAZLAWICK, 2009). Metodologia de Pesquisa /1 29

30 Ficha de Leitura Exemplo: Referência completa Palavras-chave Resumo Principais ideias Aspectos positivos Aspectos negativos Avaliação da importância para o trabalho de pesquisa Ideias que surgiram para o trabalho a partir da leitura deste texto Metodologia de Pesquisa /1 30

31 Fichas de Leitura O conjunto de fichas de leitura não é o capítulo de revisão da literatura; é apenas um registro da leitura, organizado por fonte bibliográfica (WAZLAWICK, 2009). Contudo, posteriormente pode servir de fonte para a escrita do capítulo de revisão. Metodologia de Pesquisa /1 31

32 Fichas de Leitura Grande parte da revisão bibliográfica será realizada antes de se definir o problema a ser tratado e os objetivos do trabalho. Assim, muita leitura feita não será referenciada no capítulo de revisão da literatura. O capítulo de revisão da literatura deve ser organizado após a execução da pesquisa, de modo a contemplar os principais conceitos e trabalhos correlatos relevantes para a compreensão da mesma (WAZLAWICK, 2009). Metodologia de Pesquisa /1 32

33 Organizando o registro da leitura O uso de uma ferramenta para organizar as referências é muito indicado. Exemplos: Zotero Mendeley Jabref Reference Manager End Note Uma comparação entre diversas ferramentas desse tipo pode ser encontrada em: Metodologia de Pesquisa /1 33

34 Exposição à Pesquisa Além da leitura, o pesquisador, sobretudo na fase de geração de ideias, deve estar constantemente exposto a um ambiente científico (WAZLAWICK, 2009). Neste contexto, é fundamental que o aluno se reúna pelo menos uma vez por semana com seu orientador para discutir ideias. A presença em laboratórios de pesquisa também é muito saudável, bem como a participação como ouvinte em defesas de mestrado e doutorado. O debate com colegas também pode ser muito enriquecedor. Metodologia de Pesquisa /1 34

35 Sistematizando a Pesquisa Bibliográfica Waslawick (2009) sugere os seguintes passos para proceder à pesquisa bibliográfica de maneira sistemática: 1. Listar os periódicos (incluindo os gerais) e eventos relevantes para o tema de pesquisa. 2. Obter uma lista dos artigos publicados nesses veículos nos últimos cinco (ou mais) anos. 3. Selecionar os artigos que tenham uma relação com o tema de pesquisa. 4. Ler o resumo (abstract) desses artigos e classificá-los por sua relevância (alta, média ou baixa). 5. Ler os artigos de alta relevância e fazer fichas de leitura. Anotar também referências relevantes mencionadas nesses artigos que pareçam relevantes para o trabalho de pesquisa. 6. Dependendo do caso, ler também os artigos de relevância média ou baixa. 7. Decidir se já há material suficiente para a elaboração de uma ideia de pesquisa consistente. Se não houver, expandir a pesquisa examinando artigos mais antigos (expansão do passo 2) ou ampliando o leque de periódicos e eventos considerados (expansão do passo 1). Metodologia de Pesquisa /1 35

36 Sistematizando a Pesquisa Bibliográfica A predefinição da lista de periódicos e eventos pode deixar de fora trabalhos importantes e atuais. Assim, pode valer a pena fazer uso de mecanismos de busca mais gerais, tal como Google Scholar (ou mesmo o Google). Neste caso, tem-se que ficar mais atento à qualidade dos artigos. Metodologia de Pesquisa /1 36

37 Sistematizando a Pesquisa Bibliográfica Uma abordagem mais formal para sistematizar a revisão bibliográfica são as Revisões Sistemáticas (Kitchenham, 2004). Metodologia de Pesquisa /1 37

38 Revisão Bibliográfica Sempre há conhecimento novo sendo produzido. Assim, o trabalho de revisão bibliográfica é contínuo e inesgotável. Mas o trabalho de pesquisa deve ter um fim claro (WAZLAWICK, 2009). É necessário, portanto, passar gradualmente da fase de revisão bibliográfica para a fase de realização da pesquisa propriamente dita (WAZLAWICK, 2009). Metodologia de Pesquisa /1 38

39 Revisão Sistemática É um meio de identificar, avaliar e interpretar a pesquisa existente disponível relevante para uma particular questão de pesquisa, tópico ou fenômeno de interesse (Kitchenham, 2004). É uma metodologia de pesquisa desenvolvida para obter e avaliar a evidência disponível em um tópico focado de pesquisa (Biolchini et al., 2005). Metodologia de Pesquisa /1 39

40 Revisão Sistemática Objetivos de uma revisão sistemática da literatura (Kitchenham, 2004): Sumarizar a evidência existente referente a um tópico específico. P.ex., evidência dos benefícios e limitações de um método ágil; Identificar lacunas na pesquisa corrente para sugerir áreas para maior investigação. Prover um framework/background para posicionar adequadamente novas atividades de pesquisa. Metodologia de Pesquisa /1 40

41 Revisão Sistemática x Revisão Informal Revisões informais, conduzidas sem planejamento e critérios de seleção estabelecidos a priori, caracterizam-se por serem (Mafra et al., 2006): Pouco abrangentes: a escolha das fontes das publicações a serem analisadas e a busca por publicações nessas fontes são feitas de forma ad hoc, sem um planejamento prévio. Fontes importantes podem ser negligenciadas. Como geralmente não há uma utilização de uma estratégia de busca dentro das fontes selecionadas, importantes publicações podem não ser capturadas. Não passíveis de repetição e por conseguinte pouco confiáveis. Dependentes dos pesquisadores que as conduziram, aumentando possivelmente o viés de seus resultados. Metodologia de Pesquisa /1 41

42 Revisão Sistemática Uma revisão sistemática não é simplesmente uma revisão da literatura conduzida segundo um planejamento (Mafra et al., 2006). A revisão sistemática possui objetivos maiores, onde a revisão da literatura atua como um meio pelo qual um determinado propósito é atendido (Mafra et al., 2006). I.e., a revisão da literatura permite a coleta de dados que possam ser analisados posteriormente com o objetivo de se gerar evidências na área (que é o propósito das revisões sistemáticas). A condução de revisões sistemáticas ajuda a elucidar novos aspectos na área de investigação, direcionando os esforços de pesquisa (Biolchini et al., 2005). Metodologia de Pesquisa /1 42

43 O Processo de Revisão Sistemática Planejamento da Revisão Identificação da Necessidade da Revisão Desenvolvimento de um Protocolo de Revisão Condução da Revisão Seleção de Publicações Avaliação da Qualidade das Publicações Análise dos Dados Publicação dos Resultados (Kitchenham, 2004) Metodologia de Pesquisa /1 43

44 Planejamento da Revisão Identificar a Necessidade A necessidade de uma revisão sistemática surge da exigência de se sumarizar todas as informações existentes sobre algum fenômeno de forma completa e imparcial. Para isso deve-se definir o objetivo da revisão. Metodologia de Pesquisa /1 44

45 Planejamento da Revisão Desenvolver o Protocolo O protocolo deve indicar, dentre outros: o objetivo da revisão; as questões de pesquisa que a revisão se propõe a responder; fontes a serem pesquisadas; critérios de seleção de publicações, incluindo período, idioma e expressão de busca; critérios de inclusão/exclusão; procedimentos de análise e extração de dados; procedimento de teste do protocolo de pesquisa. Metodologia de Pesquisa /1 45

46 Modelo do Protocolo de Revisão Objetivo: Formulação da pergunta: Intervenção: Controle: População: Resultados: Aplicação: Critérios de seleção de fontes: Métodos de busca de fontes: Palavras-chave: Listagem de fontes: Tipo dos artigos: Idioma dos artigos: Critérios de inclusão e exclusão das publicações Critérios de qualidade das publicações: Processo de seleção das publicações Avaliação da qualidade das publicações: Estratégia de extração de informação: Sumarização dos resultados: (Mafra et al., 2006) Metodologia de Pesquisa /1 46

47 Condução da Revisão Seleção de Publicações: A partir das fontes selecionadas, as publicações são identificadas e selecionadas de acordo com os critérios de seleção e inclusão/exclusão estabelecidos no protocolo da revisão. Avaliação da Qualidade das Publicações: as publicações são avaliadas segundo os critérios de qualidade estabelecidos no protocolo. Análise dos Dados: os dados dos estudos são extraídos, analisados e sintetizados. Metodologia de Pesquisa /1 47

48 Formulário de Condução da Revisão Fonte: (fonte na qual a busca foi conduzida) Data da busca: Expressão de busca utilizada: Lista de artigos encontrados Lista dos artigos incluídos Referência completa Critérios de Inclusão e Exclusão Critérios - Resultados Justificativa: (comentários do pesquisador sobre sua escolha) Lista dos artigos excluídos (mesma estrutura de artigos incluídos) (Mafra et al., 2006) Metodologia de Pesquisa /1 48

49 Publicação dos Resultados Os resultados devem ser publicados: Em um relatório técnico ou como parte do trabalho de conclusão do curso (tese de doutorado ou dissertação de mestrado), incluindo todos os detalhes da revisão sistemática. Em um artigo de evento ou periódico. Como normalmente nesses veículos há limitação de tamanho, o relatório técnico / trabalho de conclusão deve ser referenciado. Metodologia de Pesquisa /1 49

50 Estudo Baseado em Revisão Sistemática (EBRS) Desenvolver o Protocolo Conduzir a Pesquisa Relatar os Resultados (Montoni apud Barcellos, 2009) Metodologia de Pesquisa /1 50

51 Desenvolver o Protocolo Definir o contexto no qual o estudo será realizado e o objeto de análise. Definir o protocolo de pesquisa, incluindo: Objetivo Questões de Pesquisa Fontes Critérios para Seleção das Publicações Forma de Armazenamento dos Dados das Publicações Procedimentos para Extração e Análise de Dados Procedimento de Teste de Protocolo de Pesquisa Testar o protocolo para verificar a viabilidade de execução do mesmo, permitindo identificar modificações necessárias no protocolo de pesquisa e/ou banco de dados de apoio. Metodologia de Pesquisa /1 51

52 Conduzir a Pesquisa Nesta atividade o pesquisador executa a pesquisa, coletando e armazenando os dados segundo o protocolo definido. Análises quantitativas e qualitativas devem ser realizadas com base nos dados coletados. Metodologia de Pesquisa /1 52

53 Relatar Resultados Nesta atividade o pesquisador empacota os resultados gerados ao longo da execução do estudo. Deve-se buscar publicar os resultados em alguma conferência, revista ou biblioteca de trabalhos científicos. Metodologia de Pesquisa /1 53

54 Exemplo de EBRS (Barcellos, 2009) Metodologia de Pesquisa /1 54

55 Revisão Sistemática (e EBRS) Como tem de ter um objetivo e questões de pesquisa formuladas, não se aplica aos estágios iniciais da revisão bibliográfica. Para ser bem aplicada, devem ter sido definidos o problema, os objetivos e as hipóteses do trabalho. Metodologia de Pesquisa /1 55

56 Referências Barcellos, M.P., Uma Estratégia para Medição de Software e Avaliação de Bases de Medidas para Controle Estatístico de Processos de Software em Organizações de Alta Maturidade, Tese de Doutorado, COPPE/UFRJ, Rio de Janeiro, Brasil, Biolchini, J., Mian, P.G., Natali, A.C., Travassos, G.H., Systematic Review in Software Engineering: Relevance and Utility, Relatório Técnico ES-679/05, COPPE/UFRJ, Rio de Janeiro, Brasil, Kitchenham, B., Procedures for Performing Systematic Reviews, Joint Technical Report: Keele University Technical Report TR/SE and NICTA Technical Report T.1, July Mafra, S.N., Travassos, G.H., Estudos Primários e Secundários Apoiando a Busca por Evidência em Engenharia de Software, Relatório Técnico ES-687/06, COPPE/UFRJ, Rio de Janeiro, Brasil, 2005 Montoni, M., Uma Abordagem para Condução de Iniciativas de Melhoria de Processos de Software, Exame de Qualificação para o Doutorado, COPPE/UFRJ, Rio de Janeiro, Brasil, Moresi, E.(Organizador), Metodologia de Pesquisa, Universidade Católica de Brasília, Wazlawick, R.S., Metodologia de Pesquisa para Ciência da Computação, Editora Elsevier, Metodologia de Pesquisa /1 56