Métodos de recolha e análise de dados Métodos de recolha de dados Processo racional através do qual se atinge um fim previamente determinado. É o caminho de se chegar a um resultado Instrumentos de recolha de dados É um objecto palpável utilizado nos diversas métodos para obter os dados. Métodos de análise de dados É um processo que envolve seleção, tratamento e interpretação da informação.
Métodos de recolha e análise de dados Natureza da investigação Métodos de recolha de dados Instrumentos de recolha de dados Métodos de análise de dados Intervenientes Qualitativo Quantitativo Análise documental Documentos Testes Fichas de trabalho Análise de conteúdo Observação Grelha de observação Análise de conteúdo Focus Group Guião de entrevista Grelha de observação Análise de conteúdo Inquérito por entrevista Guião de entrevista Análise de conteúdo Inquérito por questionário Inquérito por questionário Questionário Questionário Análise de conteúdo às respostas aos itens abertos Análise estatística às respostas aos itens fechados Professor bibliotecário Professor bibliotecário Alunos Pais Alunos Docentes Alunos Pais Docentes Alunos Pais Docentes
Métodos de recolha e análise de dados Questionários conjunto de questões ou itens num formato escrito que é autoadministrado Entrevista situação face a face, na qual um entrevistador faz perguntas a um ou mais entrevistados
Entrevista Entrevista É um método de recolha de dados que consiste numa interação verbal entre o entrevistador e o respondente, em situação de face a face. Há 3 tipos de entrevistas: estruturadas não estruturadas semi-estruturadas
Entrevista Entrevista estruturada Cada entrevistado responde a uma série de perguntas preestabelecidas dentro de um conjunto limitado de categorias de respostas. As respostas são registadas de acordo com um esquema de codificação preestabelecido. O entrevistador controla o ritmo da entrevista utilizando o guião seguido de forma padronizada e sem desvios. Utiliza-se quando se pretende obter informação quantificável de um número elevado de entrevistados. Tem como objetivo estabelecer frequências que permitam um tratamento estatístico posterior, o que obriga a que o teor das questões se mantenha inalterado em relação a todos os entrevistados.
Entrevista Entrevista estruturada Pontos fortes Pontos fracos Utilização guião estruturado; Resultados uniformes; Vários entrevistados para o mesmo guião; Uniformidade na informação recolhida; Facilita a análise posterior; Facilita uma réplica do estudo. Diretiva; Não flexível nem espontânea; Reduz ou anula a possibilidade de aprofundar questões que não foram antecipadas pelo entrevistador; Os elementos pessoais não são tomadas em consideração.
Entrevista Entrevistas não estruturadas A interação verbal entre entrevistador e entrevistado desenvolve-se à volta de temas ou grandes questões organizadoras do discurso. Desenvolver-se numa lógica descritiva em que se pretende recolher informação sobre os factos, em que se recolhem opiniões e representações do entrevistado.
Entrevista Entrevista não estruturada Pontos fortes Pontos fracos Permite ao entrevistador responder bem a diferenças individuais e a mudanças situacionais; As questões podem ser individualizadas para melhorar a comunicação; É flexível. Depende bastante das capacidades e treino do entrevistador; Requer muito tempo para obter informação sistemática; Pode levar muito tempo a que as mesmas questões sejam abordadas por diferentes pessoas; Não existe um guião prévio estruturado.
Entrevista Entrevista semi-estruturada Caracteriza-se pela existência de um guião previamente preparado que serve de eixo orientador ao desenvolvimento da entrevista Procura garantir que os diversos participantes respondam às mesmas questões Não se exige uma ordem rígida nas questões mas todas têm de ser respondidas O guião funciona como um checklist O desenvolvimento da entrevista vai-se adaptando ao entrevistado Mantém-se um elevado grau de liberdade na exploração das questões
Entrevista Entrevista semi estruturada Pontos fortes Pontos fracos Guião previamente preparado que serve de eixo orientador ao desenvolvimento da entrevista; Otimização do tempo disponível; Tratamento mais sistemático dos dados; Especialmente aconselhado para entrevistas a grupos; Permite selecionar temáticas para aprofundamento; Permite adaptações, correções e esclarecimentos.
Entrevista Entrevistas em grupo - focus group Implica a constituição de pequenos grupos para debater um tema em profundidade Economiza tempo e mostra perceções diferentes Aconselhada para entrevistas semi estruturadas Pode fornecer perspetivas que a entrevista individual dificilmente permite Valoriza os processos sociais e interpessoais
Entrevista Guião da entrevista Conjunto de tópicos relativamente aos quais o investigador procura informação Tópicos para a construção do guião Identificar um tema Identificar (dentro do tema) os tópicos que pretendemos explorar Identificar (para cada tópico), aspetos a explorar
Entrevista Questões abertas Vantagens: Promovem a reflexão do respondente Minimizam a imposição de respostas Desvantagens: Desvio do tema Tempo da entrevista
Entrevista Questões fechadas Vantagens São fáceis de codificar e tabelar Mensuração uniforme entre respondentes e a fidelidade é aumentada porque cada resposta dos indivíduos tem que se encaixar em categorias claramente definidas Desvantagens Superficialidade Impõe a moldura de referência do investigador não permite aos respondentes explicar o porquê e o como das suas respostas Não deixa o investigador explorar as razões por detrás das atitudes
Métodos de recolha de dados Métodos de recolha de dados Inquérito por questionário Inquérito por entrevista Análise documental Observação (Almeida, J. F. et al, 1994)
Entrevista Vantagens Torna possível a recolha de informação de um grande número de indivíduos. Permite comparações precisas entre as respostas dos inquiridos. Possibilita a generalização dos resultados da amostra à totalidade da população. Análise mais rápida e económica. Mais fácil e rápida de responder. Inquérito por questionário Desvantagens O material recolhido pode ser superficial. A padronização das perguntas não permite captar diferenças de opinião significativas ou subtis entre os inquiridos. As respostas podem dizer respeito mais ao que as pessoas dizem que pensam do que ao que efectivamente pensam. Não dá liberdade de expressão ao inquirido Fica limitado à opção de resposta
Inquérito por questionário No planeamento do IQ devemos questionar: O que pretendemos saber? (delimitação do objeto de estudo) O que vamos perguntar? (aspetos relacionados com as ações de melhoria) Quem vamos inquirir? (atores) Como vamos fazer a recolha dos dados? (métodos, instrumentos amostra) De que forma vamos tratar os dados? (análise estatística e de conteúdo)
Inquérito por questionário Como vamos formular as questões? Uma idéia = uma questão. Clareza na formulação das perguntas e enunciados. Não direcionar as respostas. Falar diretamente com o entrevistado. Cuidado com os termos empregados: frequentemente, regularmente, etc.
Inquérito por questionário O que deve ser evitado? O uso excessivo da palavra porquê. Perguntas ambíguas Ultimamente tens requisitado mais livros Perguntas capciosas Concordas que a biblioteca é importante numa escola Perguntas duplas Costumas ler mais durante os dias da semana ou aos fins de semana Perguntas com jargão e terminologia técnica Dominas as ferramentas da Web2.0 Achas fixe a biblioteca Perguntas emocionais O que deve ser feito com os alunos que não cumprem os prazos de entrega dos livros Perguntas negativas O PB nunca me questionou sobre qual seria o melhor horário da BE Excesso de siglas e abreviações Costumas requisitar na BE livros do PNL
Inquérito por questionário Formulação de questões As questões de um questionário podem ser: Fechadas Abertas Semi-abertas
Inquérito por questionário Formulação de questões Questões fechadas O inquirido escolhe uma das respostas alternativas Podemos distinguir vários tipos de questões fechadas: 1. Questões de resposta única (o inquirido escolhe apenas uma modalidade de resposta) 2. Questões de resposta múltipla (o inquirido escolhe de várias modalidades de respostas em número limitado ou não) 3. Classificação ou hierarquia (o inquirido ordena as várias modalidades de respostas por ordem de importância) 4. Questões em escala (o inquirido tem a possibilidade de atribuir um grau de concretização às respostas quando estamos na presença de questões do tipo concordo/não concordo) (Grangé e Lebart, 1994)
Inquérito por questionário Formulação de questões Podemos distinguir vários tipos de questões fechadas: 1. Questões de resposta única (o inquirido escolhe apenas uma modalidade de resposta) Que espaço da escola gostas mais? Recreio Sala de aula Sala do aluno Biblioteca escolar
Inquérito por questionário Formulação de questões Podemos distinguir vários tipos de questões fechadas: 2. Questões de resposta múltipla (o inquirido escolhe de várias modalidades de respostas em número limitado ou não) Quais são na tua opinião as vantagens de frequentar a BE? (Indica no máximo 2 respostas) Melhorar os resultados escolares Apoiar o processo de aprendizagem Ocupar o tempo livre Ter um apoio individualizado
Inquérito por questionário Formulação de questões Podemos distinguir vários tipos de questões fechadas: 3. Classificação ou hierarquia (o inquirido ordena as várias modalidades de respostas por ordem de importância) Hierarquiza por ordem de prioridade o que costumas fazer com mais frequencia na BE (utiliza a numeração de 1 a 5, sendo o 1 o que fazes menos e o 5 o fazes mais.) Ler Estudar Ver vídeos Jogar no computador Fazer TPC
Inquérito por questionário Formulação de questões Podemos distinguir vários tipos de questões fechadas: 4. Questões em escala (o inquirido tem a possibilidade de atribuir um grau de concretização às respostas quando estamos na presença de questões do tipo concordo/não concordo) O horário da BE correponde às tuas necessidades 1= Completamente em desacordo 2= Desacordo 3= Nem concordo nem discordo (sem opinião) 4= Concordo 5= Concordo Completamente
Inquérito por questionário Formulação de questões Questões fechadas O sujeito fica limitado à opção de resposta VANTAGENS Existe uniformidade, e por isso simplifica a análise da resposta Análise mais rápida e económica A lista de respostas ajuda a clarificar o significado da questão Respostas mais fáceis de tabular Ajuda a sintetizar a informação Mais fácil e rápida de responder DESVANTAGENS Não dá liberdade de expressão ao inquirido Condiciona a resposta do inquirido Difícil de elaborar Pode levar a erros quando são selecionados padrões de resposta que interessam ao selecionador Diminui o índice de reflexão sobre o tipo de resposta do inquirido Falha pela falta de variáveis e profundidade Dificuldade em determinar erros e omissões.
Inquérito por questionário Formulação de questões Questões abertas O sujeito goza de liberdade para responder Razões para se formularem questões abertas: Falta de tempo para elaborar uma lista de respostas-tipo e consequentemente deixa-se um espaço aberto para registar a resposta do inquirido Um questionário totalmente fechado torna-se fastidioso Apoiando-se nas listas de respostas que lhes apresentamos, os inquiridos podem refletir cada vez menos e tomar cada vez menos cuidado com o que dizem. (Ghiglione e Matalon, 1992)
Inquérito por questionário Formulação de questões Questões abertas São questões às quais o inquirido responde como quer, utilizando o seu próprio vocabulário Para estas questões não existe qualquer tipo de restrição à resposta, devendo esta ser transcrita literalmente, através do modo mais fiável O espaço reservado para esta restrição deverá ser medido previamente para facilitar a exploração das respostas (Grangé, 1994) Quais são os três aspectos que mais aprecia na BE? 1.ª 2.ª 3.ª
Inquérito por questionário Formulação de questões O sujeito goza de liberdade para responder VANTAGENS Estimula o pensamento livre Indispensável aos estudos exploratórios DESVANTAGENS Dificuldade no tratamento de informação Análise dos dados mais subjetiva Dificuldade em categorizar e interpretar respostas Possível distorção das respostas durante o processo de codificação Maior probabilidade de ocorrerem viéses associados ao entrevistador Mais tempo para responder à questão Dificuldade em detetar erros de omissão
Inquérito por questionário Formulação de questões Questões semi-abertas Num questionário podem ocorrer simultaneamente modalidades de resposta fechada e aberta na mesma questão. Esta forma mista tende a resolver os problemas de pertinência e de exaustividade das questões fechadas, reduzindo fortemente os custos de codificação pós-inquérito de uma resposta "literal". Qual é o aspecto que mais aprecia na escola/agrupamento? Profissionalismo docente Projecto educativo Alunos Organização e gestão Resultados escolares Liderança Outro. Qual?
Inquérito por questionário Tipos de escalas Diferentes tipos de escalas: Escalas qualitativas nominais: os valores não tem uma relação de ordem entre si (estado civil, sexo, cor dos olhos, raça) Estadísticas utilizadas frequência Escalas quantitativas ordinais: são medidos numa escala métrica Idade; peso (medido em Kg); escalas de Likert Estadísticas utilizadas frequência, medianas, modas, médias, desviopadrão Escalas (intervalo, relacional) ( )
Inquérito por questionário Tipo de escalas Escala nominal Qual é o ano de escolaridade que frequentas? 7.º 8.º 9.º 10.º 11.º 12.º Costumas ir à BE? Sim Não
Inquérito por questionário Tipo de escalas Escala ordinal Inquérito por questionário aos alunos Indica o seu grau de concordância ou discordância das seguintes afirmações: DT D Escala ND/ NC C CT A biblioteca escolar possui livros do meu interesse Os livros que gosto estão sempre disponíveis A biblioteca escolar é um lugar que gosto de frequentar
Inquérito por questionário Amostra Amostra: Conjunto de dados ou observações, recolhidos a partir de um subconjunto da população, que se estuda com o objetivo de tirar conclusões para a população de onde foi recolhida. Seleção dos elementos a partir dos quais se vão recolher os dados necessários. (Vicente, Reis e Ferrão, 1996) População Amostra
Inquérito por questionário Estatísticas Amostra Sempre foi uma preocupação para a maioria dos investigadores o tamanho ideal que deve ter uma amostra por forma a garantir a qualidade dos resultados da investigação. Sabemos, em termos gerais, que amostras grandes garantem à partida maior generalização aos resultados por diminuírem o erro amostral, o que é de facto verdade, mas nem sempre uma amostra grande é possível nem tão pouco necessária. Assim, muitos autores defendem ser mais importante o cuidado na seleção da amostra do que propriamente o tamanho da mesma (Coutinho, 2005, p.113)
Inquérito por questionário Estatísticas Estatísticas Coeficiente Alpha de Cronbach Frequência Medidas de tendência central Média Moda Mediana Medidas de dispersão Desvio-padrão O Teste de Friedman Coeficiente de correlação de Pearson
Inquérito por questionário Estatísticas Fidelidade do Questionário O grau de fidelidade do questionário aponta para a consistência interna das perguntas que o constituem. É através do coeficiente Alpha de Cronbach que mede a capacidade explicativa de uma determinada variável ou factor pelas perguntas que a compõem. Quando o valor de Alpha de Cronbach é superior a 0,70 é lícito afirmar que as variáveis em causa são bem explicadas pelas perguntas consideradas, dado que a probabilidade de erro é de apenas 30%.
Inquérito por questionário Estatísticas Média Centro do conjunto de dados ponto de equilíbrio Moda Referencial quantitativo da avaliação Escala qualitativa Medida da avaliação Significado da avaliação 1 Entre 1 e 1,49 Discordo totalmente 2 Entre 1,50 a 2,49 Discordo 3 2,50 a 3,49 Indefinição avaliativa 4 Entre 3,5 a 4,49 Concordo 5 Entre 4,50 a 5 Concordo totalmente A moda é o valor que ocorre com mais frequência em determinada amostra. Mediana Valor do meio do conjunto de dados, quando os valores estão dispostos em ordem crescente ou decrescente. Divide um conjunto de dados em duas partes iguais.
Inquérito por questionário Estatísticas Desvio-padrão Mede o grau de consenso sobre a unanimidade ou dispersão de respostas. Desvio padrão Nível de consenso 0.40 Alta concordância 0.41 a 0.70 Moderado/alta concordância 0.71 a 1.00 Moderado/baixa concordância Maior de 1.00 Baixa concordância O Teste de Friedman O teste de Friedman aplica-se para comparar variáveis e detetar as preferências manifestadas pelos inquiridos em perguntas abertas onde se pede para pôr por ordem crescente as suas opções. O Teste baseia-se nas ordens de cada caso, comparando as pontuações médias de cada variável (Pestana, et al (2003).
Inquérito por questionário Estatísticas Coeficiente de correlação de Pearson É a medida do grau de relação linear entre duas variáveis quantitativas. Este coeficiente varia entre os valores -1 e 1. O valor 0 (zero) significa que não há relação linear, o valor 1 indica uma relação linear perfeita e o valor -1 também indica uma relação linear perfeita mas inversa, ou seja quando uma das variáveis aumenta a outra diminui. Quanto mais próximo estiver de 1 ou -1, mais forte é a associação linear entre as duas variáveis. Coeficiente de correlação Correlação 1 Correlação perfeita 0,70 a 0,99 Correlação alta 0,30 a 0,69 Correlação significativa, média 0,01 a 0,29 Correlação baixa 0 inexistência de correlação linear.
Plano de melhoria Plano de melhoria da BE Exercício prático e reflexivo
Plano de melhoria Plano de melhoria Problemas identificados Resultados esperados Ações de melhoria a implementar Instrumentos de avaliação / indicadores de execução a utilizar
Plano de melhoria Plano de melhoria Problemas identificados Falta de formação para o uso das tecnologias, ambientes e ferramentas digitais (Word, Excel, PowerPoint, Movimaker, Frisos cronológicos, E- books,...). Resultados esperados Melhorar as competências dos alunos na utilização das tecnologias como ferramenta de aprendizagem dos alunos do 2.º ciclo. Ações de melhoria a implementar Sessões de formação na BE. Instrumentos de avaliação / indicadores de execução a utilizar
Plano de melhoria Plano de melhoria Problemas identificados Falta de formação para o uso das tecnologias, ambientes e ferramentas digitais (Word, Excel, PowerPoint, Movimaker, Frisos cronológicos, E-books,...). Resultados esperados Melhorar as competências dos alunos na utilização das tecnologias como ferramenta de aprendizagem dos alunos do 2.º ciclo. Ações de melhoria a implementar Sessões de formação na BE. Instrumentos de avaliação / indicadores de execução a utilizar Questionário Grelha de observação Guião de entrevista Documentos Testes Fichas de trabalho
Plano de melhoria Plano de melhoria Resultados esperados Melhorar as competências dos alunos na utilização das tecnologias como ferramenta de aprendizagem. Ações de melhoria a implementar Sessões de formação na BE para os alunos do 2.º ciclo. Instrumentos de avaliação / indicadores de execução a utiliza Como saber se foram alcançados os resultados esperados? Delimitar o objeto de avaliação Definir os atores a inquirir / amostra Selecionar os métodos de recolha de dados Construir os indicadores Analisar e interpretar os dados
Plano de melhoria Plano de melhoria Resultados esperados Melhorar as competências dos alunos na utilização das tecnologias como ferramenta de aprendizagem. Ações de melhoria a implementar Sessões de formação na BE sobre ferramentas da Web para os alunos do 2.º ciclo. Instrumentos de avaliação / indicadores de execução a utiliza Delimitar o objeto de avaliação Formação na BE sobre ferramentas da Web Definir os atores a inquirir Alunos Docentes Professor bibliotecário Selecionar os métodos de recolha de dados. Inquérito por questionário Observação Construir os indicadores Quantidade de alunos envolvidos Quantidade de ferramentas que se ensinaram Aplicação das ferramentas na realização dos trabalhos escolares Qualidade da aprendizagem realizada Analisar e interpretar os dados
Plano de melhoria Professor bibliotecário Alunos Docentes Indicadores Método de recolha de dados Instrumentos Método de recolha de dados Instrumentos Método de recolha de dados Instrumentos Quantidade de alunos envolvidos Observação Grelha de observação Quantidade de ferramentas que se ensinaram Observação Grelha de observação Aplicação das ferramentas na realização dos trabalhos escolares Inquérito por questionário Questionário Inquérito por questionário Questionário Qualidade da aprendizagem realizada Observação Grelha de observação Análise documental Trabalhos
Plano de melhoria Grelha de observação - Professor bibliotecário Quantidade de alunos envolvidos Ano Turma N.º de alunos Ferramentas 5.º 6.º A B C A B PPT Word Quantidade de ferramentas que se ensinaram Movimaker PPT Word Movimaker PPT Word Movimaker PPT Word Movimaker PPT Word Movimaker Ferramentas que se ensinaram
Plano de melhoria Inquérito por questionário aos docentes Indicador: Aplicação das ferramentas na realização dos trabalhos escolares Itens:
Plano de melhoria Inquérito por questionário aos alunos Indicador: Aplicação das ferramentas na realização dos trabalhos escolares Itens:
Plano de melhoria Inquérito por questionário aos alunos Indicador: Aplicação das ferramentas na realização dos trabalhos escolares Itens:
Plano de melhoria Inquérito por questionário aos docentes Indicador: Aplicação das ferramentas na realização dos trabalhos escolares Itens:
Plano de melhoria Resultados esperados Ações de melhoria Indicadores Instrumentos de recolha de dados Intervenientes Quantidade de sessões realizadas A Melhorar as competências dos alunos na utilização das tecnologias como ferramenta de aprendizagem Sessões de formação na BE para os alunos do 2.º ciclo Quantidade de alunos envolvidos Quantidade de ferramentas que se ensinaram Utilização das ferramentas aprendidas na realização dos trabalhos escolares Grelha de registo Entrevista Professor bibliotecário Docentes Alunos Qualidade da aprendizagem realizada Grelha de registo Docentes Professor bibliotecário B Aumentar os hábitos de leitura Foruns de leitura/à roda dos livros Quantidade de sessões realizadas Quantidade de alunos envolvidos Quantidade de livros requisitados Qualidade das intervenções Grelha de registo Grelha de registo Professor bibliotecário Docentes Professor bibliotecário C Aumentar a participção dos pais nas atividades da BE Participar na semana da leitura Quantidade de pais Grelha de registo Satisfação dos pais Questionário Pais Professor bibliotecário D Atualizar a coleção às metas curriculares Adquirir as obras em falta Quantidade de obras adquiridas Quantidade de obras em falta Grelha de registo Professor bibliotecário
Plano de melhoria Vamos praticar 1.º Trabalho de grupo 5 elementos de escolas diferentes Tarefa Usar um plano de melhoria de uma das escolas do grupo e preencher a grelha 2.º Em grande grupo, no auditório Tarefa Cada grupo apresenta a tarefa realizada Reflexão principais dificuldades no processo de avaliação das ações de melhoria