Avaliação Assistida, Feedbacks e Questionários do Moodle

Transcrição

1 Avaliação Assistida, Feedbacks e Questionários do Moodle Eliana A. M. Leite 1, Gilvandenys L. Sales 1, Lourdes L. R. de Sousa 1, Cassandra R. Joye 3 1 Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE) Av 13 de Maio, 2081 Benfica Fortaleza CE Brasil elimoreiraead@gmail.com,{denyssales, cassandra}@ifce.edu.br, lourdesousa@yahoo.com.br Abstract. This article describes the use of the Quiz tool attached to the LMS Moodle. Applied to students of degree in mathematics in blended learning form of the Universidade Aberta do Brasil (UAB), coordinated by the Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE). The research has its theoretical support in assisted assessment, based on the theoretical Reuven Feuerstein and Vygotsky. Accordingly, the issue that led the theoretical and methodological steps of the research was to investigate the possibilities Quiz effective tool as a tool for learning mediation and its potential in promoting a dynamic and predictive assessment. The research shows significant results in using the Quiz tool as an instrument of teachinglearning process from the perspective of dynamic assessment. Resumo. Este artigo descreve o uso da ferramenta Quiz do LMS Moodle. Aplicado a alunos de licenciatura em Matemática na modalidade blendedlearning da Universidade Aberta do Brasil (UAB), coordenado pelo Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE). A pesquisa tem seu suporte teórico na avaliação assistida, com base no teórico Reuven Feuerstein e Vygotsky. Assim, a questão que conduziu os passos teóricos e metodológicos da pesquisa foi investigar as possibilidades da ferramenta Quiz ser eficaz na mediação da aprendizagem e do seu potencial na promoção de uma avaliação dinâmica e assistida. A pesquisa mostra resultados significativos na utilização dessa ferramenta como instrumento de avaliação dinâmica e formativa no processo de ensino e aprendizagem. 1. Introdução O artigo descreve os resultados da pesquisa realizada com alunos do curso de Licenciatura em Matemática da Universidade Aberta do Brasil (UAB) coordenada pelo Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE). A pesquisa foi desenvolvida a partir dos aportes teóricos da avaliação assistida, fundamentado nos teóricos Reuven Feuerstein e Vygotsky, mais precisamente com o uso da ferramenta Quiz do LMS Moodle com o objetivo de identificar as possibilidades dessa ferramenta como instrumento de avaliação assistida do processo ensino-aprendizagem no contexto das tecnologias digitais. A avaliação do processo ensino-aprendizagem ainda é um dos maiores desafios da prática docente. No cenário atual, caracterizado pela sociedade do conhecimento e da informação com avanços tecnológicos que perpassam os mais diferentes espaços formativos, sociais de lazer etc., torna-se fundamental o avanço de ISSN:

2 pesquisas buscando associar os benefícios, usos e possibilidades da tecnologia como suporte para a prática pedagógica e otimização do processo ensino-aprendizagem. O artigo encontra-se organizado da seguinte forma: a seguir, discorre-se sobre a mediação e avaliação assistida; o próximo item aborda a ferramenta Quiz do LMS Moodle; continua-se com um item que trata da metodologia de emprego do Quiz, estabelecimento de um modelo de planejamento de questões e faz-se um estudo de caso; no próximo item faz-se a análise dos resultados da aplicação do Quiz; e finalmente, são apresentadas as considerações finais e possibilidades para trabalhos futuros. 2. Fundamentos Teóricos Esta seção trata do embasamento teórico que dará suporte à metodologia estabelecida para o emprego da ferramenta Quiz como instrumento de avaliação assistida e mediadora de aprendizagens Avaliação da Aprendizagem Decorar, memorizar entre outras são ações que resultam de práticas que tem se perpetuado por longos anos no contexto e nossas escolas, há que se reconhecerem esforços que tem sido empreendido no sentido de romper com essa hegemonia, mas num contexto mais amplo seus direcionamentos ainda são tímidos. Num sentido oposto, a relação professor-aluno, sob o prisma da perspectiva sociointeracionista, a qual afirma ser o principal fundamento o processo estar centrado de interação entre os três participantes: aluno, professor e conteúdo. Logo, sob o enfoque desta perspectiva, é que emergem práticas avaliativas que procuram romper com esse cenário dominante. A discussão em torno da avaliação da aprendizagem no contexto da educação brasileira já vem sendo desenvolvida a um longo período tanto no /âmbito das pesquisas empíricas quanto teóricas, resultando em produções nas mais diferentes modalidades e níveis de ensino, porém no que diz respeito a modalidade de educação a distância ou a partir do uso das tecnologias digitais e suas ferramentas as pesquisas e reflexões ainda são incipientes deixando uma lacuna significativa, território aberto para realização de pesquisas e produções científicas. Quanto às diversas formas interativas de participação e de interação em ambientes virtuais de aprendizagem, a partir das quais os professores podem dispor, elencam-se algumas das propostas por Silva e Santos (2006, p. 33): Ambientes hipertextuais portadores de: intertextualidade, conexões com outros sites ou documentos; intratextualidade, conexões o mesmo documento; multivocalidade, multiplicidade de pontos de vista; usabilidade, ambiente simples e de fácil navegabilidade intuitiva e de transparência nas informações; mixagem, integração de várias linguagens (sons, texto, imagens dinâmicas e estáticas, gráficas, mapas); hipermídia integração de vários suportes midiáticos abertos a novos links e agregações. Pensar na avaliação do processo ensino aprendizagem para além dos limites da sala de aula se configura como uma tentativa de pensá-la em espaços diferenciados e evidenciar outras possibilidades para além das já conhecidas no espaço das nossas 2304

3 instituições escolares. O uso da ferramenta Quiz como instrumento de pesquisa no âmbito do trabalho desenvolvido está diretamente relacionado a esta ideia central. Segundo Silva e Santos (2006, p.26): A sala de aula como ambiente digital online tem, portanto uma especificidade muito própria, em nada semelhante à sala de aula baseada na pedagogia da transmissão. Nesse contexto, felizmente, podemos dizer que as disposições informacionais e comunicacionais do computador online estão em sintonia com os indicadores de qualidade em educação e com os fundamentos da avaliação mediadora. Liberdade de autoria, multiplicidade de acessos e de conexões, dialogo, troca de informações e de opiniões, participação, intervenção e autoria colaborativa são princípios essenciais em educação cidadã. É a partir dessa multiplicidade de alternativas constantes nos ambientes virtuais que se pode ousar em experimentar e investigar a teoria da avaliação assistida Avaliação Dinâmica e Assistida A avaliação da aprendizagem que deve se processar em EaD exige por parte do avaliador o seu compromisso de fazê-la de forma processual, contínua e com ações reguladoras. Para Luckesi (2006, p. 166): A avaliação da aprendizagem necessita, para cumprir o seu verdadeiro significado, assumir a função de subsidiar a construção da aprendizagem bem-sucedida. A avaliação, no sentido amplo de ser muito mais do que uma medida, deve ajudar o aluno a progredir na direção dos objetivos traçados, validar as aprendizagens em curso, ser instrumento de feedbacks ao longo do processo ensino-aprendizagem, regular por meio de intervenções pedagógicas e contínuas as situações imprevisíveis do ambiente de aprendizagem, respeitar o tempo da aprendizagem necessário ao aprendiz. Avaliação assistida é um ato processual, dinâmico e interativo em que processos de mediação possibilitam modificações e plasticidade nas estruturas cognitivas, é o que Reuven Feuerstein denomina de Teoria da Modificabilidade Cognitiva Estrutural e Experiência de Aprendizagem Mediada (EAM) (FEUERSTEIN, KLEIN e TANNENBAUM, 1994, 1997). Segundo essa teoria são duas as formas de aprendizagem humana: a experiência direta de aprendizado, ou seja, a interação do organismo diretamente com o meio ambiente; e a outra é a Experiência de Aprendizagem Mediada, que depende da presença e intervenções pedagógicas de um ser mais capaz para organizar, selecionar, interpretar e elaborar aquilo que foi experimentado. Por envolver a mediação, estratégias instrucionais de avaliação, moldáveis ao desempenho do aluno, ajudam-no a descobrir e a se colocar em um novo nível potencial, aqui se encaixa a Teoria Socio-histórica cultural de Vygotsky (1998) e seu conceito de zona de desenvolvimento proximal (ZDP). Devidamente mediado o aprendiz alcança graus crescentes de autonomia perante situações-problema e passa de um nível real para um novo nível potencial. 2305

4 2.3. A Importância do Feedback na Aprendizagem Em EaD online, processos de mediação por meio de feedbacks constantes auxiliam o aluno a identificar e sanar suas dificuldades, e quando inseridos no momento da avaliação podem ser instrumento a favor da aprendizagem. Para Sales (2010): a avaliação, no sentido amplo de ser, muito mais do que uma medida, deve ajudar o aluno a progredir na direção dos objetivos traçados, validar as aprendizagens em curso, ser instrumento de feedbacks ao longo do processo ensinoaprendizagem, regular por meio de intervenções pedagógicas e contínuas as situações imprevisíveis do ambiente de aprendizagem, bem como respeitar o tempo da aprendizagem necessário ao aprendiz. Segundo Perrenoud (1999, p.107): Pode-se considerar que todo feedback é formador, venha de onde vier e qualquer que seja sua intenção, visto que contribui para a regulação da aprendizagem em curso. Para Moore e Kearsley (2008, p ), Feedbacks e avaliação é um dos dez princípios gerais de criação e desenvolvimento de um curso em EaD. Esses autores afirmam que: Os alunos devem receber feedback constante de suas tarefas e do progresso geral do curso. A eficácia da mídia e dos métodos de instrução deve ser monitorada e avaliada rotineiramente. Ainda para Sales (2010): Tratando-se de avaliação como instrumento de regulação, importância deve ser dada à qualidade do feedback, afinal, ele contribui para que alunos tenham mais controle sobre sua aprendizagem e, portanto, ajuda a transformá-los como participantes ativos quando envolvidos em processos dinâmicos e interativos de avaliação. Um instrumento de avaliação adequado à EaD online, que favoreça a autonomia, deve informar, regular, formar, e oportunizar aprendizagens em curso, e ainda, garantir ao aprendiz, sob a mediação e ajuda de um Professor/Tutor, um constante feedback às suas ações, para que ele, por si, tome decisões a respeito do que, como, e em que nível deve buscar o aprendizado. Nesse contexto insere-se a ferramenta Quiz, discutida na próxima seção. 3. A Ferramenta Quiz do LMS Moodle: Metodologia e Estudo de Caso O LMS Moodle (Modular Object Oriented Dynamic Learning Environment) é um sistema de gerenciamento da aprendizagem baseado na filosofia de aprendizagem socioconstrutivista (RICE, 2006). Por se tratar de um software livre, teve seu desenvolvimento de forma colaborativa em comunidades virtuais a partir de Além das ferramentas de interação (fóruns, chats e wikis), o Moodle apresenta ferramentas para o suporte à Avaliação online, como Quizzes, Assignments, Exercises e Workshops (COLE, 2005), incluindo testes online ou offline, autoavaliação e avaliação por pares. Ao acessar o Quiz o aluno visualiza seus resultados e poderá, dependendo da configuração da atividade, realizar outra tentativa. 2306

5 3.1. Configuração da Ferramenta Quiz A metodologia para se aplicar o Quiz nos alunos deve ser estabelecida no ato de sua criação e consta do preenchimento de opções online de configuração na própria ferramenta no Moodle. Devem ser definidos: Nome para o Questionário, Tempo, Visualização, Tentativas, Notas, Segurança, Opções de Revisão e Feedback geral. Foi desenvolvido um modelo para cada tipo de questão a ser configurada na ferramenta Quiz com a finalidade de se fazer o planejamento da avaliação, questão por questão, antes de editá-las online no LMS Moodle. Criado o Quiz, aplicou-se em turmas na modalidade EaD da Universidade Aberta do Brasil coordenadas pelo Instituto Federal do Ceará (UAB/IFCE). A configuração do Quiz, definida online no ato de sua elaboração, auxilia na metodologia de aplicação e consta dos dados a seguir: 1 Tempo: data para abrir e encerrar o questionário e limite de tempo (em minutos) 2 Visualização: Definir o Nº de Questões por Páginas e se deve misturar ou não as questões e opções. 3 Tentativas: Definir o número de vezes que o aluno pode realizar a atividade, a necessidade de intervalo entre as tentativas e se serão permitidas ao estudante respostas múltiplas para uma pergunta até mesmo dentro da mesma tentativa do questionário. 4 Notas e Método de avaliação: Nota mais alta, Nota Média, Nota da Primeira Tentativa, Nota da Última Tentativa, Aplicação de penalidades e os números de casas decimais nas notas. 5 Segurança: aqui é definido se o navegador permitirá ou não o copiar/colar, a definição de senha de acesso e em qual requer endereço de rede abre o quiz. 6 Opções de Revisão: permite ao sistema informar ao aluno sua nota e os feedbacks. 7 - Feedback geral: configura-se nessa etapa os feedbacks gerais para cada faixa percentual de rendimento ou limite de notas Planejamento do Quiz: Matriz Modelo Definiu-se também um planejamento para cada tipo de questão o que facilitou a edição das mesmas no LMS Moodle e a valorização dos feedbacks. A seguir, alguns desses modelos (Tabelas 1 a 5). Tabela 1. Modelo para Tipo de Questão Múltipla Escolha Nome da Pergunta: Quiz Modelo 1ª Texto da Pergunta:xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx Fator de Penalidade 0.1 ( ) 0.2 ( ) 0.3 ( ) 0.4 ( ) 0.5 ( ) Outro valor (defina): Suas alternativas possuem uma ( ) ou múltiplas respostas ( )? Numerar as escolhas? a.,b.,c.,...( ) A.,B.,C.,...( ) 1.,2.,3.,...( ) Sem Numeração ( ) Feedback geral:??????????????????ex: Obrigado por participar! Feedback para qualquer resposta correta:??????????ex: Parabéns! Você acertou! Feedback para qualquer resposta parcialmente correta:???ex: Parabéns! Você acertou! Feedback para qualquer resposta incorreta:????????????ex: Que tal pensar melhor! Alternativas ou Escolhas Nota % Feedback 2307

6 1 Tabela 2 - Modelo para Tipo de Questão Associação Nome da Pergunta: Quiz Modelo 2ª Texto da Pergunta:xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx Fator de Penalidade 0.1 ( ) 0.2 ( ) 0.3 ( ) 0.4 ( ) 0.5 ( ) Outro valor (defina): Misturar: Sim ( ) Não ( ) Feedback geral:???? Ex.: Parabéns! Você acertou! Pergunta Resposta Tabela 3 - Modelo para Tipo de Questão Verdadeiro/Falso Nome da Pergunta: Quiz Modelo 3ª Texto da Pergunta:xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx Resposta Certa: Verdadeiro ( ) Falso ( ) Penalidade automaticamente 1 Feedback geral:??? Feedback para opção Verdadeiro xxxxxxxxxxxxxxxxxxxxxxxxxxx Feedback para opção Falso xxxxxxxxxxxxxxxxxxxxxxxxxxxxx Tabela 4 - Modelo para Tipo de Questão Numérica Nome da Pergunta: Quiz Modelo 4ª Texto da Pergunta:xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx Fator de Penalidade 0.5 (Sugere-se um valor equivalente a ) Feedback geral:?????????? Ex.: Valeu a Participação! Resposta Nota Margem de Erro Feedback Tabela 5 - Modelo para Tipo de Questão Embutida Nome da Pergunta: Quiz Modelo 5ª Texto da Pergunta: 1 Escreva aqui a pergunta {1:MULTICHOICE:opção falsa 1#feedback da opção 1~opção falsa 2# feedback da opção 2~=opção 3 correta# feedback da opção 3~%50%opção 4 parcialmente correta # feedback da opção 4 parcialmente correta} 2 - Escreva aqui a pergunta {2:SHORTANSWER: opção falsa 1#feedback da opção 1~opção falsa 2# feedback da opção 2~=opção 3 correta# feedback da opção 3} 3 - Escreva aqui a questão numérica {3:NUMERICAL:=resposta correta:margem de erro#feedback} 4 Escreva a sentença a ser julgada como V ou F*{4:MULTICHOICE:=Falso# feedback ~Verdadeiro# feedback} Fator de Penalidade: 0.2 Feedback geral: Valeu a participação! 2308

7 3.3. Aplicando Quizzes em Turmas na Modalidade EaD A seguir alguns exemplos de tipos de questões utilizadas e seus feedbacks reguladores aplicadas em turmas da UAB na disciplina de Física (Figuras 1, 2 e 3). Figura 1 - Questão Verdadeiro ou Falso no Quiz no LMS Moodle Figura 2 - Questão de Múltiplas Escolhas no Quiz no LMS Moodle Figura 3 - Questão de Múltipla Escolha no Quiz no LMS Moodle Após a aplicação do Quiz os resultados podem ser observados no LMS Moodle, que automatiza a correção (Tabela 6). 2309

8 Alunos Tentativas Nota Alunos Tentativas Nota Anais do XXII SBIE - XVII WIE Aracaju, 21 a 25 de novembro de 2011 Tabela 6. Resultados das Notas Obtidas pelos Alunos no Quiz Moodle Tempo Tempo min 55 s min14 s min 10 s min47 s min24 s min 36 s min 50 s min56 s min 7 s min 34 s min 58 s min44 s min 32 s min52 s min 52 s min26 s min 9 s min33 s min26 s min27 s min 41 s 9.9 A Visualização dos resultados na interface do aluno é mediada pelos Learning Vectors (LV) e Vetores-Aprendizagem, metodologia de avaliação proposta por Sales (2010) (Figura 9). Figura 9 Vetor-Aprendizagem do Quiz Na consulta a esse Vetor-Aprendizagem o aluno também verifica um fator qualitativo associado a seu desempenho qualitativo na atividade denominado de Fator β. Esse fator relaciona a positividade (projeção horizontal do vetor e ícones azuis, verdes e amarelos) e a negatividade (projeção vertical do vetor, ícones laranjas, vermelhos e faltas) de desempenho do aluno. Os LV também gerenciam a frequência do aluno do Quiz, atribuindo-lhe falta, caso não tenha realizado a atividade, o que facilita o controle acadêmico. 2310

9 4. Análise de Resultados Ao analisar os resultados comparativamente obtidos pelos alunos entre a primeira e a segunda tentativa realizada na atividade, observa-se que houve uma alteração significativa entre a primeira e a segunda nota de cada um deles, com exceção do aluno A que fez apenas a primeira tentativa (Figura 10). Figura 10 - Relação entre Notas Quiz Moodle (Tentativa 1 e Tentativa 2) Ao observar as questões que foram aplicadas aos alunos (Figuras 1, 2 e 3) em cada uma há um feedback regulador, questionador ou de incentivo, intervenções que remetem à possibilidade de reflexão por parte do aluno sobre a sua aprendizagem. Ou seja, se o aluno estava com dúvidas na construção de sua aprendizagem e ao receber o feedback foi possível regular sua trajetória de aprendizagem caminhando para obter êxito, uma vez que a sua aprendizagem foi assistida por um mediador mais experiente. Em relação ao tempo, os dados coletados dessa turma de amostra para a pesquisa registram que praticamente o tempo foi também alterado entre a primeira e a segunda tentativa (Tabela 6), onde os minutos geralmente diminuíram consideravelmente na segunda tentativa. Apenas um aluno não realizou a atividade na segunda tentativa (Aluno A). Nesse contexto, o tempo provavelmente tenha diminuído devido aos alunos se deterem apenas nas questões que erraram, e assim o feedback que receberam, possibilitou que respondessem com mais atenção somente as questões que não obtiveram êxito. Portanto, com estes resultados coletados é possível confirmar a suspeita que atividades avaliativas usadas por meio de ferramentas online, onde o aluno recebe feedbacks constantes por meio de um mediador poderá contribuir para que o aluno tenha mais controle sobre sua aprendizagem. 5. Considerações Finais Os dados até aqui apresentados e analisados apontam a importância de se oferecer uma avaliação assistida ou dinâmica ao aluno, uma vez que está se considerando a importância que os feedbacks possuem para a aprendizagem quando são dados por um 2311

10 mediador experiente, no caso o professor. A ferramenta Quiz em estudo no presente momento requer também esses feedbacks, uma vez que geralmente é apenas utilizada como testes de múltipla escolha nos ambientes online, e tendo a nota como um fim. Porém, percebe-se que quando bem mediada e apontando estratégias orientadoras, a ferramenta Quiz, pode possibilitar a autorregulação da aprendizagem dos alunos e permite ao professor fazer um diagnóstico de sua turma. Para tanto, a avaliação assistida por oferecer um conjunto de estratégias que orientam e auxiliam ao aluno, podendo levá-lo da Zona de Desenvolvimento Real para a Zona de Desenvolvimento Proximal, ou seja, o aluno poderá ter sucesso se assistido por seu professor mais experiente. Neste sentido, é possível perceber se o aluno teve um avanço no seu processo de aprendizagem quando ao oportunizá-lo para refazer suas atividades, a assistência recebida do professor, faz com que ele atinja os objetivos propostos para as atividades, entretanto ressalta-se que os feedbacks precisam ser instigadores e correlacionados aos conteúdos estudados. Nesse sentido, a avaliação assistida ou dinâmica para uso em ambientes virtuais de aprendizagem poderá contribuir para que a aprendizagem se processe de forma dinâmica, desde que o professor seja um facilitador do processo de aprendizagem desse aluno por meio dos feedbacks e colabore para que o aluno consiga regular sua própria aprendizagem percebendo os conteúdos que precisam melhorar e os quais já conseguiu aprender. O emprego da Metodologia LV trouxe ao ambiente virtual Moodle a linguagem iconográfica da representação, além de associar-se ao qualitativo, quando insere um fator qualitativo na avaliação, o Fator β. Referências Cole, J. (2005). Using Moodle. O Reilly Community Press, 238 p. Feuerstein R.; Klein, P. S.; Tannenbaum,A. J. (1994). Mediated learning experience (MLE): Theoretical, Psychosocial And Learning Implications. London: Freund. Teoria de la Modificabilidad Cognitiva Estructural (1997). In: Es modificable la inteligencia? Madrid: Editora Bruno. Luckesi, C. C. (2006). Avaliação da aprendizagem escolar: estudos e proposições, São Paulo: Cortez Editora. Moore, M. G.; Kearsley G. (2008). Educação a distância: uma visão integrada, Tradução Roberto Galman, São Paulo: Cengage Learning. Perrenoud, P. (1999). Avaliação: da excelência à regulação das aprendizagens entre duas lógicas, Porto Alegre: Artes Médicas. Rice, W. H. (2006). Moodle e-learning course development. A complete guide to successful learning using Moodle. Packt Publishing. Sales, G. L. (2010). LEARNING VECTORS (LV): Um Modelo de Avaliação da Aprendizagem em EaD Online Aplicando Métricas Não-Lineares, Tese, Universidade Federal do Ceará, Fortaleza, CE, 236 f. 2312

11 Silva, M.; Santos, E. (2006). Avaliação da Aprendizagem em educação online, São Paulo: Edições Loyola. Vygotsky, L. (1998). Pensamento e Linguagem Tradução Jefferson Luiz Camargo, revisão técnica José Cipolla Neto, São Paulo: Ed. Martins Fontes. 2313