Experiências de Avaliação (alunos) online

Transcrição

1 Experiências de Avaliação (alunos) online II Fórum de práticas e-learning na UM Colabora2012 Henrique Dinis Santos Universidade do Minho Braga, 20 de Junho, 2012

2 A teacher is one who makes himself progressively unnecessary. Thomas Carruthers

3 Sumário Contexto da experiência Primeiro ciclo Pós-graduação Requisitos e Tecnologia Métodos de avaliação utilizados (casos) Principais características Riscos de utilização Conclusões

4 Contexto da experiência UC: Sistemas de Computação (1º ano LTSI; 2º ano MIECom) Total de alunos 200/semestre Resultados de aprendizagem Reconhecer, descrever, identificar (domínio cognitivo, até nível da aplicação) UC: Engenharia da Segurança dos Sistemas de Informação (1º ano de diversos cursos de pósgraduação) Total de alunos 35/semestre Resultados de aprendizagem Analisar, discutir, elaborar, colaborar (domínio cognitivo, níveis superiores)

5 Contexto da experiência Porquê recorrer à avaliação online? Processo de avaliação mais ágil Flexibilidade (avaliação quasi contínua) feedback imediato e eliminação de tempos mortos Avaliação enquanto elemento de aprendizagem possibilidade de revisão (avaliação formativa) Integração com outros recursos online Controlo do processo ensino/aprendizagem (em particular na avaliação formativa) Mais próximo da prática habitual dos Nativos Digitais Diversificar métodos de avaliação (adequação)

6 Contexto da experiência Receios Tempo exigido na construção dos elementos (aprendizagem das ferramentas) Adaptação de novos modelos (equidade e diversificação) Domínio da tecnologia subjacente (ou falta de suporte) Eficiência (?!) Fraude (e.g., Goes-High-Tech/132093/) É uma questão central Ultrapassa os problemas tradicionais da cópia

7 Contexto da experiência Tecnologias utilizadas Moodle HotPatatoes Falta de normalização GIFT Blackboard WebCT HotPotatoes Aiken Learnwise Course Test Manager

8 Caso 1 Avaliação sumativa Testes online (escolha múltipla; resposta curta; resposta embebida cloze) Módulos de 8h/10h teórica-práticas 10 a 12 questões 6 alternativas (aleatórias) Esforço na elaboração: cerca de 2 dias (inclui verificações) Reutilização pode ser limitada ( )

9 Caso 1

10 Caso 1

11 Caso 1 Reflexões sobre a aplicação deste tipo de testes

12 Caso 2 Avaliação sumativa e formativa Trabalhos (relatório online ou em ficheiro) Disciplina e responsabilidade Interação é importante Wikis e fóruns (!!!) Workshop Ensaio escrito Avaliação entre pares (2x) Esforço na correção elevado Número máximo de alunos é crítico Reutilização facilitada ( )

13 Caso 2

14 Caso 2 Workshop (ver online) Reflexões sobre a aplicação destes tipos de avaliação

15 Conclusões E-assessment é uma alternativa já com alguma maturidade, sendo absolutamente necessária em cursos online Tecnologia disponível utilizável em qualquer nível cognitivo Habitualmente bem aceite pelos alunos Oportunidade para alterar o paradigma da avaliação (avaliação formativa e diagnóstica) Nunca menosprezar o tempo exigido É desejável começar com pequenas iniciativas Risco de fraude deve ser considerado

16 Obrigado pela vossa atenção. Questões?

17 Bibliografia Crisp, G. T., The e-assessment handbook, New York : Continuum International Pub. Group, (2007) (ISBN: ) Hazari, S., Strategy for assessment of online course discussions, Journal of Information Systems Education, 15(4), (2004), Buzzetto-More, N., & Alade, A., Best practices in e-assessment, Journal of Information Technology Education, 5, (2006), MORA, M.C., SANCHO-BRU, J.L., ISERTE, J.L. & SÁNCHEZ, F.T. An e-assessment approach for evaluation in engineering overcrowded groups, Computers & Education 59, 2 (2012), MARCEL ROHLES, S.B. Online assessment techniques, Delta Pi Epsilon Journal 44, 1 (2002), Feng, M., Heffernan, N. T., Koedinger, K. R., Addressing the testing challenge with a web-based e- assessment system that tutors as it assesses, In Proceedings of the 15th international conference on World Wide Web (WWW '06). ACM, New York, NY, USA, (2006), BIRENBAUM, M., BREUER, K., CASCALLAR, E., DOCHY, F., DORI, Y., RIDGWAY, J., WIESEMES, R. & NICKMANS, G. A learning Integrated Assessment System, Educational Research Review 1, 1 (2006), NICOL, D. E-assessment by design: using multiple-choice tests to good effect, Journal of Further and Higher Education 31, 1 (2007), STOWELL, R. & LAMSHED, R. E-assessment guidelines and case studies, Interim report, Australian Flexible Learning Framework and National Quality Council, (2011) HEBEL, S. The Chronicle of Higher Education, (2001), Increasingly/132093/...