RESULTADOS - TESTE DE PROGRESSO

Transcrição

1 RESULTADOS - TESTE DE PROGRESSO AVALIAÇÃO DAS PROVAS PARTICIPAÇÃO DOS ESTUDANTES DESEMPENHO DOS ESTUDANTES DEVOLUTIVA PARA OS ESTUDANTES DEVOLUTIVA PARA A INSTITUIÇÃO Joelcio F Abbade

2 TESTE DE PROGRESSO

3 OBJETIVO Instrumento de avaliação cognitiva Verificar a aquisição de conhecimento na Graduação

4

5 VANTAGENS Previne o estudo dirigido à prova Processo contínuo de avaliação Sistema de avaliação integrado entre várias disciplinas Maior importância ao progresso que à nota casual Enfatiza o conhecimento considerado essencial Fonte de informação para feedback ao Estudante à Disciplina/Departamento à Escola Médica Boa validade, confiabilidade e comparabilidade Baixo custo colaborativo Desenvolvimento docente

6 DESVANTAGENS Dificuldade do instrumento diferente de ano a ano Problemas na formulação das questões e/ou apresentação de conteúdos Valor preditivo de desempenho profissional questionável Tempo e qualificação para elaboração das questões IMPORTANTE Não exclui a avaliação de habilidades e atitudes

7 AVALIAÇÃO PROVA / ITENS

8 ÍNDICE DE DIFICULDADE A razão principal para medir a dificuldade de itens é a de descartar aqueles que possuem um nível impróprio de dificuldade, não informando diferenças individuais nem proporcionando variabilidade aos resultados de um teste. I dif = 100 % acerto do grupo 100

9 ÍNDICE DE DISCRIMINAÇÃO Define-se o índice de discriminação de um item em um teste como a diferença entre as médias do item calculadas no grupo superior e no grupo inferior. I disc = % acerto grupo superior % acerto grupo inferior 100

10 ÍNDICE DE DISCRIMINAÇÃO VANTAGENS - facilmente calculado - seu significado entendido por pessoas que não conhecem estatística.

11 CLASSIFICAÇÃO TOTAL DE ACERTOS Prova com 120 itens % superior 27% inferior O grupo superior: é constituído, usualmente, por 27% dos indivíduos que obtiveram os maiores escores totais. O grupo inferior: é constituído, usualmente, por 27% dos indivíduos que obtiveram os menores escores totais.

12 Fonte: Lima GM & Souza CP - Fundação Carlos Chagas Curso de elaboração e análise de questões FMB/UNESP, 2003

13 Média Ótima

14 Difícil Fraca

15 Fácil Muito Boa

16 Teste de Progresso Interinstitucional (Grupo) Evolução da porcentagem de discriminação, de acordo com o ano de aplicação da prova Análise dos índices de discriminação feita a partir das respostas dos estudantes da 6ª série do grupo

17 DISCRIMINAÇÃO

18 DISCRIMINAÇÃO

19 Teste de Progresso Institucional (Grupo) Evolução da porcentagem da dificuldade da prova, de acordo com o ano de aplicação Análise dos índices de discriminação feita a partir das respostas dos estudantes da 6ª série do grupo

20 DIFICULDADE

21 DIFICULDADE

22

23 PARTICIPAÇÃO NA PROVA (FREQUÊNCIA) ESCOLA PRESENTES AUSENTES % AUSÊNCIA PRESENTES AUSENTES %AUSÊNCIA UNICAMP ,5% ,7% UNIFESP ,2% ,1% FMRP ,4% ,0% UNESP ,5% ,5% FAMEMA ,7% ,7% UEL ,99% ,4% FURB ,1% ,7% FAMERP ,8% ,1% UFSCAR ,6% ,5% ,9% ,7%

24 DEVOLUTIVA PARA A INSTITUIÇÃO

25

26 70,00% Teste de Progresso 2013 Comparação das Médias de todas as Instituições X Médias da UNESP Evolução das Médias de Acerto% conforme o Ano da Graduação (Prova Total) 62,34% 60,00% 50,00% 43,50% 50,03% 55,38% 52,20% 59,33% 40,00% 30,00% 33,71% 32,20% 37,74% 34,21% 37,62% 45,11% GERAL UNESP 20,00% 10,00% 0,00% ano da graduação

27 60,0% 50,0% 40,0% 30,0% ÁREA BÁSICA Grupo Escolas ÁREA BÁSICA FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

28 60,0% 50,0% 40,0% 30,0% SAÚDE COLETIVA Grupo Escolas SAÚDE COLETIVA FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

29 60,0% 50,0% 40,0% 30,0% CLÍNICA Grupo Escolas CLÍNICA FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

30 80,0% 70,0% 60,0% 50,0% 40,0% PEDIATRIA Grupo Escolas PEDIATRIA FMB 30,0% 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

31 70,0% 60,0% 50,0% 40,0% 30,0% GINECO/OBS Grupo Escolas GINECO/OBS FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

32 90,0% 80,0% 70,0% 60,0% 50,0% 40,0% CIRURGIA Grupo Escolas CIRURGIA FMB 30,0% 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

33 50,0% 45,0% 40,0% 35,0% 30,0% 25,0% 20,0% ÉTICA MÉDICA Grupo Escolas ÉTICA MÉDICA FMB 15,0% 10,0% 5,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

34 80,00% 70,00% 60,00% 50,00% 40,00% 30,00% 4a Série Grupo Escolas 586 4a Série FMB 83 20,00% 10,00% 0,00%

35

36 Realiza o planejamento do cuidado e tratamento Interpreta resultado de anamnese e exame físico Interpreta os exames complementares

37

38

39 TAREFA FMB / UNESP Grupo de Escolas Média N DP Média N DP Compreender os aspectos morfofuncionais 45, ,9 46, ,1 Compreender os mecanismos de doenças / fisiopatologia 69, ,1 63, ,0 Ser capaz de interpretar os exames complementares 57, ,8 63, ,7 Compreender a epidemiologia das doenças 80,3 3 17,8 65,7 3 29,1 Interpreta resultado de anamnese e exame físico 64, ,6 65, ,4 Realiza o planejamento diagnóstico 73, ,3 77, ,1 Realiza o planejamento do cuidado e tratamento 65, ,6 67, ,1 Conhece os aspectos éticos, bioéticos e médico legais 40,0 7 26,3 42,1 7 30,1 Conhece as políticas, planemento e gestão em saúde 59,4 8 23,0 49,5 8 26,1 Conhece os níveis de promoção e prevenção em saúde 54,0 5 21,1 46,8 5 24,2 Realiza diagnóstico 68, ,5 72, ,5 Sem Classificação 70,0 2 26,9 82,0 2 11,3

40 TEMAS GINECOLOGIA E OBSTETRÍCIA (Prova TP 2013) Anticoncepção 1 0,8 Assistência ao puerpério (normal e complicações) e amamentação 1 0,8 Avaliação de vitalidade 3 2,5 Climatério 1 0,8 Colpocitologia 1 0,8 Doenças benignas e malignas da mama (rastreamento e diagnóstico) 1 0,8 Doenças clínicas e cirúrgicas na gestação 2 1,7 Ética 1 0,8 Fisiologia da puberdade, do ciclo menstrual e distúrbios associados (Amenorreias e outras irregularidades menstruais 1 0,8 Incontinência urinária e dos prolapsos pélvicos 1 0,8 Infecções do trato genital feminino e DST. 1 0,8 Infecções do trato genital feminino e DST. 1 0,8 Infecções e gestação (HIV, sífilis, toxoplasmose, dengue, H1N1, herpes, hepatite, estreptococo do grupo B) 1 0,8 Rotura prematura de membranas 1 0,8 Semiologia em ginecologia e obstetrícia 2 1,7 Síndromes hipertensivas na gestação 1 0,8 Tumores malignos do trato genital feminino (rastreamento e diagnóstico) 2 1,7

41 DEVOLUTIVA PARA OS ESTUDANTES

42 Fonte: Edudata Teste de progresso interintitucional, 2012

43 Fonte: Edudata Teste de progresso interintitucional, 2012

44 Fonte: Edudata Teste de progresso interintitucional, 2012

45 Fonte: Edudata Teste de progresso interintitucional, 2012

46

47 CONSULTARAM Site EDUDATA Sim Não Total Série ª ª ª ª ª ª