RESULTADOS - TESTE DE PROGRESSO

RESULTADOS - TESTE DE PROGRESSO 2013 - AVALIAÇÃO DAS PROVAS PARTICIPAÇÃO DOS ESTUDANTES DESEMPENHO DOS ESTUDANTES DEVOLUTIVA PARA OS ESTUDANTES DEVOLUTIVA PARA A INSTITUIÇÃO Joelcio F Abbade

TESTE DE PROGRESSO

OBJETIVO Instrumento de avaliação cognitiva Verificar a aquisição de conhecimento na Graduação

VANTAGENS Previne o estudo dirigido à prova Processo contínuo de avaliação Sistema de avaliação integrado entre várias disciplinas Maior importância ao progresso que à nota casual Enfatiza o conhecimento considerado essencial Fonte de informação para feedback ao Estudante à Disciplina/Departamento à Escola Médica Boa validade, confiabilidade e comparabilidade Baixo custo colaborativo Desenvolvimento docente

DESVANTAGENS Dificuldade do instrumento diferente de ano a ano Problemas na formulação das questões e/ou apresentação de conteúdos Valor preditivo de desempenho profissional questionável Tempo e qualificação para elaboração das questões IMPORTANTE Não exclui a avaliação de habilidades e atitudes

AVALIAÇÃO PROVA / ITENS

ÍNDICE DE DIFICULDADE A razão principal para medir a dificuldade de itens é a de descartar aqueles que possuem um nível impróprio de dificuldade, não informando diferenças individuais nem proporcionando variabilidade aos resultados de um teste. I dif = 100 % acerto do grupo 100

ÍNDICE DE DISCRIMINAÇÃO Define-se o índice de discriminação de um item em um teste como a diferença entre as médias do item calculadas no grupo superior e no grupo inferior. I disc = % acerto grupo superior % acerto grupo inferior 100

ÍNDICE DE DISCRIMINAÇÃO VANTAGENS - facilmente calculado - seu significado entendido por pessoas que não conhecem estatística.

CLASSIFICAÇÃO TOTAL DE ACERTOS Prova com 120 itens 1 97 2 95 3 94 4 93 5 92 6 91...... 495 27 496 27 497 24 498 22 499 22 500 21 27% superior 27% inferior O grupo superior: é constituído, usualmente, por 27% dos indivíduos que obtiveram os maiores escores totais. O grupo inferior: é constituído, usualmente, por 27% dos indivíduos que obtiveram os menores escores totais.

Fonte: Lima GM & Souza CP - Fundação Carlos Chagas Curso de elaboração e análise de questões FMB/UNESP, 2003

Média Ótima

Difícil Fraca

Fácil Muito Boa

Teste de Progresso Interinstitucional 2007-2012 (Grupo) Evolução da porcentagem de discriminação, de acordo com o ano de aplicação da prova Análise dos índices de discriminação feita a partir das respostas dos estudantes da 6ª série do grupo

DISCRIMINAÇÃO - 2013

Teste de Progresso Institucional 2007-2012 (Grupo) Evolução da porcentagem da dificuldade da prova, de acordo com o ano de aplicação Análise dos índices de discriminação feita a partir das respostas dos estudantes da 6ª série do grupo

DIFICULDADE - 2013

PARTICIPAÇÃO NA PROVA (FREQUÊNCIA) 2013 2012 ESCOLA PRESENTES AUSENTES % AUSÊNCIA PRESENTES AUSENTES %AUSÊNCIA UNICAMP 630 37 5,5% 615 51 7,7% UNIFESP 701 31 4,2% 668 67 9,1% FMRP 494 119 19,4% 467 156 25,0% UNESP 516 42 7,5% 457 97 17,5% FAMEMA 73 403 84,7% 442 32 6,7% UEL 463 29 5,99% 442 46 9,4% FURB 376 62 14,1% 300 133 30,7% FAMERP 345 42 10,8% 348 35 9,1% UFSCAR 229 11 4,6% 231 11 4,5% 3827 776 16,9% 3970 628 13,7%

DEVOLUTIVA PARA A INSTITUIÇÃO

70,00% Teste de Progresso 2013 Comparação das Médias de todas as Instituições X Médias da UNESP Evolução das Médias de Acerto% conforme o Ano da Graduação (Prova Total) 62,34% 60,00% 50,00% 43,50% 50,03% 55,38% 52,20% 59,33% 40,00% 30,00% 33,71% 32,20% 37,74% 34,21% 37,62% 45,11% GERAL UNESP 20,00% 10,00% 0,00% 1 2 3 4 5 6 ano da graduação

60,0% 50,0% 40,0% 30,0% ÁREA BÁSICA Grupo Escolas ÁREA BÁSICA FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

60,0% 50,0% 40,0% 30,0% SAÚDE COLETIVA Grupo Escolas SAÚDE COLETIVA FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

60,0% 50,0% 40,0% 30,0% CLÍNICA Grupo Escolas CLÍNICA FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

80,0% 70,0% 60,0% 50,0% 40,0% PEDIATRIA Grupo Escolas PEDIATRIA FMB 30,0% 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

70,0% 60,0% 50,0% 40,0% 30,0% GINECO/OBS Grupo Escolas GINECO/OBS FMB 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

90,0% 80,0% 70,0% 60,0% 50,0% 40,0% CIRURGIA Grupo Escolas CIRURGIA FMB 30,0% 20,0% 10,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

50,0% 45,0% 40,0% 35,0% 30,0% 25,0% 20,0% ÉTICA MÉDICA Grupo Escolas ÉTICA MÉDICA FMB 15,0% 10,0% 5,0% 0,0% 1a Série 2a Série 3a Série 4a Série 5a Série 6a Série

80,00% 70,00% 60,00% 50,00% 40,00% 30,00% 4a Série Grupo Escolas 586 4a Série FMB 83 20,00% 10,00% 0,00%

Realiza o planejamento do cuidado e tratamento Interpreta resultado de anamnese e exame físico Interpreta os exames complementares

TAREFA FMB / UNESP Grupo de Escolas Média N DP Média N DP Compreender os aspectos morfofuncionais 45,2 17 24,9 46,8 17 22,1 Compreender os mecanismos de doenças / fisiopatologia 69,5 17 25,1 63,7 17 24,0 Ser capaz de interpretar os exames complementares 57,5 34 24,8 63,3 34 20,7 Compreender a epidemiologia das doenças 80,3 3 17,8 65,7 3 29,1 Interpreta resultado de anamnese e exame físico 64,3 67 25,6 65,5 66 21,4 Realiza o planejamento diagnóstico 73,8 11 25,3 77,4 11 20,1 Realiza o planejamento do cuidado e tratamento 65,2 47 25,6 67,0 48 20,1 Conhece os aspectos éticos, bioéticos e médico legais 40,0 7 26,3 42,1 7 30,1 Conhece as políticas, planemento e gestão em saúde 59,4 8 23,0 49,5 8 26,1 Conhece os níveis de promoção e prevenção em saúde 54,0 5 21,1 46,8 5 24,2 Realiza diagnóstico 68,1 24 21,5 72,1 24 16,5 Sem Classificação 70,0 2 26,9 82,0 2 11,3

TEMAS GINECOLOGIA E OBSTETRÍCIA (Prova TP 2013) Anticoncepção 1 0,8 Assistência ao puerpério (normal e complicações) e amamentação 1 0,8 Avaliação de vitalidade 3 2,5 Climatério 1 0,8 Colpocitologia 1 0,8 Doenças benignas e malignas da mama (rastreamento e diagnóstico) 1 0,8 Doenças clínicas e cirúrgicas na gestação 2 1,7 Ética 1 0,8 Fisiologia da puberdade, do ciclo menstrual e distúrbios associados (Amenorreias e outras irregularidades menstruais 1 0,8 Incontinência urinária e dos prolapsos pélvicos 1 0,8 Infecções do trato genital feminino e DST. 1 0,8 Infecções do trato genital feminino e DST. 1 0,8 Infecções e gestação (HIV, sífilis, toxoplasmose, dengue, H1N1, herpes, hepatite, estreptococo do grupo B) 1 0,8 Rotura prematura de membranas 1 0,8 Semiologia em ginecologia e obstetrícia 2 1,7 Síndromes hipertensivas na gestação 1 0,8 Tumores malignos do trato genital feminino (rastreamento e diagnóstico) 2 1,7

DEVOLUTIVA PARA OS ESTUDANTES

Fonte: Edudata Teste de progresso interintitucional, 2012

CONSULTARAM Site EDUDATA Sim Não Total Série 190 326 516 1ª 39 49 88 2ª 21 73 94 3ª 16 67 83 4ª 50 33 83 5ª 32 55 87 6ª 32 49 81