INQUÉRITO AOS ALUNOS FUNCIONAMENTO DAS DISCIPLINAS (1º SEMESTRE)

Transcrição

1 ESCOLA SUPERIOR DE TECNOLOGIA E GESTÃO GABINETE DE AVALIAÇÃO E QUALIDADE AVALIAÇÃO DO FUNCIONAMENTO DA ESTG / IPG INQUÉRITO AOS ALUNOS FUNCIONAMENTO DAS DISCIPLINAS (1º SEMESTRE) ANO LECTIVO ABRIL DE 2005

2 ESCOLA SUPERIOR DE TECNOLOGIA E GESTÃO GABINETE DE AVALIAÇÃO E QUALIDADE AVALIAÇÃO DO FUNCIONAMENTO DA ESTG / IPG INQUÉRITO AOS ALUNOS FUNCIONAMENTO DAS DISCIPLINAS ANO LECTIVO º SEMESTRE ÍNDICE 1. INTRODUÇÃO 3 2. METODOLOGIA 3 3. ANÁLISE DE RESULTADOS DEFINIÇÃO DA POPULAÇ ÃO E DA AMOSTRA REPRESENTATIVIDADE D A AMOSTRA 5 4. TRATAMENTO DOS RESULTADOS 6 5. ANÁLISE DOS RESULTADOS ANÁLISE DETALHADA 8 ANEXOS SECRETARIADO E ASSESSORIA DE DIRECÇÃO 9

3 AVALIAÇÃO DO FUNCIONAMENTO DA ESTG E DO IPG INQUÉRITO AOS ALUNOS FUNCIONAMENTO DAS DISCIPLINAS Ano lectivo 2004/2005 1º SEMESTRE 1. INTRODUÇÃO Na sequência da criação do Gabinete de Avaliação e Qualidade com o objectivo de apoiar os órgãos de gestão da ESTG e as equipas responsáveis pelo processo de auto-avaliação dos diversos cursos, nomeadamente através da elaboração de relatórios periódicos de avaliação e pela recolha de toda a informação de base que sirva de suporte à elaboração dos relatórios de auto-avaliação, à semelhança do que aconteceu no ano lectivo anterior foi distribuído aos alunos no 1º semestre do ano lectivo 2004/2005 um inquérito relativo ao funcionamento das disciplinas. O principal objectivo do inquérito consiste em obter um melhor conhecimento do funcionamento das disciplinas dos diversos cursos, quer no que diz respeito à disciplina em si quer aos docentes responsáveis pela sua leccionação. Pretende-se com isto melhorar o conhecimento da própria instituição, optimizar o desempenho global dos docentes, definir de uma forma mais adequada programas lectivos, caracterizar o posicionamento dos alunos no seio da sociedade, etc. Em última análise pretende-se dotar a escola de capacidades que em tempo oportuno lhe permitam encarar novos desafios resultantes de uma rápida evolução das sociedades actuais. De referir que todos os resultados apresentados são fruto da amostragem efectuada, podendo em alguns casos divergir ligeiramente de dados obtidos por contagem directa. 2. METODOLOGIA O inquérito a que se refere a presente análise foi desenvolvido no Gabinete de Avaliação e Qualidade (GAQ) da ESTG com base na experiência do ano lectivo passado e em elementos recolhidos para o efeito, após consulta a gabinetes similares de outras escolas de ensino superior. De referir ainda que a primeira versão dos inquéritos foi enviada para a direcção da escola e para o Conselho Pedagógico com vista à obtenção de sugestões que permitissem melhorar e enriquecer o seu conteúdo. Após se terem reunido todas as sugestões, foi finalmente elaborada e processada a versão final do inquérito para os alunos através do programa informático TELEform Designer, compatível com o programa SPSS para Windows. Por decisão do GAQ ficou definido que os inquéritos seriam distribuídos aos alunos para preenchimento entre os dias 2 a 16 de Dezembro, tendo sido dado prévio conhecimento a todos os docentes directamente envolvidos. Como critério para a distribuição e recolha dos inquéritos adoptaram-se os seguintes procedimentos: Selecção de uma ou mais disciplinas por ano lectivo e por curso em que fosse mais provável obter um número mais elevado de respostas para todas as disciplinas desse curso e ano lectivo (tendo em conta a informação do departamento ou a experiência obtida com os inquéritos do ano lectivo anterior. Distribuição dos inquéritos por elementos do Gabinete de Avaliação e Qualidade durante o período lectivo, dentro do horário lectivo das disciplinas pré-seleccionadas. Resposta aos inquéritos pelos alunos. Na resposta ao inquérito das disciplinas apenas foram consideradas respostas para os alunos presentes que frequentam as disciplinas desse curso.

4 Recolha de forma conjunta dos inquéritos por elementos do Gabinete de Avaliação e Qualidade após a sua resposta. Depois de se ter procedido à recolha dos inquéritos procedeu-se à sua leitura de forma automática através de um leitor óptico (scanner) FUJITSU Duplex e dos programas informáticos TELEform Reader e TELEform Verifier e posteriormente ao seu tratamento estatístico através do recurso ao programa informático SPSS para Windows. Após um tratamento prévio de toda a informação, detectaram-se algumas imprecisões, tendo-se optado por corrigir campos de resposta óbvia e não questionável (p.ex. ano da primeira matrícula, código da disciplina, correspondência entre disciplinas e cursos, etc.) e por eliminar registos em que não é possível identificar os aspectos fundamentais com vista ao seu tratamento (p.ex. cursos e código das disciplinas). Após a obtenção dos ficheiros finais procedeu-se à análise e tratamento da informação disponível. Com base nos dados recolhidos, foi possível elaborar um fascículo por disciplina contendo uma síntese de todos os dados relativos ao funcionamento da disciplina e desempenho do docente, o qual foi distribuído directamente aos docentes responsáveis pelas disciplinas em causa. 3. ANÁLISE DE RESULTADOS 3.1. DEFINIÇÃO DA POPULAÇÃO E DA AMOSTRA Unidade Inquirida: Alunos da Escola Superior de Tecnologia e Gestão Dimensão da população: 1651 indivíduos. Método de recolha: Amostra Tipo de recolha: Directa Amostra: O inquérito foi distribuído aos alunos que estavam presentes nas aulas, entre os dias 2 e 16 de Dezembro de 2004 para todos os cursos. Dimensão da amostra: 2806 inquéritos. O número de inquéritos obtido para os diversos inquéritos é apresentado no quadro seguinte, onde também se indica o número de alunos matriculados. TABELA 1 DIMENSÕES DA POPULAÇÃO E AMOSTRA CURSO Nº de inquéritos respondidos (IR) Nº de alunos matriculados no curso (AM) Contabilidade e Auditoria (diurno) - CAd Engenharia do Ambiente EA Engenharia Civil EC Engenharia Informática EI Engenharia Mecânica EM Engenharia Topográfica ET Gestão - G Marketing MK Secretariado e Assessoria de Direcção SAD TOTAL:

5 CURSO Nº de inq. respond. (IR) Nº alunos matric. (AM) Assid. Média (*) (A) Nº médio de inq. por aluno (IR/AM)/A Contabilidade e Auditoria (diurno) - CAd Engenharia do Ambiente EA Engenharia Civil EC Engenharia Informática EI Engenharia Mecânica EM Engenharia Topográfica ET Gestão - G Marketing MK Secretariado e Assessoria de Direcção SAD ,35 7,6 TOTAL: * Media da Frequência média por anos lectivos do curso 3.2 Representatividade da amostra Tendo em conta o contexto em que se realizou este inquérito, a validação dos resultados obtidos assentou basicamente na verificação das seguintes condições para cada disciplina. Assim, foram consideradas três condições para validação dos resultados dos inquéritos para as diversas disciplinas em funcionamento no primeiro semestre do ano lectivo As condições de validação consideradas são: Nº de alunos inquiridos (I np )? 4 (Pelo menos quatro inquéritos por disciplina) Nº de alunos inquiridos (I np ) /Nº médio de alunos que frequentam (F req )? 0,40 (Pelo menos 40% dos alunos que frequentam as aulas) Nº de alunos inquiridos (I np ) /Nº de alunos inscritos (F req )? 0,10 (Pelo menos 10% dos alunos inscritos) Qualquer disciplina que não verifique pelo menos uma das condições atrás referidas será retirada dos gráficos de análise, indicando-se de uma forma explícita para cada um dos cursos os motivos pela qual se verificou a exclusão das referidas disciplinas.

6 4. TRATAMENTO DOS RESULTADOS O tratamento dos resultados obtidos após a correcção ou eliminação dos registos incongruentes em termos de informação, consistiu basicamente nas seguintes fases?? Determinação para cada registo validado dos valores médios simples ou ponderados com base nas indicações seguintes. ANÁLISE DO FUNCIONAMENTO DAS DISCIPLINAS Média Simples Média simples das respostas às questões 3 a 8 e questões 10 e 11? V3? V4? V5? V6? V7? V8? V10? V11? 8 Média Simples?? Média Ponderada Média ponderada de acordo com a fórmula seguinte, onde se reforçou a pontuação das questões consideradas mais importantes tendo em conta o objectivo principal do inquérito. 6? V5? V8? V11??? V3? V4? V7? 9 Média Ponderada? 2? Média Total (Global) Média simples da resposta à questão 12 com os dois valores anteriores.? V12? Média Simples? Média?? 3 Média Total? Ponderada V# - Valor da resposta ao ponto # do grupo 1 ANÁLISE DO DESEMPENHO DOS DOCENTES Média Simples Média simples das respostas às questões 1 a 10? V1? V2? V3? V4? V5? V6? V7? V8? 9? V10? 10 Média Simples? V? Média Ponderada Média ponderada de acordo com a fórmula seguinte, onde se reforçou a pontuação das questões consideradas mais importantes tendo em conta o objectivo principal do inquérito. 10 Média Ponderada??? V1? V3? V5? V8? V9?? 2?? V2? V4? V6? V7? V10? 15 Média Total (Global) Média simples da resposta à questão 12 com os dois valores anteriores. Média Total? V11? Média Simples? Média?? 3? Ponderada V# - Valor da resposta ao ponto # do grupo 2

7 ?? Análise conjunta do funcionamento da disciplina e do desempenho do docente o Determinação por cursos da média e desvio padrão da opinião dos alunos (resposta à questão 12 do Grupo 1), média simples, média ponderada e média total. o Determinação por anos lectivos e por cursos da média e desvio padrão da opinião dos alunos (resposta à questão 12 do Grupo 1) e da média total. o Determinação para cada disciplina dos rácios seguintes: Nº de inquéritos/nº de alunos inscritos Nº de inquéritos/nº médio de alunos que frequentam o Avaliação por disciplina da representatividade da amostra considerando os rácios anteriores e o número de inquéritos respondidos, tendo por base as condições de validação referidas no ponto 3.2. o Enumeração das disciplinas que não foram objecto de análise atendendo às condições de validação da amostra. o Traçado de um gráfico por cursos para análise comparativa entre a opinião dos alunos e a média total ponderada baseada nas respostas emitidas relativamente ao funcionamento das disciplinas. o Traçado de um gráfico por cursos para análise comparativa relativamente a quatro aspectos contemplados nas questões colocadas aos alunos no Grupo 1 do inquérito (funcionamento da disciplina) e que foram considerados na fórmula do cálculo da média ponderada. O interesse dos alunos pelos temas abordados A adequação da disciplina ao contexto do curso Articulação da disciplina com conhecimentos anteriores Coordenação entre aulas Acesso a elementos e bibliografia Definição das regras de avaliação da disciplina. Traçado de um gráfico por cursos para análise comparativa entre a opinião dos alunos e a média total ponderada baseada nas respostas emitidas relativamente ao desempenho dos docentes. No presente relatório este gráfico não foi apresentado a fim de garantir o sigilo relativamente aos aspectos directamente relacionados com a avaliação dos docente. o Determinação para cada disciplina dos seguintes parâmetros estatísticos relativos a cada uma das questões do Grupo 1 do inquérito Apreciação geral do funcionamento da disciplina: Valor máximo Valor mínimo Média Mediana Moda o Determinação das disciplinas com uma percentagem superior a 20% de respostas inferiores a 4 (Situação correspondente ao Fraco) para a média total. o Identificação com base numa análise conjunta dos parâmetros estatísticos das disciplinas com uma percentagem superior a 20% de respostas inferiores a 4 que deveriam ser objecto de uma reflexão e de quais os principais pontos a analisar.

8 o Identificação das disciplinas com base numa análise conjunta do funcionamento das disciplinas e do desempenho dos docentes tendo por base os critérios referidos nos dois pontos anteriores. 5. ANÁLISE DOS RESULTADOS 5.1 ANÁLISE DETALHADA?? Apresentação dos resultados o Elaboração por cursos de uma síntese da análise efectuada (ANEXOS). o Estabelecimento de resultados finais, reservando para os departamentos ou secções autónomas uma análise mais especializada.

9 SECRETARIADO E ASSESSORIA DE DIRECÇÃO AVALIAÇÃO DAS DISCIPLINAS 1º SEMESTRE 2004/2005

10 DISCIPLINAS AVALIADAS 1º ANO NI Frq Inq Aval Frq/NI Inq/NI Inq/Frq SA111 Introdução à Informática ,6 0,8 1,2 SA112 Métodos Quantitativos ,3 0,3 1,0 SA113 Noções Fundamentais de Direito ,1 0,3 3,3 SA114 Língua e Cultura Portuguesa I a) 0,4 0,9 2,3 SA115 Língua e Cultura Francesa I a) 0,3 0,5 1,6 SA116 Língua e Cultura Inglesa I a) 0,2 0,3 1,8 SA117 Língua e Cultura Espanhola I a) 0,5 0,6 1,2 SA118 Língua e Cultura Alemã I a) 0,5 0,0 0,0 0,4 0,6 1,8 2º ANO NI Frq Inq Aval Frq/NI Inq/NI Inq/Frq SA211 Práticas e Téc. de Computação I ,3 0,6 1,9 SA212 Contabilidade I ,6 0,6 1,0 SA213 Língua e Cultura Portuguesa II a) 0,3 0,5 1,5 SA214 Língua e Cultura Francesa II a) 0,3 0,5 1,7 SA215 Língua e Cultura Inglesa II a) 0,2 0,4 1,9 SA216 Língua e Cultura Espanhola II a) 0,6 0,6 1,0 SA217 Língua e Cultura Alemã II a) 0,6 0,3 0,5 0,4 0,5 1,4 3º ANO NI Frq Inq Aval Frq/NI Inq/NI Inq/Frq SA311 Práticas e Téc. de Secretariado ,3 0,8 2,5 SA312 Finanças Públicas e Locais ,2 0,4 2,0 SA313 Princípios de Gestão de Empresa ,6 0,7 1,2 SA314 Língua e Cultura Portuguesa III a) 0,3 0,6 1,8 SA315 Língua e Cultura Francesa III a) 0,4 0,7 2,1 SA316 Língua e Cultura Inglesa III a) 0,2 0,5 2,5 SA317 Língua e Cultura Alemã III a) 0,5 0,8 1,5 SA318 Língua e Cultura Espanhola III a) 0,6 0,8 1,3 0,4 0,7 1,9 4º ANO NI Frq Inq Aval Frq/NI Inq/NI Inq/Frq SA411 Imagem e Relações Públicas ,2 0,3 2,2 SA412 Direito de empresa e Laboral ,3 0,4 1,5 SA413 Sist. de Informação e Multimédia ,1 0,4 4,0 SA414 Soc. das Org. e do Trabalho ,2 0,4 2,2 SA415 Língua e Cultura Portuguesa IV a) 0,1 0,3 2,4 SA416 Língua e Cultura Francesa IV a) 0,1 0,4 5,0 SA417 Língua e Cultura Inglesa IV a) 0,1 0,3 3,4 SA418 Práticas de Tradução de Inglês ,2 0,4 1,8 SA419 Língua e Cultura Alemã IV a) 0,3 0,5 2,0 SA420 Língua e Cultura Espanhola IV a) 0,5 1,0 2,0 0,2 0,4 4,7 a) A avaliação é feita no fim do ano lectivo (disciplina anual) NI Nº de alunos Inscritos; Freq Frequência média no semestre; Inq Nº de inquéritos respondidos; Aval Nº de alunos avaliados

11 MÉDIA E DESVIO PADRÃO DOS RESULTADOS OBTIDOS PARA CADA DISCIPLINA Código da disciplina Opinião dos alunos Desvio Média padrão Média Total Desvio Média padrão SA111 6,7 1,9 6,5 1,8 SA112 6,7 1,5 6,4 1,6 SA113 3,7 2,4 4,1 2,3 SA114 7,2 1,4 7,2 1,3 SA115 8,0 1,0 7,7 3,6 SA116 4,6 2,4 5,3 2,3 SA117 7,7 0,8 7,3 1,2 SA211 6,4 1,6 6,3 1,7 SA212 6,9 1,4 6,4 1,8 SA213 7,1 2,3 6,8 2,1 SA214 8,1 1,0 7,5 1,2 SA215 6,4 2,4 6,2 2,1 SA216 8,1 0,9 7,7 1,2 SA217 7,7 2,3 7,0 2,3 SA311 5,9 2,1 6,3 2,0 SA312 5,6 1,6 5,1 1,8 SA313 7,1 1,1 6,6 1,5 SA314 7,3 1,0 7,3 1,2 SA315 6,5 1,5 6,3 1,7 SA316 6,1 1,5 6,0 1,7 SA317 6,7 1,6 6,8 1,7 SA318 7,9 0,9 7,6 1,2 SA411 4,8 1,5 5,2 1,7 SA412 6,8 1,6 6,9 1,6 SA413 7,6 0,9 7,2 1,5 SA414 4,7 1,9 4,8 1,9 SA415 5,9 1,6 6,1 1,7 SA416 5,5 2,1 5,7 2,0 SA417 4,1 1,9 4,9 2,1 SA418 4,4 1,8 4,9 2,0 SA419 6,6 1,5 6,4 1,7 SA420 8,1 0,8 7,9 1,2

12 ANÁLISE COMPARATIVA ENTRE A OPINIÃO DIRECTA DOS ALUNOS E A MÉDIA TOTAL PONDERADA BASEADA NAS RESPOSTAS EMITIDAS RELATIVAMENTE AO FUNCIONAMENTO DAS DISCIPLINAS Média 2 1 SA111 SA112 SA113 SA114 SA115 SA116 Código da Disciplina SA117 SA211 SA212 SA213 SA214 SA215 SA216 SA217 SA311 SA312 SA313 SA314 SA315 SA316 SA317 SA318 SA411 SA412 SA413 SA414 SA415 SA416 SA417 SA418 SA419 SA420 Opinião dos Alunos Média total RESPOSTAS POSSÍVEIS E PONTUAÇÃO ATRIBUÍDA : 1 Muito Mau ;. ; 9 Muito Bom Obs.: A Disciplina de Língua e Cultura Alemã II foi analisada por representar 50% da frequência dos alunos às aulas.

13 ANÁLISE COMPARATIVA ENTRE SEIS ASPECTOS CONTEMPLADOS NAS QUESTÕES LEVANTADAS AOS ALUNOS RELATIVAMENTE AO FUNCIONAMENTO DAS DISCIPLINAS Interesse Adequação 4 Articulação 3 Coordenação SA111 SA112 SA113 SA114 SA115 SA116 SA117 SA211 SA212 SA213 SA214 SA215 SA216 SA217 SA311 SA312 SA313 SA314 SA315 SA316 SA317 SA318 SA411 SA412 SA413 SA414 SA415 SA416 SA417 SA418 SA419 SA420 Média 2 1 Bibliografia Avaliação Código da Disciplina QUESTÕES FORMULADAS AOS ALUNOS Interesse Interesse pelos temas abordados na disciplina Adequação Adequação da disciplina ao curso Articulação A articulação da disciplina com conhecimentos anteriores Coordenação Coordenação entre aulas teóricas/práticas/teórico-práticas Bibliografia - Acesso a elementos de estudo e bibliografia Avaliação - Definição das regras de avaliação e funcionamento da disciplina RESPOSTAS POSSÍVEIS E PONTUAÇÃO ATRIBUÍDA: 1 Muito Mau ;. ; 9 Muito Bom

14