TITLE: ANALYSIS OF THE ACADEMIC PERFORMANCE OF STUDENTS OF TOURISM COURSE OF A HIGHER EDUCATION INSTITUTION USING MULTIVARIATE TECHNIQUES

Transcrição

1 TITLE: ANALYSIS OF THE ACADEMIC PERFORMANCE OF STUDENTS OF TOURISM COURSE OF A HIGHER EDUCATION INSTITUTION USING MULTIVARIATE TECHNIQUES Teóflo Camara Mattozo (Unversdade Estadual do Ro Grande do Norte, RN, Brasl) mattozo@o.com.br Gutembergue Soares Slva (Unversdade Federal do Ro Grande do Norte, RN, Brasl) - guttembbergue@gmal.com André Pedro Fernandes Neto (Unversdade Federal Rural do Sem Árdo, RN, Brasl) andrepedro@ufersa.eu.br Jose Alfredo Ferrera Costa (Unversdade Federal do Ro Grande do Norte, RN, Brasl) - jafcosta@gmal.com Colaborador (es) Alcêdo Pnhero Galvão (Unversdade Estadual do Ro Grande do Norte, RN, Brasl) - alcedogalvao@hotmal.com.br ABSTRACT For a Hgher Educaton Insttuton (HEI) to become compettve n the market, effectve growth and greater supply than demand, should seek to contnuously mprovement to ts products, servces and processes, and to adapt ts organzatonal structure to the realty of constant uncertanty, that may represent threats or opportuntes. In Brazl, the Natonal Survey of Student Performance (ENADE) s of fundamental mportance for the evaluaton of the unversty, ganng greater mportance n the courses marketng, especally focusng on how the meda have reported ther results snce ts mplementaton by MEC. The purpose of ths artcle was to present a reflecton on the performance evaluaton of the toursm students n an HEI Natal- RN/Brazl, contrbutng as a management tool to dentfy any weaknesses and opportuntes for mprovement, whch can express manageral aspects less developed and, therefore, may be subject to mprovements. Ths research also sought to dentfy the dmensons of the model were correlated wth the structural areas defned by MEC n toursm courses that most contrbute n the outcome of the evaluaton of the toursm students performance. The results show that between determnant dmenson, fve were sgnfcant n the explanaton of overall performance based on the applcaton of multple lnear regresson. The statstcal model formulated proved to be well-adjusted and has good ablty to explan the students performance. The man problems dentfed were the dmensons: Toursm Market (covers ssues related to hosptalty, emergng segments of the toursm supply chan of toursm and hotel market brandng) Updates (ssues nvolvng urbanzaton n Brazl and ant globalzaton movement) and Toursm Plannng (emphass on the process of plannng a destnaton and plannng the supply of toursm and lesure). Lmtatons and suggestons for mprovements were dscussed. KEY WORDS Hgher Educaton n Toursm, Academc Performance, Multvarate Statstcal Technques

2 TITLE: ANÁLISE DO DESEMPENHO ACADÊMICO DE ESTUDANTES DO CURSO DE TURISMO DE UMA INSTITUIÇÃO DE ENSINO SUPERIOR UTILIZANDO TÉCNICAS MULTIVARIADAS RESUMO Para que uma Insttução de Ensno Superor (IES) se torne compettva no mercado, de efetvo crescmento e de maor oferta que a demanda, deve procurar aperfeçoar contnuamente seus produtos, servços e processos, bem como adaptar sua estrutura organzaconal à realdade de constantes ncertezas, que podem representar ameaças ou oportundades. No Brasl, o Exame Naconal de Desempenho de Estudantes (ENADE) tem uma mportânca fundamental para a avalação do curso unverstáro, ganhando uma maor relevânca no marketng do curso, prncpalmente tendo em vsta a forma como a mída tem dvulgado os seus resultados desde sua mplantação pelo MEC. A proposta desse artgo fo apresentar uma reflexão sobre a avalação do desempenho dos alunos do curso de Tursmo de uma IES em Natal-RN/Brasl, contrbundo como nstrumento de gestão a fm de dentfcar eventuas pontos fracos e oportundades de melhora, que possam expressar os aspectos gerencas menos desenvolvdos e que, por sso mesmo, podem ser objeto de aperfeçoamento. Esta pesqusa também procurou dentfcar as dmensões do modelo que foram correlaconadas com as áreas estruturas defndas pelo MEC nos cursos superores de Tursmo que mas contrbuem no resultado da avalação do desempenho dos alunos de tursmo. Os resultados mostram que entre as dmensões determnantes, cnco foram sgnfcatvas na explcação do desempenho geral, baseados na aplcação da regressão lnear múltpla. O modelo estatístco formulado revelou-se bem ajustado e com boa capacdade de explcar o desempenho dos alunos. Os prncpas problemas dentfcados foram nas dmensões: Mercado Turístco (abrange assuntos relaconados à hosptaldade, segmentos emergentes do tursmo, cadea produtva da atvdade turístca e posconamento do mercado hotelero), Atualzações (envolve questões de urbanzação no Brasl e movmento antglobalzação) e Planejamento Turístco (ênfase no processo de planejamento de um destno turístco e no planejamento da oferta de tursmo e lazer). Lmtações e sugestões para melhoras foram abordadas. Palavras-chave: Educação Superor em Tursmo, Desempenho Acadêmco, Técncas Estatístcas Multvaradas

3 1. INTRODUÇÃO Apesar da relevânca do setor na economa braslera, a preparação dos profssonas de tursmo revelou ser nadequada e nsufcente durante anos. O tursmo adotou uma lógca quanttatva, onde apenas nteressava a chegada de turstas ao destno turístco, mesmo que este não estvesse dotado, nem das nfraestruturas, nem de profssonas qualfcados, fundamentas no processo de acolhmento. Perante um mercado pouco exgente, nvestr na qualfcação dos recursos humanos revelava-se um custo aparentemente desnecessáro. Contudo, o tursmo de massas e a consequente saturação pscológca e ambental, determnaram a necessdade de recursos humanos preparados para satsfazer as novas exgêncas do mercado (Teresa e Stella, 2004). A demanda crescente por recursos humanos evdencada pelos dversos ntervenentes no processo de desenvolvmento turístco do país requer respostas específcas por parte do sstema educatvo. Por outro lado, pressupõe a vnculação de dferentes entdades na busca da mesma mssão: qualfcar o captal humano em tursmo, pos um ndvíduo quando termna a sua formação e se ntegra a este mercado de trabalho, deve ter a capacdade de fazer frente a uma realdade muto exgente e rgorosa (Rbero, 2012). É neste cenáro que está nserda esta pesqusa, buscando apresentar uma reflexão sobre a avalação do desempenho dos alunos do curso de Tursmo, bem como procurou dentfcar as dmensões do modelo que foram correlaconadas com as áreas estruturas defndas pelo MEC nos cursos superores de Tursmo que mas contrbuem no resultado da avalação do desempenho dos alunos de tursmo. Este trabalho apresenta como contrbução a dentfcação e quantfcação do desempenho dos alunos no curso de Tursmo de uma IES públca. 2. REVISÃO DA LITERATURA 2.1 EXAME NACIONAL DE AVALIAÇÃO DO DESEMPENHO DOS ESTUDANTES ENADE O governo braslero ncou um processo gradual de mplementação de um sstema de avalação do ensno superor em meados da década de 90. O Exame Naconal de Cursos (ENC) fo estabelecdo por meo da le com abrangênca a todos os estudantes concluntes de campos de conhecmento pré-defndos. Dsposções legas posterores nserram no sstema o Censo de Educação Superor e a Avalação das Condções de Ensno (ACE), por meo de vstas de comssões externas às nsttuções de ensno, permanecendo no centro desse sstema o ENC, conhecdo como o Provão (Poldor, 2009). Com o propósto de aperfeçoamento da Educação Superor, uma sére de meddas foram adotadas pelo MEC com o objetvo de analsar e montorar a qualdade dos cursos superores e o correspondente desempenho dos alunos no térmno dos cursos de graduação. Para proceder à avalação e reconhecmento dos cursos oferecdos pelas Insttuções, o órgão promove vstas n loco, por meo de avaladores desgnados pelo própro MEC. Fo nsttuída também a obrgatoredade de exstênca de uma CPA (Comssão Própra de Avalação), em todas as nsttuções, que teve como fnaldade a realzação de avalações

4 nternas permanentes e partcpatvas de todos os envolvdos nos processos acadêmcos: professores, funconáros, alunos e comundade externa (Brto, 2008). Desta forma, fo mplementada a obrgatoredade do ENADE (Exame Naconal de Avalação do Desempenho dos Estudantes), cujo resultado é agregado às outras avalações realzadas pelos órgãos competentes. Este conjunto fornece ao MEC elementos para uma avalação global da Insttução e contrbu para que ela, fundamentada nos resultados verfcados, procure seu aperfeçoamento. O ENADE se consttu um requsto obrgatóro para possbltar a efetva graduação do egresso, tendo a fnaldade de avalar o desempenho dos estudantes com relação aos conteúdos programátcos defndos nas dretrzes currculares dos cursos de graduação, o desenvolvmento de aptdões e capacdades mprescndíves a sua formação geral e ao exercíco de sua profssão. A partcpação do aluno passa a ser um pré-requsto mperatvo para a emssão do seu dploma. O ENADE também avala a adequação a novos requstos decorrentes da evolução do conhecmento e suas competêncas para compreender tópcos relatvos a questões brasleras e nternaconas e outras áreas de conhecmento. O exame deve ser aplcado pelo menos uma vez a cada três anos para alunos ngressantes e egressos, em todos os cursos profssonas (Rodrgues, 2008). Essa ntenção de medr o valor agregado desempenha um papel central no delneamento dos testes e na possbldade de melhorar a qualdade de nformação fornecda por um exame dessa natureza. Da forma smlar ao Provão, o ENADE passa a ser um componente currcular obrgatóro e o hstórco escolar de cada estudante deve regstrar se fo cumprdo ou não, anda que as notas não façam parte dele (Das Sobrnho, 2008). Vez que esse exame é aplcado a amostras de estudantes, a Portara 2.051/04 estabeleceu que o regstro de partcpação fosse ndspensável no hstórco, ndependente do estudante ter sdo seleconado ou não na amostragem (Art. 28). Os alunos não seleconados deverão ter o regstro de dentfcação de dspensa pelo MEC conforme dsposto na le pertnente. Entre o Provão e o ENADE outras semelhanças podem ser dentfcadas: os resultados ndvduas dos estudantes só são dsponíves a eles própros; alunos com melhores desempenhos são premados, por área de conhecmento; dados de perfl do aluno, do curso e da nsttução, além de percepção sobre a prova, são dentfcados smultaneamente quando da aplcação do teste, fornecdos pelos estudantes e pelo coordenador do curso avalado (Tavares et al., 2011). É mportante destacar que alcançar uma boa nota no ENADE contrbu efcazmente para a qualfcação do curso de graduação que ele concluu e um ganho na compettvdade de mercado, uma vez que este va absorver os profssonas que comprovarem um melhor preparo para o exercíco de sua profssão. Por outro lado, a busca por uma educação superor de qualdade se traduz não apenas em mposção determnada pelos marcos regulatóros prevstos para o setor educaconal, mas de forma dreta na melhora da qualdade de vda e no progresso do país como um todo (Catan et al., 2002). 3. METODOLOGIA

5 3.1 MODELO CONCEITUAL PROPOSTO O modelo concetual proposto fo escolhdo após revsão da lteratura, sendo baseado nos concetos preconzados por Qang (2003), Flppakou et al. (2008) e Brochado (2009). Na modelação foram utlzadas, da manera mas adequada possível, as dmensões estruturas da área de tursmo exstentes na prova de avalação do ENADE 2009 para o curso de tursmo, sendo caracterzado por uma formação geral (dmensão Atualdades) e uma componente específca (dmensões Teora Geral do Tursmo, Planejamento Turístco, Mercado Turístco e Meo Ambente / Novas Tecnologas), com os pesos dos componentes sendo 25% e 75%, respectvamente. Este modelo procurou contemplar as dmensões mínmas relatvas às áreas estruturas turístcas, que estaram sendo consderadas nesta pesqusa (avalação ENADE 2009 do MEC) para que o processo de avalação pudesse contemplar as dmensões avaladas como as mas mportantes para o seu desenvolvmento. As dmensões analsadas, bem como as questões da prova assocadas a cada uma dessas dmensões estão contempladas no modelo concetual proposto apresentado na Fgura 1. Fgura 1 Modelo formulado Fonte: Autores 3.2 DETERMINAÇÃO DO INSTRUMENTO, TÉCNICA DE COLETA DE DADOS E PROCESSO DE AMOSTRAGEM Foram realzadas provas smuladas do ENADE 2014 com dos tpos de varáves: as relatvas ao conteúdo da pesqusa e as de caracterzação. As varáves relatvas ao conteúdo da pesqusa compreendem essencalmente o desempenho dos alunos, enquanto as de caracterzação dzem respeto, prncpalmente, aos aspetos de localzação do campus e período letvo. As seguntes dmensões foram consderadas: Atualdades (8 questões da prova), Teora Geral do Tursmo (5 questões da prova), Planejamento Turístco (8 questões da

6 prova), Mercado Turístco (9 questões da prova) e Meo Ambente / Novas Tecnologas (5 questões da prova) e um de Desempenho Geral, totalzando 35 questões da prova. A população alvo do estudo fo consttuída por alunos do curso de Tursmo de uma IES em Natal/RN-Brasl abrangendo os Campus da Captal e do Interor para todos os períodos letvos, em andamento, nomeadamente, 2º, 4º, 6º e 8º. A amostra utlzada compreendeu 103 alunos, o que caracterzou quase a totaldade da população. Depos de responddas, as provas passaram pelos processos de recepção, codfcação, dgtação e depuração. As nformações de cada prova foram transcrtas para o computador e arquvadas em um banco de dados do SPSS - Statstcal Package for Socal Scence. 3.4 TÉCNICAS ESTATÍSTICAS MULTIVARIADAS O tratamento estatístco fo efetuado recorrendo ao programa Statstcal Package for Socal Scence (SPSS 17.0), a partr do qual foram aplcadas algumas técncas estatístcas para analsar os dados recolhdos. Fundamentalmente foram utlzadas as técncas de Análse Descrtva com o propósto de caracterzar o perfl dos entrevstados, Análse Bvarada (o Coefcente de Correlação de Pearson e o Coefcente Alpha de Cronbach) e Análse Multvarada (Regressão Lnear Múltpla). Uma estatístca descrtva (Har et al., 2009) fo empregada para determnar a méda, a medana, a moda, o desvo padrão, as percentagens e a varânca. Outra técnca utlzada fo a Análse Bvarada que são técncas estatístcas que tratam de relações entre duas varáves. Para o estudo em questão fo utlzado o Coefcente de Correlação de Pearson e também o Coefcente Alpha de Cronbach (Neter et al, 1996). Por fm, a técnca de Análse Multvarada fo também utlzada levando em consderação as dversas varáves predtvas smultaneamente, modelando a varável dependente com mas exatdão. O modelo de regressão é representado pela Equação 1. Y x x x p p. (1) Em que Y representa a varável dependente; xk ( = 1,..., n) são as varáves ndependentes (k = 1, 2,..., p); β s são os coefcentes da regressão (parâmetros desconhecdos no modelo a serem estmados); ε é o resíduo, uma varável aleatóra que captura a parcela do comportamento da varável Y, não explcada pela equação da regressão. Os parâmetros de um modelo da regressão podem ser estmados de váras formas, sendo o mas comum o uso dos mínmos quadrados (MQ), mnmzando o erro quadrátco médo dos resíduos. Estmatvas dos MQ, usados nesse trabalho, são dadas por (Larose, 2006): ˆ x x y y x x 2 ˆ y x ˆ.. (2) (3)

7 O estmador de mínmos quadrados, na forma matrcal, é dado por β = (X. X)-1 (X. Y), onde o apóstrofo sgnfca transposto. A estatístca da regressão pode ser apresentada sucntamente com uso de tabelas da análse de varânca (ANOVA). Um parâmetro mportante é o coefcente de determnação múltpla, R 2 que pode ser nterpretado como a proporção da varabldade na varável alvo que é explcado pelo relaconamento lnear com o conjunto de varáves predtoras, sendo defndo por meo da Equação 4, onde SSR é a soma dos quadrados da regressão e SST é a soma total dos quadrados. 2 SSR (4) R SST 4. RESULTADOS OBSERVADOS 4.1 ANÁLISE DAS VARIÁVEIS DE CARACTERIZAÇÃO Por meo da análse gráfca dos resultados obtdos a partr do tratamento dos dados cadastras exstentes, foram caracterzados os ndvíduos pesqusados quanto ao Campus e período, como pode ser vsto na Fgura 2. Verfca-se que 79,6% dos alunos que foram submetdos a esta avalação são do Campus da Captal. Em relação a varável período temos a segunte dstrbução porcentual: 2º = 39,8%, 4º = 22,3%, 6º = 18,4% e 8º = 19,5%. Fgura 2 Caracterzação sóco demográfca dos entrevstados 4.2 ANÁLISE DAS VARIÁVEIS RELATIVAS AO CONTEÚDO Com base nas dmensões do modelo formulado e seus respectvos tens dentfcados na Fgura 1 e as nformações apresentadas no Quadro 1, pode-se conclur que a dmensão Atualdades apresentou uma nota méda 4,7 em uma escala de 0 a 10, o que correspondeu a um valor relatvamente baxo. Por outro lado, a dmensão Teora Geral do Tursmo obteve uma nota méda de 5,1. A dmensão Planejamento Turístco apresentou

8 uma nota méda 4,9 em uma escala de 0 a 10, snalzando um desempenho baxo dos alunos. Verfcou-se que a dmensão Mercado Turístco apresentou uma nota méda 4,5 em uma escala de 0 a 10, snalzando problemas nesta área. A dmensão Meo Ambente e Novas Tecnologas apresentou uma nota méda 6,3 em uma escala de 0 a 10, representando a dmensão com melhor desempenho. Quadro 1 Comparatvo das dmensões do modelo formulado Dmensão Quantdade de Questões Nota da Dmensão Alfa de Cronbach Atualdades (ATU) 8 4,7 0,751 Teora Geral do Tursmo (TGT) 5 5,1 0,702 Planejamento Turístco (PLT) 8 4,9 0,713 Mercado Turístco (MET) 9 4,5 0,724 Meo Ambente e Novas Tecnologas (AMT) 5 6,3 0,672 Fonte: Autores Em termos de análse de confabldade dos cnco tens, apenas a dmensão Meo Ambente e Novas Tecnologas (AMT) obteve α=0,672 caracterzando que seus tens apresentam uma homogenedade próxma do padrão (α 0,70). 4.3 MENSURAÇÃO DO ÍNDICE DO DESEMPENHO GERAL DOS ALUNOS Fo empregado um índce geral a partr da utlzação da méda ponderada das notas de cada um dos fatores: Formação Geral e Formação Específca. O componente de ponderação consderado fo à mportânca defnda pelo ENADE (2009) a cada um desses fatores. O índce D g fo calculado a partr da expressão: D g n 1 P D onde P é o peso (mportânca) atrbuído para cada dmensão (Formação Geral e Formação Específca) pelo ENADE (2009) e D é a nota obtda pelos alunos para cada uma das questões. O Quadro 2 mostra os valores atrbuídos pelo ENADE (2009) para os fatores de ponderação de cada dmensão. Observa-se que o fator mas mportante na avalação pelo ENADE (2009) fo Formação Específca, com um peso de 75% tendo a maor ponderação em relação ao desempenho geral e uma nota méda de 5,1 pontos em uma escala de 0 a 10. O fator de menor peso na avalação pelo ENADE (2009), em relação ao componente de mportânca, fo referente ao fator Formação Geral, com 25% de relevânca (1)

9 Quadro 2 Fator de ponderação das dmensões Dmensões Peso (%) Nota Formação Geral 25 4,7 Formação Específca 75 5,1 Desempenho Geral (D g ) 100 5,0 Fonte: Autores O índce de desempenho geral D g obtdo fo de 5,0 pontos numa escala de 0 a 10, demonstrando que o rendmento dos alunos em relação aos conteúdos programátcos, suas habldades e competêncas está apenas em um patamar medano. 4.4 ANÁLISE DE CORRELAÇÕES ENTRE AS VARIÁVEIS DE CARACTERIZAÇÃO E DESEMPENHO GERAL DOS ALUNOS Com a utlzação da análse gráfca obtda por meo da tabulação cruzada, podemse dentfcar as notas obtdas em relação a cada varável de caracterzação, ou seja, campus e período letvo. Em relação à dmensão Atualzações apresentada na Fgura 3, verfca-se a não ocorrênca de notas zero e dez, em ambos os Campus, tendo os alunos, na sua maora (em torno de 65%), alcançado nota menor ou gual a cnco no Campus da Captal. Por outro lado, em Touros, em uma maora expressva (86%), com fcou com nota menor ou gual a cnco. Na varável período, observa-se também a não ocorrênca de notas zero e dez, em nenhum período, em contraponto, os alunos do 6º período, alcançaram um patamar de 84%, com nota menor ou gual a cnco e no 2º período, 76% pontuaram do mesmo modo. Na avalação global, os alunos examnados nesta dmensão, obtveram nota menor ou gual a cnco em 69% do total contemplado. Os prncpas problemas foram em relação à questão nº 1, correlaconada com a urbanzação no Brasl, que obteve apenas 10,7% de acerto e com a questão nº 4, que está assocada ao movmento antglobalzação, a qual obteve apenas 35,9% das questões assnaladas corretamente. Fgura 3 Crosstabulaton Nota da Dmensão Atualzações Analsando a dmensão Teora Geral do Tursmo na Fgura 4, verfca-se a ocorrênca de nota zero e também nota dez no Campus da Captal, enquanto que no Interor não houve ocorrênca de notas zero e dez. A maora (em torno de 51%) alcançou nota menor ou gual

10 a cnco no Campus da Captal enquanto que, no Interor, esta stuação se estabeleceu em apenas 42% com nota menor ou gual a cnco. Na varável período, observa-se a não ocorrênca de nota zero nos 6º e 8º períodos, porém com ncdênca de nota dez nos períodos 4º e 8º. Os alunos do 4º período tveram um desempenho crítco, onde 70% dos mesmos fcaram com nota menor ou gual a cnco, enquanto os alunos do 8º período, apenas 35% obtveram stuação equvalente. Na avalação global, os alunos examnados nesta dmensão obtveram nota menor ou gual a cnco em 50% do total. Os prncpas problemas foram em relação à questão nº 20, relaconada com o ordenamento do tursmo no terrtóro e nas organzações, que teve apenas 26,2% de acerto e com a questão nº 31, que está assocada ao espaço turístco relação entre tursmo e espaço, com 30,1% das questões assnaladas corretamente. Fgura 4 Crosstabulaton Nota da Dmensão Teora Geral do Tursmo Em relação à dmensão Planejamento Turístco vsta na Fgura 5, verfca-se a ocorrênca de nota zero no Campus de Touros em contraponto com o regstro de nota dez em Natal. Em ambos os Campus, os percentuas de nota menor ou gual a cnco fo bastante elevada, ou seja, desempenho muto rum (Captal = 62% e Interor = 67%). Na varável período, observa-se a ocorrênca de nota zero no 2º período e ncdênca de nota dez no 8º período. Os alunos do 4º período tveram um desempenho também crítco onde 78% dos mesmos fcaram com nota menor ou gual a cnco. Em contraste, nos alunos do 8º período apenas 45% obtveram stuação semelhante. Na avalação global, os alunos examnados nesta dmensão obtveram nota menor ou gual a cnco em 63% do total. Os prncpas problemas foram em relação à questão nº 26, relaconada com o processo de planejamento de um destno turístco, que teve apenas 31,1% de acerto. Com relação à questão nº 29, que está assocada a posção pouco satsfatóra do Brasl no cenáro turístco mundal, 32,0% das questões foram corretamente assnaladas, enquanto que na questão nº 34, que está assocada ao planejamento da oferta de tursmo e lazer, 31,1% das questões estava corretamente assnaladas

11 Fgura 5 Crosstabulaton Nota da Dmensão Planejamento Turístco No dagnóstco da dmensão Mercado Turístco apresentado na Fgura 6, verfcase a ocorrênca de nota zero em ambos os Campus e nota dez na Captal. Em ambos os Campus, os percentuas de nota menor ou gual a cnco fo bastante elevada, ou seja, desempenho muto crítco (Captal = 71% e Interor = 90%). Na varável período, observase a ocorrênca de nota zero nos 2º e 4º períodos e ncdênca de nota dez no 4º período. Os alunos do 4º período tveram, mas uma vez, um desempenho muto baxo, onde 91% deles fcaram com nota menor ou gual a cnco. Em contraste, nos alunos do 8º período apenas 50% deste segmento obtveram stuação parecda. Na avalação global, enfatzamos que os alunos examnados contemplados nesta dmensão obtveram nota menor ou gual a cnco em 75% do total. Os prncpas problemas foram com a questão nº 19, relaconada com a hosptaldade, que obteve apenas 16,5% de acerto. Com relação à questão nº 32, que está assocada aos segmentos emergentes do tursmo, 25,2% das questões fo corretamente assnalada, enquanto que na questão nº 25, que está assocada a cadea produtva da atvdade turístca, o índce das questões corretamente assnaladas se elevou para 31,1%. Fnalmente, a questão nº 16, que está assocada ao posconamento do mercado hotelero, obteve 33,3% das questões assnaladas corretamente. Fgura 6 Crosstabulaton Nota da Dmensão Mercado Turístco Por fm, verfca-se, na dmensão Meo Ambente e Novas Tecnologas correspondente a Fgura 7, a ocorrênca de nota zero, em ambos os Campus e váras notas dez, tanto na Captal como no Interor. Em ambos os Campus, os percentuas de nota

12 menor ou gual a cnco fo bastante reduzdo, ou seja, desempenho bom (Captal = 32% e Interor = 24%). Na varável período, observa-se a ocorrênca de nota zero nos 2º e 4º períodos e ncdênca de nota dez em todos os períodos, prncpalmente no 2º período. Mas uma vez, os alunos do 4º período tveram o por valor (48% dos mesmos fcaram com nota menor ou gual a cnco) enquanto que o melhor índce ocorreu no 8º período (apenas 20% fcaram com nota menor ou gual a cnco). Na avalação global, os alunos contemplados nesta dmensão obtveram nota menor ou gual a cnco em apenas 30% do total. O prncpal problema fo em relação à questão nº 24, relaconada com os recursos e facldades tecnológcas na área turístca, que teve 42,7% das questões corretamente assnaladas. Fgura 7 Crosstabulaton Nota da Dmensão Meo Ambente e Novas Tecnologas Na análse geral do desempenho dos alunos em relação à nota fnal apresentada na Fgura 8, foram constatados valores muto baxos tanto na Captal quanto o Interor, com respectvamente 73% e 86% dos alunos, obtendo nota menor ou gual a cnco. Na avalação global, os alunos obtveram nota menor ou gual a cnco em um patamar elevado de 76% do total. Os prncpas problemas foram em relação à dmensão Mercado Turístco onde 75% dos alunos obtveram nota menor ou gual a cnco. Na dmensão Atualdades, 69% dos alunos obtveram nota menor ou gual a cnco e na dmensão Planejamento Turístco, 63% dos alunos obtveram nota menor ou gual a cnco. Fgura 8 Crosstabulaton Nota Geral

13 Na avalação comparatva dos alunos do 2º período dos Campus da Captal e do Interor conforme o Quadro 3, não é verfcado dferenças sgnfcatvas entre os mesmos em termos de notas obtdas tanto na formação geral bem como na formação específca. 4.5 APLICAÇÃO DE REGRESSÃO MULTIVARIADA AS VARIÁVEIS RELATIVAS AO CONTEÚDO E O DESEMPENHO GERAL Na aplcação da técnca de regressão lnear múltpla, um aspecto de fundamental mportânca é a correta especfcação do tpo de escala a ser utlzada, pos na prátca, ncorporar escalas nadequadas mplca em dfculdades adconas a serem superadas pelo pesqusador, podendo, eventualmente nvablzar a utlzação dessa técnca. A lteratura mas conservadora recomenda apenas a utlzação de varáves contínuas ou dscretas, que é o caso desta pesqusa, pos a escala utlzada refere-se a uma varável quanttatva contínua ntervalar, ou seja, a notas obtdas pelos alunos. Fo utlzado o programa SPSS para estmar os parâmetros do modelo de desempenho, por meo do método dos mínmos quadrados (Fávero et al., 2009), tendo sdo obtdo a segunte função de regressão múltpla estmada pelo método confrmatóro, para representar o desempenho geral (D g ): Dg 0,218 ATU 0,129 TGT 0,233 PLT 0,251MET 0, 129 AMT (2) A Tabela 2 apresenta os coefcentes do modelo ajustados, os respectvos desvos padrão, os resultados dos testes ndvduas (estatístca t e nível de sgnfcânca), o ntervalo de confança, as correlações e estatístcas de colneardade. Tabela 2 Coefcentes de regressão do método confrmatóro Model Unstandardzed Coeffcents B Std. Error Beta Standardzed Coeffcents T Sg. 1 (Constant),005,123,039,969 Nota ATU,218,018,313 12,314,000 Nota TGT,129,017,206 7,788,000 Nota PLT,233,019,341 12,437,000 Nota MET,251,021,356 11,755,000 Nota AMT,129,015,232 8,348,000 a. Dependent Varable: Nota Geral Como pode ser observado na Tabela 3, o coefcente de determnação múltplo R 2 fo de 0,945. Isto sgnfca que as cnco dmensões constantes na função de regressão são responsáves por explcar quase a totaldade da varação do desempenho, ou seja, 94,5% (Noruss, 2004a)

14 Tabela 3 Sumáro do modelo da regressão do método confrmatóro Model R R Square Adjusted R Square Std. Error of the Estmate 1,972ª,945,942,329 a. Predctors: (Constant), Nota AMT, Nota ATU, Nota PLT, Nota TGT, Nota MET Na execução de um teste global de sgnfcânca ao modelo (Draper & Smth 2005), recorreu-se ao SPSS para construr uma tabela ANOVA (Tabela 4), e executar o Teste-F, correspondendo às seguntes hpóteses: H 0 : (ausênca de efeto); H1 : (presença de efeto). O teste estatístco F obtdo (Tabela 4) fo gual a 334,026 para os graus de lberdade do numerador e do denomnador, respectvamente com valores de 5 e 102 e ao nível de sgnfcânca de = 5% (a = 95%). O valor tabelado encontrado de F crítco (Tabachnck e Fdell, 2001), para as condções propostas, fo de F c 2,21. A hpótese que se pretende testar é verfcar se as varáves ndependentes dmensões consderadas no modelo exercem conjuntamente efetos sgnfcatvos sobre a varável dependente Desempenho Geral (D g ). Para se testar as hpóteses consderadas (H 0 e H 1 ), deve ser feto uma comparação entre o valor obtdo (F obs ) e o valor crítco que é defndo em tabela, ou seja, se F obs F c =F(95%; 5; 102), é aceta H 0. Da tabela da dstrbução F, para as condções propostas, se verfca que F(95%; 5; 102) 2,21. Logo, como F obs F(95%; 5; 102), ou seja, 334,026 é muto maor que 2,21 deve ser rejetada a hpótese nula (H 0 ) e ser valdada a hpótese H 1, ao nível de sgnfcânca de 5%. Desta manera constata-se que exste pelo menos um parâmetro dferente de zero. Isto sgnfca que as dmensões têm nfluênca sobre a varável dependente. Portanto, pode ser concluído que o desempenho geral (D g ) está relaconado com as varáves ndependentes (dmensões do modelo). Tabela 4 Varânca (ANOVA) do método confrmatóro Model Sum of Squares df Mean Square F Sg. 1 Regresson 181, , ,026,000a Resdual 10,525 97,109 Total 191, a. Predctors: (Constant), Nota AMT, Nota ATU, Nota PLT, Nota TGT, Nota MET b. Dependent Varable: Nota Geral A fm de obter uma maor confabldade, pode ser usado também o coefcente de regressão modfcado, chamado de coefcente beta, onde os testes ndvduas dos parâmetros são realzados utlzando à estatístca t de Student. Para tanto deve ser feta uma comparação entre o valor obtdo (t ) com o valor crítco (t c ), que também é defndo em tabela, ou seja, se t tc, então deve ser aceta a hpótese nula. Caso contráro, deve-se rejetá-la

15 O teste estatístco t, obtdo para o coefcente 1 da dmensão Atualdades fo t 1 = 12,314. Para os graus de lberdade que são 5 e 102 e com um nível de sgnfcânca de 5%, o valor crítco tabelado encontrado fo de t c 1,890. Como t c 1,890< t 1 = 12,314, rejeta-se a hpótese nula (H 0 ), em favor da hpótese alternatva de efeto postvo, com um nível de sgnfcânca de 5%. Esse resultado ndca que a nfluênca da dmensão Atualdades sobre o Desempenho Geral é estatstcamente sgnfcante, ao nível de 5%. Efetuou-se o cálculo da estatístca t para as outras dmensões, recorrendo ao SPSS, cujos resultados estão apresentados no quadro dos coefcentes (Tabela 2). Como podem ser verfcadas, todas as estatístcas t correspondentes aos parâmetros estão fora da regão de acetação (sg. 0,05). Por meo do método confrmatóro (Noruss, 2004b) pode ser verfcado que os parâmetros obtdos para o coefcente de determnação múltplo, o Teste F e o teste estatístco t comprovam a valdação da hpótese H 1 tendo em vsta que os coefcentes 1, 2, 3, 4 e 5 obtveram valores de sgnfcânca sg < 0,05, sendo, portanto sgnfcatvos. Desta forma, há fortes ndícos do relaconamento das dmensões contdas na modelagem defnda em relação ao desempenho geral. 5. CONCLUSÕES Na realdade atual onde o aluno está mas nformado e exgente, a avalação sstemátca traz bons resultados como modo de realmentar e dreconar os esforços de uma Insttução de Ensno Superor (IES), contrbundo como nstrumento de gestão a fm de dentfcar eventuas pontos fracos e oportundades de melhora, que possam expressar os aspectos gerencas menos desenvolvdos para o seu aperfeçoamento. Neste sentdo, os objetvos geras deste artgo foram avalar o desempenho geral dos alunos do curso de Tursmo da IES do Campus da Captal e do Interor em relação à aplcação da avalação do ENADE 2014 e dentfcar os seus atrbutos determnantes. O modelo proposto procurou contemplar as dmensões mínmas relatvas às áreas estruturas turístcas, que estaram sendo consderadas nesta pesqusa (avalação ENADE 2014 do MEC) para que o processo de avalação pudesse levar em consderação as dmensões avaladas como as mas mportantes para o seu desenvolvmento. Assm, fo utlzado um método baseado no emprego de regressão lnear multvarada para analsar o efeto que as dmensões, contempladas na referda avalação do MEC, teram sobre o desempenho geral dos alunos. Os resultados obtdos na análse geral reforçam a aplcabldade convenente do modelo concetual proposto e sugerem que aumentar o nível de desempenho dos alunos demanda melhorar o comportamento do conjunto de dmensões (áreas turístcas estruturas consderadas no modelo), em especal, Mercado Turístco e Planejamento Turístco (maores coefcentes na equação de regressão), que representam as maores nfluêncas na composção do desempenho geral e que também obtveram avalações nadequadas. Quando se analsa o desempenho dos alunos em relação à nota fnal, constata-se valores muto baxos tanto na Captal quanto no Interor, com respectvamente 73% e 86%

16 dos alunos com nota menor ou gual a cnco. Na avalação global, os alunos obtveram nota menor ou gual a cnco em um patamar elevado de 76% do total. Os prncpas problemas dentfcados foram encontrados na dmensão Mercado Turístco (relaconados à hosptaldade, segmentos emergentes do tursmo, cadea produtva da atvdade turístca e posconamento do mercado hotelero), na dmensão Atualzações (envolvendo questões de urbanzação no Brasl e movmento antglobalzação e na dmensão Planejamento Turístco (com ênfase no processo de planejamento de um destno turístco e no planejamento da oferta de tursmo e lazer), em que os alunos obtveram nota menor ou gual a cnco, assocados aos patamares respectvamente, de 75%, 69% e 63%, com notas médas que se estabeleceram nos níves de 4,5; 4,7 e 4,9, de modo correspondente, em uma escala ntervalar de zero a dez. Outro aspecto que merece uma reflexão mas cudadosa é em relação ao desempenho dos alunos do 4º período que fo muto crítco. Neste segmento, os alunos obtveram as pores avalações em pratcamente todas as dmensões, ou seja, Mercado Turístco = 91%, Planejamento Turístco = 78%, Teora Geraldo Tursmo = 70%, Atualzações = 76% e Meo Ambente = 48% - percentual correspondente às avalações com notas menores ou guas a cnco. Embora este artgo apresente contrbuções do ponto de vsta acadêmco e prátco, tem algumas lmtações de que devem ser tratadas em abordagens posterores. A prmera delas decorre do fato da coleta de dados ter sdo feta por convenênca, o que pode causar vés na análse. Outra lmtação se refere às técncas quanttatvas utlzadas, que, mesmo sendo sgnfcatvamente fortes para extrar as nformações estatístcas e suas relações, algumas nterações podem não terem sdo percebdas, não sendo assm, capazes de captar todas as dferenças do comportamento humano, por mas dversfcados e consstentes que sejam os métodos. Esforços em pesqusa podem ser fetos, no sentdo da realzação de estudos adconas com a utlzação de modelagem de equações estruturas para caracterzar melhor o conjunto de atrbutos relevantes na explcação do desempenho geral. Além dsso, a coleta de dados desta pesqusa fo realzada exclusvamente com alunos do curso de Tursmo da IES referencada, por sso sugere-se que pesqusas futuras sejam realzadas abrangendo outros cursos e também outras IES

17 6. REFERÊNCIAS BIBLIOGRÁFICAS BRITO, M. R. F. O SINAES e o ENADE: da concepção à mplantação. Avalação (Campnas) [onlne], vol.13, n.3, pp ISSN BROCHADO, A. Comparng alternatve nstruments to measure servce qualty n hgher educaton. Qualty Assurance n Educaton. v.17, n.2, pp CATANI, OLIVEIRA, DOURADO A polítca de avalação da educação superor no Brasl em questão. In: Das Sobrnho; Rstoff (Org.). Avalação democrátca para uma unversdade cdadã. Floranópols: Insular DIAS SOBRINHO, J. Qualdade, avalação: do Snaes a índces. Avalação: Revsta de Avalação da Educação Superor, Campnas/Sorocaba, v. 13. n DRAPER, N. R.; SMITH, H. Appled Regresson Analyss. 6. ed. New York: John Wley & Sons, Inc. 274p FÁVERO, L. P, BELFIORE, P, SILVA, F. L., CHAN, B. L. Análse de Dados: modelagem multvarada para tomada de decsão. Ro de Janero: Campus FILIPPAKOU, O. TAPPER, T. Qualty assurance and qualty enhancement n hgher educaton: Contested terrtores? Hgher Educaton Quarterly, Oxford, UK, v. 62, n. 1/2, p HAIR, J. F., BLACK, W. C., BABIN, B. J., ANDERSON, R. E. Análse Multvarada de Dados. 6º ed., São Paulo: Bookman LAROSE, D. T. Data Mnng Methods and Models. 1. ed., Nova York: John Wley & Sons, Inc NETER, J., KUTNER, M., NACHTSHEIM, C., AND WASSERMAN, W. Appled Lnear Statstcal Models., McGraw-Hll Companes, Inc., Nova York NORUSIS, M. SPSS 13.0 Gude to Data Analyss. Upper Saddle-Rver, N.J.: Prentce Hall, Inc. 2004a. NORUSIS, M. SPSS 13.0 Statstcal Procedures Companon. Upper Saddle-Rver, N.J.: Prentce Hall, Inc. 2004b. POLIDORI. M. M. Polítcas de avalação da educação superor braslera: PROVÃO, SINAES, IDD, CPC, IGC e outros índces. Avalação, Campnas; Sorocaba, SP, v. 14, n. 2, p , jul QIANG, Z, Internatonalzaton of Hgher Educaton: towards a conceptual framework. Polcy Futures n Educaton, Toronto, v. 1, n RIBEIRO, E. A. As atuas polítcas públcas de avalação para a educação superor e os mpactos na confguração do trabalho docente. Avalação: Revsta de Avalação da Educação Superor, Campnas/Sorocaba, v. 17, n RODRIGUES, G. M., Avalação do ensno superor braslero: modelos, dvulgação dos resultados e normas regulamentadoras. Revsta da Assocação Braslera de Mantenedoras de Ensno Superor. Ano 26 n. 38. Dezembro SPSS, Inc. SPSS Versons 17.0 for Wndows. Chcago: SPSS Inc TABACHNICK, B. G. E FIDELL, L. S. Usng multvarate statstcs. 4rd ed. Needham Heghts: Allyn&Bacon TAVARES, M. G. M, OLIVEIRA, M. A. A, SEIFFERT, O. M. L. B. Avalação da educação superor na Revsta Ensao e polítcas públcas em educação: ênfases e tendêncas. ENSAIO: Avalação e Polítcas Públcas em Educação. Ro de Janero, v. 19, n. 71, p TERESA C. V. C., STELLA R. R. C. Qualfcação Profssonal em Tursmo como Fator de Compettvdade do Setor. Caderno Vrtual de Tursmo, vol. 4, n. 3, pp