Diagnóstico e Avaliação da Formação Manual do Curso
Sumário Este curso destina-se a formadores e agentes de formação que estejam envolvidos na definição e passagem à prática de estratégias avaliativas de acções de formação. Após uma parte introdutória que visa clarificar conceitos, uniformizar linguagem e dar a conhecer modelos avaliativos, o curso desenvolve-se em torno de uma estratégia avaliativa que contempla quatro níveis: satisfação, aprendizagens, transferência e impacte da formação (modelo de avaliação de Kirkpatrick). Por forma a fundamentar a avaliação de impacte, houve necessidade de incluir uma referência ao modo como se elaboram diagnósticos de necessidades de formação. Por seu turno, a temática da avaliação das aprendizagens implicou também que se optasse pela inclusão de um módulo destinado aos cuidados a ter na definição/estruturação de intencionalidades formativos (competências e objectivos pedagógicos). Objectivos No final do curso, os participantes serão capazes de conceber, executar e regular estratégias avaliativas de acções de formação que contemplem 4 níveis: satisfação, aprendizagens, transferência e impacte. Simultaneamente, saberão elaborar diagnósticos de necessidades de formação e definir correctamente intencionalidades formativas. AEP Curso DAF Manual do Curso Pag. 2/9
Módulos 1. Introdução: explicitação do percurso Objectivos: compreender o percurso formativo e a sua fundamentação. Trata-se de dar a conhecer o percurso formativo e as principais orientações quanto ao esquema geral de funcionamento do curso. 2. Avaliação da formação: enquadramento Objectivos: contextualizar a importância da avaliação no processo global de formação. Neste módulo, dar-se-á a conhecer a centralidade da avaliação em qualquer processo formativo, identificarse-ão os vários agentes formativos envolvidos e conhecer-se-ão os principais significados/propósitos de avaliação, por forma a clarificar conceitos e uniformizar linguagem. Simultaneamente, identificar-se-ão as principais dificuldades existentes em processos avaliativos, para mais facilmente se lhes saber fazer face. 3. Avaliação da Formação: estratégias e modelos Objectivos: saber definir uma estratégia avaliativa para uma acção de formação. Neste módulo, os participantes serão confrontados com vários modelos de avaliação de acções de formação e identificarão vantagens e desvantagens de cada um. Por fim, validar-se-á o modelo de avaliação adoptado, conhecido pelo nome do seu autor - Kirkpatrick. 4. Diagnóstico: primeiro momento avaliativo Objectivos: saber diagnosticar necessidades de formação. Este módulo permitirá perceber a necessidade de enquadrar o diagnóstico de necessidades de formação no contexto mais vasto de uma política de gestão de recursos humanos. Para além disso, permitirá seleccionar, adaptar e conceber instrumentos de diagnóstico de necessidades e ainda saber estruturar o documento através do qual se apresentam e explicitam os resultados de um diagnóstico. CONTEXTUALIZAÇÃO DE UM DIAGNÓSTICO DE NECESSIDADES Objectivos: saber enquadrar o DNF no contexto mais vasto da gestão de RH. Trata-se de reconhecer o alcance do DNF, nomeadamente no que diz respeito à selecção de necessidades diagnosticadas (as passíveis de resolução através de formação e as que não o são). AEP Curso DAF Manual do Curso Pag. 3/9
DIAGNÓSTICO DE NECESSIDADES DE FORMAÇÃO: RECOLHA DE DADOS Objectivos: seleccionar/adequar metodologias de recolha de dados em função dos métodos e objectivos do DNF. Nesta fase, os participantes serão confrontados com diversas metodologias de DNF, por forma a saberem seleccionar as mais adequadas a cada situação concreta. DIAGNÓSTICO DE NECESSIDADES DE FORMAÇÃO: ANÁLISE E TRATAMENTO DE DADOS Objectivos: Seleccionar/adequar metodologias de tratamento de dados. Da análise de conteúdo ao tratamento estatístico, procurar-se-á sensibilizar os participantes para alguns dos cuidados a ter na análise e tratamento de dados recolhidos em contexto de diagnóstico de necessidades de formação. DIAGNÓSTICO DE NECESSIDADES DE FORMAÇÃO: DO DIAGNÓSTICO À DEFINIÇÃO DE INTENCIONALIDADES EDUCATIVAS Objectivos: Definir intencionalidades formativas a partir das áreas seleccionadas como sendo passíveis de formação. Tratar-se-á de levar os participantes a tomar consciência dos diversos níveis de objectivos (indicadores organizacionais/impacte, competência/transferência, objectivos gerais e específicos/aprendizagens), por forma a que melhor possam definir intencionalidades e preparar as suas respectivas avaliações. 5. Definição/estruturação de intencionalidades formativas Objectivos: saber definir/estruturar intencionalidades formativas. Neste módulo, os participantes saberão distinguir os diferentes níveis de intencionalidades e retirar proveito da sua complementaridade, por forma a saberem conferir uma base operacional e segura à estratégia avaliativa. INTENCIONALIDADES FORMATIVAS: OS CONCEITOS Objectivos: Empregar adequadamente os conceitos relacionados com intencionalidades formativas. Trata-se de saber distinguir conteúdos e actividades de objectivos de formação. DEFINIÇÃO/ESTRUTURAÇÃO DE INTENCIONALIDADES FORMATIVAS Objectivos: Saber definir intencionalidades retirando proveito da complementaridade entre os diversos níveis de abrangência. Os participantes serão levados a concluir que existem vários níveis na definição de intencionalidades (finalidades, competências, objectivos gerais e indicadores de aprendizagem), a conhecer as AEP Curso DAF Manual do Curso Pag. 4/9
características de cada um desses níveis e a conceber intencionalidades que retirem proveito das complementaridades entre esses níveis. TAXINOMIA DE OBJECTIVOS PEDAGÓGICOS Objectivos: Conceber percursos formativos iterativos com base no domínio das taxinomias de objectivos pedagógicos. Dando especial ênfase aos domínios cognitivo e socio-afectivo, esta lição permitirá saber que existem, nas várias taxinomias de objectivos, diferentes níveis de complexidade a que será necessário estar atento, por forma a saber definir percursos formativos com princípio, meio e fim. 6. Avaliação da satisfação/reacções Objectivos: saber avaliar o grau de satisfação numa acção de formação. Neste módulo, os participantes compreenderão o alcance deste nível avaliativo e saberão definir metodologias/instrumentos para recolher dados relativos às reacções dos participantes. AVALIAÇÃO DA SATISFAÇÃO: ESTRATÉGIAS Objectivos: Conhecer estratégias de avaliação das reacções dos formandos. Das mais informais às mais estruturadas, esta lição permitirá conhecer os vários modos de avaliar a satisfação e aprender-se-á a construir instrumentos adequados. AVALIAÇÃO DA SATISFAÇÃO: LIMITAÇÕES Objectivos: Identificar as principais limitações à avaliação da satisfação. Este nível relaciona-se mais com aspectos de eficiência do que propriamente com eficácia (resultados), razão pela qual os formandos analisarão essas limitações e equacionarão formas de lhes fazer face. 7. Avaliação das aprendizagens Objectivos: saber avaliar aprendizagens. Para além de uma breve resenha histórica, através da qual se conhecerá o modo como as preocupações avaliativas foram evoluindo, este módulo permitirá conhecer as várias finalidades que a avaliação das aprendizagens pode ter e definir instrumentos avaliativos adequados. Simultaneamente, será abordado o problema da subjectividade e definir-se-ão formas de a minimizar/aproveitar. AVALIAÇÃO DAS APRENDIZAGENS: COMO? A DOCIMOLOGIA AEP Curso DAF Manual do Curso Pag. 5/9
Objectivos: Saber construir instrumentos de avaliação com base em princípios docimológicos. A docimologia, conhecida como a ciência dos exames, será o eixo central desta lição, no âmbito da qual se abordarão os principais contributos que aquela ciência trouxe ao nível da construção de testes, sejam eles de itens ditos objectivos (resposta curta/completamento, verdadeiro e falso, relação, de resposta múltipla) ou subjectivos (resposta longa). Simultaneamente, procurar-se-á conferir validade e objectividade a estratégias avaliativas não centradas em testes (relatórios, simulações,...) AVALIAÇÃO DAS APRENDIZAGENS: COMO? OS PROBLEMAS DA SUBJECTIVIDADE Objectivos: saber fazer face aos problemas decorrentes da subjectividade. A subjectividade, como problema que afecta a validade das classificações, pode ser minimizada se compreendidas algumas das suas causas e equacionadas estratégias de minimização. Paralelamente, aprender-se-á a reconhecer o carácter inevitável da subjectividade e a retirar proveito desse facto. AVALIAR APRENDIZAGENS: PARA QUÊ? Objectivos: Utilizar as diferentes funções da avaliação em função das várias situações formativas. Nesta fase, conhecer-se-á o percurso histórico da avaliação das aprendizagens e compreender-se-á que a classificação não constitui a única finalidade a perseguir com a avaliação. Analisar-se-ão as funções diagnóstico e formativa e equacionar-se-ão as respectivas consequências na concepção de estratégias de avaliação das aprendizagens. AVALIAR APRENDIZAGENS: A PERSPECTIVA CONSTRUTIVISTA Objectivos: Utilizar estratégias de avaliação de tipo formativo. Uma vez conhecidos os propósitos diagnóstico e formativo da avaliação, importará que os participantes conheçam alguns instrumentos de avaliação com vertente formativa, como são os casos de portfolios, mapas conceptuais e vês heurísticos. AVALIAÇÃO DAS APRENDIZAGENS: LIMITAÇÕES Objectivos: Reconhecer a importância da avaliação externa como complemento à avaliação em sala. Apesar de todo o rigor e completude que se possa aplicar à avaliação das aprendizagens, os participantes conhecerão também as limitações deste nível avaliativo e compreenderão a importância da avaliação no terreno (pós-formação em sala). 8. Avaliação da transferência Objectivos: saber avaliar os comportamentos em contexto profissional que tenham sido resultado da formação executada. Para além de serem sugeridas formas de promover a transferência para o contexto profissional do que é aprendido em sala, este módulo permitirá definir/adequar estratégias de avaliação do que acontece no terreno ao nível dos comportamentos (competências) assumidos pelos formandos. AEP Curso DAF Manual do Curso Pag. 6/9
TRANSFERÊNCIA: FORMAS DE A PROMOVER Objectivos: Seleccionar métodos e meios para promover a transferência do aprendido para o contexto de trabalho. Antes, durante e no final da formação há uma enorme quantidade de sugestões a apresentar a quem assegura/gere formação, por forma a evitar que, entre a sala e o terreno, se perca uma parte importante do efeito formativo. Disso tratará esta lição. AVALIAÇÃO DA TRANSFERÊNCIA: ESTRATÉGIAS Objectivos: Seleccionar/adequar estratégias de avaliação da transferência. Da avaliação de desempenho à elaboração de Planos de Incitação Pessoal, são várias as estratégias possíveis de avaliação da transferência e que esta lição permitirá conhecer e adequar. 9. Avaliação do impacte Objectivos: saber como avaliar os efeitos organizacionais da formação. A avaliação da formação termina com o controlo do seu impacte, nomeadamente ao nível dos seus efeitos organizacionais. Eis porque importa reservar um espaço de reflexão onde se seleccionem indicadores organizacionais em função da formação a assegurar e também onde se reflicta sobre o alcance da avaliação centrada no retorno sobre o investimento (ROI). AVALIAÇÃO DO IMPACTE: A IMPORTÂNCIA DOS INDICADORES ORGANIZACIONAIS Objectivos: Seleccionar/identificar indicadores por área de formação. Procurar fechar o círculo, estabelecendo aqui as necessárias relações com o primeiro momento avaliativo o diagnóstico de necessidades de formação. Na prática, tratar-se-á de levar os participantes a reconhecer a importância dos indicadores que permitam, desde o início, operacionalizar/objectivar a avaliação. Nesta lição procurar-se-á listar os indicadores organizacionais possíveis para cada área temática. AVALIAÇÃO DO IMPACTE: R.O.I. Objectivos: Contextualizar o cálculo do R.O.I. no conjunto das vantagens/limitações da avaliação de Kirkpatrick. Será sempre necessário e imprescindível avaliar o retorno sobre o investimento? Será mesmo possível, em acções que versem temáticas e áreas tidas como imateriais, avaliar quantitativamente os resultados em contextos organizacionais? Destas e doutras questões tratará esta lição, que procurará lançar alguma luz sobre o mito da avaliação quantitativa. AEP Curso DAF Manual do Curso Pag. 7/9
10. Avaliação do modelo Objectivos: Identificar as principais limitações ao modelo de avaliação de Kirkpatrick. Não obstante tratar-se do modelo de avaliação mais conhecido e intuitivamente aplicado, há aspectos relacionados com as expectativas que cria (os 4 níveis, como parâmetros quase incontestáveis de avaliação) e também com a sua passagem à prática que justificam alguma reflexão crítica. Terminada que está a aprendizagem do modelo, impõe-se analisar criticamente o seu verdadeiro alcance e averiguar das suas eventuais limitações. É o que se pretende com este módulo. 11. Avaliação final Finalidades: Avaliar o processo formativo e os resultados alcançados. Trata-se do balanço final do que foi conseguido em termos de aprendizagens, bem como de equacionar formas de promover a transferência do aprendido para os contextos respectivos de trabalho dos vários participantes. AEP Curso DAF Manual do Curso Pag. 8/9
Ficha Técnica Autores João Gouveia Cláudia Rodrigues Produção Multimédia Cesae Centro de Serviços e Apoio ás Empresas Coordenador: Jorge Mota Edição: André Cruz Promotor AEP Associação Empresarial de Portugal 1ª Edição Dezembro de 2004 AEP Curso DAF Manual do Curso Pag. 9/9