Avaliação de Treinamento: Aprendizagem, Reação e Impacto Mestranda: Maria Cecília dos Santos Queiroz de Araujo Orientadora: Gardênia da Silva Abbad Laboratório de Avaliação de Sistemas Instrucionais – LASI Universidade de Brasília - UnB Instituto de Psicologia - IP

Objetivos  Descrever os principais aspectos do desenho instrucional do treinamento;  avaliar a aprendizagem dos participantes;  avaliar a reação dos participantes aos treinamentos e ao desempenho dos instrutores;  avaliar o suporte à transferência percebido pelos participantes;  avaliar o impacto do treinamento no trabalho (medido em amplitude), por meio da auto e da heteroavaliação;  avaliar as relações existentes entre a aprendizagem no treinamento, suporte à transferência, experiência prévia dos indivíduos com os conteúdos abordados pelo evento e a transferência do treinamento para o trabalho. Maria Cecília S. Q. Araujo2

Análise Qualitativa

Objetivos  Avaliar a aprendizagem dos participantes.  Avaliar a necessidade de treinamento realizada.  Explorar a influência da experiência prévia na aprendizagem.  Explorar a influência de características pessoais na aprendizagem.  Identificar fatores que facilitam e que dificultam a aprendizagem no contexto da organização. Maria Cecília S. Q. Araujo4

Coleta de Dados 7 grupos focais com egressos dos treinamentos – Quantos trabalham ou já trabalharam com (tema do treinamento)? Em que contexto (saúde, vigilância sanitária, outros)? Por quanto tempo? – Quantos já participaram de outras capacitações sobre o tema? – Como vocês avaliam a sua aprendizagem no curso? – Quais fatores foram facilitadores da aprendizagem? – Quais fatores dificultaram a aprendizagem? – Como vocês avaliam a influência da bagagem de conhecimentos na aprendizagem? Algum conhecimento anterior contribuiu para a aprendizagem? Qual? – Deveria haver algum pré-requisito para participar do curso? – Quais as características das pessoas que demonstraram melhor desempenho no curso? Maria Cecília S. Q. Araujo5

Coleta de Dados 5 entrevistas com instrutores dos treinamentos – Você considera adequada a análise de necessidade de treinamento que identificou a realização deste curso como prioritária para o ano de 2014? Por quê? – Você analisa que há compatibilidade entre os participantes que foram atraídos para se inscrever no curso com o público alvo pré-definido? Por quê? – Você consegue identificar os fatores que contribuíram para os alunos com melhor desempenho durante o curso? – Você considera que o critério para aprovação de atingimento da frequência mínima é compatível com os objetivos do curso? Por quê? – Qual impacto você imagina que o curso terá no dia-a-dia do trabalho dos participantes? Em quanto tempo você acha que o impacto será perceptível? Maria Cecília S. Q. Araujo6

Análise de Dados Análise de conteúdo categorial (Bardin, 2011): Buscar temas (categorias) que respondam às perguntas de pesquisa Fornecer uma representação simplificada dos dados brutos Maria Cecília S. Q. Araujo7

Corpus Grupos Focais: – Número de páginas: 27 – Número de linhas: 918 – Número de parágrafos: 57 – Número de palavras: – Número de caracteres (sem espaço): – Número de caracteres (com espaço): Entrevistas: – Número de páginas: 15 – Número de linhas: 510 – Número de parágrafos: 25 – Número de palavras: – Número de caracteres (sem espaço): – Número de caracteres (com espaço): Maria Cecília S. Q. Araujo8

Etapas de análise Etapa 1: Apresentação e análise do material Etapa 2: Consolidação das contribuições e finalização da análise (definições, palavras- chave e etc.) Maria Cecília S. Q. Araujo9

Orientações para Etapa 1 Critério para categorização: semântico (categorias temáticas) Características da categoria: – Exclusão mútua: cada elemento não pode existir em mais de uma categoria. – Homogeneidade: Só pode haver um único tema e os diferentes níveis de análise devem ser separadas em outras análises. Maria Cecília S. Q. Araujo10

Orientações para Etapa 1 Características da categoria: – Pertinência: Uma categoria é considerada pertinente quando esta adaptada ao material de análise escolhido e quando pertence ao quadro teórico definido. – Objetividade e fidelidade: evitar distorções das falas e buscar a imparcialidade – Produtividade: fornece resultados férteis para a pesquisa Maria Cecília S. Q. Araujo11

Orientações para a Etapa 1 Exemplos de categorias: A)Valores fisiológicos: alimentação, sexo, repouso, saúde, segurança, conforto B)Valores sociais: amor sexual, amor familiar, amizade C)Valores relativos ao ego: independência, cumprimento, reconhecimento, amor-próprio, dominação, agressão Maria Cecília S. Q. Araujo12

Orientações para a Etapa 1 Procedimentos: 1.Cada analista receberá dois arquivos em PDF, um contendo as respostas do grupo focal e outro contendo as respostas das entrevistas. 2.O analista deverá ler o material buscando categorias que respondam às perguntas feitas pela pesquisadora, independente do número de respostas semelhantes. Não há número mínimo ou máximo de categorias. 3.O analista deverá marcar as categorias com cores e criar legenda para as cores. A legenda deverá ser o nome da categoria proposta. Use a mesa cor para cada categoria ao longo do texto. Maria Cecília S. Q. Araujo13

Orientações para a Etapa 1 4. Para cada categoria, deverão ser definidas palavras-chave que representem a categoria. 5. As categorias deverão ser criadas utilizando as falas dos participantes. Neste momento, não deverá ser emitido juízo de valor ou feito qualquer tipo de interpretação. Maria Cecília S. Q. Araujo14

OBRIGADA! Universidade de Brasília - UnB Instituto de Psicologia - IP Mestranda: Maria Cecília S. Q. Araujo15