Avaliação da Transferência de Treinamento em Curso a Distância Thaís Zerbini Universidade de Brasília Programa de Pós-Graduação em Psicologia (Doutorado) Orientadora Prof. Dr.ª Gardênia Abbad Apoio Financeiro Parcial: CNPq Apresentação Objetivo geral: Propor e testar um modelo de avaliação de treinamento a distância com o objetivo de identificar variáveis preditoras da Transferência de Treinamento. Referencial teórico: Psicologia Instrucional, Organizacional. Organização-alvo: SEBRAE Promover o desenvolvimento sustentável do Brasil por meio do apoio às micro e pequenas empresas. Curso-alvo: IPGN Ensinar a elaborar um Plano de Negócios para pessoas que desejam desenvolver habilidades de empreendedorismo. Ambiente aberto, não corporativo. 2 Justificativa de Pesquisa Desafio do Brasil - promover o desenvolvimento sustentável. Programas de TD&E e de qualificação profissional contribuem para que este desenvolvimento ocorra. Aumento da demanda por ações deste tipo - utilização de NTICs. Necessidade de promover a avaliação da efetividade das ações educacionais ofertadas para um grande número de pessoas. Campo de conhecimento ainda em fase de exploração. Poucos modelos multivariados de avaliação e instrumentos de medida disponíveis na literatura. 3 Estrutura da tese Revisão da Literatura em TD&E Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Etapa 1: Validação dos Instrumentos de Medida Conclusão e Discussão Etapa 2: Relacionamento entre Variáveis 4 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Aprendizagem Induzida Aprendizagem natural x Aprendizagem induzida. Conceitos e características dos processos formais que promovem a aprendizagem induzida no trabalho: Ações de TD&E presenciais e a distância; Formação e qualificação profissional. Teorias instrucionais cognitivistas. Abbad (1999) - teorias de Gagné (1985) e de Bloom e cols. (1972) ajudam na compreensão sobre como o aprendiz adquire competências, o que por sua vez, possibilita o aperfeiçoamento de procedimentos e técnicas instrucionais. 5 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Características da Clientela: Estratégias de Aprendizagem Poucas pesquisas sobre resultados de treinamentos envolvendo variáveis cognitivo-comportamentais. Maior influência nos efeitos do treinamento a distância do que nos presenciais (autogerenciamento da aprendizagem). Definição - Conjunto de capacidades cognitivas complexas aprendidas pelo indivíduo ao longo da vida, o qual envolve capacidades cognitivas, habilidades comportamentais e de auto-controle emocional utilizadas pelo aprendiz para controlar os próprios processos psicológicos de aprendizagem, como atenção, aquisição, memorização e transferência. Questionário: Zerbini, Carvalho e Abbad (2005). 6 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Características da Clientela: Estratégias de Aprendizagem Estratégias Primárias Cognitivas Repetição Elaboração Organização Auto-regulatórias Comportamentais Controle da Emoção Controle da Motivação Monitoramento da Compreensão Ajuda Interpessoal Material Escrito Aplicação Prática Warr e Allan (1998) 7 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Reações Em um sentido ideal, um evento instrucional deveria produzir reações favoráveis nos participantes (Abbad, 1999). Reações aos procedimentos tradicionais: satisfação dos participantes com a qualidade dos objetivos de ensino, conteúdos, seqüência, avaliações de aprendizagem, estratégias e meios. Reação aos recursos web: satisfação dos participantes com a qualidade das ferramentas da web, tais como: links, fóruns, FAQ, mural de notícias virtual, chats. Pesquisas - reações favoráveis estão relacionadas positivamente com transferência de treinamento e impacto de treinamento no trabalho. Questionário: Zerbini e Abbad (2005). 8 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Ambiente de Estudo e Procedimentos de Interação Não se sabe ao certo as razões que levam o aluno a abandonar o treinamento antes de concluí-lo, ou que dificultam sua permanência. Pesquisas na Educação. Definição - Aspectos do contexto pessoal de estudo do aluno e do próprio curso que podem dificultar a permanência no curso a distância. Quadro de referências: “ambiente/ suporte” e “procedimentos” do modelo MAIS (Borges-Andrade, 1982 e 2006); subconjunto do componente “suporte” denominado por Abbad (2006) de “apoio à execução do curso”; reflexões de Brauer (2005). 9 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Transferência de Treinamento Definição - aplicação eficaz, no contexto de trabalho, dos conhecimentos, habilidades e atitudes adquiridos ao longo da ação instrucional. Uso do conceito é mais adequado nesta pesquisa do que o termo Impacto do Treinamento no Trabalho em Profundidade, proposto por Hamblim (1978). Por outro lado, é possível usar o termo impacto do treinamento em profundidade como sinônimo ao falar do instrumento de medida, pois os itens são extraídos diretamente dos objetivos instrucionais do curso. Poucas pesquisas investigam a transferência de treinamento em contexto não corporativo. Questionário: Zerbini e Abbad (2005) e Carvalho e Abbad (2006). 10 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Problemas de Pesquisa 1. Quais são as estratégias de aprendizagem utilizadas pelos participantes que estão relacionadas com a transferência de treinamento em cursos a distância, via internet? 2. Em que medida e como eventuais dificuldades encontradas pelo participante ao longo do curso referentes ao ambiente de estudo e aos procedimentos do curso influenciam a ocorrência de transferência de treinamento? 3. Reações favoráveis dos participantes aos procedimentos instrucionais e ao desempenho do tutor estão relacionadas com transferência de treinamento em cursos desta natureza? 11 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Objetivo Geral Propor e testar um modelo de avaliação de treinamento a distância com o objetivo de identificar variáveis preditoras da Transferência de Treinamento, relacionadas às Características da Clientela, às Reações ao Curso, ao Ambiente de Estudo e aos Procedimentos de Interação do Curso. 12 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Objetivos Específicos – Etapa 1 Construir e validar estatisticamente o instrumento de medida “Ambiente de estudo e Procedimentos de interação”. Construir itens de medida de “Estratégias de aprendizagem autoregulatórias”, com base no instrumento de Warr e Downing (2000), acrescentando-os à escala de “Estratégias de aprendizagem”, validadas por Zerbini, Carvalho e Abbad (2005), para validação estatística do novo instrumento. Revalidar estatisticamente as escalas de: “Reação aos procedimentos instrucionais” de Zerbini e Abbad (2005), “Reação ao desempenho do tutor” de Zerbini (2003) e “Avaliação de impacto em profundidade do curso IPGN”, de Zerbini e Abbad (2005) e Carvalho e Abbad (2006). 13 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Objetivos Específicos – Etapa 2 Identificar variáveis preditoras de transferência de treinamento, medida em termos das respostas dos participantes à escala de freqüência de aplicação dos conhecimentos, habilidades e atitudes adquiridos durante o curso no ambiente de trabalho. Identificar variáveis preditoras de transferência de treinamento, medida em termos da proporção de participantes que elaboraram o plano de negócios. Serão testados, portanto, dois modelos: o Modelo A (escala) e o Modelo B (sim ou não). 14 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Modelo de Investigação 1. AMBIENTE DE ESTUDO E PROCEDIMENTOS 2. ESTRATÉGIAS DE APRENDIZAGEM 4. TRANSFERÊNCIA DE TREINAMENTO 3. REAÇÕES AO CURSO 15 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Modelo de Investigação AMBIENTE E PROCEDIMENTOS ESTRATÉGIAS DE APRENDIZAGEM REAÇÕES AO CURSO Controle da Emoção Contexto de Estudo Custos Pessoais e Profissionais Ferramentas de Interação Busca de Ajuda Interpessoal Repetição e Organização Procedimentos Tradicionais Controle da Motivação Recursos da Web Elaboração Desempenho do Tutor Busca de Ajuda ao Material Didático Monitoramento da Compreensão 16 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão O SEBRAE e o IPGN Objetivo do SEBRAE/ Objetivo do IPGN Público-alvo: pessoas que desejam desenvolver habilidades de empreendedorismo. 100% a distância via internet / Gratuito. 40 horas / 60 dias / 5 módulos seqüenciais - de 2 a 5 capítulos. Tutoria (200 alunos por tutor). Recursos de interação. Exercício de elaboração do plano de negócios ao longo do curso. Correção do plano de negócios não obrigatória. 17 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão População de Inscritos Número Total: 4.719 alunos Concluinte: sim (66%) Gênero: masculino (52,9%) Idade: 31 anos (DP=9,54); mínima 13 anos e máxima 71 anos Escolaridade: 3º. Grau incompleto (33,3%) Região Geográfica: Sudeste (50,6%) Dúvidas no tira-dúvidas: zero (84,2%) Mensagens para a lista de discussão: zero (57,7%) Participação em chats: zero (63,5%) Acesso ao mural de notícias: 1 a 10 vezes (45,2%) Acesso ao ambiente do curso: de 1 a 10 vezes (32,8%) 18 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Amostras – Dados Demográficos Variáveis Concluinte População de Inscritos Etapa 1 Validação de Instrumentos Ambiente e Procedimentos (N=1.602) (N=993) Transferência de Treinamento (N=1.506) EA, RPI e RDT Etapa 2 Análise Multivariada (N=722) 66% 90,7% 94,3% 91,6% 95,2% Sexo Masc (52,9%) Fem (51,2%) Fem (50,7%) Masc (50,3%) Fem (50,3%) Região Sudeste Sudeste Sudeste Sudeste Sudeste Escolaridade 3º. grau incomp. 3º. Grau incomp. 3º. Grau incomp. 3º. Grau incomp. 3º. Grau incomp. 31/ 9,54 32/ 10,32 33/ 10,51 33/ 10,47 33/ 10,88 Idade (Média/ DP) 19 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Amostras – Ferramentas Eletrônicas Variáveis População de Inscritos Etapa 1 Validação de Instrumentos Etapa 2 Análise Ambiente e Procedimentos EA, RPI e RDT Transferência de Treinamento Multivariada No. mensagens para a lista de discussão Zero (57,7%) 1 a 10 (52,9%) 1 a 10 (53,5%) 1 a 10 (53,5%) 1 a 10 (56,5%) No. participação em chats Zero (63,5%) 1 a 13 (54,7%) 1 a 13 (58,3%) 1 a 13 (55%) 1 a 13 (60,2%) No. acessos ao mural 1 a 10 (45,2%) 1 a 10 (56,1%) 1 a 10 (54,6%) 1 a 10 (56,9%) 1 a 10 (55,8%) No. acessos ao ambiente do curso 1 a 10 (32,8%) 11 a 20 (29%) 11 a 20 (28,9%) 11 a 20 (29,7%) 11 a 20 (27,8%) Zero (84,2%) Zero (76,8%) Zero (77,7%) Zero (77,8%) Zero (76,7%) No. dúvidas 20 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Instrumentos e Coleta de Dados Momento 1: Durante o Treinamento Ambiente de Estudo e Procedimentos de Interação Momento 2: Último Dia de Treinamento Estratégias de Aprendizagem Reação aos Procedimentos Instrucionais Reação ao Desempenho do Tutor Momento 3: Após o Treinamento Transferência de Treinamento 21 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Coleta de Dados Coleta por e-mail; Instrumentos digitalizados, hospedados na internet; 23 turmas de, aproximadamente, 200 alunos cada; Grupo A (Fevereiro – 21 turmas)/ Grupo B (Março – 2 turmas); Índice de retorno: 34,64% (Momento 1), 21,48% (Momento 2) e 32,49% (Momento 3); 7 arquivos para melhor aproveitamento dos casos válidos. 22 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Análise de Dados – Etapa 1 Tratamento pairwise para casos omissos (ausentes<5%) Análises exploratórias; Exclusão dos casos extremos uni e multivariados Elaboração da de matriz de covariância; Correlações Pearson - Linearidade Multicolinearidade singularidade (acima de 0.80 e 0.90) Análise da matriz deecovariância (fatorabilidade e número fatores);da amostra deTamanho Tamanho das correlações Extração inicial dos fatores;(50% acima de 0.30) KMO Rotação dos fatores para uma estrutura final; Valores próprios > 1 e scree plot Interpretação dos de fatores; Análise paralela Horn Construção dosmínima escoresde fatoriais; Porcentagem 3% de variância explicada Cargas e fatoriais superiores 0.30 ANOVAS Testes T (mesmosacritérios da etapa 2). Rotação oblíqua Análise dos índices de consistência interna dos itens Análise da interpretabilidade das soluções propostas 23 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Análise de Dados – Etapa 2 Análises exploratórias; Regressão múltipla padrão, stepwise e hierárquica; Regressão Logística. Tratamento pairwise para casos omissos (ausentes < 5%) Excluídos casos extremos uni e multivariados Tamanho da amostra Normalidade (Assimetria e Curtose) Linearidade (Pearson) Multicolinearidade e singularidade (acima de 0.80 e 0.90) 24 Aprendizagem Induzida Análise da Literatura Características Metodológicas Conclusão e Discussão Resultados Resultados Etapa 1 Instrumento Reação aos Procedimentos Instrucionais Escalas Obtidas Procedimentos Tradicionais Recursos da Web Itens Alfa 12 Cargas Fatoriais Min. Max. 0,91 0,53 0,79 3 0,76 0,40 0,88 Reação ao Desempenho do Tutor Desempenho do Tutor 27 0,98 0,69 0,88 Transferência de Treinamento Transferência de Treinamento 24 0,96 0,58 0,80 Contexto de estudo 8 0,85 0,44 0,84 Custos Pessoais e Profissionais 5 0,84 -0,35 -0,95 Ferramentas de interação 5 0,83 -0,31 -0,92 Controle da emoção 5 0,89 0,48 0,91 Busca de ajuda interpessoal 6 0,89 0,66 0,83 Repetição e Organização 5 0,77 -0,35 -0,77 Controle da motivação 4 0,84 0,69 0,86 Elaboração 3 0,83 0,54 0,91 Busca de ajuda ao material didático 2 0,75 0,68 0,82 Monitoramento da compreensão 3 0,82 -0,49 -0,75 Ambiente de Estudo e Procedimentos de Interação Estratégias de Aprendizagem 25 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 1 1. Ambiente de Estudo e Procedimentos de Interação: O instrumento não foi denominado de suporte/apoio: contraditório denominar de apoio aquilo que dificulta e restringe. Participantes não mantêm vínculos empregatícios com a organização que oferta o curso. Não se sabe ao certo qual é o ambiente de estudo do aluno. Recomenda-se revisão dos itens mediante análise de outras áreas do conhecimento. 26 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 1 2. Estratégias de Aprendizagem: Construção de itens de estratégias auto-regulatórias. Maior controle emocional, motivacional e monitoramento da compreensão para persistir no curso. Estratégias cognitivas e comportamentais agrupadas em um único fator não foram obtidos (Zerbini, Carvalho e Abbad, 2005; BorgesFerreira, 2004; De Paula e Silva, 2004). Similaridade com as dimensões teóricas de Warr e Allan (1998) e com a estrutura empírica encontrada por Warr e Downing (2000). Recomenda-se aplicação em outras organizações e em diferentes cursos para revalidação e confecção de estrutura empírica mediante análise fatorial confirmatória. 27 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 1 3. Reação aos Procedimentos Instrucionais: Excluídos quatro itens da versão original. Não foi identificada uma estrutura unidimensional (Zerbini e Abbad, 2005). Dois fatores: Procedimentos Tradicionais e Recursos da Web. Zerbini e Abbad (2005) - terceiro fator “Atividades e Exercícios”. A escolha de atividades e exercícios faz parte das etapas de um planejamento instrucional presentes em eventos instrucionais presenciais e a distância. A estrutura obtida é coerente com os princípios das teorias instrucionais cognitivas. Sugere-se a aplicação em outras organizações e em diferentes cursos para a realização de uma análise fatorial confirmatória. 28 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 1 4. Reação ao Desempenho do Tutor: 25 pares de itens correlacionados entre si. Seis itens foram retirados do instrumento original. Estrutura obtida mais parcimoniosa (27 itens, Alfa=0,98) do que as validadas nos estudos de Zerbini (2003), Zerbini e Abbad (2005), Carvalho e Abbad (2006) e Borges-Ferreira (2004). Recomenda-se aplicação em outras organizações e em diferentes cursos. Realização de análise fatorial confirmatória. 5. Transferência de Treinamento: Dois fatores, além da estrutura unifatorial: Planejamento Estratégico do Negócio e Planejamento Financeiro do Negócio. Sugere-se a realização de análise fatorial confirmatória. 29 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Resultados Etapa 2 – Modelo A (Regressão Múltipla) Variáveis Transf (VD) Proc1 Amb1 Est7 Est5 Proc1 0,55* Amb1 0,39* 0,35* Est7 0,37* 0,27* 0,26* Est5 0,39* 0,49* 0,22* 0,26* B 0,46* 0,14* 0,06* 0,11* 0,38 0,19 0,15 0,12 Sr2 0,10 0,03 0,02 0,01 Constante = 1,51 R2 = 0,39* R2 (ajustado) = 0,38* R = 0,62* *p<0,01 1. Procedimentos Tradicionais 2. Contexto de estudo em EaD 3. Monitoramento da Compreensão 5. Transferência de Treinamento 4. Elaboração 30 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 2 – Modelo A Reação aos Procedimentos Tradicionais - apresenta sozinho, maior contribuição na predição de transferência de treinamento do que a medida conjunta de Zerbini e Abbad (2005). Reação aos Recursos da Web - alunos não utilizaram os recursos com freqüência. Abbad (1999), Sallorenzo (2000), Abbad, Gama e Borges-Andrade (2000), Lacerda e Abbad (2003) e Pilati (2004) - reações favoráveis ao curso estão associadas positivamente com impacto de treinamento no trabalho. Reação ao Desempenho do Tutor - baixa freqüência de participação dos indivíduos no recurso “tira-dúvidas”. 31 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 2 – Modelo A Contexto de Estudo em EaD - resultado semelhante ao de Zerbini e Abbad (2005) e Carvalho e Abbad (2006). Em ambiente não corporativo, em especial, no IPGN, aumentar a percepção que o ambiente é desfavorável aumentaria o mérito daquele indivíduo que o enfrentasse como um desafio. Não foram identificados na literatura estudos que relacionassem aspectos do ambiente de estudo do aluno em EaD com transferência de treinamento. Há necessidade de pesquisas que investiguem outros aspectos presentes no ambiente de transferência do aluno que participa de cursos a distância não corporativos. 32 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 2 – Modelo A Monitoramento da Compreensão – possibilidade de auto-avaliar o processo de aquisição de aprendizagem ao longo do curso. Elaboração – para elaborar um plano de negócio inovador e criativo, é preciso relacionar o conteúdo aprendido no curso com suas experiências e seus conhecimentos já existentes sobre o assunto. Controle da Emoção e da Motivação - indivíduos estão acostumados a utilizar estratégias cognitivas. Estratégias comportamentais - baixa freqüência de uso. Repetição e Organização - são mais utilizadas quando as atividades a serem realizadas necessitam de retenção de informações. Maior poder explicativo de variáveis individuais sobre resultados de treinamentos, em comparação com modelos de avaliação de treinamentos presenciais. 33 Aprendizagem Induzida Análise da Literatura Características Metodológicas Conclusão e Discussão Resultados Resultados Etapa 2 – Modelo B (Regressão Logística) Predito Observado Elaborou Não Elaborou Percentual Correto Elaborou 85 50 63,0% Não Elaborou 53 81 60,4% Total 61,7% N=269 (valores omissos=3) Variáveis B Sig. Exp(B) 0,15 0,07 1,17 Inter3 -0,22* 0,01 0,80 Est2 -0,14* 0,01 0,87 Amb2 Constante = 0,84; Cox & Snell R2 = 0,08 *p < 0,05 -2LL = 351,213 Nagelkerke R2 = 0,10 1. Ferramentas de Interação 2. Busca de Ajuda Interpessoal 3. Elaboração de um plano de negócios 34 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Discussão Etapa 2 – Modelo B A estratégia do SEBRAE em incentivar a elaboração do plano ao longo dos módulos com o auxílio do tutor por meio das ferramentas de interação é eficaz. Medida dicotômica. Não existem medidas objetivas fornecidas pelo gerenciador. Baixo poder de explicação. Alternativa para a medida dicotômica: Identificação de indicadores que mensurem de modo mais preciso o esforço do indivíduo e os aspectos que caracterizam um plano de negócios de qualidade na literatura de empreendedorismo, inovação e criatividade. 35 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Conclusão Contribuições Escala de “Ambiente de Estudo e Procedimentos de Interação”; Itens de Estratégias regulatórias; Revalidação das escalas “Reação aos Procedimentos Instrucionais”, “Reação ao Desempenho do Tutor” e “Transferência de Treinamento” - estruturas mais parcimoniosas e fidedignas; Revisão de literatura de avaliação de treinamento a distância em Psicologia Instrucional e Organizacional; Aprimoramento da estratégia de coleta de dados. de Aprendizagem Auto- 36 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Conclusão Limitações Baixo índice de devolução dos questionários no momento 2 de coleta de dados; E-mail não é um dado estável do participante, e erros mínimos de digitação prejudicam o pareamento; Ausência de pré e pós-testes de estratégias de aprendizagem; Falta de informações fidedignas sobre a elaboração do plano de negócios; Não realização de análises confirmatórias nas estruturas empíricas de “Reação aos Procedimentos Instrucionais”, “Reação ao Desempenho do Tutor” e “Transferência de Treinamento”; 37 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Conclusão Limitações Impossibilidade de generalizar os resultados encontrados na presente pesquisa para outros contextos e participantes; Imprecisão na definição do construto “Ambiente de Estudo”; Utilização de pequeno referencial teórico da área da Educação, em especial, de pesquisas realizadas em Educação a Distância; Ausência de avaliação dos efeitos do curso IPGN a longo prazo; Ausência de informações objetivas sobre quantos e quais eram os ambientes de transferência do egresso do IPGN; Uso de apenas uma fonte de informação: o participante do curso IPGN. 38 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Conclusão Implicações Práticas Desenvolvimento de uma cultura de avaliação dos efeitos de cursos a distância nas organizações de trabalho e instituições de ensino. Incentivo aos planejadores instrucionais a elaborarem objetivos de aprendizagem mais complexos. Poucas organizações oferecem cursos que desenvolvem habilidades complexas, dificultando o desenvolvimento de pesquisas e conseqüente aprimoramento de metodologia de avaliação. Implicações Teóricas Estudos e pesquisas em Educação, Empreendedorismo e Inovação precisam ser consideradas nos estudos dos efeitos de treinamentos, principalmente aqueles que ocorrem em contexto não corporativo. 39 Aprendizagem Induzida Análise da Literatura Características Metodológicas Resultados Conclusão e Discussão Agenda de Pesquisa Aprimorar procedimentos de coleta de dados pela internet; Revisar o conceito de “Ambiente de Estudo” e aprimorar o instrumento de “Ambiente de Estudo e Procedimentos de Interação”; Identificar aspectos que explicam a evasão em cursos a distância; Analisar o relacionamento entre “Características da Clientela” e “Reação”, “Aprendizagem” e “Efetividade de Treinamento”; Realizar análises confirmatórias das estruturas empíricas; Testar por meio de MEE, diferentes relacionamentos entre variáveis, incluindo relação de mediação e moderação; Utilizar outros modelos de avaliação para completar o quadro de referências do MAIS, no caso de pesquisas que envolvem cursos não corporativos. 40 Fim da Apresentação Thaís Zerbini Universidade de Brasília Programa de Pós-Graduação em Psicologia (Doutorado) Orientadora Prof. Dr.ª Gardênia Abbad Apoio Financeiro Parcial: CNPq