Avaliação do treinamento de multiplicadores do Programa Vida Ativa Melhorando a Saúde - VAMOS

Abstract

O presente estudo objetivou avaliar o treinamento Online para capacitação e certificação de multiplicadores do programa Vida Ativa Melhorando a Saúde (VAMOS). O VAMOS é um programa de promoção à saúde que motiva as pessoas a seguirem um estilo de vida saudável com relação à atividade física e alimentação, utilizando técnicas de mudanças de comportamento com base na Teoria Sócio Cognitiva. Trata-se de uma pesquisa de natureza aplicada e de caráter descritivo que constou de duas etapas. Na etapa 1, o treinamento foi avaliado quanto a pertinência e adequação dos seus objetivos e conteúdos por seis especialistas nas áreas de atividade física, alimentação e programas de mudança de comportamento e coletado registros de observações e sugestões para a melhoria do treinamento. Na segunda etapa foi avaliada a efetividade do treinamento nas dimensões de aprendizagem e reação, adaptadas do Modelo Integrado de Avaliação do Impacto do Treinamento no Trabalho (IMPACT), com aplicação de 3 questionários nos momentos pré, durante e pós realização do treinamento. Também foram coletados dados secundários gerados pela plataforma Moodle, contendo informações sobre padrões de acesso como: periodicidade, estimativa de tempo e nota da avaliação de certificação. Ainda na etapa 2 foram coletados dados sobre a percepção de competências adquiridas, observações e sugestões para a melhoria do treinamento. A etapa 1 evidenciou uma alta adequação dos objetivos e conteúdos do treinamento recebendo, respectivamente, 92,8% e 81,6% das avaliações entre ?adequado? e ?muito adequado?. Os especialistas fizeram 98 observações sobre o treinamento, destas 64,3% se referiam a sugestões de melhorias no conteúdo e 20,4% nos procedimentos instrucionais. As sugestões dos especialistas foram incorporadas ao treinamento antes do início da etapa 2 da pesquisa. Participaram da etapa 2, 125 treinandos as variáveis sexo, conhecer o VAMOS e o cargo, se associaram à aprovação e certificação do treinamento (p=0,015, p=0,050 e p=0,029 respectivamente). As escalas de reação por sessão, mostraram uma alta satisfação dos participantes com 85,5% das avaliações entre 7,1 a 10. As escalas de reação ao conjunto do treinamento revelaram grande satisfação com os procedimentos instrucionais (média 8,96e DP= 1,387), com a interface gráfica (média 9,0 e DP= 1,294), com o ambiente de estudo e procedimentos de interação (média 8,45 e DP= 2,140) e com os resultados (média 9,05 e DP= 1,225). Os registros de sugestões e observações somaram 127 ocorrências, destas 43% foram destaques de pontos positivos, 8% de pontos negativos e 44% de sugestões de mudanças. Na avaliação da aprendizagem, houve diferença estatisticamente significante entre o pré e pós-teste (p= 0,001) com ganho médio de acertos de 21,5%. Este fato evidenciou a eficácia do treinamento para o ganho de conhecimento, confirmado com os registros dos participantes sobre a percepção de ganho de competências (204 ocorrências). Houve associação estatisticamente significante com as variáveis: dias de acesso, tempo estimado de acesso e visualização das sessões com a nota mínima de 8,0 no pós-teste (p= 0,034, p= 0,010 e p= 0,031 respectivamente). Com base nesses resultados, concluímos que o treinamento para multiplicadores do programa VAMOS tem potencial para a capacitação e certificação de profissionais, mas ainda julgamos que são necessários alguns ajustes no treinamento, bem como ampliar a metodologia de avaliação incluindo medidas de retenção de aprendizagem e de impacto em profundidade e amplitude.

Abstract : The purpose of this study was to evaluate the e-learning training for qualification and certification of multipliers of the Vida Ativa Melhorando a Saúde (VAMOS) program. VAMOS is a health promotion program that motivates people to follow a healthy lifestyle with regard to physical activity and eating, using techniques of behavior change based on the Social Cognitive Theory. It is a research of an applied and descriptive nature that consisted of two stages. In stage 1, the training was evaluated as to the pertinence and adequacy of its objectives and contents by six specialists in the areas of physical activity, feeding and behavior change programs and collected records of observations and suggestions for improvement of the training. The second stage evaluated the effectiveness of the training in the dimensions of learning and reaction, adapted from the Integrated Model of Impact Evaluation of Work Training (IMPACT), with the application of three questionnaires at the moments before, during and after the training. Secondary data generated by the Moodle platform were also collected, containing information on access patterns such as: periodicity, time estimation and certification assessment score. Also in stage 2 data were collected on the perception of acquired skills, observations and suggestions for the improvement of the training. Stage 1 showed a high adequacy of training objectives and contents, receiving, respectively, 92.8% and 81.6% of the evaluations between "adequate" and "very adequate". The experts made 98 observations, of which 64.3% referred to suggestions for improvements in content and 20.4% in instructional procedures. The experts' suggestions were incorporated into the training prior to the start of the stage 2 of the survey. Participants in the stage 2 were, 125 trainees, the variables gender, to know the VAMOS and role were associated with training approval and certification (p = 0.015, p = 0.050 and p = 0.029 respectively). The reaction scales by sessions showed a high degree of satisfaction among the participants with 85.5% of the evaluations, from 7.1 to 10. The reaction scales to the training set showed great satisfaction with the instructional procedures (mean 8.96 and SD = 1,387), with the graphical interface (mean 9.0 and SD = 1.294), with the study environment and interaction procedures (mean 8.45 and SD = 2.140) and with the results (mean 9.05 and SD = 1.225). The records of suggestions and observations totaled 127 occurrences, of these 43% were highlights of positive points, 8% of negative points and 44% of suggestions for changes. In the evaluation of learning, there was a statistically significant difference between the pre and post-test (p=0.001) with an average of 21.5% in the increase of hits. This fact evidenced the effectiveness of the training for the knowledge gain, confirmed with the participants' records on the perception of competence gain (204 occurrences). There was a statistically significant association with the variables: access days, estimated time of access and visualization of the sessions with a minimum score of 8.0 in the post-test (p = 0.034, p = 0.010 and p = 0.031 respectively). Based on these results, we conclude that VAMOS multiplier training has the potential for qualification and certification of professionals, but it is still necessary to adjust training for multipliers in the VAMOS program, as well as to broaden a training evaluation methodology including Measures of learning retention and impact in depth and breadth.