Avaliação do impacto da usabilidade técnica e pedagógica no desempenho de aprendizes em e-learning

Abstract

O objetivo principal deste estudo é o de verificar se condições adequadas de usabilidade técnica e pedagógica interferem nos desempenhos das aprendizagens de alunos em e-learning. Para tanto, são propostos comparativos em duas condições distintas de experimentos. Em um experimento, os alunos interagem com um material de aprendizagem que não utiliza condições de usabilidade técnica e pedagógica; e em outro experimento, interagem com um material de aprendizagem que apresenta condições adequadas de usabilidade técnica e pedagógica implementadas. Na aplicação dos experimentos propostos pela metodologia, os alunos interagem com o material de aprendizagem, respondem ao teste de desempenho, e em seguida avaliam a usabilidade técnica e pedagógica através do questionário de avaliação da usabilidade. Este estudo proporciona uma base de questões de usabilidade técnica e pedagógica conforme categorias de usabilidade e critérios específicos para materiais em e-learning. Também são apresentados os pontos críticos e facilitadores de usabilidade conforme a avaliação dos alunos. No sentido de comprovar se a usabilidade técnica e pedagógica proporciona um desempenho significativo aos alunos em e-learning são analisadas as significâncias das diferenças entre as médias de desempenhos dos alunos entre os dois experimentos, entre as médias de desempenhos considerando-se somente as questões respondidas, a correlação entre a usabilidade e o desempenho, e as questões de usabilidade significativas ao desempenho. Através de tais análises pôde-se concluir por meio dos resultados obtidos que apesar de não ter sido comprovada a significância para todas as análises que abrangeram a avaliação do impacto da usabilidade técnica e pedagógica sobre o desempenho de aprendizes em e-learning, pôde-se comprovar que a usabilidade apresentou uma interferência significativa sobre o desempenho. Outras variáveis, tais como a idade, o gênero, o conhecimento prévio sobre o conteúdo proposto para o experimento e a opinião da importância do conteúdo para a aprendizagem também foram analisadas no sentido de verificar possíveis interferências quanto ao desempenho dos alunos. Verificou-se que as variáveis de gênero e experiência prévia do conteúdo proposto apresentaram interferência significativa sobre o desempenho para os alunos que utilizaram o material de aprendizagem sob condições adequadas de usabilidade técnica e pedagógica.

The main purpose of this study is to verify whether appropriate conditions of technical and pedagogical usability interfere with students' performance in e-learning. Thus, comparisons are made with two distinct types of experiments. In one experiment, the student interacts with a learning material that does not feature any conditions of technical and pedagogical usability; in the other, the student interacts with the learning material with implemented conditions of technical and pedagogical usability. In the process of the experiments suggested by the methodology, the student interacts with the learning material, takes the performance test, and right after assesses the technical and pedagogical usability through the usability evaluation questionnaire. This study provides a basis for technical and pedagogical usability issues regarding categories of usability and specific criteria for e-learning material. Critical points and usability facilitators are also presented based on the students' assessment. Aiming to prove that the technological and pedagogical usability provides a significant performance to e-learning students, we analyzed the significance of the differences among students' performance averages between the two experiments, among performance averages taking into account only answered questions, the correlation between usability and performance, and usability questions significant to the performance. Based on such analyses, one could conclude from the results obtained that, although the significance of all analyses involving the evaluation of the impact of technical and pedagogical usability on performance had not been proven, one could actually prove that usability showed a significant interference with the performance. Other variables, such as age, gender, previous knowledge of the content proposed for the experiment and the opinion on the importance of the content for learning were also analyzed so as to verify possible interferences regarding the students' performance. The variables of gender and previous experience of the proposed content presented a significant interference with the performance of students who utilized the learning material under adequate conditions of technical and pedagogical usability.