Avaliação de um chatbot no contexto educacional : um relato de experiência com Metis

Abstract

Este artigo relata o experimento de uso do chatbot Metis como apoio às atividades de educação a distância. Apresenta-se relatos sobre o desenvolvimento de chatbot educacional Metis (Mediadora de Educação em Tecnologia Informática e Socializadora )e sobre a estratégia pedagógica de alimentação da base de conhecimento do chatbot, com a participação dos alunos. Descreve-se a avaliação do chatbot sobum viés pedagógico que envolveu a análise das interações e a construção de cinco categorias, construídas a partir de questionário on line. Os resultados mostraram que mesmo em fase inicial de implementação, a agente Metis alcançou resultados satisfatórios quanto à eficiência de diálogo e influência no engajamento dos alunos, na turma investigada.

This article reports on the experiment of using the Metis chatbot as a support for distance education activities. There are reports on the development of educational chatbotMetis (Education and Information Technology and Socialization Technology) and on the pedagogical strategy of feeding the chatbot knowledge base, with the participation of the students. We describe the chatbot evaluation under a pedagogical bias that involved the analysis of the interactions and the construction of five categories, constructed from an online questionnaire. The results showed that even in the initial phase of implementation, the agent Metis achieved satisfactory results regarding the efficiency of dialogue and influence in the students' engagement in the group investigated.