Ensino de reanimação neonatal para acadêmicos de medicina com simulação e debriefing audiovisual : uma proposta de inovação

Abstract

Introdução: O ensino do atendimento de recém-nascidos (RNs) em sala de parto oferecido no currículo formal parece ser insuficiente para alunos de graduação em Medicina no Brasil. Não há consenso sobre o melhor método de ensino de reanimação de RNs, mas a simulação com debriefing audiovisual pode ser uma proposta inovadora. Simulações permitem que educadores desenvolvam treinamento individualizado para cada aluno e requer ferramentas específicas para ajustar a pontuação à relevância de cada componente. Este é um processo longo e dispendioso que muitas vezes torna impraticável a realização de pesquisas. Objetivo: Avaliar o aprendizado e a satisfação de estudantes de Medicina, com treinamento do atendimento de RNs de baixo risco em sala de parto através de aula teórica, simulação e debriefing audiovisual. Além disso, apresentar uma metodologia para a adaptação e validação de uma ferramenta de avaliação, aplicando o Diagrama de Mudge para customizar a avaliação em ressuscitação neonatal. Métodos: Estudo prospectivo, não-randomizado, cegado, controlado com avaliação em simulação de atendimento em sala de parto, pré e pós-debriefing audiovisual para alunos da graduação em Medicina no estágio de neonatologia. As simulações foram realizadas com câmera sobre o berço aquecido, permitindo avaliação da qualidade das manobras em cenário padronizado. As avaliações foram realizadas por dois observadores independentes, cegados, utilizando ferramenta objetiva adaptada (escore entre 0-100%), chamada de ferramenta 1. Após a primeira análise, com todos os itens com o mesmo peso (ferramenta 1), foi aplicada uma lista ponderada com base no Diagrama de Mudge (ferramenta 2). Em ambas comparações a mudança de desempenho dos alunos de pré para pósdebriefing foi analisada através de modelagem de dados correlacionados com equações de estimativa generalizada (GEE). A validação das ferramentas 1 e 2 baseou-se na correlação linear e no Método Bland-Altman considerando correlações e concordância inter e intra-avaliador. O estudo foi aprovado pelo Comitê de Ética em Pesquisa da Instituição. Resultados: Foram incluídos no estudo 73 alunos que apresentaram pontuação média de desempenho de 66,3% e 79,7%, pré e pós-debriefing, respectivamente, (p <0,001), com a ferramenta 1. Ao analisar cada item da ferramenta de avaliação, a ventilação no primeiro minuto de vida apresentou a melhora mais significativa. Ao aplicar o Diagrama de Mudge, gerando a ferramenta 2, a pontuação média de desempenho de 64% e 77,6%, pré e pós-debriefing, respectivamente, (p <0,001). Com essa metodologia, a participação das manobras de ventilação foi maior pelos pesos atribuídos, especialmente a melhora dos alunos na realização da ventilação no primeiro minuto de vida. Durante a validação das 2 ferramentas, as correlações e as concordâncias inter e intra-avaliadores foram boas. A avaliação da satisfação mostrou que as aulas, as simulações e os debriefings foram considerados bons ou excelentes por 100% dos alunos. Quando questionados sobre o seu desempenho ao atenderem recém-nascidos de baixo risco e que necessitem de ventilação com pressão positiva, 93% e 90% dos alunos, respectivamente, consideraram ter atingido os objetivos com sucesso. Conclusão: A estrutura de ensino testada foi bem avaliada pelos participantes e mostrou-se exequível no ambiente da graduação médica, com ótimos resultados no desempenho, principalmente para a ventilação no Minuto de Ouro. Além disso, uma ferramenta de avaliação confiável, adaptada e qualificada com o Diagrama de Mudge para este estudo e intervenção foi realizada com sucesso. A amplificação de itens relevantes pode revelar os pontos mais fortes e fracos de cada aluno.

Introduction: The teaching of newborn care in delivery room offered in the formal curriculum seems insufficient for undergraduate medical students in Brazil. There is no consensus on the best teaching method for newborn resuscitation, but simulation with audiovisual debriefing may be an innovative proposal. Simulations allow educators develop student-focused training and requires specific tools to adjust scoring to the relevance of each component. This is a lengthy and costly process often rendering research impractical. Aim: Assess students learning and satisfaction regarding delivery-room, low-risk, neonatal resuscitation training through theory lesson, simulation and audiovisual debriefing. This study also presents a methodology for balancing and validating an evaluation tool, applying Mudge’s Diagram for customizing items valuation for neonatal resuscitation. Methods: Blind, non-randomized, controlled prospective study including delivery-room simulation, and pre- and post-audiovisual debriefing with medical students attending neonatal rotation. Simulations were recorded with a camera located above the heated crib, allowing maneuvers assessment in a standardized environment. Evaluations were carried out by two independent blind evaluators utilizing an adapted objective tool (scoring from 0 to 100%), tool 1. After the first analysis considered items with the same weight (tool 1), we applied the weighted list based on Mudge’s Diagram (tool 2). Students' performance change from pre- to post-debriefing were analyzed through correlated data modeling and Generalized Estimating Equations (GEE). Tool 1 and 2 validations was based on linear correlation and the Bland-Altman Method considering both inter- and intra-evaluator correlations and agreements. The study was approved by the Institution’s Research Ethics Committee. Results: 73 students were included in the study and presented mean performance scores of 66.3% and 79.7%, pre- and post-debriefing respectively, (p<0.001), with assessment tool 1. When analyzing each item on the evaluation tool 1, first-life-minute ventilation had the most significant improvement. When applying the Mudge Diagram, generating tool 2, the average performance score of 64% and 77.6%, pre- and post-debriefing, respectively, (p <0.001). In this the participation of the ventilation maneuvers was greater by the assigned weights. Especially, students’ improvement in performing the ventilation in the first minute of life. During the two tools validation, the inter- and intraevaluator correlations remained the same, as Bland-Altman analysis demonstrates good agreement also. The satisfaction assessment showed that the theory lessons, simulations and debriefings were considered good or excellent by 100% of students. When questioned about their performance while responding to a normal and a PPV neonatal resuscitation, 93% and 90% of the students, respectively, considered they had successfully met the objectives. Conclusion: This teaching structure was well reviewed by the participants and proved itself to be a practical method for the medical school environment with excellent performance results, especially regarding the golden-minute ventilation. A reliable and qualified adaptation of assessment tool 2 with Mudge’s Diagram for different realities and interventions can be accomplished successfully. The amplification of relevant items may reveal the strongest and the weakest points.