The influence of prompts on final year medical students' learning process and achievement in ECG interpretation

GMS J Med Educ. 2020 Feb 17;37(1):Doc11. doi: 10.3205/zma001304. eCollection 2020.

Abstract

Objective: ECG interpretation is prone to errors that can lead to relevant misdiagnoses and incorrect treatment. Prompts are one way in lectures to encourage learning from one's own mistakes and to reduce error rates. Prompts are measures such as questions, hints, and suggestions of content-related or metacognitive nature, which can lead to self-explanation in the learner and thus to a deeper understanding of an issue. The aim of the study was therefore to investigate whether the use of prompts can reduce the error rate in ECG interpretation among students. Method: In a 2x2 experimental test and control group design, N=100 final year medical students carried out ECG interpretation tasks in the form of online case vignettes in CASUS®. In these tasks, justification prompts (B) and error analysis prompts (F) were systematically varied in four groups and the learning success was measured using a knowledge test. In addition, prior knowledge in ECG interpretation, motivation, interest in the topic, subjective confidence in ECG interpretation, and cognitive load was collected. Results: Neither error analysis prompts nor justification prompts had a significant effect on the correct ECG interpretation by students, F(1,96)=1.03, p=.31. Justification prompts seemed to have a positive effect on the confidence of answering the questions, F(1,96)=10.15, p=.002, partial η2 =.10; and a negative effect on student motivation, F(1,96)=8.13 , p=.005, partial η2 =.08; but both with comparable diagnostic accuracy. Conclusion: The present study could not confirm the positive effects of prompts on the error rate in ECG interpretation reported in the literature but showed significant effects on subjective confidence and motivation which should be investigated in further studies.

Zielsetzung: Die EKG-Befundung ist anfällig für Fehler, welche zu relevanten Fehldiagnosen und falschen Therapien führen können. Eine Möglichkeit, das Lernen aus eigenen Fehlern und die Reduktion der Fehlerrate im Rahmen von Lehrveranstaltungen zu fördern, sind Prompts. Prompts sind Maßnahmen, wie Fragen, Hinweise und Anregungen inhaltlicher oder metakognitiver Natur, die zur Selbsterklärung beim Lernenden und damit zu tieferem Verständnis eines Sachverhaltes führen können. Das Ziel der Studie war es daher, zu untersuchen, ob der Einsatz von Prompts die Fehlerrate Studierender bei der EKG-Befundung reduzieren kann.Methodik: In einem 2x2 experimentellen Versuchs-Kontrollgruppen Design bearbeiteten N=100 Medizinstudierende mit PJ-Reife Online-Fallvignetten in CASUS® mit EKG-Befundungsaufgaben. Dabei wurden Begründungsprompts (B) und Fehleranalyseprompts (F) in vier Gruppen systematisch variiert sowie der Lernerfolg in einem Wissenstest gemessen. Zusätzlich wurde das Vorwissen zur EKG- Befundung, Motivation, Interesse an der Thematik, subjektive Sicherheit bei der Befundung und Cognitive Load erhoben.Ergebnisse: Weder Fehleranalyseprompts noch Begründungsprompts hatten einen signifikanten Effekt auf die korrekte EKG-Befundung Studierender, F(1,96)=1.03, p=.31. Begründungsprompts schienen sich positiv auf die Sicherheit bei der Beantwortung der Aufgaben auszuwirken, F(1,96)=10.15, p=.002, partielles η2 =.10, und negativ auf die Motivation der Studierenden, F(1,96)=8.13, p=.005, partielles η2 =.08, beides jedoch bei vergleichbarer Befundungsrichtigkeit.Schlussfolgerung: Die vorliegende Studie konnte in der Literatur berichtete positive Effekte von Prompts auf die Fehlerrate bei der EKG-Befundung nicht bestätigen, zeigte jedoch signifikante Effekte auf die subjektive Sicherheit bei der Beantwortung und die Motivation, die es in weiterführenden Studien zu untersuchen gilt.

Keywords: ECG; ECG interpretation; computer-supported learning; error analysis prompts; justification prompts; prompts.

MeSH terms

  • Adult
  • Clinical Competence / standards
  • Clinical Competence / statistics & numerical data
  • Education, Medical, Undergraduate / methods
  • Education, Medical, Undergraduate / standards
  • Electrocardiography / methods*
  • Electrocardiography / standards
  • Electrocardiography / statistics & numerical data
  • Female
  • Humans
  • Learning*
  • Male
  • Motivation
  • Students, Medical / psychology*
  • Students, Medical / statistics & numerical data
  • Surveys and Questionnaires