Objectives: This study describes the process of remote assessment in medical education during the COVID-19 lockdown and shares data-driven experiences in resolving emerging concerns.
Methods: We analysed the data of end-of-course paper-based exams (PBEs) and web-based exams (WBEs) conducted during the academic year 2019/2020. Twelve end-of-block exams were included. There were four exams each for the first-, second-, and third-year students. Eight exams were conducted as PBEs, and four were administered as WBEs. We compared the mean scores of PBEs and WBEs between exams and batches. Additionally, we compared the PBE and WBE scores obtained by 10 high-performance and 10 lowest-achieving students.
Results: Variations were found in the scores of students from each of the three batches in PBEs or WBEs. In a few instances, the difference was statistically significant. No specific trend or pattern was detected in the difference between the scores of PBEs and WBEs. The mean score for the WBEs was intermediate among the means of PBEs for the first- and second-year students, but lower for the third-year students. Individual students' marks in different exams consistently showed a positive correlation. The correlation was always high for PBEs (r = 0.782, 0.847).
Conclusion: The present study showed that average and individual scores in WBEs and PBEs are comparable. Although there were some variations between the results of the two assessment modalities, no remarkable trend or pattern was observed. WBEs offer an ideal approach for formative assessment, progress testing, and the low-weight, but frequent, nature of continuous assessment.
أهداف البحث: تصف هذه الورقة عملية تقييم الطلبة عن بعد في التعليم الطبي أثناء فترة الحظر في جائحة كوفيد-١٩، وتشارك الخبرات المستندة إلى البيانات في حل المشكلات الناشئة عن ذلك.
طرق البحث: قمنا بتحليل بيانات الاختبارات الورقية النهائية والاختبارات المستندة على الويب، التي أجريت على مدار العام الدراسي ٢٠١٩/٢٠٢٠. وتم تضمين اثني عشر اختبارا، أربعة اختبارات لكل مستوى دراسي، من السنة الأولى وحتى الثالثة. منها ثمانية اختبارات كانت ورقية، وأربعة اختبارات مستندة على الويب. قارنا متوسط درجات كل نوع من الاختبارات، وبين الاختبارات والمستوى الدراسي. بالإضافة إلى ذلك، قمنا بمقارنة درجات الاختبارين الورقي والمستند على الويب التي حصل عليها الطلاب العشرة الأوائل والعشرة الطلاب الأدنى تحصيلا.
النتائج: تم العثور على اختلافات في درجات الطلاب من كل دفعة من المجموعات الثلاث في الاختبارات المختلفة، سواء كانت ورقية أو مستندة على الويب. في بعض الحالات، كان الفرق ذا دلالة إحصائية. ولم يتم العثور على اتجاه / نمط محدد للاختلاف بين الدرجات في أي نوع من الاختبارات. كما كان متوسط الدرجات في الاختبارات المستندة على الويب وسطا بين المتوسطات الحسابية لطلاب السنة الأولى والثانية، ولكن أقل بالنسبة لطلاب السنة الثالثة. وأظهرت علامات الطلاب الفردية في الاختبارات المختلفة ارتباطا إيجابيا. وكان معامل الارتباط للاختبارات الورقية مرتفعا دائما.
الاستنتاجات: كشفت الدراسة الحالية عن عدم وجود فرق ملحوظ في نتائج الاختبارات الورقية والمستندة على الويب، سواء في متوسط الفصل أو لنتائج الطلاب الفرديين. على الرغم من وجود بعض الاختلافات بين نتائج نهجي التقييم، لم يكن هناك اتجاه ملحوظ.. ستوفر الاختبارات المستندة على الويب نهجا مثاليا للتقييم التكويني، والاختبار التحصيلي، والتقييم المتواصل.
Keywords: Assessment; COVID-19; Paper-based exam; Scores; Web-based exam.
© 2021 The Authors.