Correlation of the scores on different comprehensive examinations and the Medical Competency Assessment Test for National License: a mixed methods study

Authors

  • Weeratian Tawanwongsri School of Medicine, Walailak University
  • Tharin Phenwan School of Medicine, Walailak University

Keywords:

Comprehensive examination, Thai, National license examination, Correlation, Performance, การสอบประมวลความรู้, ไทย, การสอบประเมินและรับรองความรู้ความสามารถในการประกอบวิชาชีพเวชกรรม, ความสัมพันธ์

Abstract

Introduction: In-house comprehensive examinations for preclinical students from various Thai medical schools were provided. However, their quality has never been evaluated with a score correlation with NLE as the gold standard. This study aimed to assess the correlation of the scores as determined by three different comprehensive examinations and national license examination 1 (NLE step I) and to identify the positive learning strategies.

Method: A mixed methods sequential explanatory study was done to investigate the performances amongst four tests and to identify the potential factors affecting those scores using semi-structured interviews and focus groups with content analysis.

Result: All (n = 48) third-year medical students participated in our study. The majority were females (64.6%). Significantly positive correlations of NLE scores were: test A scores (r = 0.86), test B scores (r = 0.85), and WU test scores (r = 0.78). The highest accuracy index (AI = 0.87) was the WU test, where sensitivity, specificity were 20.0% and 97.1%, respectively. The WU test revealed that it was most helpful in preparing them for the NLE. Students who passed the exam used three study strategies; group study, tutorial sessions, and review by themselves.

 

Discussion and Conclusion: There were strong positive correlations between three different in-house developed comprehensive examinations and NLE. The WU test showed the highest accuracy index to predict the NLE result. Regular review of lessons was emphasized as a cornerstone.

บทคัดย่อ

บทนำ:   เพื่อประเมินความสอดคล้องของคะแนนสอบข้อสอบประมวลความรู้จากโรงเรียนแพทย์สามแห่งเปรียบเทียบกับคะแนนสอบข้อสอบขั้นตอนที่ ๑ ของศูนย์ประเมินและรับรองความรู้ความสามารถในการประกอบวิชาชีพเวชกรรม (ศ.ร.ว.) และระบุวิธีการเตรียมตัวสอบของนักศึกษาแพทย์ที่สอบผ่าน

วิธีการศึกษา:  เป็นการวิจัยแบบผสม ระบุระดับความสัมพันธ์จากค่าสัมประสิทธิ์สหสัมพันธ์ของคะแนนสอบของนักศึกษาแพทย์ (นศพ.) จากชุดข้อสอบทั้งสี่ฉบับ และใช้การสัมภาษณ์เพื่อระบุวิธีการเตรียมตัวสอบของ นศพ. ที่สอบผ่าน

ผลการศึกษา:  นศพ. ชั้นปีที่สาม ๔๘ คน ซึ่งส่วนใหญ่เป็นเพศหญิง (ร้อยละ ๖๔.๖) การวิเคราะห์สหสัมพันธ์ พบว่าคะแนนสอบข้อสอบประมวลความรู้และคะแนนสอบของ ศ.ร.ว. มีความสัมพันธ์แบบตามกันอย่างมีนัยสำคัญทางสถิติ (โรงเรียนแพทย์ ก, r= ๐.๘๖; โรงเรียนแพทย์ ข, r= ๐.๘; และมหาวิทยาลัยวลัยลักษณ์ (มวล.), r= ๐.๗๘) ข้อสอบ มวล. มีความแม่นยำสูงสุดเพื่อพยากรณ์การสอบตกข้อสอบของ ศ.ร.ว. (AI= ๐.๘๗) มีความไวและความเจาะเพาะร้อยละ ๒๐.๐ และร้อยละ ๙๗.๑ ตามลำดับ นักศึกษาแพทย์ที่สอบผ่านเตรียมตัวสอบด้วยการทบทวนแบบกลุ่ม การสอนเพื่อน และทบทวนด้วยตนเอง

วิจารณ์และสรุปผลการศึกษา: คะแนนสอบข้อสอบประมวลความรู้ทั้งสามฉบับและคะแนนสอบข้อสอบ ศ.ร.ว. มีความสัมพันธ์แบบตามกันอย่างมีนัยสำคัญทางสถิติ ข้อสอบ มวล. มีความแม่นยำสูงสุดเพื่อพยากรณ์การสอบตกข้อสอบของ ศ.ร.ว. โดยเตรียมตัวสอบอย่างสม่ำเสมอเป็นสิ่งสำคัญ

 

Downloads

Published

2018-03-27

Issue

Section

Original Articles