Evaluation of Multiple Choice Questions ( MCQ) Exams at
Faculty of Medicine
Journal Name:
- Tıp Eğitimi Dünyası Dergisi
Keywords (Original Language):
| Author Name | University of Author | Faculty of Author |
|---|---|---|
Abstract (2. Language):
Background: MCQ’s are often preferred due to
ease of application and analysis, high content
validity, and objectivity. But, skill required for
preparing of multiple choice questions (MCQ).
In this study we determined the difficulty and
discrimination indices as well as classify
based on Modify Bloom’s Taxonomy (BT), by
analyzing the multiple choice questions present
in the examinations held at Ataturk University
Medical Faculty. In addition, we classified
the MCQ difficulty and discimination indices
between those received training course and not.
Methods: Randomly chosen from ten different
committee exams and final exams of 945
questions analyzed. Levels were determined
according to the Bloom Taxonomy and were
performed difficulty of the questions and
discrimination indexes. Data were expressed
as the number, percentages, mean and standard
deviation (SD). Continuous data normality
determined by Kolmogorov-Smirnov test.
Data Analyzed using chi-Square and t, oneway
analysis of variance test. Post Hoc pairwise
comparisons were performed using LSD
multiple comparisons.
Results: The good quality questions were 44.1%
(n= 416). Discrimination index of questions
given to Associate professors were higher and
easier than compare to Assistant professors
and Professors. We assessed difficulty and
discrimination index according to the BT
level. Greater number of questions were in
level of recall and comprehension. Apparently
there was no difference in average index of
difficulty level in statistically the discrimination
index of questions found statistically higher in
comprehension and evaluation levels (p=0,021).
The difficulty level were found lower in who
have received of training course when compared
to the group who have not received course.
Meanwhile there was no difference questions of
discrimination index in these groups.
Conclusions: Quality of questions can be
improved by informing faculty members of
the post-exam analysis of exam questions.
It is therefore imperative that instructors be
educated on preparing exam questions.
Bookmark/Search this post with
Abstract (Original Language):
Amaç: Tıp eğitiminde çoktan seçmeli sorular, yüksek kapsam geçerliliği olması, objektifliği,
uygulama ve analizinin kolaylığı nedeniyle sık tercih edilir. Ancak, çoktan seçmeli soru hazırlamak
ustalık gerektirir. Bu çalışmada Atatürk Üniversitesi Tıp Fakültesi’nde
sınavlarda sorulmuş çoktan seçmeli soruların analizinin yapılması
(zorluk ve ayırıcılık indeksi) ve Modifiye Bloom Taksonomisi temel
alınarak düzeylerinin belirlenmesi amaçlanmıştır. Ayrıca eğitici eğitimi
alan ve almayanların soruları, indeks değerlerine göre sınıflandırılmıştır.
Gereç ve Yöntem: Kurul ve final sınavlarından rastgele yöntemle
on ayrı sınavdan seçilen 945 soru çalışmaya alındı. Modifiye Bloom
Taksonomisine göre düzeyleri belirlendi. Soruların zorluk ve ayırıcılık
analizleri yapıldı. Veriler, sayı, yüzde, ortalama ve standart sapma
olarak verildi. Sürekli verilerin normallik dağılımı Kolmogorov Smirnov ile test edildi. Verilerin
analizinde Ki-kare, bağımsız gruplarda t testi ve tek yönlü ANOVA kullanıldı. Çoklu karşılaştırma
Post Hoc LSD testi kullanıldı.
Bulgular: İyi ve çok iyi kalitedeki soru oranı toplam %44,1 (n= 416) idi. Doçentlerin hazırladığı
sorular yardımcı doçent ve profesörlere göre ayırıcılık indeksi daha yüksek ancak daha kolaydı.
Modifiye Bloom Taksonomisine göre soruların büyük bir kısmı hatırlama ve anlama düzeyindeydi.
Soruların düzeye göre zorluğunda fark yokken anlama ve değerlendirme düzeylerindeki sorular daha
ayırıcı bulundu (p=0,021). Öğretim üyelerinin eğitici eğitimi alıp almamaları karşılaştırıldığında
eğitim alanların soruları daha kolaydı ve ayrıcılıklarında istatistiksel olarak fark bulunmadı (p>0,05).
Sonuç: Sınavlardan sonra madde analizlerinin yapılarak öğretim üyelerine bildirilmesi ile soru
kalitesinin arttırılması sağlanabilir. Eğiticilerin soru hazırlama için eğitim almaları önemlidir.
FULL TEXT (PDF):
- 44