Amaç: Tıp eğitiminde çoktan seçmeli sorular, yüksek kapsam geçerliliği olması, objektifliği, uygulama ve analizinin kolaylığı nedeniyle sık tercih edilir. Ancak, çoktan seçmeli soru hazırlamak ustalık gerektirir. Bu çalışmada Atatürk Üniversitesi Tıp Fakültesi’nde sınavlarda sorulmuş çoktan seçmeli soruların analizinin yapılması (zorluk ve ayırıcılık indeksi) ve Modifiye Bloom Taksonomisi temel alınarak düzeylerinin belirlenmesi amaçlanmıştır. Ayrıca eğitici eğitimi alan ve almayanların soruları, indeks değerlerine göre sınıflandırılmıştır.
Gereç-Yöntem: Kurul ve final sınavlarından rastgele yöntemle on ayrı sınavdan seçilen 945 soru çalışmaya alındı. Modifiye Bloom Taksonomisine göre düzeyleri belirlendi. Soruların zorluk ve ayırıcılık analizleri yapıldı. Veriler, sayı, yüzde, ortalama ve standart sapma olarak verildi. Sürekli verilerin normallik dağılımı Kolmogorov Smirnov ile test edildi. Verilerin analizinde Ki-kare, bağımsız gruplarda t testi ve tek yönlü ANOVA kullanıldı. Çoklu karşılaştırma Post Hoc LSD testi kullanıldı.
Bulgular: İyi ve çok iyi kalitedeki soru oranı toplam %44,1 (n= 416) idi. Doçentlerin hazırladığı sorular yardımcı doçent ve profesörlere göre ayırıcılık indeksi daha yüksek ancak daha kolaydı. Modifiye Bloom Taksonomisine göre soruların büyük bir kısmı hatırlama ve anlama düzeyindeydi. Soruların düzeye göre zorluğunda fark yokken anlama ve değerlendirme düzeylerindeki sorular daha ayırıcı bulundu (p=0,021). Öğretim üyelerinin eğitici eğitimi alıp almamaları karşılaştırıldığında eğitim alanların soruları daha kolaydı ve ayrıcılıklarında istatistiksel olarak fark bulunmadı (p>0,05).
Sonuç: Sınavlardan sonra madde analizlerinin yapılarak öğretim üyelerine bildirilmesi ile soru kalitesinin arttırılması sağlanabilir. Eğiticilerin soru hazırlama için eğitim almaları önemlidir.
Background: MCQ’s are often preferred due to ease of application and analysis, high content validity, and objectivity. But, skill required for preparing of multiple choice questions (MCQ). In this study we determined the difficulty and discrimination indices as well as classify based on Modify Bloom’s Taxonomy (BT), by analyzing the multiple choice questions present in the examinations held at Ataturk University Medical Faculty. In addition, we classified the MCQ difficulty and discimination indices between those received training course and not.
Methods: Randomly chosen from ten different committee exams and final exams of 945 questions analyzed. Levels were determined according to the Bloom Taxonomy and were performed difficulty of the questions and discrimination indexes. Data were expressed as the number, percentages, mean and standard deviation (SD). Continuous data normality determined by Kolmogorov-Smirnov test. Data Analyzed using chi-Square and t, oneway analysis of variance test. Post Hoc pairwise comparisons were performed using LSD multiple comparisons.
Results: The good quality questions were 44.1% (n= 416). Discrimination index of questions given to Associate professors were higher and easier than compare to Assistant professors and Professors. We assessed difficulty and discrimination index according to the BT level. Greater number of questions were in level of recall and comprehension. Apparently there was no difference in average index of difficulty level in statistically the discrimination index of questions found statistically higher in comprehension and evaluation levels (p=0,021). The difficulty level were found lower in who have received of training course when compared to the group who have not received course. Meanwhile there was no difference questions of discrimination index in these groups.
Conclusions: Quality of questions can be improved by informing faculty members of the post-exam analysis of exam questions. It is therefore imperative that instructors be educated on preparing exam questions.
Primary Language | Turkish |
---|---|
Subjects | Health Care Administration |
Journal Section | Original Article |
Authors | |
Publication Date | April 28, 2016 |
Submission Date | December 22, 2015 |
Published in Issue | Year 2015 Volume: 14 Issue: 44 |