Öğrenci Başarısının Öğretmen Yapımı Bir Testle Klasik Test Kuramı ve Madde Tepki Kuramı Yöntemleriyle Elde Edilen Puanlara Göre Karşılaştırılması

Abstract

The aim of this research is examine the correlation between student achievements and the items that construct the test according to the Classical Test Theory and Item Response Theory. The survey method has been chosen for this research. Study group includes 231students which studying in Eskişehir Osmangazi University and attending to Measurement and Evaluation class. A 40 multiple-choice items test has been developed and administrated. The test aims to measure the academic achievement on measurement and evaluation lesson. Scoring has been made according to Classical Test Theory and Item Response Theory, and then scores have been compared. Analyses show that the correlation between the scores is positive, very high and significant. After the item analyses, 5 items have been opt out of the test by classical test theory. And 14 items have been opt out of the test by item response theory. After opting out, scoring has been made again and the correlation between the scores is positive, very high and significant again. When we consider the test scores to pass – fail decision; two theories only differ 12.6% of students and the same decision has been made with 87.4% of students.

Keywords

• item response theory, classical test theory, teacher made tests

Öğrenci Başarısının Öğretmen Yapımı Bir Testle Klasik Test Kuramı ve Madde Tepki Kuramı Yöntemleriyle Elde Edilen Puanlara Göre Karşılaştırılması

Abstract

Bu çalışmanın amacı, sınıf içi ders başarısını ölçmeyi amaçlayan bir ölçme aracından, KTK ve MTK’ya dayalı olarak elde edilen öğrenci başarıları arasındaki ilişkiyi ve her iki kurama göre ölçme aracını oluşturan madde sayılarını karşılaştırmaktır. Amaç doğrultusunda betimsel türde bir araştırma yöntemi tercih edilmiştir. Eskişehir Osmangazi Üniversitesi’nde öğrenim gören ve ölçme ve değerlendirme dersini alan 231 öğrenci, araştırma grubunu oluşturmuştur. Araştırma kapsamında 40 çoktan seçmeli maddeden oluşan, ölçme ve değerlendirme dersindeki başarıyı ölçmeyi amaçlayan bir test geliştirilmiş ve uygulanmıştır. Test, klasik test kuramı ve madde tepki kuramı yöntemleriyle puanlanmış ve elde edilen puanların karşılaştırılması yapılmıştır. Analiz sonuçlarına göre, testteki tüm maddeler her iki kurama göre puanlandığında, elde edilen puanlar arasındaki ilişki pozitif, oldukça yüksek ve manidar bulunmuştur. Madde analizleri yapıldığında, klasik test kuramına göre beş, madde tepki kuramına göre ise 14 maddenin testten çıkarılması gerektiği görülmüş ve madde atılarak puanlama yeniden yapıldığında, elde edilen puanlar arasındaki ilişki pozitif, oldukça yüksek ve manidar bulunmuştur. Test puanları ile geçme ve kalma kararı verildiği düşünüldüğünde ise iki kuram 231 öğrencinin sadece %12.6’sında kalma kararında farklılaşmış, %87.4’ünde ise aynı kararı vermiştir.

Keywords

• madde tepki kuramı, klasik test kuramı, öğretmen yapımı test

References

1. Başarır-Erden, D.B. (1997). Örtük Özellikler ve Klasik Test Teorisi Yaklaşımına Dayalı Olarak Geliştirilen Likert Tipi Tutum Ölçeğinin Psikometrik Özelliklerinin Karşılaştırılması. Yayımlanmamış doktora tezi, Hacettepe Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
2. Baykul, Y. (1979). Örtük Özellikler ve Klasik Test Kuramları Üzerine Bir Araştırma. Yayımlanmamış doktora tezi, Hacettepe Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
3. Berberoğlu, G. (1989). Erişi Testlerine Madde Seçiminde Klasik Test Kuramı ve Rasch Modelinin Karşılaştırılması. Eğitim ve Bilim, Cilt:13 S:74, 61-67.
4. Can, S. (2003). Ortaöğretim Kurumları Öğrenci Seçme ve Yerleştirme Sınavı sözel bölümünün Madde Tepki Kuramı modellerine göre analizi. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
5. Crocker, L., Algina, J. (1986). Introduction Classical and Modern Test Theory. USA: CBS College Publishing Company.
6. Çalışkan, M. (2000). Madde Tepki Kuramı`nın (MTK) bir, iki ve üç parametreli modellerinin Milli Eğitim Bakanlığı Eğitimi Araştırma ve Geliştirme Dairesi`nin (MEB-EARGED) fen bilgisi başarı testi verilerine uygunluğu. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
7. Çelen, Ü. (2008). Klasik Test Kuramı ve Madde Tepki Kuramı Yöntemleriyle Geliştirilen İki Testin Geçerlilik ve Güvenilirliğinin Karşılaştırılması, İlköğretim Online, 7(3), 758-768.
8. Çelik, D. (2001). Madde Tepki Kuramının (MTK) bir-, iki-, ve üç parametreli modellerinin Milli Eğitim Bakanlığı ortaöğretim kurumları öğrenci seçme ve yerleştirme sınavı testi verilerine uygunluğu. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.

9. Çıkrıkçı-Demirtaşlı N. (1998). Test Geliştirmede Yeni Yaklaşımlar: Örtük Özellikler Kuramı - Temel Özellikleri, Varsayımları, Model ve Sınırlılıkları. Ankara Üniversitesi Eğitim Fakültesi Dergisi, 2 (28), 161-173.
10. DeMars, C. (2010). Item Response Theory. Oxford University Press, Oxford.
11. Erkuş, A. (2003). Psikometri Üzerine Yazılar. Türk Psikologlar Derneği Yayınları, Ankara.
12. Fan, X. (1998). Item response theory and classical theory: an empirical comparison of their item-person statistic. Educational and Psychological Measurement, v:58 n:3, 357-381.
13. Hambelton, R.K. (1990). Item response theory: introduction and bibliography. Psicothema, 2, 1, 97-107.
14. Hambelton, R.K. (1994). Item Response theory: a broad psychometric framework for measurement advances. Psicothema, 6, 3, 535-556.
15. Hambelton, R.K., Swaminathan H., and Rogers, H.J. (1991). Fundamentals of Item Response Theory. California: Sage Publications Inc.
16. Hambleton, R.K., Swaminathan H. (1985). Item Response Theory: Principles and Application. Kluwer, Nijhoff Publishing a Member of the Kluwer Academic Publisher Group.
17. Hwang, D.Y. (2002). Classical Test Theory and tem Response Theory: Analytical and Empirical Comparison. Speeches/meeting paper, presented at the Annual Meeting of the Southwest Educational Research Association (Austin, Feb. 14-16, 2002).
18. Karataş, A. G. (2001). Madde Tepki Kuramı (MTK) modellerini kullanarak bir İngilizce yeterlilik sınavının ölçeklendirilmesi. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
19. Kelecioğlu, H. (2001). Örtük Özellikler Teorisindeki b ve a Parametreleri ile Klasik Test Teorisindeki p ve r İstatistikleri Arasındaki İlişki. Hacettepe Üniversitesi Eğitim Fakültesi Dergisi, 20: 104-110.
20. Kılıç, İ. (1999). Madde tepki kuramının (MTK) bir, iki ve üç parametreli modellerinin Öğrenci Seçme ve Yerleştirme Merkezi'nin (ÖSYM) Öğrenci Seçme Sınavına (ÖSS) uygunluğu. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
21. Lawson, S. (1991). One-Parameter Latent Trait Measurement: Do the Results justify the Effort? The Annual Series of the Southwest Educational Research Association, Vol. 1, 159-168.
22. Linden, W. J. Van Der, & Hambleton, R. K. (1997). Handbook of Modern Item Response Theory. Springer, New York.
23. Linn, R.L. (1998). Educational Measurement. New York: Macmillan Publishers.
24. Lord, F.M., Novick, M.R. (1968). Statistical Theories of Mental Test Scores. Addison Wesley Publishing Company, Educational Testing Service.
25. Nartgün, Z. (2002). Aynı Tutumu Ölçmeye Yönelik Likert Tipi Ölçek ile Metrik Ölçeğin Madde ve Ölçek Özelliklerinin Klasik Test Kuramı ve Örtük Özellikler Kuramına Göre İncelenmesi. Yayımlanmamış doktora tezi, Hacettepe Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
26. Özkurt, S. (2002). Madde Tepki Kuramı`nın (MTK) bir-, iki-, ve üç- parametreli modellerinin bir İngilizce yeterlik başarı testi verilerine uygunluğu. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
27. Reise, S.P., Ainsworth, A.T., and Haviland, M.G. (2005). Item Response theory. Fundamentals, applications, and promise in psychological research. Current Directions in Psychological Science, 14, 2, 95-101. Stage, C. (1998). A comparison between item analysis based on Item Response Theory and Classical Test theory. A study of the SweSAT Subtest WORD. Educational Measurement, 29.
28. Stage, C. (2003). Classical test theory or item response theory: The Swedish experience (Vol. 42). Univ.
29. Yalçın, M. (1999). Eğitimi araştırma ve geliştirme dairesi başarı testlerinin madde-tepki kuramının bir, iki, üç parametreye uygunluğu. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
30. Yeğin, O. P. (2003). Başkent Üniversitesi İngilizce yeterklik sınavının (Büiys) madde Madde Tepki Kuramı`nın (MTK) üç parametreli modelinin kullanımıyla elde edilen yetenek kestirimlerinin yordama geçerliği. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
31. Yapar, T. (2003). İki parametreli tepki kuramı (MTK) modelinin yetenek kestirimleriyle Başkent Üniversitesi İngilizce yeterlik sınavının yordama geçerliğini inceleme çalışması. Yayımlanmamış doktora tezi, Orta Doğu Teknik Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.