Level Determination Exam (LDE-2009): Validity and Reliability Study of 6th Grade English Sub-test

Abstract

The purpose of this research was to investigate the reliability and validity of 6th grade English sub-test of the Level Determination Examination (SBS-2009). The psychometric characteristics of the test were tried to be determined for this purpose in the study. In order to determine the construct validity of the test, the exploratory and confirmatory factor analyses were conducted. KR₂₀ and Spearman-Brown split half statistical methods were employed in order to determine the reliability of the test. According to the findings in relation with the exploratory factor analysis, it was seen that 13 items in the English sub-test worked under a single factor. Besides this, in order to confirm the structure which was detected in regard of the exploratory factor analysis the confirmatory factor analysis was conducted in the research. The findings in relation with the confirmatory factor analysis [X²/df=109.73/65; GFI= 0.92; AGFI= 0.89; RMSEA= 0.058; CFI= 0.96; NFI= 0.90; NNFI= 0.95; RMR and SRMR= 0.052] approved the structure consisting of a single factor. On the other hand, KR₂₀ reliability coefficient of the test was found as 0.84 and Spearman-Brown split-half coefficient was found as 0.81 in the research. 

Keywords

• Level Determination Examination
• validity
• reliability
• elementary education

Seviye Belirleme Sınavı (SBS-2009): 6. Sınıf İngilizce Alt Testinin Geçerlik ve Güvenirlik Çalışması

Abstract

Bu araştırmanın amacı, Seviye Belirleme Sınavı (SBS-2009) 6. sınıf İngilizce alt testinin geçerlik ve güvenirlik çalışmalarını yapmaktır. Bu amaca yönelik olarak yapılan araştırmada, bu testin psikometrik özellikleri belirlenmeye çalışılmıştır. Testin yapı geçerliğini belirleyebilmek için açımlayıcı ve doğrulayıcı faktör analizleri yapılmıştır. Testin güvenirlik düzeyinin belirlenebilmesi için ise KR₂₀ ve Spearman-Brown iki yarı testi istatistiksel yöntemleri kullanılmıştır. Açımlayıcı faktör analizi sonuçlarına göre, İngilizce alt testinin toplam 13 maddesinin de tek bir faktör altında toplandığı görülmüştür. Bunun yanında, açımlayıcı faktör analizi sonucu ortaya çıkan yapının geçerliğini doğrulayabilmek amacıyla da doğrulayıcı faktör analizi uygulanmıştır. Yapılan doğrulayıcı faktör analizi sonucunda elde edilen bulgular [X²/sd=109,73/65; GFI= 0,92; AGFI= 0,89; RMSEA= 0,058; CFI= 0,96; NFI= 0,90; NNFI= 0,95; RMR ve SRMR= 0,052], testin tek faktörlü yapısını doğrulamıştır. Ayrıca, araştırmada testin KR₂₀ güvenirlik katsayısı 0,84, Spearman-Brown iki yarı testi korelasyonu sonucu ise 0,81 olarak hesaplanmıştır. 

Keywords

• Seviye Belirleme Sınavı
• geçerlik
• güvenirlik
• ilköğretim

References

1. Airasian, P. (1994). Classroom assessment (2nd Ed.). New York: McGraw-Hill.
2. Anderson L. W. (1988). Attitudes and their measurement. Keeves, J. P. (Ed.), Educational research, methodology and measurement: An international handbook (pp. 421-426). New York: Pergamon Press.
3. Anıl, D., & Güzeller, C. O. (2011). Seviye belirleme sınavı fen ve teknoloji alt testi ile diğer alt testler arasındaki ilişkinin yol analizi ile incelenmesi. Abant İzzet Baysal Üniversitesi Eğitim Fakültesi Dergisi, 11(1), 1-10.
4. Anıl, D., Güzeller, C. O., Çokluk, Ö., & Şekercioğlu, G. (2010). Level determination exam (SBS-2008) the determination of the validity and reliability of 7th grade mathematics sub-test. Procedia Social and Behavioral Sciences, 2, 5292-5298.
5. Atılgan, H., Doğan, N., & Kan, A. (2007). Eğitimde ölçme ve değerlendirme (2. Baskı). Ankara: Anı Yayıncılık.
6. Baykul, Y. (2000). Eğitimde ve psikolojide ölçme: Klasik test teorisi ve uygulaması. Ankara: ÖSYM Yayınları.
7. Brown, T. A. (2006). Confirmatory factor analysis for applied research. New York: Guilford Publications.
8. Büyüköztürk, Ş., Çakmak, E., Akgün, Ö., Karadeniz, Ş., & Demirel, F. (2008). Bilimsel araştırma yöntemleri. Ankara: Pegem A Yayınları.

9. Büyüköztürk, Ş. (2007). Sosyal bilimler için veri analizi el kitabı (12. Baskı). Ankara: Pegem A Yayınları.
10. Büyüköztürk, Ş. (2002). Faktör analizi: Temel kavramlar ve ölçek geliştirmede kullanımı. Kuram ve Uygulamada Eğitim Yönetimi, 32, 470-483.
11. Cronbach L. J. (1990) Essentials of psychological testing (5th Ed.). New York: Harper Collins Publishers.
12. Çokluk, Ö., Şekercioğlu, G., & Büyüköztürk, Ş. (2010). Sosyal bilimler için çok değişkenli istatistik. Ankara: Pegem Akademi Yayınları.
13. Deniz, Z. (2003). İlköğretim akademik başarı ölçüleri ile ortaöğretim kurumları öğrenci seçme ve yerleştirme sınavı puanları arasındaki uygunluk geçerliği çalışması. Yayımlanmamış Yüksek Lisans Tezi, Hacettepe Üniversitesi, Sosyal Bilimler Enstitüsü, Ankara.
14. Diekhoff, G. (1992). Statistics for the social and behavioral sciences: Univariate, bivariate, multivariate. Washington, D.C.: Brown Publishers.
15. Doğan, N., & Sevindik, H. (2011). İlköğretim 6. sınıflar için uygulanan seviye belirleme sınavı’nın uygunluk geçerliği. Eğitim ve Bilim, 36(160), 309-319.
16. Fabrigar, L. R., Wegener, D. T., MacCallum, R. C., & Strahan, E. J. (1999). Evaluating the use of explatory factor analysis in psychological research. Psychological Methods, 4(3), 272-299.
17. Ferguson, F., & Takane, Y. (1989). Statistical analysis in psychology and education. New York: McGraw-Hill.
18. Fraenkel, J. R., & Wallen, N. E. (2000). How to design and evaluate research in education. New York: McGraw-Hill.
19. Gruijter, D. N. M., & Van Der Kamp, L. J. T. (2005). Statistical test theory for behavioral sciences. London: Chapman and Hall. Gündoğdu, K. (2008). Ölçülebilir öğrenme amaçlarının oluşturulması. Karip, E. (Ed.), Ölçme ve değerlendirme (s. 17-50, 2. Baskı). Ankara: Pegem Akademi Yayınları.
20. Güzeller, C. O. (2005). Ortaöğretim kurumları öğrenci seçme ve yerleştirme sınavının geçerliği. Yayımlanmamış Doktora Tezi, Hacettepe Üniversitesi, Sosyal Bilimler Enstitüsü, Ankara.
21. Hooper, D., Coughlan, J., & Mullen, M. (2008). Structural equation modeling: Guidelines for determining model fit. The Electronic Journal of Business Research Methods, 6(1), 53- 60.
22. Jöreskog, K. G., & Sörbom, D. (1993). LISREL 8: Structural equation modeling with the simplis command language. Lincolnwood: Scientific Software International, Inc.
23. Kalaycı, D. B., & Kelecioğlu, H. (2011). Öğrenci seçme sınavı’nın madde yanlılığı açısından incelenmesi. Eğitim ve Bilim, 36(161), 3-13.
24. Kan, A. (2011). Test eşitleme: OKS testlerinin istatistiksel eşitliğinin sınanması. Eğitim ve Bilim, 36(160), 38-51.
25. Karasar, N. (2005). Bilimsel araştırma yöntemi (15. Baskı). Ankara: Nobel Yayın Dağıtım.
26. Karakaya, İ. (2002). Ortaöğretim kurumları öğrenci seçme ve yerleştirme sınavı’nın yordama geçerliğine ilişkin bir araştırma. Yayımlanmamış Yüksek Lisans Tezi, Ankara Üniversitesi, Eğitim Bilimleri Enstitüsü, Ankara.
27. Kerlinger, F. N. (1973). Foundations of behavioral research. New York: Holt, Rinehart and Winston.
28. Kline, R. B. (2005). Principles and practice of structural equation modelling. New York: Guilford Publications, Inc.
29. Kline, P. (1994). An easy guide to factor analysis. London: Routledge. Kubiszyn, T., & Borich, G. (2003). Educational testing and measurement: Classroom application and practice (7th Ed.). New Jersey: John Wiley and Sons, Inc.
30. Marsh, H. W., Balla, J. R., & McDonald, R. P. (1988). Goodness-of-fit indexes in confirmatory factory analysis: The effects of sample size. Psychological Bulletin, 103(3), 391-410.
31. McMillan, J. H., & Schumacher, S. (2006). Research in education: Evidence based inquiry. Boston: Brown and Company.
32. MEB. (2007a). Ortaöğretime geçiş sistemi rehber kitabı. Ankara: Eğitim Teknolojileri Genel Müdürlüğü Yayınları.
33. MEB. (2007b). Ortaöğretim kurumları öğrenci seçme ve yerleştirme sınavı kılavuzu. Ankara: Eğitim Teknolojileri Genel Müdürlüğü Yayınları.
34. Murphy K. R., & Davidshofer (1991). Psychological testing: Principles and applications. New Jersey: Prentice-Hall.
35. Öğretmen, T. (1995). Differential item functioning analysis of the verbal ability section of the first stage of the university entrance examination in Turkey. Yayımlanmamış Yüksek Lisans Tezi, Ortadoğu Teknik Üniversitesi, Sosyal Bilimler Enstitüsü, Ankara.
36. Önen, E. (2003). Ortaöğretim kurumları öğrenci seçme ve yerleştirme sınav başarısı ve lise 1. sınıftaki akademik başarıya ilişkin bir yordama geçerliği çalışması: Fen lisesi örneği. Yayımlanmamış Yüksek Lisans Tezi, Ankara Üniversitesi Sosyal Bilimler Enstitüsü, Ankara.
37. Örs, S. (2010). İlköğretim 6., 7. ve 8. sınıf seviye belirleme sınavı fen ve teknoloji alt testlerinin faktör yapılarının belirlenmesi. Yayımlanmamış Yüksek Lisans Tezi, Ankara Üniversitesi, Eğitim Bilimleri Enstitüsü, Ankara.
38. Özen, Y., Gülaçtı, F., & Kandemir, M. (2006). Eğitim bilimleri araştırmalarında geçerlik ve güvenirlik sorunsalı. Erzincan Eğitim Fakültesi Dergisi, 8(1), 69-89.
39. Özçelik, D. A. (1998). Ölçme ve değerlendirme. Ankara: ÖSYM Yayınları. Peers, I. (1996). Statistical analysis for education and psychology researchers: Tools for researchers in education and psychology. London: Falmer Press.
40. Reuterberg, S., & Gustafsson, J. E. (1992). Confirmatory factor analysis and reliability: Testing measurement model assumptions. Educational and Psychological Measurement, 52, 795-811.
41. Scherer, R. F. (1988). Dimensionality of coping: Factor stability using the ways of coping questionnaire. Psychological Report, 62, 76-770.
42. Schumacker, R. E., & Lomax, R. G. (1996). A beginner’s guide to structural equation modeling. New Jersey: Lawrence Erlbaum Associates, Inc.
43. Seçkin, H. (2010). İlköğretim 4. sınıf İngilizce dersi öğretim programının değerlendirilmesi. Yayımlanmamış Doktora Tezi, Hacettepe Üniversitesi, Sosyal Bilimler Enstitüsü, Ankara.
44. Sümer, N. (2000). Yapısal eşitlik modelleri. Türk Psikoloji Yazıları, 3(6), 49-74. Şencan, H. (2005). Sosyal ve davranışsal ölçümlerde güvenilirlik ve geçerlilik. Ankara: Seçkin Yayıncılık.
45. Şimşek, Ö. F. (2007). Yapısal eşitlik modellemesine giriş: Temel ilkeler ve LISREL uygulamaları. Ankara: Ekinoks Yayınevi.
46. Tabachnick B. G., & Fidell, L. S. (2001). Using multivariate statistics (4th Ed.). MA: Allyn and Bacon.
47. Tan, Ş. (2008). Öğretimde ölçme ve değerlendirme (2. Baskı). Ankara: Pegem Akademi Yayınları.
48. Tavşancıl, E. (2005). Tutumların ölçülmesi ve SPSS ile veri analizi. Ankara: Nobel Yayın Dağıtım.
49. Tekin, H. (2010). Eğitimde ölçme ve değerlendirme (20. Baskı). Ankara: Anı Yayıncılık.
50. Tezbaşaran, A. (1997). Likert tipi ölçek geliştirme kılavuzu. Ankara: Türk Psikologlar Birliği Yayınları.
51. Thompson, B. (2004). Exploratory and confirmatory factor analysis: Understanding concepts and applications. Washington: American Psychological Association.
52. Turgut, M. F. (1988). Eğitimde ölçme ve değerlendirme metotları (6. Baskı). Ankara: Saydam Matbaacılık.
53. Verim, A. (2006). İlköğretim düzeyindeki bazı başarı ölçülerinin ortaöğretim kurumları öğrenci seçme sınavını yordama gücü. Yayımlanmamış Yüksek Lisans Tezi, Hacettepe Üniversitesi, Sosyal Bilimler Enstitüsü, Ankara.
54. Yılmaz, V., & Erçelik, H. E. (2009). LISREL ile yapısal eşitlik modellemesi. Ankara: Pegem Akademi Yayınları.
55. Yurdagül, H., & Aşkar, P. (2004). Ortaöğretim kurumları öğrenci seçme ve yerleştirme sınavı’nın cinsiyete göre madde yanlılığı açısından incelenmesi. Eğitim Bilimleri ve Uygulama, 3(5), 3-20.