BibTex RIS Kaynak Göster

Yükseköğretime öğrenci seçmek için bilgisayar ortamında bireyselleştirilmiş testler*

Yıl 2012, Cilt: 2 Sayı: 1, 13 - 19, 01.04.2012

Öz

Bu çalışmanın amacı bilgisayar ortamında bireyselleştirilmiş test formatının Türkiyedeki yükseköğretime öğrenci seçme sınavlarına alternatif olarak kullanılabilirliğini tartışmaktır. Çalışmada, önce mevcut öğrenci seçme sistemindeki sorunlar ortaya konmaktadır. Mevcut sınav sistemi öğrencilerin üzerinde büyük bir baskı yaratmakta, ölçme-değerlendirme bakımından eleştiriye açık unsurlar içermekte ve sistemin kamuoyu tarafından eleştirilmesine neden olmaktadır. Bunun ardından bilgisayar ortamında bireyselleştirilmiş testlerin dayandığı temel prensipler ve sağladıkları avantajlar açıklanmakta ve Türkiye'deki öğrenci seçme sınavlarının bu formatta uygulanabilirliğini araştıran deneysel bulgular paylaşılmaktadır. Daha sonra ise, iki farklı araştırma deseni (simülasyon ve gerçek birey uygulaması) kullanan bir çalışmanın sonuçları paylaşılmaktadır. Sonuçlar (i) bilgisayar ortamında bireyselleştirilmiş formatın öğrenci seçme sınavının kağıt kalem formatı ile karşılaştırıldığında öğrencilere sorulan soru sayısında %80'e varan düşüşler sağladığını ve (ii) yetenek kestirimlerinin yüksek güvenilirliğe sahip olduğunu ortaya koymaktadır. Bireylerin klasik öğrenci seçme sınavlarından elde edilen yetenek kestirimleri ile CAT simulasyonlarından gelen kestirimleri arasındaki korelasyonlar 0.80'in üzerinde bulunmuştur. Gerçek bireyler ile yapılan CAT uygulaması da umut verici bulgular ortaya koymuştur. Çalışmanın sonunda bilgisayar ortamında bireyselleştirilmiş testlerin öğrenci seçme sistemi kullanımının mevcut sorunlara nasıl çözüm getirdiği tartışılmış, ayrıca bireyselleştirilmiş formata geçiş konusunda bir takım noktalara değinilmiştir.

Kaynakça

  • Cikrikci-Demirtaslı, N. (1999). Psikometride yeni ufuklar: bilgisayar ortamında bireye uyarlanmış test. Türk Psikoloji Bülteni, 5(13), 31-36.
  • De Ayala, R. J. (2009). The theory and practice of item response theory. New York: Guilford Press.
  • Embretson, S. E. (1996). The new rules of measurement. Psychological Assessment, 8, 341-349.
  • Embretson, S. E. & Reise, S. P. (2000). Item response theory for psycholo- gists. Mahwah, NJ: Erlbaum.
  • Hambleton, R. K., and Swaminathan, H. (1984). Item response theory: Principles and applications. Boston: Kluwer-Nijhoff.
  • Kalender, I. (2011). Effects of different computerized adaptive testing strate- gies on recovery of ability. Unpublished doctoral dissertation, Middle East Technical University, Ankara, Turkey.
  • Mead, A. D., and Drasgow, F. (1993). Equivalence of computerized and paper-and pencil cognitive ability tests: a meta-analysis. Psychological Bulletin, 114(3), 449-458.
  • Ministry of National Education (2011). Ölçme, Seçme ve Yerleştirme Merkezi Başkanlığının Teşkilat ve Görevleri Hakkında Kanun. Accessed through <http://mevzuat.meb.gov.tr/html/27863_6114.html> on January 12th, 2012.
  • Rudner, L. M. (1998). An on-line. Interactive computer adaptive testing mini tutorial. Accessed through <http://edres.org/scripts/cat/catdemo.htm> on December 25th, 2010.
  • Sands, W. A., Waters, B. K., and McBride, J. R. (Eds.) (1997). Computerized adaptive testing: from inquiry to operation. Washington DC.: American Psychological Association.
  • Student Selection and Placement Center (2011). Statistics about scores. Accessed through <http://www.osym.gov.tr> on June 13rd, 2011.
  • van der Linden, W. J. (2008). Bayesian procedures for identifying aber- rant response-time patterns in adaptive testing. Psychometrika. 73(3), 365-384.
  • Weiss, D. J. (1983). Latent trait theory and adaptive testing. In D. J. Weiss (Ed.). New horizons in testing (pp. 5-7). New York: Academic Press.
  • Weiss, D. J. (2011). CAT Central: A global resource for computerized adap- tive testing research and applications. Accessed through <http:// www.psych.umn.edu/psylabs/CATCentral> on May 5th, 2011.
  • Wise, S. L., and Kong, X. (2005). Response time effort: a new measure of examinee motivation in computer-based tests. Applied Measurement in Education, 18(2), 163-183.
  • Zimowski, M. F., Muraki, E., Mislevy, R. J., and Bock, R. D. (1996). BILOG-MG: Multiple-group IRT analysis and test maintenance for bina- ry items [Computer software]. Chicago, IL: Scientific Software International.

Computerized Adaptive Testing for Student Selection to Higher Education*

Yıl 2012, Cilt: 2 Sayı: 1, 13 - 19, 01.04.2012

Öz

The purpose of the present study is to discuss applicability of computerized adaptive testing format as an alternative for current student selection examinations to higher education in Turkey. In the study, first problems associated with current student selection system are given. These problems exerts pressure on students that results in test anxiety, produce measurement experiences that can be criticized, and lessen credibility of student selection system. Next, computerized adaptive test are introduced and advantages they provide are presented. Then results of a study that used two research designs (simulation and live testing) were presented. Results revealed that (i) computerized adaptive format provided a reduction up to 80% in the number of items given to students compared to paper and pencil format of student selection examination, (ii) ability estimations have high reliabilities. Correlations between ability estimations obtained from simulation and traditional format were higher than 0.80. At the end of the study solutions provided by computerized adaptive testing implementation to the current problems were discussed. Also some issues for application of CAT format for student selection examinations in Turkey are given.

Kaynakça

  • Cikrikci-Demirtaslı, N. (1999). Psikometride yeni ufuklar: bilgisayar ortamında bireye uyarlanmış test. Türk Psikoloji Bülteni, 5(13), 31-36.
  • De Ayala, R. J. (2009). The theory and practice of item response theory. New York: Guilford Press.
  • Embretson, S. E. (1996). The new rules of measurement. Psychological Assessment, 8, 341-349.
  • Embretson, S. E. & Reise, S. P. (2000). Item response theory for psycholo- gists. Mahwah, NJ: Erlbaum.
  • Hambleton, R. K., and Swaminathan, H. (1984). Item response theory: Principles and applications. Boston: Kluwer-Nijhoff.
  • Kalender, I. (2011). Effects of different computerized adaptive testing strate- gies on recovery of ability. Unpublished doctoral dissertation, Middle East Technical University, Ankara, Turkey.
  • Mead, A. D., and Drasgow, F. (1993). Equivalence of computerized and paper-and pencil cognitive ability tests: a meta-analysis. Psychological Bulletin, 114(3), 449-458.
  • Ministry of National Education (2011). Ölçme, Seçme ve Yerleştirme Merkezi Başkanlığının Teşkilat ve Görevleri Hakkında Kanun. Accessed through <http://mevzuat.meb.gov.tr/html/27863_6114.html> on January 12th, 2012.
  • Rudner, L. M. (1998). An on-line. Interactive computer adaptive testing mini tutorial. Accessed through <http://edres.org/scripts/cat/catdemo.htm> on December 25th, 2010.
  • Sands, W. A., Waters, B. K., and McBride, J. R. (Eds.) (1997). Computerized adaptive testing: from inquiry to operation. Washington DC.: American Psychological Association.
  • Student Selection and Placement Center (2011). Statistics about scores. Accessed through <http://www.osym.gov.tr> on June 13rd, 2011.
  • van der Linden, W. J. (2008). Bayesian procedures for identifying aber- rant response-time patterns in adaptive testing. Psychometrika. 73(3), 365-384.
  • Weiss, D. J. (1983). Latent trait theory and adaptive testing. In D. J. Weiss (Ed.). New horizons in testing (pp. 5-7). New York: Academic Press.
  • Weiss, D. J. (2011). CAT Central: A global resource for computerized adap- tive testing research and applications. Accessed through <http:// www.psych.umn.edu/psylabs/CATCentral> on May 5th, 2011.
  • Wise, S. L., and Kong, X. (2005). Response time effort: a new measure of examinee motivation in computer-based tests. Applied Measurement in Education, 18(2), 163-183.
  • Zimowski, M. F., Muraki, E., Mislevy, R. J., and Bock, R. D. (1996). BILOG-MG: Multiple-group IRT analysis and test maintenance for bina- ry items [Computer software]. Chicago, IL: Scientific Software International.
Toplam 16 adet kaynakça vardır.

Ayrıntılar

Diğer ID JA62DJ58ZS
Bölüm Ampirik Araştırma
Yazarlar

İlker Kalender Bu kişi benim

Yayımlanma Tarihi 1 Nisan 2012
Yayımlandığı Sayı Yıl 2012 Cilt: 2 Sayı: 1

Kaynak Göster

APA Kalender, İ. (2012). Yükseköğretime öğrenci seçmek için bilgisayar ortamında bireyselleştirilmiş testler*. Yükseköğretim Dergisi, 2(1), 13-19.

Yükseköğretim Dergisi, bünyesinde yayınlanan yazıların fikirlerine resmen katılmaz, basılı ve çevrimiçi sürümlerinde yayınladığı hiçbir ürün veya servis reklamı için güvence vermez. Yayınlanan yazıların bilimsel ve yasal sorumlulukları yazarlarına aittir. Yazılarla birlikte gönderilen resim, şekil, tablo vb. unsurların özgün olması ya da daha önce yayınlanmış iseler derginin hem basılı hem de elektronik sürümünde yayınlanabilmesi için telif hakkı sahibinin yazılı onayının bulunması gerekir. Yazarlar yazılarının bütün yayın haklarını derginin yayıncısı Türkiye Bilimler Akademisi'ne (TÜBA) devrettiklerini kabul ederler. Yayınlanan içeriğin (yazı ve görsel unsurlar) telif hakları dergiye ait olur. Dergide yayınlanması uygun görülen yazılar için telif ya da başka adlar altında hiçbir ücret ödenmez ve baskı masrafı alınmaz; ancak ayrı baskı talepleri ücret karşılığı yerine getirilir.

TÜBA, yazarlardan devraldığı ve derginin çevrimiçi (online) sürümünde yayımladığı içerikle ilgili telif haklarından, bilimsel içeriğe evrensel açık erişimin (open access) desteklenmesi ve geliştirilmesine katkıda bulunmak amacıyla, bilinen standartlarda kaynak olarak gösterilmesi koşuluyla, ticari kullanım amacı ve içerik değişikliği dışında kalan tüm kullanım (çevrimiçi bağlantı verme, kopyalama, baskı alma, herhangi bir fiziksel ortamda çoğaltma ve dağıtma vb.) haklarını (ilgili içerikte tersi belirtilmediği sürece) Creative Commons Attribution-NonCommercial-NoDerivs 4.0 Unported (CC BY-NC-ND4.0) Lisansı aracılığıyla bedelsiz kullanıma sunmaktadır. İçeriğin ticari amaçlı kullanımı için TÜBA'dan yazılı izin alınması gereklidir.