Student Views towards E-Test Applications in Measurement and Evaluation Course

Year 2017, Volume: 2017 Issue: 8, 111 - 128, 30.04.2017

Gülşah Başol Tuğba Kocadağ Ünver Harun Çiğdem

Abstract

The purpose of the study is to collect the student views on multiple choice e-tests as a part of a study employing blended instruction during an undergraduate class in a university in Turkey. The study took place in the fall semester of 2013-2014 school year. A case study approach, using mixed methods, was followed throughout the study. In this web based course, there were 356 students, registered online to Measurement and Evaluation course in Faculty of Education in Gaziosmanpasa University. The courses were delivered in the classroom in weekly bases and students were also provided course materials, ppt presentations, performance tasks and handouts on every week’s content through the course portal on MOODLE. Besides the materials, students benefited from an item bank, consisting of 1369 multiple choice test items divided into the units. At the end of the semester, the students were asked to complete an online survey on their views on these e-tests, consisting 60 Likert items (Cronbach Alpha= .92) and an open ended question form. Hundred twenty seven prospective teacher candidates filled out the online surveys and their responses were analyzed through Chi-Square tests. According to the findings, except for a few items, student’ views did not change by gender. In general, it was found that students possessed positive views towards the use of e-tests. In addition, the answers to open-ended questions indicated that students complained the most about not having a computer with a decent internet connection. On the other hand, they were satisfied with the use of the course portal and the item bank to a great extent.

Keywords

Online item bank, frequent testing, MOODLE, web based e-test

Ölçme Değerlendirme Dersinde E-Sınav Uygulanmasına İlişkin Öğrenci Görüşleri

Abstract

Bu çalışmanın amacı öğrencilerin harmanlanmış öğretim kapsamında kullandıkları e-sınav sistemi hakkındaki görüşlerinin ortaya konmasıdır. Karma yöntem desenindeki çalışma MOODLE üzerinden Gaziosmanpaşa Üniversitesi Eğitim Fakültesi’nde Ölçme ve Değerlendirme dersini alan 356 öğretmen adayı üzerinde gerçekleştirilmiştir. Dersler sınıf ortamında yürütülmüş ve internet üzerinden öğrencilere ppt sunuları, ders notları ve performans görevleri sunulmuştur. Ayrıca öğrencilere her hafta, haftanın konusuyla ilgili internet üzerinden izleme testleri uygulanmış; ünite bazlı toplam 1369 maddelik bir test maddesi havuzundan yararlanmaları sağlanmıştır. Uygulamayı ciddiye almaları için testlerden aldıkları puan ortalamasının % 5 ölçüde geçme notuna yansıtılmasına karar verilmiştir. Çalışmada e-sınavlar hakkındaki öğrenci görüşlerini almak üzere dönem sonunda 60 maddelik bir anket (Cronbach Alpha= .92) ve açık uçlu görüşme formu uygulanmış, 127 öğrencilerin cevapları Kay-kare ile incelenmiştir. Sonuçlar bir kaç madde dışında, e-sınavlar hakkındaki öğrenci görüşlerinin cinsiyet değişkenine göre farklık göstermediğini ve genel olarak bakıldığında görüşlerin büyük ölçüde olumlu olduğunu ortaya koymuştur. Açık uçlu cevapların içerik analizi sonucunda ise uygulamanın internet bağlantısı ve bilgisayar gerektirmesi öğrenciler tarafından belirtilen en büyük olumsuzluktur. Bununla birlikte öğrencilerin büyük bir çoğunluğu geliştirilen sistemden memnun olduklarını belirtmişlerdir.

Keywords

Çevrimiçi soru bankası, izleme sınavları, MOODLE, web tabanlı e-test

References

• Aggarwal, A. (2000). Web-based learning and teaching technologies: Opportunities and challenges. Hershey-USA: Idea Group Publishing.
• Akkoyunlu, B. (2002). Öğretmenlerin internet kullanımı ve bu konudaki öğretmen görüşleri. Hacettepe Üniversitesi Eğitim Fakültesi Dergisi, 22(22).
• Başol, G. (2008). Bilimsel araştırma süreci ve yöntem. İçinde Kılıç, O. & Cinoğlu M. (Ed.), Bilimsel araştırma yöntemleri, Bölüm 5, İstanbul: Lisans Yayıncılık.
• Başol, G. (2009). The effect of exam frequency on academic achievement: A quasi-experimental study [Full Text]. First International Congress of Educational Research Full Text Book, Çanakkale 18 Mart University, Çanakkale, Turkey. http://oc.eab.org.tr/egtconf/pdfkitap/pdf/582.pdf.
• Başol, G., & Johanson, G. (2009). The effectiveness of frequent testing over achievement: A meta-analysis study. Uluslararası İnsan Bilimleri Dergisi Dergisi (International Journal of Human Sciences), 6(2), 99-121.
• Basol, G. & Balgalmış, E. (2016). A multivariate investigation of gender differences in the number of online tests received-checking for perceived self-regulation. Computers in Human Behavior, 58, 388-397.
• Blas, T. M. & Fernández, A. S. (2009), The role of new technologies in the learning process: Moodle as a teaching tool in physics. Computers & Education, 52 (2009) 35–44.
• Bremer, D. & Bryant, R. (2005). A comparison of two learning management systems: Moodle vs blackboard, Proceedings of the 18 th Annual Conference of the National Advisory Committee on Computing Qualifications.
• Bull, J., & McKenna, C. (2004). Blueprint for computer-assisted assessment. London, UK: Routledge-Falmer
• Cabı, E. (2004). Web destekli Pascal öğretimine yönelik örnek bir çalışma. XIII. Ulusal Eğitim Bilimleri Kurultayı. (6-9 Temmuz 2004). Malatya: İnönü Üniversitesi, Eğitim Fakültesi.
• Cigdem, H. & Oncu, S. (2015). E-assessment adaptation at a Military Vocational College: Student perceptions. Eurasia Journal of Mathematics, Science & Technology Education, 11(5), 971-988.
• Cigdem, H. & Tan, S. (2014). Students’ opinions on administering optional online quizzes in a two-year college Mathematics course. Journal of Computer and Education Research, 2(4), 51-73.
• Çevik, A. (2008). Moodle öğrenme yönetim sistemi yönetimindeki karşılaşılabilecek olası sorunlar ve çözüm önerileri. In 8th International Educational Technology Conference, May, (pp. 31-34).
• Demirdağ, B., & Kartal, M. (2011). Anorganik kimya dersinde web destekli işbirlikli öğrenmeye yönelik öğrenci görüşleri. Buca Eğitim Fakültesi Dergisi, (29), 36-49.
• Dermo, J. (2009). E-assessment and the student learning experience: A survey of student perceptions of e-assessment. British Journal of Educational Technology, 40(2), 203-214. doi:10.1111/j.1467-8535.2008.00915.x
• Derouza, E., & Fleming, M. (2003). A comparison of in-class quizzes vs. online quizzes on student exam performance. Journal of Computing in Higher Education, 14, 121-134.
• Deryakulu, D. (2005). Bilgisayar öğretmenlerinin tükenmişlik düzeylerinin incelenmesi. Eurasian Journal of Educational Research (EJER), (19).
• Gunter, G., Gunter, R. E. & Wiens, G. A. (1998). Teaching pre-service teachers technology: An innovative approach. Paper presented at the SITE 98: Society for Information Technology and Teacher Education International Conference, 9th, Washington, DC, March 10-14, 1998, 6p.
• Huang, C. J., Chen, X-H. & Chen, C-H. (2008). Developing Argumentation Processing Agents For Computer-Supported Collaborative Learning, Expert Systems with Applications (2008), doi:10.1016/j.eswa.2008.01.036.
• IBM SPSS. IBM SPSS Statistics for Windows, Version 15.0. Armonk, NY: IBM Corp.
• Johnson, G. M. (2006). Optional online quizzes: College student use and relationship to achievement. Canadian Journal of Learning and Technology, 32(1), Winter.
• Jordan, S., Mitchell, T. (2009). e-Assessment for learning? The potential of short-answer freetext questions with tailored feedback. British Journal of Educational Technology, 40(2), 371–385.
• Karaman, S., Özen, Ü., Yıldırım, S., & Kaban, A. (2009). Açık kaynak kodlu öğretim yönetim sistemi üzerinden internet destekli (harmanlanmış) öğrenim deneyimi. Akademik Bilişim Konferansı, 11-13.
• Kaya, Z., & Tan, Ş. (2014). New trends of measurement and assessment in distance education. Turkish Online Journal of Distance Education, 15(1), 206-217.
• Kulik, C-L. C., Kulik, J. A., & Bangert-Drowns, R. L. (1986). Effects of testing for mastery on student learning. Paper presented at the annual meeting of the American Educational Research Association, San Francisco.
• Kurland, Daniel J.; Sharp, Richard M. ve Sharp, Vicki F. (1997). Introduction to the Internet for Education. Belmont, CA: Wadsworth Publishing Company, 1997.
• Kutu, H. & Sözbilir, M. (2012). Kimya öğretiminde web destek aracı olarak MOODLE öğretim yönetim sisteminin kullanılabilirliği, Erzincan Üniversitesi Eğitim Fakültesi Dergisi, 14(2), 437-458.
• Leh, A. (2002). Action Research on Hybrid Courses and their online communities. Educational Media International, 39(1), 31-39.
• Lehman, T. (2004). Hybrid science labs: Flexible and hands–on. Online Classroom. February: 1-8, ISSN 1546–2625, 6.
• Llamas-Nistal, M., Fernández-Iglesias, M. J., González-Tato, J., & Mikic-Fonte, F. A. (2013). Blended e-assessment: Migrating classical exams to the digital world, Computers & Education, 62, 72-87.
• Maki, R. H. (1998). Test predictions over text material. In D. J. Hacker, J. Dunlosky, & A. C. Graesser (Eds.), Metacognition in educational theory and practice (1187-144). Mahwah, NJ: Erlbaum.
• McBurnie, Grant. (2002). Küreselleşme, GATS ve Ulus-Aşırı Eğitim. Kuram ve Uygulamada Eğitim Bilimleri. 2(1), 171–190.
• Melton, J. (2006). The LMS Moodle: A usability evaluation. Languages Issues, 11/12(1), 1-24.
• Morrison, D. (2003). E-learning strategies; how to get implementation and delivery right first time. John Wiley and Sons Ltd.
• Morris, D. (2008). Economics of scale and scope in e-learning. Teaching in Higher Education, 33(3), 331–343.
• Oral, B. (2007). “Uzaktan Eğitim”, Ed: Demirel, Ö., Altun, E., Öğretim teknolojileri ve materyal tasarımı, (s.171-205), Ankara: Pegem Akademi Yayıcılık.
• Özgür, H., & Tosun, N. (2010). İnternet destekli eğitimin e-öğrenme tutumlarına etkisi. XV. Türkiye'de İnternet Konferansı, 2-4.
• Rıza, E. Tahir. (2001). Eğitimde Bilgisayar Teknolojisi. İzmir: Kanyılmaz Matbaacılık.
• Ruscio, J. (2001). Administering quizzes at random to increase students’ reading. Teaching of Psychology, 28, 204-206.
• Savaş, Y., & Türkoğlu, R. (2002). Web tabanlı eğitim ve örnek bir uygulama. Politeknik Dergisi, 5(3).
• Sevindik, T. (2006). Akıllı sınıfların yüksek öğretim öğrencilerinin akademik başarı ve tutumlarına etkisi, Fırat Üniversitesi, Sosyal Bilimler Enstitüsü, Yayımlanmamış Doktora Tezi, Elazığ.
• Sorensen, E. (2013). Implementation and student perceptions of e-assessment in a chemical engineering module. European Journal of Engineering Education, 38(2), 172-185. doi: 10.1080/03043797.2012.760533
• Şen, N. (1999). İnternet tabanlı öğretimin etkililiği. Yayımlanmamış Yüksek Lisans Tezi. Ankara Üniversitesi Sosyal Bilimler Enstitüsü. Ankara.
• Terzis, V. & Economides, A. A. (2011). The acceptance and use of computer based assessment. Computers & Education, 56(4), 1032–1044. doi: 10.1016/j.compedu.2010.11.017
• Tosun, C., & Taşkesenligil, Y. (2011). Using the MOODLE learning management system in problem based learning method. International Online Journal of Educational Sciences, 3(3), 1021-1045.
• Tümer, E., Şahin, İ., Aktürk, A.O. (2008). Online sınav sistemi ve bu sistem ile ilgili öğrenci görüşleri. 5th International Educational Technologies Symposium, Anadolu University, Eskişehir.
• Türker, H., & Yaylak, E. (2011). İlköğretim Sosyal Bilgiler Öğretiminde İnternet Tabanlı Öğretim Yönteminin Ders Başarısına Etkisi. Buca Eğitim Fakültesi Dergisi, 29, 162-177.
• Usta, E., & Mahiroğlu, A. (2008). Harmanlanmış Öğrenme ve Çevrimiçi Öğrenme Ortamlarının Akademik Başarı Ve Doyuma Etkisi. Ahi Evran Üniversitesi Kırşehir Eğitim Fakültesi Dergisi, 9(2).
• Vighnarajah, Luan, W. S. & Bakar, K. A. (2009). Qualitative Findings Of Students’ Perception On Practice Of Self-Regulated Strategies in Online Community Discussion. Computers & Education, 53, 94–103.
• Wilder, D. A., Flood, W. A. & Stromsnes, W. (2001). The use of random extra credit quizzes to increase student attendance. Journal of Instructional Psychology, 28, 117-120.
• Yalman, M. & Kutluca, T. (2013). Matematik öğretmeni adaylarının bölüm dersleri için kullanılan uzaktan eğitim sistemi hakkındaki yaklaşımlar. Dicle University Journal of Ziya Gokalp Education Faculty, 21, 197-208.
• Yalman, M., & Kutluca, T. (2014). The design, application and evaluation of a web-based e-learning system (MOODLE). Journal of Turkish Science Education, 11(1).
• Yavuz, S., & Coşkun, E. A. (2008). Sınıf öğretmenliği öğrencilerinin eğitimde teknoloji kullanımına ilişkin tutum ve düşünceleri. Hacettepe Üniversitesi Eğitim Fakültesi Dergisi, 34(34).
• Yılmaz, M. (2005). İlköğretim 7. sınıflarda simetri konusunun öğretimde eğitim teknolojilerinin başarı ve tutuma etkisi, Marmara Üniversitesi, Eğitim Bilimleri Enstitüsü, Yayımlanmamış Yüksek Lisans Tezi, İstanbul.
• Yılmaz, K., & Horzum, M. B. (2005). Küreselleşme, bilgi teknolojileri ve üniversite. İnönü Üniversitesi Eğitim Fakültesi Dergisi, 6(10), 103-121.
• Yiğit, Y. (1999). Learning the internet through the internet. A case study. Unpublished Master Thesis. Middle East Technical University, The Institute of Social Sciences, Ankara.
• Young, J. (2002). Hybrid teaching seeks to end the divide between traditional and online instruction. Chronicle of Higher Education, 48(28), 33-39.
• Zakaria, E., & Daud, M. (2008). Using MOODLE in a Mathematical Methods Course: Pre-Service Teachers' Perspective. International Journal of Learning, 15(4).