Examining Student Projects with Generalizability Theory

Öz

Projects that enable students to increase their skills in this subject by using scientific research methods also contribute positively to the development of multidimensional thinking skills. In this study, it is aimed to examine the measurements obtained by scoring the projects prepared by the pre-service teachers with independent raters (juries) with the theory of generalizability. The research was designed in the survey model. There are 12 faculty members and 6 projects in the study group of the research. The data collection tool used in the research and the evaluation criteria of TUBITAK research projects, which are consistent with the goals and achievements of project preparation, were used. Each project was given to the juries who would evaluate each project, and the juries scored the projects considering the relevant criteria. The lowest score for each criterion was determined as 1 and the highest score as 4, and the highest total score that can be obtained from the measurement tool is 40. Generalizability theory was used in the analysis of the data. G and phi coefficients, which are the reliability coefficients that can be increased and obtained, are examined. In the analysis of the research data, the EduG 6.1 program, which analyzes based on the generalizability theory, was used. Since the juries who made the scoring process in the research scored all the projects, a completely crossed design (jxpxm) was used. One of the results obtained from the research; The second highest contribution to the total variance is the items used as evaluation criteria. The items scored by the juries in order to evaluate the success of the students in the project contributed significantly to the total variance.

Anahtar Kelimeler

• Generalizability theory
• project-based learning
• research project

Proje Numarası

SBA-2019-2920

Öğrenci Projelerinin Genellenebilirlik Kuramı ile İncelenmesi

Öz

Öğrencilerin bilimsel araştırma yöntemlerini kullanarak bu konudaki becerilerinin artmasını sağlayan projeler aynı zamanda çok yönlü düşünme becerilerinin de gelişmesine olumu yönde katkı sağlamaktadır. Bu araştırmada öğretmen adaylarının hazırlamış oldukları projelerin bağımsız puanlayıcılar (jüriler) ile puanlanarak elde edilen ölçümlerin genellenebilirlik kuramı ile incelenmesi amaçlanmaktadır. Araştırma tarama modelinde tasarlanmıştır. Araştırmanın çalışma grubunda, 12 öğretim üyesi, 6 proje bulunmaktadır. Araştırmada kullanılan veri toplama aracı, proje hazırlamanın hedef ve kazanımları ile tutarlı olan TUBİTAK araştırma projelerinin değerlendirme ölçütleri kullanılmıştır. Her bir projeyi değerlendirecek olan jürilere her bir proje verilmiş olup, jüriler projeleri ilgili ölçütleri göz önünde bulundurarak puanlamışlardır. Her bir ölçüt için en düşük puan 1 en yüksek puan ise 4 olarak belirlenmiş olup, ölçme aracından toplam alınabilecek en yüksek puan ise 40’tır.. Verilerin analizinde genellenebilirlik kuramı kullanılmış olup, Karar çalışması kapsamında da jüri sayısı sabit kalmak koşuluyla proje ve madde sayıları arttırılmış ve elde edilebilecek güvenirlik katsayıları olan G ve phi katsayıları incelenmiştir. Araştırma verilerinin analizinde genellenebilirlik kuramına dayalı analizlerin gerçekleştirildiği EduG 6.1 programı kullanılmıştır. Araştırmada puanlama işlemi yapan jüriler tüm projeleri puanladığı için tümüyle çaprazlanmış desen (jxpxm )kullanılmıştır. Araştırmadan elde edilen sonuçlardan biri; toplam varyansa en yüksek ikinci katkının değerlendirme ölçütü olarak kullanılan maddeler olmasıdır. Öğrencilerin projedeki başarısını değerlendirme amacıyla jüriler tarafından puanlanan maddeler toplam varyansa önemli ölçüde katkı sunmuştur.

Anahtar Kelimeler

• Araştırma projesi
• genellenebilirlik kuramı
• proje tabanlı öğrenme

Destekleyen Kurum

Çanakkale Onsekiz Mart Üniversitesi BAP

Proje Numarası

SBA-2019-2920

Teşekkür

Çanakkale Onsekiz Mart Üniversitesi BAP birimine teşekkür ederiz

Kaynakça

1. Barrows, H.S. (1998). The essentials of problem-based learning. J Dent Educ, 62(9), 630-632.
2. Berkson, L. 1993. Problem-based learning: Have the expectations been met. Academic Medicine, 68, 79–88.
3. Brennan, R. L. (2001). Generalizability theory. New York: Springer- Verlog.
4. Brooks, J. G. (2013). Constructivism: Transforming knowledge of how people learn into meaningful instruction., The handbook of educational theories (pp. 271–275). Charlotte, NC: Information Age Publishing, Inc.
5. Cardinet, J., Johnson, S., & Pini, G. (2009). Applying generalizability theory using EduG. New York: Routledge.
6. Cengiz, C. ve Karataş, F.Ö. (2014). Alan eğitiminde araştırma projesi dersi: biyoloji öğretmen adaylarının yansıtmaları. Eğitim ve Öğretim Araştırmaları Dergisi, 3(4), 51-58.
7. Darling-Hammond, L., Barron, B., Pearson, P., Schoenfeld, A., Stage, E., Zimmerman, T., Cervetti, G., & Tilson, J. (2008). Powerful learning. San Francisco, CA: Jossey-Bass.
8. Eti, İ. ve Gündoğdu, S. (2016). Okul öncesi öğretmenliği dördüncü sınıf öğrencilerinin araştırma projesi dersine ilişkin görüş ve önerileri. Abant İzzet Baysal Üniversitesi Eğitim Fakültesi Dergisi, 16 (1), ss:121-139.

9. Firdaus, F. M., Wahyudin, & Herman, T. (2017). Improving primary students’ mathematical literacy through problem based learning and direct instruction. Educational Research and Reviews, 12(4), 212–219.
10. Fleming, D. S. (2000). A teacher's guide to project-based learning. West Virginia: AEL.
11. Fleming, D. S. (2000). A Teacher's guide to project-based learning. Scarecrow Education, Blue Ridge Summit, PA
12. Fraenkel, J. R., & Wallen, N. E. (2003). How to design and evaluate research in education (5th ed.). Boston: McGraw-Hill.
13. Güneş, F. (2012). Bologna süreci ile yükseköğretimde öngörülen beceri ve yetkinlikler. Yükseköğretim ve Bilim Dergisi, (1), 1-9.
14. Harbaugh, S. (2020). Project-based learning: Is it worth it. Unpublished master thesis. Department of Teacher Education and Human Performance College of Education and Health Sciences, Minot State University, North Dakota.
15. Harris, M. J. (2015). The challenges of implementing project-based learning in middle schools. University of Pittsburgh.
16. Hmelo-Silver, C. (2006). Design principles for scaffolding technology-based inquiry. Collaborative reasoning, learning and technology (pp. 147-170). Mahwah, NJ: Erlbaum.
17. Katz, L. G., & Chard, S. C. (2000). Engaging children’s minds: The project approach (2nd ed.). Stamford, CT: Ablex.
18. Kuhn, D. (2015). Thinking together and alone. Educational Researcher, 44(1), 46-53
19. Lev, S., Clarck, A. & Starkey, E. (2020). Implementing project based learning in early childhood: Overcoming misconceptions and reaching success. Newyork: Routledge.
20. Markham, T., Larner, J., & Ravitz, J. (2003). Project-based learning handbook: A guide to standards focused project-based learning for middle and high school teachers. Novato, CA: Buck Institute of Education.
21. Moursund, D. G. (2003). Project-based learning using information technology (2nd ed.). Eugene, OR: International Society for Technology in Education.
22. Ozbasi, D. & Arcagok, S. (2019). An investigation of pre- service preschool teachers' projects using the many-facet rasch model. International Journal of Progressive Education, 15(4), 157-173.
23. Quigley, D. (2010). Project-based learning and student achievement. ProQuest, UMI Dissertations Publishing.
24. Shoning, M. (2017). This is the one skill your child needs for the jobs of the future. World Economic Forum. https://www.weforum.org/agenda/2017/09/skills-children-need-work-future-play-lego/
25. Pedersen, G., Hagtvet, K. A., and Karterud, S. (2007). generalizability studies of the global assessment of functioning–split version. Comprehensive Psychiatry, 48, 88– 94.
26. Shavelson, J. R., and Webb, N. M. (1991). Generalizability theory: A primer. Newbury Park. CA: Sage Publications.
27. Şencan, H. (2005). Sosyal davranışsal ölçümlerde güvenirlik ve geçerlilik. Ankara: Seçkin yayıncılık.
28. Thomas, J. W. (2000). A review of research on project-based learning. San Rafael, CA: Autodesk Foundation.
29. WEF (2016). Word Economic Forum, The Future of Jobs, Switzerland: WEF, 2016.
30. YÖK (2007). Yüksek Öğretim Kurumu. Eğitim fakültesi öğretmen yetiştirme lisans programları Ankara.
31. YÖK (2022). Yüksek Öğretim Kurumu Uluslararası İlişkiler Daire Başkanlığı.https://uluslararasi.yok.gov.tr/uluslararasilasma/bologna/temel-bilgiler/bologna-sureci-nedir. Erişim Tarihi : [ 12.03.2021].