Turkish Validity and Reliability of Peer Evaluation Scale in Team-Based Learning

Abstract

Objective: This study was conducted to adapt the ‘Peer Assessment Scale in Team-Based Learning’ into Turkish for use with students enrolled in health programs. Participants included students from four distinct health programs. Methods: This research was conducted as a methodological study. The pilot application phase yielded 117 data points, while the main application phase generated 590 data points. Data were collected using the 'Personal Information Form,' the draft 'Peer Assessment Scale for Team-Based Learning,' and 'VAS for Peer Assessment.' The data were analyzed using the content validity index, confirmatory factor analysis, and reliability analysis. The factors of the items ranged from 0.51 to 0.79. Results: The fit index values of the scale were x2/df=4.617, GFI=0.936, AGFI=0.900, CFI=0.950, RMSEA=0.078, RMR=0.019, SRMR=0.0382, NFI=0.937, TLI=0.933, IFI=0.950, PGFI=0.600, PNFI=0.710. Cronbach Alpha values were 0.832 for the 'Responsibility' sub-dimension, 0.808 for the 'Initiative' sub-dimension, and 0.757 for the 'Cooperation' sub-dimension. The Cronbach's alpha for the total scale was 0.921. The Turkish version of the 12-item, 3-subdimensional scale was validated without any alterations to the original scale structure. Conclusion: The Turkish version of the Peer Review Scale for Team-based Learning demonstrates validity and reliability for use in Turkish populations.

Keywords

• Learning
• teamwork
• peer assessment
• validity
• reliability
• Turkish adaptation

TAKIM TABANLI ÖĞRENMEDE AKRAN DEĞERLENDİRME ÖLÇEĞİNİN TÜRKÇE GEÇERLİK VE GÜVENİRLİĞİ

Abstract

Amaç: Bu çalışma, 'Takım Temelli Öğrenmede Akran Değerlendirme Ölçeği'nin sağlık programlarına kayıtlı öğrencilerle kullanılmak üzere Türkçeye uyarlanması amacıyla gerçekleştirilmiştir. Katılımcılar dört farklı sağlık programından öğrencilerden oluşmaktadır. Gereç ve Yöntem: Bu araştırma metodolojik bir çalışma olarak yürütülmüştür. Pilot uygulama aşamasında 117, ana uygulama aşamasında ise 590 veri elde edilmiştir. Veriler ‘Kişisel Bilgi Formu’, ‘Takım Tabanlı Öğrenme için Akran Değerlendirme Ölçeği’ taslağı ve ‘Akran Değerlendirme Ölçeği’ kullanılarak toplanmıştır. Veriler içerik geçerliği indeksi, doğrulayıcı faktör analizi ve güvenilirlik analizi kullanılarak analiz edilmiştir. Maddelerin faktör değerleri 0.51 ile 0.79 arasında değişmektedir. Bulgular: Ölçeğin uyum indeksi değerleri x2/df=4.617, GFI=0.936, AGFI=0.900, CFI=0.950, RMSEA=0.078, RMR=0.019, SRMR=0.0382, NFI=0.937, TLI=0.933, IFI=0.950, PGFI=0.600, PNFI=0.710'dur. Cronbach Alfa değerleri ‘Sorumluluk’ alt boyutu için 0.832, ‘İnisiyatif’ alt boyutu için 0.808 ve ‘İşbirliği’ alt boyutu için 0.757'dir. Toplam ölçek için Cronbach alfa değeri 0,921'dir. Üç alt boyuttan oluşan 12 maddelik ölçeğin Türkçe versiyonu, orijinal ölçek yapısında herhangi bir değişiklik yapılmadan geçerlenmiştir. Sonuç ve Öneriler: Takım Tabanlı Öğrenme için Akran Değerlendirmesi Ölçeği'nin Türkçe versiyonu, Türk toplumunda kullanım için geçerlik ve güvenilirlik göstermektedir.

Keywords

• Öğrenme
• ekip çalışması
• akran değerlendirmesi
• geçerlik
• güvenilirlik
• Türkçe adaptasyon

References

1. Aksu, G., Eser, M., & Güzeller, C. (2017). Exploratory and Confirmatory Factor Analysis and Structural Equation Model Applications. Detail Publishing.
2. Alberti, S., Motta, P., Ferri, P., & Bonetti, L. (2021). The effectiveness of team-based learning in nursing education: a systematic review. Nurse Education Today, 97, 104721. doi:https://doi.org/10.1016/j.nedt.2020.104721
3. Bae, B.-R. (2017). Structural equation modeling with Amos 24. Chenngram Books, 76-309.
4. Burgess, A., van Diggele, C., Roberts, C., & Mellis, C. (2020). Feedback in the clinical setting. BMC Medical Education, 20, 1-5. doi:https://doi.org/10.1186/s12909-020-02280-5
5. Considine, J., Berry, D., Allen, J., Hewitt, N., Oldland, E., Sprogis, S. K., & Currey, J. (2021). Specific elements of team-based learning used in nursing education: a scoping review. Nurse Educator, 46(5), E84-E89. doi:10.1097/NNE.0000000000001061
6. Davis, L. L. (1992). Instrument review: Getting the most from a panel of experts. Applied Nursing Research, 5(4), 194-197.
7. DeVellis, R. F. (2016). Scale development: Theory and applications (Vol. 26): Sage publications.
8. DeVellis, R. F., & Thorpe, C. T. (2021). Scale development: Theory and applications. Sage publications.

9. Erkorkmaz, Ü., Etikan, İ., Demir, O., Özdamar, K., & Sanisoğlu, S. Y. (2013). Doğrulayıcı faktör analizi ve uyum indeksleri. Turkiye Klinikleri Journal of Medical Sciences, 33(1), 210-223. doi:10.5336/medsci.2011-26747
10. Goedde, R., & Sibley, J. (2014). Approaches to peer evaluation: pro’s and con’s of various methods. http://learntbl.org/wp-content/uploads/2014/06/ Poster_TBL_peer_Feb2011-22nd.pdf
11. Kline, P. (2014). An easy guide to factor analysis. Routledge.
12. Kweon, Y.-R., & Park, J. (2023). Using the design-thinking method to develop and validate a peer evaluation scale for team-based learning (PES-TBL) for nursing students. Nurse Education Today, 127, 105849. doi:https://doi.org/10.1016/j.nedt.2023.105849
13. Levine, R. E., & Hudes, P. D. (2021). How-to guide for team-based learning. Springer.
14. Michaelsen, L. K., Davidson, N., & Major, C. H. (2024). Team-based learning practices and principles in comparison with cooperative learning and problem-based learning. Journal on Excellence in College Teaching, 3-4, 57-84.
15. Michaelsen, L. K., & Sweet, M. (2011). Team-based learning. In L. K. Michaelsen & M. Sweet (Eds.), New directions for teaching and learning (Vol. 1, pp. 41-51).
16. Pallant, J. (2020). SPSS survival manual: A step by step guide to data analysis using IBM SPSS (3 ed.). McGraw-hill education (UK).
17. Parmelee, D. X., & Michaelsen, L. K. (2010). Twelve tips for doing effective team-based learning (TBL). Medical Teacher, 32(2), 118-122. doi:https://doi.org/10.3109/01421590903548562
18. Rezaee, R., & Moadeb, N. (2016). Team-based learning: A new approach toward improving education. Acta Medica Iranica, 54, 678-682.
19. Rotgans, J. I., Schmidt, H. G., Rajalingam, P., Hao, J. W. Y., Canning, C. A., Ferenczi, M. A., & Low-Beer, N. (2018). How cognitive engagement fluctuates during a team-based learning session and how it predicts academic achievement. Advances in Health Sciences Education, 23, 339-351. doi:https://doi.org/10.1007/s10459-017-9801-2 Seçer, İ. (2020). Psychological test development and adaptation process: SPSS and LISREL applications. Anı Publications.
20. Shrestha, N. (2021). Factor analysis as a tool for survey analysis. American Journal of Applied Mathematics and Statistics, 9(1), 4-11. doi:10.12691/ajams-9-1-2
21. Sisk, R. J. (2011). Team-based learning: systematic research review. Journal of Nursing Education, 50(12), 665-669. doi:https://doi.org/10.3928/01484834-20111017-01
22. Tavşancıl, E. (2018). Tutumların ölçülmesi ve SPSS ile veri analizi (Vol. 6). Nobel Akademik Yayıncılık.
23. Whitley, H. P., Bell, E., Eng, M., Fuentes, D. G., Helms, K. L., Maki, E. D., & Vyas, D. (2015). Practical team-based learning from planning to implementation. American Journal of Pharmaceutical Education, 79(10), 149. doi:https://doi.org/10.5688/ajpe7910149
24. Woo, J. P. (2017). The concept and understanding of structural equation model. Hannarae.
25. Zwarenstein, M., Goldman, J., & Reeves, S. (2009). Interprofessional collaboration: effects of practice based interventions on professional practice and healthcare outcomes. Cochrane Database of Systematic Reviews, 3, CD000072. doi:https://doi.org/10.1002/14651858.CD000072.pub2