Validity and Reliability of Student Perceptions of PowerPoint Efficacy Scale

Öz

The aim of this study is to adapt the student perception of PowerPoint efficacy scale into Turkish and conduct its validity and reliability tests. The scale was originally developed by Nowaczyk, Santos, and Patton (1998) to probe into student perception of multimedia in the undergraduate classroom. The scale included 19-items yielded in three factors in 5-point Likert type response format. The translation of scale into Turkish was completed by eight experts. After back-translation was conducted by one language expert, translation process of the original scale items into Turkish were finalized. In order to administer the validity and reliability tests, the Turkish-translated version was studied with 261 university students educated in undergraduate programs at a public university. The participants were accessed with convenience sampling method based on their accessibility, convenience, and voluntariness. The data were collected online through Google Forms in the academic year 2017-2018, spring term. Confirmatory factor analysis for validity tests was conducted in AMOS version 21 in addition to reliability test conducted in IBM SPSS version 24. The findings of confirmatory factor analysis indicated that the model fit the data well, having acceptable or perfect fit indices, χ²/df = 2.04, RMSEA = .06, RMR =.03, SRMR = .04, TLI = .94, CFI = .94, GFI = .89, AGFI = .86, and NFI = .90. Therefore, the adapted version of the scale was found be valid. Results of reliability tests indicated that the coefficient alpha values of three factors changed in the range of .87 and .89. The validity of the whole scale was .94 which yields high reliability and concludes that the translated version was reliable. Overall, the scale was found to be valid and reliable in Turkish culture.

Anahtar Kelimeler

• Confirmatory factor analysis,validity,reliability,presentation of multimedia,PowerPoint,slides

Öğrencilerin PowerPoint Etkililiğe Dair Algıları Ölçeğinin Geçerlik ve Güvenirlik Çalışması

Öz

Bu çalışmanın amacı, öğrencilerin PowerPointin etkililiğine dair algıları ölçeğini Türkçe diline uyarlayarak geçerlik ve güvenirlik testlerini yapmaktır. Ölçeğin orijinali Nowaczyk, Santos ve Patton (1998) tarafından üniversite lisans öğrencilerinin çoklu ortam uygulamalarına dair algılarını belirlemek amacıyla geliştirilmiştir. Ölçek 5’li Likert türünde 3 faktörden oluşan 19 madde içermektedir. Ölçeğin Türkçe diline uyarlanması 8 uzman tarafından gerçekleştirilmiştir. Türkçeye uyarlanan ölçek maddelerinin orijinal diline geri çevirme işlemi ise bir dil uzmanı tarafından yapılmış olup, böylece ölçeğin Türkçe diline uyarlanması süreci tamamlanmıştır. Geçerlik ve güvenirlik testlerini yapmak için, bir devlet üniversitesinde eğitim gören 261 lisans öğrencisinden veri toplanmıştır. Katılımcılar elverişli örnekleme yöntemine göre belirlenmiş olup; çalışmaya katılım, elverişli, uygun ve gönüllü katılımcı olma hususlarına dayanmaktadır. Veriler 2017-2018 eğitim-öğretim yılı bahar döneminde Google Form aracılığıyla çevrimiçi olarak toplanmıştır. Geçerlik testi AMOS 21.sürümünde doğrulayıcı faktör analizi yöntemi ile güvenirlik testi ise IBM SPSS 24.sürümünde iç tutarlılık katsayılarını hesaplayarak yapılmıştır. Doğrulayıcı faktör analizi sonunda elde edilen bulgulara göre, ölçeğin uyum iyilik endeksleri χ²/df = 2.04, RMSEA = .06, RMR =.03, SRMR = .04, TLI = .94, CFI = .94, GFI = .89, AGFI = .86 ve NFI = .90 olarak bulunmuş olup, istatistiksel olarak kabul edilir veya mükemmel seviyede olduğu görülmüştür. Dolayısıyla Türkçeye uyarlanan ölçek doğrulayıcı faktör analizi sonucuna göre geçerli bulunmuştur. Güvenirlik testleri sonucuna göre, ölçeğin 3 faktörüne ait iç tutarlılığını gösteren Cronbach alfa katsayıları 0,87 ve 0,89 arasında bulunmuştur. Ölçeğin tamamına ait Cronbach alfa katsayısı ise 0,94 olarak bulunmuş olup, istatistiksel olarak yüksek seviyede güvenilir olduğu görülmüştür. Özetle, uyarlaması yapılan ölçek Türkçe dilinde geçerli ve güvenilir bulunmuştur.

Anahtar Kelimeler

• Doğrulayıcı faktör analizi,geçerlik,güvenirlik,çoklu ortam sunuşu,PowerPoint,slayt

Kaynakça

1. Atkinson, C., & Mayer, R. E. (2004). Five ways to reduce PowerPoint overload. Retrieved from http://www.sociablemedia.com/PDF/atkinson_mayer_powerpoint_4_23_04.pdf#search5‘five%20ways%20to%20reduce%20powerpoint%20overload’.
2. Baker, J. P., Goodboy, A. K., Bowman, N. D., & Wright, A. A. (2018). Does teaching with PowerPoint increase students' learning? A meta-analysis. Computers & Education, 126, 376-387.
3. Craig, R. J., & Amernic, J. H. (2006). PowerPoint presentation technology and the dynamics of teaching. Innovative Higher Education, 31(3), 147–160. https://doi.org/10.1007/s10755-006-9017-5
4. Creswell, J. W. (2012). Educational research: Planning, conducting, and evaluating quantitative and qualitative research (4th ed.). Upper Saddle River, NJ: Pearson Education.
5. Çokluk, Ö., Şekercioğlu, G., & Büyüköztürk, Ş. (2010). Sosyal bilimler için çok değişkenli istatistik. Ankara, Pegem Yayıncılık.
6. Fritschi, J. (2008). Examining pre-service instructors’ use of PowerPoint based on pre-service students’ perceptions: A mixed methods study (Unpublished doctoral dissertation). The University of Alabama at Birmingham.
7. Guilford, J. P. (1954). Psychometric methods (2th Ed). New York: McGraw-Hill.
8. Hair, J.F., Black, W.C., Tatham, R.L., & Anderson, R.E. (2010). Multivariate data analysis. Upper Saddle River, NJ: Prentice Hall.

9. Hartnett, N., Römcke, J., & Yap, C. (2003). Recognizing the importance of instruction style to students' performance: Some observations from laboratory research–a research note. Accounting Education, 12(3), 313-331.
10. Hill, A., Arford, T., Lubitow, A., & Smollin, L. M. (2012). “I’m ambivalent about it” The dilemmas of PowerPoint. Teaching Sociology, 40(3), 242-256.
11. Hopper, K. B., & Waugh, J. B. (2014). Powerpoint: An overused technology deserving of criticism, but indispensable. Educational Technology, 29-34.
12. Jordan, L. A., & Papp, R. (2014). PowerPoint®: It’s not “yes” or “no” – it’s “when” and “how.” Research in Higher Education Journal, 22, 1–11.
13. Kline, R. B. (2015). Principles and practice of structural equation modeling. Guilford publications.
14. Kosslyn, S. M., Kievit, R. A., Russell, A. G., & Shephard, J. M. (2012). PowerPoint® presentation flaws and failures: A psychological analysis. Frontiers in Psychology. https://doi.org/10.3389/fpsyg.2012.00230
15. Levasseur, D. G., & Kanan Sawyer, J. (2006). Pedagogy meets PowerPoint: A research review of the effects of computer-generated slides in the classroom. The Review of Communication, 6(1-2), 101-123.
16. MacCallum, R.C. & Widaman K.F. (1999). Sample size in factor analysis. Psychological Methods. 4(1), 84-99.
17. Mayer, R. E. (2009). Multimedia Learning (2 edition). New York, USA: Cambridge University Press.
18. Moulton, S. T., Türkay, S., & Kosslyn, S. M. (2017). Does a presentation’s medium affect its message? PowerPoint, Prezi, and oral presentations. PloS one, 12(7), e0178774.
19. Nouri, H., & Shahid, A. (2005). The effect of PowerPoint presentations on student learning and attitudes. Global Perspectives on Accounting Education, 2, 53.
20. Nowaczyk, R. H., Santos, L. T., & Patton, C. (1998). Student perception of multimedia in the undergraduate classroom. International Journal of Instructional Media, 25(4), 367.
21. Nunnally, J. C. (1978). Psychometric Theory. New York: McGraw-Hill.
22. Raykov, T., & Marcoulides, G. A. (2008). An introduction to applied multivariate analysis. New York: Taylor and Francis.
23. Roblyer, M. D., & Doering, A. H. (2012). Integrating educational technology into teaching (6th ed.). Allyn & Bacon.
24. Shwom, B. L., & Keller, K. P. (2003). The great man has spoken. Now what do I do? A response to Edward R. Tufte’s The cognitive style of PowerPoint. Communication Insight, 1(1), 2–16.
25. Stevens, J. (2009). Applied multivariate statistics for the social sciences (5th Ed.). NJ: Lawrence Erlbaum Associates.
26. Susskind, J. E. (2005). PowerPoint’s power in the classroom: Enhancing students’ self-efficacy and attitudes. Computers and Education, 45(2), 203–215.
27. Sümer, N. (2000). Yapısal eşitlik modelleri: Temel kavramlar ve örnek uygulamalar. Türk Psikoloji Yazıları, 3(6), 74-79.
28. Tufte, E. R. (2003). The cognitive style of PowerPoint. Cheshire, CT: Graphics Press.
29. Wecker, C. (2012). Slide presentations as speech suppressors: When and why learners miss oral information. Computers & Education, 59(2), 260-273.
30. Yilmazel-Sahin, Y. (2009). A comparison of graduate and undergraduate teacher education students' perceptions of their instructors' use of Microsoft PowerPoint. Technology, Pedagogy and Education, 18(3), 361-380.