Reliability and Validity of Measuring Scale for Team-Work in Multicultural Setting at Tertiary Level

Abstract

This study aims to evaluate the validity and the reliability of measurement of ‘Team-Work’ scale to understand the perception of international students’ collaboration with other students in a multicultural setting. The scale for this study adapted from a measurement tool, which initially designed to explore the impact of individuals’ intercultural communication competence on multicultural team performance in international organizations. Initial sampling group for was 350 university students however, 168 returned questionnaires provided sufficient data for the conclusion drawn for this research study: The scale of Team-Work was constructed with 18 items and the confirmatory factor analysis (CFA) to test the replicability and the accuracy of the scale and it was confirmed that the final structure of the scale including 18 items with one dimension. The Cronbach's alpha coefficient values for the subscales were considered to be high (i.e. flexibility: 0.842 and inflexibility: 0.802).

Keywords

• reliability
• validity
• communicative competence
• team-work
• scale adaptation

Çok Kültürlü Eğitim Ortamında Takım Çalışması Ölçek Değerlendirmesi

Abstract

Bu çalışma, uluslararası öğrencilerin çok kültürlü bir ortamda diğer öğrencilerle işbirliğine ilişkin algısını anlamak için 'Takım-Çalışması' ölçeğinin ölçümünün geçerliliğini ve güvenilirliğini değerlendirmeyi amaçlamaktadır. Bu çalışma için, başlangıçta bireylerin kültürlerarası iletişim yetkinliğinin uluslararası organizasyonlarda çok kültürlü takım performansı üzerindeki etkisini araştırmak için tasarlanmış bir ölçek uyarlanmıştır. İlk örneklem grubu 350 üniversite öğrencisi olmasına rağmen 168 öğrenciden toplanan veriler bu araştırma çalışması için kullanılabilmiş ve bu araştırmanın amacına uygun yeterli veri sağladığı değerlendirilmiştir. 18 maddeden oluşan Takım Çalışması ölçeğinin tekrarlanabilirliğini ve tutarlılığını test etmek için doğrulayıcı faktör analizi (DFA) uygulanmış ve 18 maddeden oluşan ölçeğin son yapısının tek boyutlu olduğu teyit edilmiştir. Oluşturulan alt ölçekler için Cronbach alfa katsayısı değerlerinin (esnek olma: 0,842 ve esnek olmama: 0, 802) yüksek olduğu kabul edilmiştir.

Keywords

• geçerlilik
• güvenirlilik
• kültürlerarası iletişim edinci
• takım çalışması
• ölçek çalışması

References

1. REFERENCES 1. Alexsandrowicz-Pedich, L., Draghicescu, J., Issaias, D. & Sabec, N. (2003). The views of teachers of English and French on intercultural communicative competence in language teaching, In I. Lazar (Ed.) Incorporating intercultural communicative competence in language teacher education (pp. 7-21). European Centre for Modern Languages, Strasbourg: Council of Europe Publishing.
2. 2. Almarza, G., Martinez, D. & Llavador, F. (2015). Identifying students' intercultural communicative competence at the beginning of their placement: Towards the enhancement of study abroad programmes. Intercultural Education, 26(1), 73-85. 10.1080/14675986.2015.997004
3. 3. Bentler, P. M. & Bonett, D. G. (1980). Significance tests and goodness of fit in the analysis of covariance structures. Psychological Bulletin, 88, 588–606. doi.org/10.1037/0033-2909.88.3.588
4. 4. Boakye, E.O. (2015). The Impact of Teamwork on Employee Performance. University of Ghana.
5. 5. Chang, S. & Tharenou, P. (2004). Competencies needed for managing a multicultural workgroup. Asia Pacific Journal of Human Resources, 42(1), 57-74. doi.org/10.1177/1038411104041534
6. 6. Cohen, L., Manion, L. & Morrison, K. (2007). Research Methods in Education. London: Routledge.
7. 7. Cristobal, E., Flavian, C. & Guinaliu, M. (2007). Perceived E-service quality. Journal of Service Theory and Practice, 17(3), 317-340. DOI: 10.1108/09604520710744326
8. 8. Cui, G., & Awa, N. E. (1992). Measuring intercultural effectiveness: An integrative approach. International Journal of Intercultural Relations, 16(3), 311–328. doi.org/10.1016/0147-1767(92)90055

9. 9. Çetinsaya, G. (2014). Büyüme, Kalite, Uluslararasılaşma: Türkiye Yükseköğretimi için Bir Yol Haritası. Yayın No: 2014/2. Yükseköğretim Kurulu (YÖK). Ankara.
10. 10. Çokluk, O., Şekercioğlu, G., & Büyüköztürk, S. (2010). Sosyal Bilimler için Çok Degiskenli İstatistik SPSS ve L1SREL Uygulamalar. Ankara: Pegem.
11. 11. Dai, X & Chen, G. (Eds). (2014). Intercultural Communicative Competence. Newcastle Upon Tyne: Cambridge Scholars Publishing.
12. 12. Denscombe, M. (2010). The Good Research Guide for Small Scale Research Projects. Buckingham: Open University Press.
13. 13. Garcia, M & Canado, M. (2005). Language and power: Raising awareness of the role of language in multicultural teams. Language and Intercultural Communication, 5(1), 86-94. doi.org/10.1080/14708470508668885
14. 14. Gökmen, M.E. (2005). Yabancı dil öğretiminde kültürlerarası iİetişimsel edinç. Dil Dergisi, 128, 69-78. Retrieved from https://dergipark.org.tr/tr/pub/dilder/issue/47727/602726
15. 15. Heale, R. & Twycross, A. (2015). Validity and reliability in quantitative research. Evidence-based Nursing, 18(3), 66-68. doi: 10.1136/eb-2015-102129
16. 16. Hooper, D., Coughlan, J., & Mullen, M. R. (2008). Structural equation modelling: Guidelines for determining model fit. The Electronic Journal of Business Research Methods, 6, 53-60. DOI 10.21427/D7CF7R
17. 17. Kayes, A.B., Kayes, C. & Kolb, D.A. (2005). Experiential learning in teams. Simulation & Gaming, 36(3), 330–354. doi.org/10.1177/1046878105279012
18. 18. Kline, T. J. B. (2005). Psychological Testing, a Practical Approach to Design and Evaluation. The USA: Sage.
19. 19. Lee, J. & Song, J. (2019). Developing intercultural competence through study abroad, telecollaboration, and on-campus language study. Language Learning and Technology, 23(3), 178–198. DOI:10125/44702
20. 20. Matveev, A. V. (2002). The perception of intercultural communication competence by American and Russian managers with experience on multicultural teams. (Unpublished dissertation). Ohio: Ohio University.
21. 21. Orçan, F. (2018). Exploratory and confirmatory factor analysis: Which one to use first? Journal of Measurement and Evaluation in Education and Psychology, 9(4), 414-421.
22. 22. Root, E. & A. Ngampornchai, A. (2012). I came back as a new human being: Student descriptions of intercultural competence acquired through education abroad experiences. Journals of Studies in International Education, 10, 241-266. doi.org/10.1177/1028315312468008
23. 23. Schermelleh–Engel, K., Moosbrugger, H. & Müller, H. (2003). Evaluating the fit of structural equation models: Tests of significance and descriptive goodness–of–fit measures. Methods of Psychological Research Online, 8(2), 23–74.
24. 24. Sümer, N. (2000). Yapısal eşitlik modelleri: Temel kavramlar ve örnek uygulamalar. Türk Psikoloji Yazıları, 3(6), 49–74.
25. 25. Tavşancıl, E. (2002). Tutumların Ölçülmesi ve SPSS ile Veri Analizi. Ankara: Nobel Yayınevi.
26. 26. Winter, G. (2000). A comparative discussion of the notion of 'validity' in qualitative and quantitative research. The Qualitative Report, 4(3), 1-14. doi.org/10.46743/2160-3715/2000.2078
27. 27. Wiseman, R.L. (1983). A Cross-cultural confirmation of the dimensions of intercultural effectiveness. International Journal of Intercultural Relations, 7(1), 53-67. doi.org/10.1016/0147-1767(83)90005-6