DEVELOPING A SCORING HOLISTIC RUBRIC FOR WORD KNOWLEDGE OF SECONDARY SCHOOL STUDENTS

Abstract

The aim of this study is to develop a holistic rubric to find out word knowledge levels of secondary school students. First, it was determined that how the students define words, then, these definitions were classified and divided into levels.The study sample consists total of 66 students of 5th, 6th, 7th and 8th grades of a secondary school in Malatya which selected by “convenience sampling” method.After the last case of the scoring rubric, reliability analysis calculated by Krippendorff’s alpha coefficient, Cohen’s kappa coefficient and Pearson moment multiplying correlation coefficient. The correlation between the scores given by the two encoders, were positive and high. Regarding the content validity of the rubric, expert opinion was obtained. These results indicate that the rubric which developed is sufficiently valid and reliable

Keywords

• Secondary school, word knowledge, rubric

ORTAOKUL ÖĞRENCİLERİ İÇİN KELİME BİLGİ DÜZEYİ BÜTÜNCÜL DERECELİ PUANLAMA ANAHTARI GELİŞTİRME ÇALIŞMASI

Öz

Bu çalışmanın amacı ortaokul öğrencilerinin kelime bilgi düzeylerini ortaya koymaya yönelik bir bütüncül dereceli puanlama anahtarı geliştirmektir. Bir ön çalışma yapılarak öğrencilerin kelimeleri nasıl tanımladıkları belirlenmiş, bu tanımlamalar tasnif edilerek seviyelere ayrılmıştır. Araştırmanın çalışma grubu, Malatya ili merkezinde bulunan ve “uygun örnekleme” yöntemine göre seçilen bir ortaokulun 5, 6, 7 ve 8. sınıflarında öğrenim gören toplam 66 öğrenciden oluşmaktadır.Dereceli puanlama anahtarına son hâli verildikten sonra güvenilirlik analizi “Krippendorff’un alfa katsayısı”, “Cohen’in kappa katsayısı” ve “değerlendirmeciler arası tutarlılık” yöntemi kullanılmıştır. İki değerlendirmecinin verdiği puanlar arasında anlamlı, pozitif ve yüksek bir ilişki çıkmıştır. Dereceli puanlama anahtarının kapsam geçerliliği uzman görüşü ile sağlanmıştır. Bu sonuçlar geliştirilen dereceli puanlama anahtarının yeterli düzeyde geçerli ve güvenilir olduğunu göstermektedir

Anahtar Kelimeler

• Ortaokul, kelime bilgi düzeyi, dereceli puanlama anahtarı