The Determination of an English Speaking Exam's Data Reliability Using Generalizability Theory

Abstract

Bu araştırmanın amacı, İngilizce konuşma sınavının güvenilirliğini Genellenebilirlik (G) kuramı ile hesaplamak ve olası hata kaynaklarının neler olabileceğini belirlemektir. Çalışmanın evrenini Trakya Üniversitesi İngiliz Dili Eğitimi birinci sınıfta öğrenim görmekte olan 50 öğrenci oluşturmaktadır. Çalışmada yer alan 50 öğrencinin konuşma becerileri beş kriter doğrultusunda iki puanlayıcı tarafından değerlendirilmiştir. Araştırmada, Trakya Üniversitesi Eğitim Fakültesi, İngiliz Dili Eğitimi Anabilim Dalı 2015-2016 akademik yılı İngilizce konuşma becerileri dönem sonu sınavına ait veriler kullanılmıştır. Verilerin analizi alt amaçlara göre genellenebilirlik kuramıyla belirlenen desen doğrultusunda yapılmıştır. Araştırmada 50 öğrencinin (ö) 5 kriter (k) doğrultusunda 2 puanlayıcı (p) tarafından puanlanması ile ö x k x p deseni için genellenebilirlik (G) ve karar (K) çalışması yapılmıştır. Bu çalışmada G kuramı ve karar (k) çalışması çerçevesinde yapılan analizler sonucunda ele alınan konuşma sınavı için hata payının en düşük olduğu durum öğrenci sayısı sabit tutulduğunda kriter ve puanlayıcı sayısının arttırılmasıdır. Çalışma, konuşma sınavı puanlarının G kuramı kullanılarak güvenilirliğinin belirlenmesi açısından alanyazına bir örnek teşkil edecektir.Using Generalizability theory, this study examined the dependability of an English speaking exam's data and determined potential error resources. The universe of the study includes 50 freshman students who study English Language Teaching at Trakya University. English speaking skills of these students were graded by two raters according to five criteria. The study used the data obtained from the final English speaking exam that the participants took during the 2015-2016 year at Trakya University. For data analysis, a model generated by G theory was used. According to the results of G and decision (D) study, if the number of students is kept constant and the numbers of criteria and raters are increased, the lowest error value will be obtained. The study will serve as a sample in terms of using G theory to examine the reliability of speaking exams data

    Similar works