Developing a valid and reliable speaking test


Tezin Türü: Yüksek Lisans

Tezin Yürütüldüğü Kurum: Çanakkale Onsekiz Mart Üniversitesi, Lisansüstü Eğitim Enstitüsü, İNGİLİZ DİLİ EĞİTİMİ ANABİLİM DALI, Türkiye

Tezin Onay Tarihi: 2019

Tezin Dili: İngilizce

Öğrenci: VAKKAS SELİM YÜKSEL

Danışman: Salim Razı

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

Yabancı dilde konuşma becerilerini test etme problematik bir konudur. Adayların konuşma becerilerini gerçekten yansıtan konuşma örneklerini ortaya çıkaran konuşma görevlerine, konuşmanın hangi yönlerinin değerlendirileceğine ve sınavı icra etmede ve değerlendirme de standartları sağlamaya karar vermek ve bunları tanımlamak konuşma sınavlarındaki güçlüklerdir. Bu konulardaki hatalar bir testin olmazsa olmaz iki koşulunda çatlaklara sebep olabilir; geçerlilik ve güvenilirlik. Bu bağlamda, aynı zamanda pilot adayı yetiştiren mühendislik fakültesinin hazırlık sınıfında AODRÇ B1 yeterlilik seviyesini ölçebilecek geçerli ve güvenilir bir konuşma sınavı ihtiyacı ortaya çıkmıştır. Dolayısıyla, bu çalışmada kurumun gereksinimi olan CEFR B1 seviyesini ölçebilen geçerli ve güvenilir bir konuşma sınavı geliştirme amaçlanmıştır. Bu çalışmada 164 sınava girecek olan, 36 puanlayıcı, 3 yönetici vardır. Sınavı geliştirmek için öncelikle test özellikleri belirlenmiş, sınav görevleri seçilmiş ve değerlendirme ölçekleri hazırlanmıştır. Daha sonra 36 puanlayıcıya puanlama eğitimi verilmiştir. Bu çalışmada hem nicel hem de nitel araştırma yöntemleri kullanılmıştır. Yapı geçerliliğini, puanlayıcılar arası güvenilirliği, puanlayıcı iç güvenilirliğini araştırmak için SPSS 22.0 istatistik programı kullanılmıştır ve testin standart hatasını araştırmak için çevrimiçi istatistik hesaplayıcıdan yararlanılmıştır. Kapsam geçerliliği, testin ölçtüğü yetenekler ile ders kitabının müfredatında bulunan hedef ve kazanımlar ve testte kullanılan konuşma konuları ile ders kitabının konu kapsam ve içerikleri bir karşılaştırma tablosu kullanılarak araştırılmıştır. Yönetici, öğretmen ve öğrencilerin sınav hakkındaki görüşlerini öğrenmek için mülakat yapılmıştır. Faktör analizi yoluyla yapılan yapı geçerliliği analizi bulguları konuşma notunu oluşturan dokuz maddenin eigen değeri 6.42 olarak ve değişkenin %72.1'ini açıklayarak bir faktör altında gruplandığını göstermektedir. Puanlayıcılar arası güvenilirlik analizi sonuçları 18 komisyonun 17'sinde puanlayıcılar arası korelasyonun pozitif ve güçlü olduğunu ortaya çıkarmıştır (rs ≥ .69, p. ≤ 0.03). Puanlayıcı iç güvenilirlik analizleri 36 puanlayıcıdan 33'ünün puanlamasının yüksek güvenilirlikte olduğunu ortaya çıkarmıştır (α ≥ .70, 9 madde üzerinden). Ayrıca, testin standart hatası da SE = .095 olarak bulunmuştur. İçerik geçerliliği araştırmasında konuşma sınavında test edilen yeteneklerin ders kitabı müfredatındaki hedef ve kazanımların %70'i ile eşleştiği ve sınavda konuşulan konu başlıklarının ders kitabının konu kapsam ve içeriğinin %50'sini doğrudan test ettiği bulunmuştur. Mülakat sonuçları konuşma sınavının özgün, pratik olduğu ve öğrenci ve öğretmenler üzerinde olumlu bir etki oluşturduğu sonucunu göstermiştir. Sonuç olarak, geliştirilen bu sınav güvenilir, geçerli, otantik, pratiktir ve olumlu bir etki oluşturmaktadır.