IELTS Speaking’de Konu, Band Skorunu Değiştirir mi?
IELTS Konuşalım
IELTS Konuşalım, her ay IELTS ile ilgili bir bilimsel araştırmayı seçip akademik jargona boğmadan Türkçeye indirgediğimiz bir not serisi. Buradaki amaç “makale özeti” çıkarmaktan çok, çalışmanın neyi gerçekten gösterdiğini ve bunun pratikte ne işe yaradığını netleştirmek. Her sayıda bir araştırmanın temel sorusunu, bulgularını ve pratik sonuçlarını konuşacağız. En sonda da “bu çalışma neyi kanıtlıyor / kanıtlamıyor” kısmıyla, abartılı çıkarımları ayıklayıp elde kalan gerçek faydayı temiz şekilde sizlere sunacağız.
IELTS Konuşalım’ın 1. Sayısında IELTS Speaking’de karşımıza çıkan farklı konuların, adayların band skorlarını ne ölçüde etkilediğini yapılan akademik bir makaleden öğreneceğiz. Makaleye aşağıdaki bağlantıya tıklayarak ulaşabilirsiniz:
https://www.cambridgeenglish.org/Images/640158-silt-volume-54.pdf
Makale Künyesi
Khabbazbashi, N. (2021). On topic validity in speaking tests (Cambridge Studies in Language Testing, 54). Cambridge University Press. Öncelikle bu PDF tek bir makale değil. Camb- ridge Studies in Language Testing serisinden bir monografi: Khabbazbashi (2021), On Topic Validity in Speaking Tests.
Temel Dert
Temel derdi çok basit ama can yakıcı: Ko- nuşma sınavında verilen konu, adayı ne kadar etkiliyor ve bu etki “dil becerisi” ölçümünü bozacak kadar büyük mü?
"Konuşma sınavında verilen konu,
adayı ne kadar etkiliyor ve
bu etki dil becerisi ölçümünü
bozacak kadar büyük mü?"
Kitabın Ana Argümanı
Konuşma sınavları konuşmayı ortaya çıkarmak için konu verir. Fakat her konu tarafsız olamaz.
• Aynı İngilizce seviyesindeki iki adaydan biri bildiği, rahat geliştirebildiği bir konuya denk gelirse;
• Diğeri hiç fikir üretemediği bir konuya denk gelirse, ortaya çıkan performans örneği “saf konuşma becerisi”nin dışına taşar.
Bu da bir “geçerlik”, yani “ölçtüğünü ölçme” meselesidir.
Bizler de, Speaking derslerinde sayısız kez adaylarımızın bu konuyla ilgili endişe ve kaygı duyduklarına şahit oluyoruz. Şimdi bu konuya bilimsel olarak yanıt veren bu makaleyi inceleyelim.
Çerçeve
Çalışmanın Bulguları
1. Konular gerçekten de eşdeğer değil
İstatistiksel modellemeler, aynı görev türü içinde bile bazı konuların diğerlerinden bariz biçimde daha zor olduğunu gösteriyor. Yani “paralel konu” fikri pratikte her zaman tutmuyor.
2. Ama bu fark çoğunlukla bandı oynatacak kadar büyük değil
Yazar en kolay olası soru seti ile en zor olası soru setini kıyaslayıp aradaki farkın büyüklüğünü inceliyor. Sonuç şu: konu kaynaklı farklılık var ama çoğu durumda toplam puan düzeyinde band değişimine yol açacak kadar büyük görünmüyor. Başka bir deyişle, konu etkisi var ama genellikle sistemin genel kararını devirecek kadar güçlü değil.
"Konu etkisi var ama
genellikle sistemin genel
kararını devirecek kadar güçlü
değil."
3. Arka plan bilgisi performansı etkiliyor, ama çoğu zaman pratik etkisi sınırlı
Adayın konu hakkındaki bilgi düzeyi bazı ölçütlerde performansı istatistiksel olarak etkiliyor fakat bu etkinin büyüklüğü çoğu durumda “pratikte anlamlı” eşiklere ulaşmıyor. Yani ölçülebilir ama çoğu zaman küçük bir fark.
4. Ölçme bulguları ile aday algısı birbirinden kopuk
İlginç kısım burada. Etki küçük kalsa bile adaylar konu ve arka plan bilgisinin puanı ciddi biçimde etkilediğine güçlü şekilde inanıyor. Bu algı, sınav stresini ve performans kalitesini doğrudan etkileyebiliyor..
Referanslarımız
IELTS Öğretimi Açısından Çıkarımlar
Bu araştırma şunu söylüyor: Konu şansını sıfıra indirgemek mümkün değil ancak bu durum toplam bandı ciddi oranda etkileyecek ölçekte de değil.
Buna rağmen konu uyumsuzluğu adayın akıcılığını, tutarlılığını ve konu geliştirmesini olumsuz yönde etkileyebilir.
Bu yüzden sınıfta “konu bilmiyorum ama konuşacağım” becerisi çalışılmalı.
Pratikte en kritik zayıf nokta: “Konu Geliştirme”
Aday soruya cevap veriyor ama örnek, gerekçe, detay üretemiyor. Bu da konuşmanın niteliğini düşürüyor ve değerlendirilen içeriği fakirleştiriyor.
"Aday soruya cevap veriyor
ama örnek, gerekçe, detay
üretemiyor."
Özetle
Khabbazbashi, özellikle IELTS Speaking’de verilen konunun ve adayın arka plan bilgisinin konuşma performansını ne ölçüde etkilediğini inceleyerek “konu geçerliği” tartışmasını yürütmüş.
Analizler, bazı konuların diğerlerine göre daha zor olduğunu gösterse de bu farklılığın çoğu durumda toplam band kararlarını anlamlı biçimde değiştirecek büyüklükte olmadığını öne sürmüş.
Bununla birlikte adayların konu etkisini güçlü biçimde hissettiğini ve bunun, performanslarını olumsuz yönde etkileyebileceğini söylemiş.
Bu nedenle “konu seçimi ve konu geliştirme, hem adalet algısı hem de örnekleme kalitesi açısından dikkatle izlenmesi gereken bir geçerlik boyutudur” demiş.
Bu Makale Neyi Kanıtlıyor?
Neyi kanıtlıyor: IELTS Speaking’de konu ve arka plan bilgisi performansı etkileyebilir; ancak bu etkinin büyüklüğü çoğu durumda toplam band sonucunu anlamlı biçimde değiştirecek düzeye ulaşmaz. Etki daha çok psikolojik olarak görülür.
Neyi kanıtlamıyor: IELTS Speaking’in “konu şansı” yüzünden genel olarak adaletsiz olduğunu ya da adayın denk geldiği konunun tek başına bandını belirlediğini kanıtlamaz.
Kaynak ve Telif Notu
Bu yazı, aşağıda künyesi verilen akademik çalışmanın içeriğini yeniden yayımlamaz. Çalışmadan herhangi bir bölüm, tablo, görsel, veri seti veya metin parçası aktarılmamış; yalnızca eserin başlığı, temel künyesi ve erişim bağlantısı referans amaçlı paylaşılmıştır. Bu sayfada yer alan açıklamalar, AcademicIST’in ilgili çalışmadan ilhamla oluşturduğu, tamamen kendi ifadeleriyle yazılmış, öğretmen ve öğrencilere yönelik anlaşılır bir değerlendirme ve yorum metnidir. Yazının amacı akademik literatürü sadeleştirmek, bulguları sınıf içi uygulamalara bağlamak ve eleştirel bir okuma perspektifi sunmaktır. Metindeki yorumlar AcademicIST’e aittir; kaynak çalışmanın yazar(lar)ını, kurumunu ve/veya yayıncısını bağlamaz. Kaynak çalışmanın telif hakları ilgili yayıncıya ve/- veya yazar(lar)a aittir. Okuyucuların ayrıntılı bilgi, yöntem ve bulgular için doğrudan orijinal yayına başvurması önerilir. Orijinal kaynağa erişim bağlantısı aşağıda verilmiştir. Eğer bu sayfada belirtilen kaynakla ilgili bir atıf ha- tası, bağlantı sorunu veya hak sahipliği konusunda bir düzeltme talebiniz varsa, bizimle iletişime geçebilirsiniz. Talep halinde gerekli güncellemeler yapılacaktır.
Referanslar
Yazar(lar): Khabbazbashi, N.
Yıl: 2021
Eser adı: On topic validity in speaking tests
Yayın / Seri: Cambridge Studies in Language Testing, 54
Bağlantı: cambridgeenglish.org