TOEFL^® Temel™ Bilgiler Değerlendirmesi: Yeni Bir Testin Tasarımı ve Geliştirilmesi

16 Haziran 2021

ETS'deki her yeni test, dikkatli bir tasarım ve geliştirme süreciyle oluşturulur. TOEFL^® Değerlendirme Ailesi'ne en yeni eklenen TOEFL^®  Essentials™ testi de istisna değildir. TOEFL^® Essentials™ Test 2021 Tasarım Çerçevesi'nde ayrıntılı olarak belirtildiği üzere, TOEFL Essentials testi, verimliliği maksimize etmeyi amaçlayan ve sınav katılımcılarının İngilizce iletişim kurma yeteneğini vurgulayan dijital olarak sunulan bir İngilizce yeterlilik değerlendirmesidir. Çok aşamalı uyarlanabilir test tasarımı kullanarak, aynı zamanda Ortak Avrupa Referans Çerçevesi'nin tam yeterlilik aralığının ölçülmesini sağlar. Burada, yeni bir test oluşturmada titiz görev tasarımı ve uzman test geliştirme uygulamalarının oynadığı önemli rolleri vurguluyoruz.

ETS'nin değerlendirme görev tasarımına yaklaşımı

Yeni TOEFL Essentials testini oluşturan görevler, sınav yapanların sadece dil bilgisi yerine İngilizce neler yapabileceklerini  ortaya çıkarmak için görev temelli prensiplere dayanarak tasarlandı. Bu özellikle, sınav yapanların gerçek dünyada ne kadar başarılı olacağını tahmin etmek için kullandığımız durumlarda, İngilizce etkili iletişim kurmaları gerekirken, bu özellikle önemlidir.

TOEFL Essentials testindeki yazma görevlerini değerlendirme görevi tasarımına yaklaşımımızı göstermek için ele alalım. Yazma görevleri, sınav katılımcılarına yazma amaçı ve hedef kitlesi vermek için tasarlanmıştır; aynı zamanda sınav katılımcılarının gerçek hayatta karşılaştıklarını yansıtır. Örneğin, bir veya iki cümle yazmak bir fotoğrafı tanımlamak için oldukça tipik bir test görevidir ve amacı ya da hedef kitlesi yoktur. Aynı resim açıklama görevi, sınav yapanlar fotoğrafı kendi sosyal medya hesaplarına paylaştıklarını ve ilgili deneyimlerini uzun bir açıklama yazdıklarını hayal ettiklerinde çok daha ilgi çekici ve anlamlı hale geliyor. Bu tür görevler, sınav yapanların İngilizce olarak neler yapabileceği hakkında bize çok şey anlatabilir.

Bu yazma görevleri, sınav katılımcılarının farklı yeterlilik seviyelerindeki yazma becerilerini en yüksek düzeyde ölçmek üzere tasarlanmıştır. Örneğin, sosyal medya gönderi görevi, araştırmalarla başlangıç seviyesinde öğrenenleri etkili bir şekilde ayırt ettiği gösterilmiştir. Ancak, daha yüksek yeterlilik seviyelerine sahip sınav yapanlar için etkinliği sınırlıdır, çünkü hepsi muhtemelen iyi performans gösterebilir. Bu yüksek yetkinlikli öğrenenler için akademik tartışma görevi, sınav katılımcılarını daha sofistike dil kullanımı (örneğin, kelime dağarcığı, dilbilgisi, söylem işaretleyicileri) gerektirerek görevi başarıyla tamamlamak için zorlamaktadır ve bu nedenle bu becerileri arasında ayrım sağlar. Genel olarak, TOEFL Essentials sınavındaki yazma görevleri (ve diğer görevler) sınav yapanların İngilizce yapabileceklerini ortaya çıkarmak, İngilizce iletişim için net bağlam ve amaç sağlamak ve farklı yeterlilik seviyelerindeki öğrenciler arasında maksimum ayrım sağlamak için tasarlanmıştır. Tüm bu özellikler, testin etkinliğini optimize eder ve sınav katılımcılarının İngilizce becerilerinin doğru yorumlarını destekler.

Önde gelen değerlendirme geliştirme uzmanlığından yararlanmak

Bu tür tasarım ilkelerini kullanarak, ETS'deki değerlendirme uzmanları, TOEFL Essentials sınavında değerlendirilen dört beceri (dinleme, okuma, yazma ve konuşma) üzerinde yeni görevler geliştirmiştir. Tasarım süreci çok aşamalı olduğu gibi (yani prototip aşaması, pilot testi ve saha testi), yeni test içeriğinin geliştirilmesi de karmaşık, çok aşamalı bir süreci içerir. Bu geliştirme sürecinin genel amacı, üretilen içeriğin ETS'nin kalite ve adalet standartlarını karşılamasını ve içerik, zorluk ve etkileşim düzeyi açısından benzer test deneyimleri sağlamasını sağlamaktır.

Değerlendirme uzmanları bu sürecin merkezinde yer alır ve baştan sona liderlik ederler. TOEFL Essentials sınav ekibinin kilit üyeleri olan değerlendirme uzmanları, üniversite düzeyinde dil öğrenimi veya ilgili konularda eğitim almış ve çoğu uluslararası düzeyde K–12 okullarında, kolejlerinde veya üniversitelerde ders vermiş uzmanlardır. Birçok değerlendirme uzmanı, İngilizcenin eğitim dili olduğu üniversitelerden lisansüstü derece dereceleri almış İngilizce öğrenenlerdir.

İçerik geliştirme süreci boyunca, değerlendirme uzmanları ayrıntılı spesifikasyonlara uyar. Bu özellikler, test tasarım aşamalarında oluşturulur ve testteki her görev veya öğenin oluşturulması ve gözden geçirilmesi için kullanılır. Örneğin, TOEFL Essentials testindeki yazma görevleri, metin türü ve uzunluğu, sınav sahibine verilen talimatlar, kullanılan ses, grafikler ve fotoğraflar hakkında net şartlar içerir. Test görevleri yazıldıktan sonra, farklı değerlendirme uzmanlarından çok sayıda kapsamlı inceleme ve ayrı editoryal ve adalet değerlendirmeleri alırlar.

Değerlendirme geliştirme için teknolojiyi entegre etmek

Test geliştirme sürecini daha verimli hale getirmek için çok çeşitli son teknoloji araçlar kullanılır. Örneğin, değerlendirme uzmanları tarafından ürünler oluşturmak, incelemek ve depolamak için kapsamlı bir platform kullanılır. Bazı ürün türleri için, değerlendirme uzmanları ürün geliştirme sürecini kolaylaştırmak için Teknoloji Destekli Eşya Oluşturma (TAIC) adlı özel bir teknolojik yetenekten yararlanır. TAIC, TOEFL Essentials testi için özel olarak geliştirilen görev içeriği spesifikasyonlarını ve zorluk parametrelerini entegre eder. Ancak, bu öğelerin içeriği TAIC aracılığıyla oluşturulduktan sonra, değerlendirme uzmanları tarafından uygulanan titiz, çok aşamalı inceleme sürecinden geçer; böylece geliştirilen ürünlerin ETS standartlarına ve beklentilerine uygun olduğundan emin olmak için test katılımcısına sunulmadan önce.

Bu dikkatli ve titiz tasarım ve geliştirme uygulamaları, yeni TOEFL Essentials sınavını geçerli ve güvenilir bir test yapan ve sınav katılımcılarının iletişim amaçlı İngilizce kullanma becerileri hakkında güvenilir bilgiler sağlamaktadır.

Yeni TOEFL Essentials testi hakkında daha fazla bilgi edinmek için https://www.ets.org/toefl/score-users/essentials/about.html adresini ziyaret edin.

Pablo Garcia Gomez, ETS'de değerlendirme tasarımcısıdır. Shoko Sasayama, ETS'de yardımcı araştırma bilimcisidir.