ETS'de Test Güvenliği Hakkında Bilmediğin Beş Şey

Ray Nicosia tarafından

Princeton, NJ, ABD (3 Haziran 2022) – ETS'deki değerlendirmelerimizin güvenliğini sağlamak onlarca yıllık bir çabadır. Test kağıt ve kalemden bilgisayar tabanlıya, test merkezinden evde gerçekleştiği için test endüstrisinin dönüşümü derin oldu. Bu evrimle birlikte, güvenliği yeni ve farklı şekillerde görme ihtiyacı ve testlerimizin bütünlüğünü bozmaya çalışanların önünde olmak için gerekli her şeyi ve hatta fazlasını sürekli yapmamız gerekiyor.

Test güvenliği alanı ne kadar karmaşık olursa olsun, ETS'de test güvenliği hakkında bilmediğiniz (ama bilmeniz gereken) beş şey işte:

1. ETS'nin Test Dürüstlüğü Ofisi (OTI), 64 yılı aşkın süredir test dolandırıcılığı ve hilelerle mücadele etmektedir.

64 yıldır ETS, sınavlarımızın geçerliliğini ve bütünlüğünü sağlayan araştırmacılar, uzmanlar ve analistlerden oluşan özel bir OTI ofisi çalıştırıyor ve bu kişilerin işi dürüstçe sınav yapanları savunmaktır. Yüksek eğitimli gözetmenler, yapay zeka teknolojileri ve veri analiziyle koordine olarak, ekip, haksız kazanılmış veya yapıldığı şüphesi olan puanları ve test oturumlarını analiz eder ve bunun sonucunda kanıt gerektirdiğinde test puanlarını iptal eder. Sektörde lider olarak OTI ofisimiz, dünya çapında hilelerle mücadele etmek için daha fazlasını yapma ihtiyacını kabul ediyor.

2. ETS, son 60 yılda hilelerle mücadele etmek için test güvenliği ve teknoloji altyapısına milyarlarca dolar yatırım yaptı.

ETS, son birkaç yıldır test güvenliği ve teknoloji altyapısına her yıl on milyonlarca dolar yatırım yaptı — son 60 yılda milyarlarca. Önümüzdeki aylarda, teknolojik yeteneklerimizi geliştirmek ve test güvenliği önlemlerini geliştirmek için on milyonlarca dolar ek yatırım yapmayı planlıyoruz; böylece en küçük hile türlerini bile yakalayacağız. Bu yetenekler ve iyileştirmeler şunları içerir ancak kesinlikle bunlarla sınırlı değildir: ETS'nin özel uzmanlık ve yetenekleri kullanılarak uzaktan erişim yazılımı (RAS) önlemenin devam etmesi ve yeni, entegre teknolojiyle birleşerek dünya çapında test güvenliği önlemlerini sürdürmek; yüksek oranda dürüst olmayan test yapma davranışlarını tespit etmeye devam edecek makine öğrenimi modellerinin geliştirilmesi; hile çetelerini ve hilekarlarını tespit edip kapatma çabalarını destekleyen mevcut istatistiksel değerlendirme modellerinin geliştirilmesi ve geliştirilmesi; ve hilelerle mücadeleye yönelik yeni eşya türleri ve değerlendirme tasarım yaklaşımları üzerine araştırmalara devam etmek. Yaptığımız yatırımlar, sorunları araştırmak, puanları iptal etmek ve test politikalarımızı ihlal eden bireyleri sorumlu tutmak için uygulanan titiz güvenlik protokollerimiz ve kalite kontrol prosedürlerimize ek olarak gerçekleşmektedir.

3. ETS, sınav puanlarını iptal edebilir ve iptal ediyor — hatta sınav katılımcılarına ve kurumlara açıklandıktan sonra bile.

ETS, bir sınav yapan kişinin puanlarının haksız yere kazanılmış olabileceğine dair kanıta sahip olduğunda — bu bizim test politikamızın ihlalidir — OTI, sınav oturumunu ve kazanılan puanları daha iyi değerlendirmek ve bu puanların iptal edilip edilmeyeceğine karar vermek için puanların açıklanmasını engelleyebilir. Bazı durumlarda, bu, puanların haksız avantaj nedeniyle kazanıldığına dair kanıtlar toplandığında, test katılımcılarına ve/veya kurumlara zaten verilmiş olsa bile puanların iptal edilmesi anlamına gelir. En aşırı durumlarda, ETS test politikalarımızı ihlal eden sınav katılımcılarını yasaklar.

4. Standart değerlendirmelerde hile yapmak ETS'ye özgü değildir.

Hile, son 2 yılda uzaktan test endüstrisinin patlamasıyla gündeme gelen sektör çapında bir sorundur. Eğitim sektöründe sıkça tartışılmasa da, paydaşlarımıza gördüklerimiz, endişelerimizi nasıl ele aldığımız ve gelecek planlarımız hakkında bilgilendirme borçluyuz. Test güvenliğinin, puanların geçerli, güvenilir ve güvenilir olmasını sağlayan uçtan uca test sürecinin en önemli temel unsurlarından biri olduğunu biliyoruz ve test güvenliği ile uzaktan test alanında öncü kuruluş olarak, dürüstçe test yapan katılımcıları koruma sorumluluğumuzu ciddiye alıyoruz. Dünyanın dört bir yanındaki kurumlara hizmet etmeye de aynı derecede bağlıyız ve yüksek riskli kararlar için puanlara dayanıyoruz. Güvenilmez puanlar, yükseköğretim programlarının zorluğunu karşılayamayan hazırlıksız öğrenciler için sonuçlar doğurmuş ve bunun sonucunda zor kazanılmış kurumsal itibarları olumsuz etkiler yaratır. Puan iptalleri, test kuruluşlarının iyi bir uygulamasının işaretidir ve böyle iptallerin olmaması hem kurumları hem de paydaşları düşündürmelidir.

5. Evde yapılan değerlendirmeler, sınav katılımcıları arasında hile girişimlerinin artmasına katkıda bulundu.

Evde test yapmanın yeni sunum modeliyle birlikte, ETS, evde testin ikinci yılında (FY21) ilk yıla (FY20) kıyasla hem TOEFL^® hem de GRE^® test uygulamalarında puan iptallerinde %200'den fazla artış gördü. Bu artış gerçekleşmiş olsa da, bu uyanıklığımızın azaldığı anlamına gelmiyor. Aslında, tam tersi doğrudur; bu, sahtekarlığı tespit edip kapsamlı analiz ve soruşturmalar yapıldıktan sonra puanları iptal etme yeteneğimizle kanıtlanmaktadır. Daha fazla hile girişimi olsa da, varsayılan olarak daha fazla puan iptal ediliyor. Sınav yapanların uzaktan erişim yazılımı, proxy testi, mesaj göndermek ve almak için cep telefonları ile ve bunların ve diğer hile tekniklerinin kombinasyonunu kullanarak hile yapma girişimlerine örnekler gördük. OTI ekibimiz, test güvenliği konusunda önde gelen uzmanlardan oluşuyor ve değerlendirmelerimizde hile yapmaya çalışan test katılımcılarını yakalamak ve caydırmak konusunda önde kalmaya devam edecek.

Ray Nicosia, ETS Test Bütünlüğü Ofisi'nde Test Güvenliği Başlısıdır.

ETS hakkında

ETS olarak, titiz araştırmalara dayalı değerlendirmeler oluşturarak dünya çapında insanlar için eğitimde kalite ve eşitliği ilerletiyoruz. ETS, öğretmen sertifikası, İngilizce dil öğrenimi, ilkokul, ortaokul ve yükseköğretim için özelleştirilmiş çözümler sunarak bireylere, eğitim kurumlarına ve devlet kurumlarına hizmet veriyor; ayrıca eğitim araştırmaları, analizleri ve politika çalışmaları yürütüyor. 1947 yılında kar amacı gütmeyen bir kuruluş olarak kurulan ETS, dünya çapında 9.000'den fazla noktada 180'den fazla ülkede TOEFL^® ve TOEIC^® testleri, GRE^® testleri ve The Praxis Series^® değerlendirmeleri dahil olmak üzere her yıl 50 milyondan fazla test geliştiriyor, yönetiyor ve puan alıyor.

www.ets.org