Önde gelen bilim insanları, eşitlik hizmetinde değerlendirmenin kişiselleştirilmesini araştırmak üzere ETS'de bir araya geldi

"Her bireyin bilgi ve becerilerini, kendilerine en uygun şekilde ölçmeye çalışmalıyız."
- Randy Bennett, ETS Norman O. Frederiksen Değerlendirme İnovasyonu Kürsüsü

Teoride, kişiselleştirilmiş değerlendirme çok ... Açık. Hepimiz neye ihtiyaç duyulduğu konusunda hemfikir olabiliriz, ancak "nasıl yapıyoruz" konusu, değerlendirme topluluğunun gelecekteki değerlendirmeyi yeniden tanımlamasını ve her bireyin geçmişi, ilgisi, ana dili veya kültürel kimliği ne olursa olsun ne bildiğini ve yapabileceğini ölçmek için çözümler geliştirmesini gerektiren zorluklar ve fırsatlar ortaya çıkardı.

ETS olarak, değerlendirmenin geleceğini her gün yaşıyor ve nefes alıyoruz. Ve kişiselleştirilmiş öğrenme ve diğer önemli araştırma alanları üzerinde çalışan önde gelen araştırmacılar ve yenilikçi zihinlerin bulunmasından ayrıcalıklı olsak da, mevcut değerlendirme paradigmasını tek başımıza yeniden şekillendiremeyeceğimizi biliyoruz.

"Bu etkinlik, kişiselleştirilmiş değerlendirmelerin potansiyelini daha büyük iyilik için birlikte keşfetmek için attığımız birçok adımdan biri," dedi ETS Araştırma Başkan Yardımcısı Kadriye Ercikan .

Etkinlik, eşitliğe hizmet eden kişiselleştirilmiş değerlendirmelerin gerçeğe dönüştürülmesi için neler gerekeceği üzerine tartışmaları teşvik eden dinamik bir diyalog başlattı. Bu, ETS'nin yeni araştırma gündemiyle uyumlu olarak bu yıl planlanan dört toplantının ilkiydi; İlk etkinliğimizde duyduklarımız şunlar:

Randy Bennett,
Norman O. Frederiksen Değerlendirme İnovasyonu Kürsüsü, ETS

"ABD ve dünyanın birçok ülkesi benzeri görülmemiş düzeyde nüfus değişikliği yaşadı. Bu değişim, özellikle ırk/etnik, dilsel, sosyoekonomik çizgilerde birçok boyutta daha fazla çeşitlilik yönünde olmuştur. Tüm bu boyutlar, önemli düzeyde kültürel heterojenlik getiriyor. Bugünkü testler, bizim veya birçok başka ülkenin yaşadığı kültürel çeşitlilik seviyelerine uyacak şekilde tasarlanmadı. Bu çatışma, çeşitliliğe yanıt verme hizmetinde kişiselleştirilmiş olmak üzere yeni değerlendirme kavramlarına olan ihtiyacı artırıyor.

Eğer eşitlik amaçlarına ulaşmak için kasıtlı olarak yapılmazsa, kişiselleştirme aynı derecede daha büyük eşitsizlik seviyelerine yol açabilir. Gelişimi kim önemli, seçtikleri yöntemler, kişiselleştirmek için seçtikleri değişkenler, kullandıkları katılımcı örnekleri önemlidir. Test geliştirenlerin ve yapay zeka öğrenme sistemleri geliştirenlerin demografisi, ABD veya birçok başka ülkedeki devlet okulu nüfuslarının demografisine hiç benzemiyor. Bu, eşitlik için kişiselleştirme tasarımı bağlamında bir sorun."

Matthew L. Bernacki,
Kuzey Carolina Üniversitesi Chapel Hill Öğrenme Bilimleri ve Psikoloji Çalışmaları Doçenti, Donald ve Justeen Tarbet Seçkin Bilim Sahibi

"Eğitim araştırmacıları, öğretim tasarımlarının belirli öğrenenlere nasıl fayda sağlayabileceğini onlarca yıl araştırdı ve öğrenmeyle ilgili birçok psikolojik teori var; bu teoriler, öğretmenler ve tasarımcılara, bir dersin öğrenenin öğrenme deneyimine kattığı bir varlığı nasıl barındırabileceğini veya kullanabileceğini düşünmeleri için bir oyun kitabı olarak hizmet verebilir. Bu bilgiyi inşa etmek yerine, kişiselleştirme uzmanları mevcut bilgi tabanını tasarım şemalarına dahil etmelidir; böylece öğrenmenin deneyimlerini ve sonuçlarını nasıl etkileyebileceği değerlendirilebilecek doğru özelliklere göre kişiselleştirebilirler. ... Kişiselleştirmeyi tasarım için bir mercek olarak benimsemek, öğrenme ve değerlendirme deneyimleri tasarlarken bireyin daha kapsamlı bir temsilini oluşturmamıza yardımcı olabilir; bu deneyimler her bireyin bilgi ve becerilerini göstermesi ve geliştirmesi için eşit bir fırsat sunar."

Okan Bulut,
Alberta Üniversitesi Ölçüm ve Veri Bilimi Doçenti

"Herkese uyan tek ölçümlerden kişiselleştirilmiş değerlendirmelere geçerken, güvenilirlik ve geçerlilik gibi eğitim ölçümünün temel kavramlarını yeniden düşünmemiz gerekecek. Bu kavramlar için daha geniş ve kapsayıcı tanımlarla, kişiselleştirilmiş değerlendirmelerin kitlesel benimsenmesini daha iyi destekleyebiliriz. Kişiselleştirme, daha adil ve kapsayıcı bir öğrenme ortamı sağlayarak toplumsal sorunları ele alma potansiyeline sahiptir. Kişiselleştirilmiş değerlendirmeler, öğrenenlerin kendi öğrenme deneyimleri ve seçimleriyle bildiklerini ve yapabileceklerini gerçekçi şekilde göstermelerini sağlayacak."

Neil Heffernan,
The ASSISTments Vakfı'nın Kurucusu ve Yönetim Kurulu Başkanı; William Smith Bilgisayar Bilimleri Profesörü ve Öğrenme Bilimi ve Teknolojileri Yüksek Lisans Programı Direktörü, Worcester Politeknik Enstitüsü

"ETS ve akranlarıma katılıp eşitlik hizmetinde kişiselleştirme üzerine konuşmak harikaydı. Biçimlendirici değerlendirmeler önemli olmaya devam edecek ve çevrimiçi matematik platformum ASSISTments.org'nin öğrenmeyi nasıl kişiselleştirdiğini açıklamak için bu gruba katılmaktan onur duydum."

Serena Magrogan,
AP Müfredat, Öğretim ve Değerlendirme Kıdemli Direktörü^® College Board^®

"Kişiselleştirilmiş değerlendirmenin anahtarı, katıflı öğrenmedir. Net çıktı parametreleri ve önceden puanlama rubrikleriyle belirlenmiş öğrenme fırsatları, öğrencilerin çalışmalarının çıkarımına sahiplenme, sorumluluk alma ve hatta gurur duymalarına yardımcı olabilir. Ve bu şekilde, değerlendirme onlar için işe yarıyor, aleyhlerine değil."

Kyndra V. Middleton,
Eğitim Psikolojisi Lisansüstü Eğitim Profesörü,
Howard Üniversitesi

"Son birkaç yılda, öğrenme ve değerlendirmede kişiselleştirme konusunda heyecan verici ve umut verici gelişmeler gördük. Kişiselleştirme, her öğrenciye fayda sağlama potansiyeline sahiptir ve aynı zamanda eşit erişim sağlar. Ancak, kişiselleştirme ile birlikte yeterli ölçüm sağlama sorumluluğu da gelir, ancak şu anda bu hareket olumlu bir yönde ilerliyor!"

Robert J. Mislevy,
Maryland Üniversitesi Emekli Profesör, Eski Frederic M. Lord Ölçüm ve İstatistik Kürsüsü, ETS

"Kişiselleştirme ve Sosyo-Kültürel Olarak Duyarlı Değerlendirme (SCRA), öğrencilerin kişisel, sosyal, kültürel ve dilsel geçmişlerini uygun şekilde kullanarak bildiklerini ve yapabileceklerini daha iyi göstermektedir. Konuşmam, bu ilkeleri çeşitli amaçlar için uygulayan çeşitli türde değerlendirmelerin özelliklerini tasarlamak, kullanmak ve analiz etmek için bir kanıt-akıl yürütme çerçevesini özetliyor. Öğrenme için skor yorumlarının yerel geçerliliği ile büyük ölçekli test programları için puanların karşılaştırılabilirliği arasında farklı uzlaşmalar sağlayan tasarımları inceliyorum. Bilim ve teknolojiyi öğrenmedeki ilerlemeler, hedeflenmiş puan kullanımları için geçerliliği ve dolayısıyla adaleti artıran çeşitli yaklaşımları mümkün kılar."

Jesse R. Sparks,
Kıdemli Araştırma Bilimcisi, ETS

"Daha fazla eşitlik adına değerlendirmenin kişiselleştirilmesi konusunda birçok zorluk ve fırsat var. Kişiselleştirmeyi nasıl uyguladığımız, değerlendirme kullanım durumuna göre kapsam ve kalite açısından değişebilir — örneğin, öğretim ve öğrenmeyi desteklemek için tasarlanmış değerlendirmelerde kişiselleştirmenin dahil edilmesi için daha fazla fırsat olabilir. Kişiselleştirme sürecini nasıl ve ne zaman kişiselleştirmemiz gerektiğini ve kişiselleştirilmiş desteğin değerlendirmeye daha adil katılım ve daha adil öğrenci sonuçları ile eğitim fırsatlarına katkı sağlayabileceği derecede anlamamız kritik öneme sahiptir."

Ye Tong,
NBME Değerlendirme Operasyonları Kıdemli Başkan Yardımcısı

"Kişiselleştirilmiş değerlendirmeler, öğrenenleri başarıya giden yollarında desteklemek için biçimlendirme alanında muazzam potansiyele sahiptir. Ancak, kişiselleştirme sırasında değerlendirme tasarımı ve uygulamasının kültürel ve sosyal yönlerine dikkat etmeliyiz. Bir yandan, herkese geçmişi ne olursa olsun bildiklerini ve ne yapabileceklerini göstermek için adil değerlendirmeler sunmamız gerekiyor. Öte yandan, değerlendirmeleri öğrenme aracı olarak kullanıp öğrenenlerin sadece kendi kültürleri ve değerleri hakkında değil, aynı zamanda başkalarının da farkındalığını yaratmamız gerekiyor."