Değişen madde fonksiyonu gösteren madde oranının bireyselleştirilmiş bilgisayarlı ve çok aşamalı testler üzerindeki etkisi

Bu çalışmanın amacı, değişen madde fonksiyonu (DMF) gösteren maddelerin bulunduğu testlerde bireyselleştirilmiş bilgisayarlı test yaklaşımlarının (BBT ve ÇAT) performansının farklı koşullar altında incelenmesidir. Hem bireyselleştirilmiş bilgisayarlı testlerin (BBT) hem de çok aşamalı testlerin (ÇAT) DMF'li maddelerden ne şekilde etkilendiği farklı test uzunlukları (10-20-30 ve 40 madde) ve DMF'li madde oranları (%10 - %20 ve %30) altında araştırılmıştır. Bu amaçla, simülasyon yöntemi ile 5000 kişilik birey grubuna ilişkin yetenek parametreleri ve 600 maddelik bir havuz oluşturulmuş, havuzdaki maddelerin bir kısmı araştırmacı tarafından güçlük parametreleri değiştirilerek DMF'li hale getirilmiştir. Daha sonra, bir BBT ve iki ÇAT ortamı (1-3-3 ve 1-2-4 panel desenleri) RStudio üzerinde 'xxIRT', 'catR' ve 'mstR' paketleri yardımıyla oluşturulmuş; oluşturulan ortamlar aynı madde havuzu ve aynı bireyler üzerinden karşılaştırılmıştır. Çalışmada toplam 36 koşul, 30 replikasyon ile incelenmiştir. Simülasyonlar sonucunda, RMSE, yanlılık ve korelasyon değerleri hesaplanmış ve bu değerler aracılığıyla test desenlerinin performansları değerlendirilmiştir. Araştırma sonucunda, tüm test uzunlukları ve DMF oranı koşulları boyunca en iyi ölçüm hassasiyetini BBT deseninin sağladığı görülmüştür. ÇAT 1-3-3 ve 1-2-4 desenleri kıyaslandığında ise, 1-3-3 deseninin daha fazla koşulda yüksek ölçüm hassasiyeti sunduğu; ancak 1-2-4 desenine kıyasla daha yüksek performans gösterdiğini söylemek için bulguların yeterli olmadığı sonucuna varılmıştır. Ayrıca, DMF'li madde oranının artışından en az etkilenen desenin BBT deseni olduğu, ÇAT'ların ise özellikle 10 maddelik testte bu artıştan etkilendiği görülmüştür. Üç desen için de test uzunluğu arttıkça RMSE ve yanlılık değerinin düştüğü, korelasyon değerinin ise arttığı gözlenmiştir. Dolayısıyla madde sayısındaki artış ölçüm hassasiyetini de artırmıştır.