BOBUT uygulamasında kullanıcı deneyimine etki eden değişkenlerin ve olası etkilerinin belirlenmesi

Bu araştırma, Bilgisayar Ortamında Bireye Uyarlanmış Testlerde kullanıcı deneyimine etki eden değişkenlerin ve olası etkilerinin belirlenmesi amacıyla yapılmıştır. Bu bağlamda yürütülen çalışma yakınsayan paralel karma yöntem deseni çerçevesinde gerçekleştirilmiştir. Araştırmanın nitel boyutu öğrenci görüşlerinin içerik analizi yöntemiyle incelenmesini içerirken, nicel boyutu tarama araştırması olarak gerçekleştirilmiştir. Ayrıca araştırma BOBUT tasarımlarına ilişkin katkılarıyla Ar-Ge çalışması özelliği göstermektedir. Bu doğrultuda madde havuzunun oluşturulması için eğitimde ölçme ve değerlendirme dersine ilişkin 130 test maddesi yazılmıştır. Alan ve dil uzmanlarının görüşleri doğrultusunda 40 madde havuzdan çıkarılarak bireylere 90 test maddesi uygulanmıştır. Uygulamalar eksik test deseni ve tüm maddelerin uygulanması olmak üzere iki farklı şekilde yapılmıştır. Madde Tepki Kuramı varsayımlarından yerel bağımsızlık ilkesini ihlal eden ve madde uyum indeksi düşük olan 15 madde daha testten çıkarılmıştır. Nihai havuz olarak belirlenen 75 madde için 293 eğitim fakültesi öğrencinden toplanan verilere dayalı post-hoc simülasyonlar yürütülmüştür. Simülasyon sonuçlarına göre MTK modeli olarak Rasch model; durdurma kuralı olarak 10 maddelik standart test uzunluğu; yetenek kestirimi için En Yüksek Sonsal ve başlangıç düzeyi için 𝜃'nın -0.5 ile +0.5 aralığından rastgele seçilen bir madde ile uygulanmasının en uygun ölçüt yöntem ve değerler olduğuna karar verilmiştir. BOBUT kullanıcı deneyimine etki edeceği düşünülen geribildirimin kapsamı ve süre bilgisi değişkenlerine göre dört BOBUT tasarlanmıştır. BOBUT uygulamasına katılan bireyler bir web sitesi aracılığıyla farklı testlere atanmıştır. Uygulamaya 131 eğitim fakültesi öğrencisi katılmış ve uygulama sonrasında BOBUT deneyimine ilişkin görüşleri toplanmıştır. BOBUT uygulaması sonucunda geniş kapsamlı geri bildirime sahip testleri alan bireylerin teste olan güvenlerinin ve motivasyonlarının daha yüksek olduğu görülmüştür. Süre bilgisini görmeyen ii bireylerin görüşleri farklılık gösterse de bireyler genellikle stres düzeyinin daha düşük olduğunu söylemişlerdir. Ayrıca bireylerin BOBUT uygulamasına ve sistemine yönelik görüşleri incelenmiştir. Sonuç olarak geniş kapsamlı ve anlaşılır bir şekilde verilen geribildirimin kullanıcı deneyimini iyileştireceği düşünülmektedir.