Madde Tepki Kuramında Eşitleme Hatalarının Belirlenmesinde Kullanılan Delta ve Bootstrap Yöntemlerinin Çeşitli Değişkenlere Göre İncelenmesi*
Investigation of Delta and Bootstrap Methods for Calculating Error of Test Equation in IRT in Terms of Some Variables
Yazar: Salmaner Doğan, Rana; Tan, Şeref
Dergi: Gazi Eğitim Fakültesi Dergisi, Vol. 42 No. 2, 2021
Anahtar kelimeler: Standard error of equating,Delta method,Bootstrap ; Eşitlemenin standart hatası,Delta yöntemi,Bootstrap

Alan yazın incelendiğinde test eşitleme ve faydaları ile ilgili birçok çalışmanın olduğugörülmektedir. Ancak test eşitlemelerin faydalarının yanı sıra sınırlılıkları da vardır. Bunlardanen bilineninin eşitleme hataları olduğu söylenebilir. Bu araştırmada TIMMS 2015 4. sınıfmatematik verisi kullanılarak bootstrap ve delta yöntemleri ile elde edilen Madde Tepki Kuramıgözlenen ve gerçek puan eşitleme hatalarının farklı örneklem büyüklükleri ve ölçek dönüştürmeyöntemlerine göre incelenmesi amaçlanmıştır. Çalışma bir yöntemin daha kapsamlı ve farklıdeğişkenler açısından incelenmesi yönüyle betimsel bir çalışmadır. Çalışmada birey yetenekdüzeylerinin yakın olması amaçlanarak, TIMMS başarı ölçeğinin orta noktasının (500) üstündeve altında yer alan ülkelerin (Avusturalya, Kanada, İtalya, İspanya, Hırvatistan, SlovakCumhuriyeti, Yeni Zelanda, Türkiye ve Gürcistan) verisi içinden rastgele olarak seçilmiş 500,1000 ve 3000 kişilik örneklemler kullanılmıştır. TIMMS 2015 sınavında kullanılan 14 kitapçıktüründen hangisinin kullanılacağının belirlenmesi amacıyla Madde Tepki Kuramı varsayımlarıincelenmiş ve kitapçıklar arasından model uyum indekslerinin hepsinin kabul edilebilirdüzeyde olduğu kitapçık çifti seçilmiştir. Yapılan analizler sonucunda genel olarak her iki yöntemde de en düşük hata değerlerinin Stocking Lord yönteminde elde edildiği ve deltayöntemiyle elde edilen hataların tüm örneklem büyüklüğünde bootstrap yönteminde elde edilenhatalardan yüksek olduğu bulunmuştur.

After investigation of the literature, it can be seen that there are lots of studies about test equatingand its benefits. However, besides its good sides, it has some limitations, and it can be said thatthe most known one of them is test equating error. In this study, it is aimed the examination ofItem Response Theory observed and true score equating errors, obtained using TIMMS 2015 4thGrade math data by bootstrap and delta methods, according to different sample sizes and scaletransformation methods. The study is a descriptive research in terms of investigating one methodin a more detailed way, and according to different variables. It is used randomly chosen 500,1000, and 3000 sized samples from the countries (Australia, Canada, Italia, Spain, Croatia,Slovak republic, New Zealand, Turkey, and Georgia) above and below center point (500) ofTIMMS success scale. To determine which one would be used among 14 types of TIMMS 2015booklets, it was controlled Item Response Theory assumptions, and it was chosen the pair ofbooklets, having all acceptable model fit indices. As results of the analysis, it was observed thatfor both methods, scale transformation method, having smallest equating errors, was StockingLord, and that for all sample sizes, errors estimated by bootstrap method were smaller than oneby delta.