Eğilim puanları kullanılarak ABİDE çalışmasındaki maddelerin değişen madde fonksiyonu açısından incelenmesi
Investigation of differantial item functioning of the test items in the ABIDE study by using propensity scores
Yazar: MEHMET YILMAZ
Danışman: DR. ÖĞR. ÜYESİ KÜBRA ATALAY KABASAKAL
Hacettepe Üniversitesi / Eğitim Bilimleri Enstitüsü / Eğitim Bilimleri Ana Bilim Dalı / Eğitimde Ölçme ve Değerlendirme Bilim Dalı
Derece: Yüksek Lisans, 2021
Konu: Eğitim ve Öğretim = Education and Training
Dizin: Değişen madde fonksiyonu = Differential item function ; Eğilim skoru eşleştirmesi = Propensity score matching ; Lojistik regresyon yöntemi = Logistic regression method ; Madde yanlılığı = Item bias ; Ortak değişkenler = Covariates ; Ölçme-değerlendirme = Measurement and evaluation

Özet:
Bu çalışmanın amacı, ABİDE 2016 uygulamasının Türkçe, matematik ve fen bilimleri alt testlerinde yer alan maddelerin okul türü değişkenine göre değişen madde fonksiyonu (DMF) gösterip göstermediğini, eğilim puanı eşleştirme (EPE) öncesi ve sonrası incelemektir. Bu bağlamda EPE'nin DMF üzerindeki etkisi incelenirken ve EPE metodolojisinin adımları sunulmuştur. DMF analizleri, EPE öncesinde ve sonrasında Mantel-Haenszel (MH) ve lojistik regresyon (LR) yöntemleriyle gerçekleştirilmiştir. Çalışmanın verilerini Millî Eğitim Bakanlığı Ölçme, Değerlendirme ve Sınav Hizmetleri Genel Müdürlüğü tarafından sağlanan ABİDE 2016 uygulamasına katılan 6330 öğrenci oluşturmuştur. EPE analizleri öncesi tüm grup üzerinden gerçekleştirilen DMF analizleri sonucunda MH yöntemi ile dört, LR yöntemi ile bir maddenin DMF gösterdiği belirlenmiştir. EPE, en yakın komşuluk eşleştirme yöntemi ile gerçekleştirilmiştir. Eğilim puanı hesaplanmasında ortak değişkenler olarak sosyoekonomik düzey, aile ilgisi, anne ve baba eğitim düzeyi değişkenleri kullanılmıştır. Eşleştirme dengesi kontrol edilmiş ve eşleştirme sonucu ortak değişkenler bakımında devlet ve özel okul grubunda denge sağlandığı belirlenmiştir. EPE analizleri sonucu devlet ve özel okul grubundan 489 öğrenci eşleştirilmiş, DMF analizleri 978 öğrenci üzerinden gerçekleştirilmiştir. Bu analizler sonucunda MH yöntemi ile bir maddenin DMF gösterdiği, LR yöntemi ile DMF gösteren maddenin bulunmadığı belirlenmiştir. EPE sonrası DMF gösteren madde sayısında azalma olduğu görülmüştür. EPE kullanmanın, potansiyel DMF kaynakları üzerinde kontrol sağladığı sonucuna ulaşılmıştır.

Abstract:
The purpose of this study is to examine whether the items in the Turkish, mathematics and science subtests of the ABIDE 2016 research show differential item functioning (DIF) according to the school type variable before and after the propensity score matching (PSM). In this context, while examining the effect of PSM on DIF and the steps of the PSM methodology are presented. DIF analyzes were performed before and after PSM using Mantel-Haenszel (MH) and logistic regression (LR) methods. The data of the study consisted of 6330 students who participated in the ABIDE 2016 application provided by the Ministry of National Education, General Directorate of Measurement, Evaluation and Examination Services. As a result of DMF analyzes performed on the whole group before PSM analyzes, it was determined that four items with the MH method and one item with the LR method showed DMF. PSM was carried out by the nearest neighborhood matching method. The variables of socioeconomic level, interest in family, education level of mother and father were used as covariate in calculating the propensity score. The matching balance was checked, and as a result of the matching it was determined that the balance was achieved in the public and private school groups in terms of covariates. As a result of the PSM analyzes, 489 students from the public and private school groups were matched, and DIF analyzes were carried out on 978 students. As a result of these analyzes, it was determined that an item showed DMF by the MH method and that there was no item showing DIF with the LR method. It was observed that there was a decrease in the number of substances showing DIF after PSM. It has been concluded that using PSM provides control over potential sources of DIF.