Ağaç Temelli ve Birleştirilmiş Ağaç Temelli Bilgisayarda Bireyselleştirilmiş Test Yöntemlerinin Parametrelerine Dayalı Karşılaştırmalı Bir İnceleme
A Comparative Review of the Parameters of Tree-Based and Marged Tree-Based Computerized Adaptive Testing Methods
Yazar: Alkan, Demet
Dergi: Boğaziçi Üniversitesi Eğitim Dergisi, Vol. 42 No. 2, 2024
Anahtar kelimeler: Computer Based Exam Applications ; Bilgisayar Tabanlı Sınav Uygulamaları ; birleştirilmiş ağaç tabanlı bilgisayarda bireyselleştirilmiş test,maksimum düğüm sayısı,madde maruz kalma oranı,maksimum dal sayısı,birleştirme parametreleri ; marged testing on a fused tree-based computer,maximum number of nodes,item exposure rate,maximum number of branches,merge parameters

Bu araştırmada, R programlama dili kullanılarak Birleştirilmiş Ağaç Temelli Bilgisayarda Bireyselleştirilmiş Test (Birleştirilmiş Ağaç BBT) yöntemine ait parametreler belirlenmiştir. Çalışmada, Birleştirilmiş Ağaç BBT ile Ağaç BBT’nin performansı farklı koşullar altında karşılaştırılmıştır. Test etkililiği ve ölçme kesinliği; seviye başına maksimum düğüm sayısı, birleştirilecek iki düğümün yoğunluk fonksiyonlarının minimum kesişimi, madde havuzundaki madde sayısı, her bireye uygulanacak maksimum madde sayısı ve maddenin maruz kalma oranına göre incelenmiştir. Araştırma, gerçek veri seti kullanılarak yürütülmüştür. Madde havuzunda 919 bireye uygulanmış 256 madde bulunmaktadır. Tüm koşullarda 25 tekrarın ortalaması alınmıştır. Bulgular, madde havuzundaki madde sayısı arttıkça Birleştirilmiş Ağaç BBT’lerde yetenek kestiriminde daha düşük hata değerleri elde edildiğini göstermiştir. Ayrıca, seviye başına maksimum düğüm sayısı, dal sayısı ve minimum benzerlik gibi parametrelerle birleştirme parametreleri arttıkça test etkililiği ve ölçme kesinliğinin yükseldiği belirlenmiştir. Bununla birlikte, Birleştirilmiş Ağaç BBT için seviye başına maksimum dal sayısının belirleyici bir parametre olduğu, her bir birey için kullanılacak maksimum madde sayısının ise belirleyici olmadığı anlaşılmıştır.

In this study, parameters of the Merged Tree-Based Computerized Adaptive Test (Merged Tree CAT) method were determined using the R programming language. The performance of the Merged  Tree CAT was compared with that of the Tree CAT under different conditions. Test efficiency and measurement precision were examined with respect to the maximum number of nodes per ability level, the minimum intersection of the density functions of the two nodes to be merged, the number of items in the item pool, the maximum number of items administered per examinee, and the item exposure rate. The study was conducted using a real dataset comprising 256 items administered to 919 examinees. For all conditions, the average of 25 replications was taken. The findings indicated that as the number of items in the item pool increased, lower error values in ability estimation were obtained in the Merged Tree CAT. Furthermore, as the merging parameters such as the maximum number of nodes per level, the number of branches, and minimum similarity increased, test efficiency and measurement precision also improved. However, it was observed that the maximum number of branches per ability level was a determining parameter for the Merged Tree CAT, whereas the maximum number of items administered per examinee was not a critical factor.