Bilgi testinde kesme puanı nasıl belirlenir?
Bu yazıda
Yeterlik sınıflaması ne zaman gerekir? Angoff yaklaşımını, reality check uygulamasını ve yorum sınırlarını değerlendirin.
Kesme puanı gerçekten gerekli mi?
Her bilgi testinin bir “geçme notu” olmak zorunda değildir. Araştırmanın amacı bir grubun bilgi puanlarını sürekli değişken olarak incelemekse, kişileri yapay biçimde “yeterli” ve “yetersiz” olarak iki gruba ayırmak gerekmeyebilir.
Test puanı bireysel yeterlik kararı için kullanılacaksa minimum kabul edilebilir bilgi düzeyinin nerede başladığı ayrıca belirlenmelidir. Bu durumda standard-setting yöntemleri gündeme gelir.
Angoff yaklaşımı nasıl çalışır?
Angoff yaklaşımının klasik kaynağı William Angoff’un 1971 tarihli çalışmasıdır (Angoff, 1971). Modified Angoff uygulamasında uzmanlardan önceden tanımlanan “minimum yeterli adayın” her maddeyi doğru yanıtlama olasılığını tahmin etmeleri istenir.
Güncel derleme ne söylüyor?
Sağlık meslekleri eğitimindeki güncel sistematik derleme ve meta-analiz, Angoff varyantlarının aynı sonucu vermediğini ve uygulama biçiminin kesme puanı ile değerlendiriciler arası tutarlılığı etkileyebildiğini göstermektedir (Sridharan & Sivaramakrishnan, 2025).
Yazarlar özellikle Modified Angoff’un reality check ile birlikte kullanılmasını desteklemektedir. Reality check sırasında uzmanlar ilk değerlendirmelerinden sonra gerçek aday performansına ilişkin toplu psikometrik bilgileri görüp kararlarını yeniden değerlendirebilirler (Sridharan & Sivaramakrishnan, 2025).
Derlemede geçme oranlarına ilişkin temel karşılaştırmaların kanıt kesinliği çok düşük olarak değerlendirilmiştir. Yazarların reality check önerisi bu sınırlılıkla birlikte okunmalıdır; bulgular bütün sınavlar için tek bir yöntemin üstünlüğünü kesinleştirmez (Sridharan & Sivaramakrishnan, 2025).
Başka bir testin kesme puanı kullanılabilir mi?
Ancak meta-analizde bildirilen ortalama cut-off değerlerinden birini alıp başka bir teste doğrudan uygulamak uygun değildir. Standard setting testin kendi içeriği, hedef grubu ve minimum yeterlik tanımı üzerinden yürütülmelidir.
Uygulama örneği
Bir eğitim öncesinde katılımcıların bilgi puanlarını betimlemek ile eğitim sonunda kişilere yeterlik belgesi vermek farklı kararlar gerektirir. İlkinde puan dağılımı ve içerik alanlarındaki yanıtlar incelenebilir. İkincisinde minimum yeterliğin tanımlanması, kesme puanının gerekçesi ve sınır çevresindeki kararların belirsizliği ayrıca ele alınır. Bu örnek, puan kullanımının geçerlik gereksinimlerini değiştirmesini açıklamak için hazırlanmıştır; bir araştırma bulgusu değildir (Kane, 2013; Cook & Hatala, 2016).
Kaynakça
Angoff, W. H. (1971). Scales, norms, and equivalent scores. In R. L. Thorndike (Ed.), Educational Measurement (2nd ed., pp. 508–600).
Cook, D. A., & Hatala, R. (2016). Validation of educational assessments: a primer for simulation and beyond. Advances in simulation (London, England), 1, 31. https://doi.org/10.1186/s41077-016-0033-y
Kane, M.T. (2013), Validating the Interpretations and Uses of Test Scores. Journal of Educational Measurement, 50: 1-73.
Sridharan, K., & Sivaramakrishnan, G. (2025). Angoff methods in standard setting in health professional education: a systematic review and meta-analysis. BMC medical education, 25(1), 1727. https://doi.org/10.1186/s12909-025-08300-6