Development of Rubric for the Evaluation of Concept Cartoons in Mathematics

OpenAlex Türkçe

Bu araştırmanın amacı matematik dersi için hazırlanan kavram karikatürlerini değerlendirebilmek için geçerli ve güvenilir bir dereceli puanlama anahtarı (DPA) geliştirmektir. Araştırma verileri Sivas il merkezinde görev yapan matematik öğretmenlerinin oluşturduğu 36 kavram karikatürünün değerlendirilmesiyle elde edilmiştir. Değerlendirme işlemini matematik eğitimi alanında yüksek lisans yapmış iki matematik eğitimcisi gerçekleştirmiştir. Geçerlik çalışmalarında öncelikle uzmanların DPA hakkındaki görüşleri içerik, yapı ve ölçüt bağlamında tek tek incelenmiştir. Bunların DPA’ya uygunluğu ve yeterliği konusunda uzmanların görüşleri arasındaki uyum yüzdelerinin kabul edilebilir düzeyde ve %82 ile %95 arasında değiştiği görülmüştür. Geçerlik çalışması kapsamında ayrıca kapsam geçerlik indeksi de hesaplanış ve her bir alt boyuta ilişkin kapsam geçerlik indeksleri 0.80 ile 1 arasında bulunmuştur. Hem uyum yüzdeleri hem de kapsam geçerlik indeksleri dikkate alındığında geliştirilen DPA’nın kavram karikatürlerini değerlendirmek için geçerli bir ölçme aracı olduğu görülmüştür. Güvenirlik çalışmalarında klasik test kuramı kapsamında iki puanlayıcı arasındaki uyum toplam puanlar için “Spearman Korelasyon Katsayısı” ile belirlenirken her bir alt ölçütteki uyum “Cohen’s Kappa” ile belirlenmiştir. DPA’ya iki değerlendiricinin verdiği toplam puanlar arasında pozitif, anlamlı ve yüksek (Rho=0.856, p<0.01) bir ilişkinin olduğu görülürken, alt ölçütlere ilişkin de Cohen’s Kappa sonuçları 0.706 ve 0.797 arasında yer aldığı görülmüştür. Güvenirlik çalışmalarında ayrıca madde tepki kuramı kapsamında Çok Yüzeyli Rasch Ölçme Modeli dikkate alınarak puanlayıcı, puanlanan (kavram karikatürü) ve madde yüzeyleri için güvenirlik hesaplamaları yapılmıştır. Bu yüzeylere ait güvenirlik indeksleri de sırasıyla 0.87, 0.80 ve 0.89 bulunmuştur. DPA’nın toplam puan için hesaplanan Spearman korelasyonu ve alt ölçüt puanları için hesaplanan Cohen’s Kappa değerleri ile puanlayıcı, puanlanan(kavram karikatürü) ve madde yüzeylerine ait güvenilir indeksleri bir arada değerlendirildiğinde oluşturulan DPA’nın güvenilir bir puanlama anahtarı olduğu görülmüştür. Araştırmanın bulguları ilgili literatür dikkate alınarak tartışılmış ve çeşitli önerilerde bulunulmuştur.