Çekirgeler EğitimSigma Puzzle Olympics
Dünya Finali
8 sınıf seviyesi · 200 soru · 275 katılımcı · Doğru yanıtlanma oranı ve ayırt edicilik endeksi üzerinden kapsamlı değerlendirme
Bu rapor Sigma Puzzle Olympics soru setinin kalite analizidir. Puzzle olimpiyatı üç olimpiyat arasında en farklı profile sahiptir: İdeal soru oranı %49 ile Math'a eşittir — ancak bunun arka planı çok farklıdır. 32 soru (%16) çok zor kategorisindedir — bu oran Math'taki %3.5'in 4.5 katı, Science'taki %1'in ise 16 katıdır. Öte yandan çok kolay soru yalnızca 7 tanedir (%3.5), Science'taki 74'ün çok gerisinde. Puzzle soruları gerçekten zorlu bir sete işaret etmektedir; konu, zorluk düzeyinin bütünlük içinde dengelenmesidir.
İstatistik bilgisi gerektirmeyen bir dil kullandık. Aşağıdaki dört kavramı anladığınızda raporun tamamını kolaylıkla yorumlayabilirsiniz.
Bir soruyu kaç öğrencinin doğru yanıtladığıdır. %30–70 arasında olması idealdir: ne çok kolay, ne çok zor. Bu aralıktaki sorular yarışmacıları en iyi şekilde birbirinden ayırt eder.
%85'ten fazlası doğru yanıtladıysa soru çok kolaydır. %20'den azı doğru yaptıysa çok zordur. Puzzle'da sorun ağırlıklı olarak çok zor taraftadır — bu üç olimpiyat arasında eşi görülmemiş bir profildir.
Sorunun "güçlü öğrenciyi zayıftan ayırt edip etmediğini" ölçer. 0.30 ve üzeri iyi bir soru işaretidir. 0.20'nin altı ise ayırt etme gücünün zayıf olduğunu gösterir. Çok zor sorular genellikle düşük ayırt ediciliğe de sahip olur — çünkü neredeyse hiç kimse çözemez.
Doğru yanıtlanma oranı %30–70 arasında ve ayırt edicilik endeksi 0.30 ve üzeri olan sorulardır. Puzzle'da bu koşulu karşılayan 98 soru (%49), yüzeysel olarak güçlü bir oran gibi görünse de çok zor soruların bu hesabın dışında kaldığı unutulmamalıdır.
Puzzle'da boş bırakma oranları diğer olimpiyatlara kıyasla çok daha yüksektir; bazı sorularda %50–70'e ulaşmaktadır. Bu, öğrencilerin soruyu yanlış yapmaktan değil, hiç çözemeden geçtiğini gösterir — puzzle formatına özgü önemli bir sinyal.
200 sorunun tamamı değerlendirildiğinde ortaya çıkan ana tablo.
200 sorunun %49'u hem doğru yanıtlanma oranı hem de ayırt edicilik açısından uluslararası standartları karşılamaktadır. Bu oran Math ile aynı düzeydedir — ancak kalan %51'de çok zor sorular baskındır; Math'ta ise kalan %51 ağırlıklı olarak "normal" kategorisindedir.
200 sorunun %16'sı katılımcıların yalnızca küçük bir kısmı tarafından çözülebilmiştir. Bu, üç olimpiyatın en yüksek "çok zor" oranıdır ve Puzzle soru setinin belirgin ayırt edici özelliğidir. 1. sınıfta 5, 5. sınıfta 6, 7. sınıfta 6 zor soru bulunmaktadır.
200 sorunun %3.5'i çok kolay kategorisindedir. Bu üç olimpiyatın en düşük "çok kolay" oranıdır. 4. sınıfta 3 adet, 5., 6. ve 7. sınıflarda birer adet çok kolay soru bulunmaktadır.
200 sorunun %17.5'i güçlü ve zayıf öğrencileri yeterince ayırt edememektedir. Bu büyük ölçüde çok zor sorularla örtüşmektedir: neredeyse hiç kimse doğru yapamıyorsa, "güçlü–zayıf" ayrımı da ölçülemez.
Sınıf seçerek o seviyedeki 25 soruyu ve her sorunun kalite profilini inceleyebilirsiniz.
Her satır bir soru numarası, her sütun bir sınıf seviyesidir. Kırmızı tonlar çok düşük (çok zor) oranları, turuncu tonlar yüksek (çok kolay) oranları, yeşil–mavi tonlar ideal aralığı gösterir. ↑ çok kolay, ↓ çok zor, 〰 düşük ayırt edicilik.