Arab Educational Information Network

هدفت الدراسة إلى التعرف على مؤشرات ثبات الدرجة الإجرائية المحوسبة بثلاث طرق للتوفيق بين تقديرات المقومين للمهمة الكتابية هي: المتوسط الحسابي للتقديرين الأصيلين، المتوسط الحسابي لتقدير المقوم الخبير والتقديرين الأصيلين، المتوسط الحسابي لتقدير المقوم الخبير والتقدير الأقرب لتقديره من بين التقديرين الأصيلين لدى استخدام دليلين للتصحيح (خماسي التدريج، سباعي التدريج) لتقويم المهمة الكتابية نفسها، بالإضافة إلى الكشف عن أثر كل من عاملي طريقة التوفيق بين تقديرات المقّومين لحساب الدرجة الإجرائية، وعدد فئات دليل التصحيح في الدرجة الإجرائية. شملت بيانات الدراسة إجابات 232 معلما ومعلمة لمهمة كتابية معدّة مسبقا، حيث قام ستّة مقّومين بتقويم الإجابات باستخدام دليلي التصحيح المعدّين مسبقا. وكشفت النتائج عن أن قيم مؤشرات الثبات تختلف باختلاف الطريقة المستخدمة لحساب الدرجة الإجرائية بصرف النظر عن دليل التصحيح المستخدم. وكشفت نتائج تحليل التباين ذو القياسات المتكررة عن وجود أثر رئيس لكل من عاملي طريقة التوفيق ودليل التصحيح في الدرجة الإجرائية المحوسبة بإحدى طرق التوفيق المستخدمة. (الملخص المنشور)

The study aimed at investigating the reliability indices of the operational score calculated by three different methods of score resolution among raters' ratings of a writing task (the averaged score of the original ratings, the averaged score of the expert rating and the original ratings, the averaged score of the expert rating and the closest rating of the original ratings) using two scoring rubrics (five categories, seven categories), and examining the effect of score resolution method, and scoring rubric in the operational score calculated in one of the above mentioned methods. Data were obtained from the answers of 232 male and female teachers to a previously developed writing task. The writings were blindly assessed by six raters using the two pre-developed scoring rubrics. The results revealed differences among reliability indices due to the resolution method used to calculate the operational score regardless of the scoring rubric being used. Repeated measures ANOVA with between-subjects factor revealed significant main effect of both factors i.e., score resolution method, and scoring rubric in the calculated operational score using one of the aforementioned resolution methods. (Published abstract)