CDLA · الوحدة 3 — النواتج والتقييم الأصيل

متقدم: كتابة بنود تقيس الحكم، ودرجات نجاح يمكن الدفاع عنها

بناء البنود القائمة على المواقف، وقواعد كتابة البنود المستندة إلى الأدلة، والبنود ثلاثية الخيارات، وتحديد درجة النجاح بلجنة أنغوف المعدلة بدل اختيار 80% بحكم العادة.

نحو 24 د

تمرّنوا في مشغّل الدرس

الفرز والمطابقة والاختبارات وبوابة الوحدة تبقى خلف حساب مجاني حتى لا تُنشر الإجابات المُسجَّلة. الملاحظات التعليمية أدناه هي المنهج نفسه الموثَّق بالمصادر.

ماذا يغطي هذا الدرس

  1. 01

    الجميع ينجح ولا أحد يتحسن

    اختبار السلوك المهني السنوي في مصرف نسبة النجاح فيه 98%، وشكاوى البيع غير الملائم لم تتغير. بمراجعة البنود تجدون أن الخيار الأطول صحيح في 70% منها، وعدة مشتتات سخيفة بوضوح، وسؤالان يمكن الإجابة عنهما من صياغة الجذع. الاختبار لا يقيس الحكم، بل مهارة أداء الاختبارات.

  2. 02

    تشريح البند القائم على موقف

    الجذع: موقف قصير واقعي بالتفاصيل اللازمة للقرار فقط، ينتهي بسؤال واضح: «ماذا تفعل أولًا؟

    المفتاح: الاستجابة التي تتفق لجنة خبراء على أنها الأفضل في هذا السياق، لا المقبولة فقط.

    المشتتات: أخطاء حقيقية يرتكبها الناس، مستمدة من تحليل المهام المعرفي أو بيانات الجودة أو مقابلات الخبراء. كل منها خاطئ لسبب مختلف.

    التعليل: جملة لكل خيار تقول لماذا هو صحيح أو خاطئ. يراجع المراجعون هذا لا المفتاح وحده.

  3. 03

    قواعد كتابة البنود المدعومة بالأدلة

    Rule | Why

    Three options are usually enough | Rodriguez (2005) found three-option items perform about as well as four or five, and a third bad distractor adds nothing

    Make options similar in length and grammar | Test-wise learners pick the longest or most qualified option

    Avoid "all of the above" and "none of the above" | They reward partial knowledge and guessing

    Put the question in the stem | Learners should be able to answer without seeing options

    No negatives unless the job uses them | "Which is NOT..." measures reading care, not judgment

    Vary the position of the key | Patterns are learned quickly

  4. 04

    اختبارات الحكم الموقفي

    اختبارات الحكم الموقفي

  5. 05

    من أين تأتي 80%؟

    معظم درجات النجاح عادات. الدرجة التي يمكن الدفاع عنها تأتي من طريقة لتحديد المعايير. في دراسة أنغوف المعدلة، تتخيل لجنة من خمسة إلى ثمانية أشخاص يعرفون العمل مؤديًا بالحد الأدنى من الكفاءة: شخصًا تثقون بالكاد بأن يؤدي العمل دون إشراف. لكل بند يقدّر كل عضو احتمال أن يجيب هذا الشخص صحيحًا. احسبوا المتوسط بين الأعضاء والمجموع عبر البنود: هذه درجة القطع. ناقشوا البنود الأكثر اختلافًا وكرروا مرة واحدة.

  6. 06

    ورقة عمل أنغوف مصغرة

    Item | Panellist A | Panellist B | Panellist C | Mean

    1 | 0.9 | 0.8 | 0.9 | 0.87

    2 | 0.6 | 0.7 | 0.5 | 0.60

    3 | 0.8 | 0.8 | 0.7 | 0.77

    4 | 0.7 | 0.9 | 0.8 | 0.80

    5 | 0.5 | 0.6 | 0.6 | 0.57

    Cut score | | | Sum | 3.61 of 5 (72%)

  7. 07

    اكتبوا خمسة بنود وأجروا لجنة مصغرة

    اكتبوا خمسة بنود قائمة على مواقف لأعلى الأفعال خطورة في خريطة التقييم، بثلاثة خيارات لكل منها مع التعليلات. اطلبوا من ثلاثة أشخاص يعرفون العمل تقييم كل بند لمؤدٍ بالحد الأدنى من الكفاءة، واحسبوا درجة القطع. أضيفوا البنود وورقة العمل إلى ناتج الوحدة. ملاحظة عن هذه الأكاديمية: اختباراتنا تستخدم 80% كقاعدة بداية، ونجري لجانًا لاستبدالها وحدة بعد وحدة.