کارگاه تحلیل آزمون

3. کارگاه تحلیل آزمون

4. تهيه آزمون با نوشتن سؤالاتآن پايان نمي يابد بلكه پس از آن بايد به دنبالگردآوري شواهدي براي اطمينان از كيفيتمناسب سؤالات بود

5. تجزيه و تحليل سؤالاتتأثير به سزايي در ارتقاي كيفي سؤالاتي داردكه مجدداً در آزمونهاي بعدي استفادهمي شوند. همچنين براي حذف سؤالات مبهم ودو پهلو نيز مفيد بوده و در مجموع باعثافزايش مهارت مدرسان در طراحي سؤالاتآزمون و تعيين حيطه هاي اختصاصي محتواييك دوره كه نيازمند تأكيد و شفافيت بيشتراست، مي گردد ضمناً مدرسان مي توانندنقاط ضعف و قوت دانشجويان در درك مطالبو مفاهيم مربوط به درس را تعيين كنند و بهنقاط ضعف و قوت تدريس پي ببرند

6. تجزيه و تحليلآزمون ها اشكالات فراواني را در طراحي سؤالاتبسياري از آزمون هاي دانشگاهي نشان مي دهد . آگاهي مدرسان از اين نقص ها شايد قدم اول درحل اين مشكلات باشد . بنابراين طراحان سؤالبه طور مستمر بايد تجزيه و تحليل سؤالات را بهعنوان معيار كيفيت قرار داده و سؤالات غير قابلقبول را حذف نمايند و سؤالات بهتر با ملاك هاي مطلوب را جايگزين نموده و نگهداري كنند

7. “Tell me, I forget. Ask me, I remember. Involve me, I understand.”

8. EVALUATION ارزشيابي فرآيند جمع‌آوري اطلاعات و مقايسه آنها بااستانداردها براي قضاوت يا رسيدن به تصميم درباره فعاليت آموزشي يا هر فرآيند ديگري است.

9. وسيله اندازه‌گيري ويژگي در شخص يا شيء است. آزمونTest

10. Why Test? Testing is 50% of Teaching

11. Evaluating Students:Tests ARE Not the Only Way! • Tests • Projects • Performance • Participation

12. ارزيابي چه گونه ؟ How چرا؟ Why چه موقع؟ When چه چيزي را؟What

13. چرا ارزيابي مي‌كنيم؟WHY? • تشويق به يادگيري • آگاه نمودن دانشجو • آگاه نمودن مدرس • اصلاح فعاليتهاي يادگيري • انتخاب دانشجو • گواهي دادن • كسب آمادگي ارتقاء

14. اگر مايليد دانشجويان كتاب درسي را بخوانند، قبلاً آنها را آگاه كنيد كه از محتواي كتاب به عنوان بخشياز امتحان پايان ترم، سؤال اجباري طرح خواهد شد. • اگر مي خواهيد دانشجويان قادر باشند با دستگاهي كاركنند، به آنها بگوئيد كه از آنها در مورد اين توانايي خاص امتحان به عمل خواهد آمد.

15. آنچه كه شما موردسنجش قرار مي‌دهيد، تعيينكننده مطالبي است كه دانشجويان ياد مي‌گيرند. • اين به آن معناست كه قبل از آنكه نگران نوع ابزار سنجش مورد استفاده باشيد، بايد تصميم بگيريد كهدانشجويان چه چيزي را و چرا بايد ياد بگيرند.

16. چه موقع ارزيابي كنيم؟When? در پايان آموزش Summative در طول آموزشFormative قبل از آموزشPre-test

17. What? مهارت نگرش دانش

18. انواع حيطه‌هاي يادگيري1. حيطه شناختي (Knowledge) Cognitive Domain 2. حيطه نگرشي Attitude Domain 3. حيطه مهارتي Psychomotor Domain

19. يادگيريتغيير در تفكر تغيير در احساستغيير در عمل دانش توانائي و مهارتهاي عقلي علاقه، انگيزش و نگرشمهارتهاي حركتي باور كند بداند بتواند

20. در حيطه شناختي :يادآوري و درككاربرد و تجزيه و تحليلمقايسه و تشخيص (حل مسئله)در حيطه نگرشي :توجه به محرک و پاسخ به آن ارزش گذاري به پاسخاعتقاد يافتندر حيطه عملي :مشاهده و اجراي كار با کمكهماهنگي و اجراي كار بدون كمكاجراي كار بطور خودكار (عادت)

21. Evaluation methodology according to domains to be evaluated Knowledge Indirect methods:Oraltests,Written tests Attitude Indirect methods:carried out of projects practical tests Performance Direct observation:in real situation or simulated conditions

22. 360 o Who Should Assess? • Faculty • Self • Peers • Tutors • Other team members • External and internal examiners • Public, society, …

23. Stages of test development Conceptualization Construction Tryout Item analysis Revision

24. Item Analysis • Process of determining which items are “good” • Tools in item analysis • Item reliability index • Item validity index • Item difficulty index • tem discrimination index

25. اعتبار Validityميزان دقت يك وسيله اندازه‌گيري (آزمون) در اندازه‌گيري موضوع مورد نظرقابليت اطمينان Reliabilityميزان ثبات يك وسيله اندازه‌گيري (آزمون ) در اندازه‌گيري يك متغييرعينيت Objectivityدرجه توافق بين قضاوتهاي مستقل تعدادي ممتحن خبره بر سر پاسخهاي خوب عملي بودن Practicabilityسهولت كلي استفاده از يك آزمون هم براي سازنده آزمون و هم براي دانشجويان ويژگيهاي يك آزمونمناسب

26. Validity Validity is the degree to which the inferences based on scores are correct

27. Reliability If an assessment is repeated with the same trainees, they should get the same results

28. رابطه ميان روايي و پايايي Validity- Reliability+ validity+ reliability + • • • • • • • • • validity- Reliability- • • •

29. عوامل مؤثر در :Validityبسيار مشكل بودن و يا بسيار ساده بودن آزمون راهنمائي هاي ناخواسته در آزمون عدم وجود رابطه بين سئوال و محتواي آموزشي نبودن وقت كافي كوتاه بودن امتحان نظم و ترتيب سؤالات (از ساده به مشكل )عوامل مؤثر در Reliability:توافق ممتحن در سئوالات مبهم محيط مناسب و مساعد انتخاب نمونه‌نا همگن

30. عوامل مؤثر در Objectivity:دو نمره داده شده بر يك آزمون توسط دو ممتحن يكسان باشد. نتايج ارزيابي و نمره‌دهي متناسب با محتواي مورد امتحان يكنواخت باشد.عوامل مؤثر در Practicability:متناسب با تعداد دانشجويان باشد. امكانات مناسب فراهم بودن وسايل و فضاي مورد نياز متناسب با شيوه ارزيابي

31. مهمتريننكته پس از آزمون ارائه بازخورد به دانشجو،كمك به دانشجو ودسترسي به اشكالات است

32. Before starting to set a question ask yourself what it is you want to found it.