440 likes | 713 Views
ITEM REVIEW. Forum Komunikasi Institusi Kebidanan Jawa Tengah Sri Handayani,S.Si.T,M.Kes. KAIDAH UMUM. Yakinkan setiap soal dapat diduga jawabannya tanpa harus melihat pilihan jawaban atau yakinkan pilihan jawaban 100 % benar atau salah .
E N D
ITEM REVIEW Forum KomunikasiInstitusiKebidananJawa Tengah Sri Handayani,S.Si.T,M.Kes.
KAIDAH UMUM • Yakinkansetiapsoaldapatdidugajawabannyatanpaharusmelihatpilihanjawabanatauyakinkanpilihanjawaban 100 % benaratausalah. • Usahakan data/informasipentingseoptimalmungkindicantumkanpadasoal (stem), pilihanjawabanusahakansesingkatmungkin. • Hindari informasi berlebihan pada soal.
KAIDAH UMUM • Hindarisoalbersifatmenjebakdanterlalukomplekssertatidakrelevan. • Gunakanpilihanjawaban yang secaragramatikalkonsistendansecaralogiskompatibeldengansoal. • Hindarikataabsolut (selalu, tidakpernah), semuapadapilihanjawaban, danistilah yang tidakjelas/meragukan (biasanyaatausering).
KAIDAH UMUM • Hindarikalimatataufrasenegatifseperti KECUALI, TIDAK, atau BUKAN. • Hindarihanyamengujikemampuanmengingatfakta. • Fokuskansoalpadakonseppentingdankasus-kasus yang seringsertamemilikipotensimasalahserius.
KAIDAH UMUM • Usahakanmenilaiaplikasipengetahuan, tidakhanyamengujidayaingatterhadapfaktaterisolasi. • Soallebihbaikmenekankanpadapertanyaanmengenaipengambilankeputusanklinik.
Bagan Alir Proses Review Soal baru Scanning isi soal terkait topik soal Tidak esensial Dikembalikan Esensial Review struktur
Struktur • Vignette • Lead in • Option
KESALAHAN STRUKTUR SOAL • Testwiseness” adalahpesertaujiandapatmenjawabsoalbukankarenapenguasaannyaterhadapisimateri , tetapikarenakepintarannyadalammenebakjawaban yang benar. • “irrelevant difficulty” adlkesulitanpesertaujianmenjawabsoal, bukankarenasulitnyamateri yang diujikan, namunlebihkearahsulitnyamahasiswamenjawab, yang ditimbulkanolehstruktursoaltersebut.
Kesalahan yang berkaitandengantestwiseness: • Grammatical Cues • Logical Cues • Istilah yang absolut • Jawabanbenar yang panjang • Pengulangankatadaribadansoalkejawaban • Konvergensisoal
Kesalahan yang berkaitan dengan kesulitan yang tidak perlu/relevan • Pilihanjawaban yang panjang, kompleks, atauduplikasi • Angkatidakdiurutsesuaidenganbesarnya • Mengandungunsurfrekuensisuatukejadianbersifat multi interpretasi • Tidak parallel danurutantidaklogis • Penggunaan BSSD (bukan salah satu diatas) pada pilihan jawaban • Badansoalterlalupanjang, sulit, dankompleks
Bagan Alir Proses Review Soal baru Scanning isi soal terkait topik soal Tidak esensial Dikembalikan Esensial Review struktur Vignette
Checkpoint • Bagaimanakah step mereview soal?
Apa saja yang perlu ditelaah ? • Materi : • Relevansi: Kongruensi • Bahasa • Tingkat kesulitan (tingkat kompetensi) • Klasifikasi : e.g. Dasar atau klinik?
Apa saja yang perlu ditelaah ? • Struktur : • Stem • Lead in • Option • Tinjauan (Blue Print) • Kesimpulan • Komentar umum dan saran • Diterima/revisi/dikembalikan
Testwiseness • GrammaticalCues • Logical Cues • Istilah yang absolut • Jawabanbenar yang panjang • Pengulangan kata daribadansoalkejawaban • Konvergensisoal
Grammatical Cues Seorangpria, berusia 60 tahun, dibawakebagiangawatdaruratolehseorangpolisi, yang menemukannyadalamkeadaantergeletaktidaksadarkandiri di sisijalan. Setelahmemastikanbahwasaluranpernafasandalamkeadaantidaktersumbat, langkahpertamadalammanajemenadalahadministrasiintravena: • pemeriksaancairanserebrospinal • glukosadengan vitamin B1 (thiamine) • CT scan kepala • fenitoin • diazepam
Logical Cues Kejahatanadalah: • A. terjadi secara merata pada berbagai kelas social • B. lebih sering muncul pada golongan orang miskin • C. lebih sering muncul pada kelompok masyarakat menengah sampai kaya. • D. pada dasarnya merupakan suatu indikasi psychosexual maladjustment • E. mencapai keadaan toleransi yang plateau terhadap negara
Istilah yang absolut Padapasiendengandemensialanjut, tipe Alzheimer, defekmemori yang terjadi: • dapatdiberikanterapisecaraadekuatdenganfosfatidilkolin (lesitin) • dapatmerupakansekueldari parkinsonism dini • tidakpernahterjadipadapasiendengan neurofibrillary tangles padaotopsi • tidakpernahmenjadiberat • mungkinmelibatkansistemkolinergik
Jawaban benar yang panjang Secondary gain adalah • synonym dengan malingering • Problem yang biasatimbulpada orang dengangangguan obsessive-compulsive • Komplikasidariberbagaipenyakitdancenderunguntukmemperlamawaktupenyakit • Tidakpernahtimbulpadagangguanotak organic
Pengulangan kata dari badan soal ke jawaban Seorangpriaberusia 58 tahundenganriwayatpenggunaanalkohol yang beratdansebelumnyapernahdirawatkarenagangguan psychiatric mengalamikebingungandanagitasi. Diamengatakanbahwaduniainitidaknyata (unreal). Keadaaninidisebut: • depersonalisasi • derailment • Derealisasi * • focal memory deficit • tandaanxietas
Konvergensisoal Anestesilokalakanbekerja paling efektifpadakondisi: • dalambentukanionic, bekerjadaridalammembrane syaraf • dalambentukcationic, bekerjadaridalammembrane syaraf • dalambentukcationic, bekerjadariluarmembrane syaraf • dalambentuktidakbermuatan, bekerjadaridalammembrane syaraf • dalambentuktidakbermuatan, bekerjadariluarmembrane syaraf
Irrelevant difficulty • Pilihanjawaban yang panjang, kompleks, atauduplikasi • Pilihan yang berupaangkatidakdiurutsesuaidenganbesarnya • Pilihan yang mengandungunsurfrekuensisuatukejadianbersifat multi interpretasi • Pilihanjawabantidak parallel danurutantidaklogis • Penggunaan BSSD (bukan salah satu diatas) pada pilihan jawaban • Badansoalterlalupanjang, sulit, dankompleks
PILIHAN JAWABAN YG PANJANG, KOMPLEKS ATAU DUPLIKASI KomitePeer review di HMO bisamenolakkeputusandokterdalampenanganankesehatananggotanya. Berkaitandenganhalinidoktersebelumnyaharustelahmenerimaprosesklarifikasi. Proseskalrifikasitersebuttermasukapasaja? • A. Peringatan, sebuah forum tertutup, pengadilan, kesempatanuntukdidengardanditunjukkanbukti yang memberatkan. • B. Peringatan yang tepat, pengadilanpengambilankeputusan, kesempatanuntukbertemudipengadilandengansaksi yang memberatkandankesempatanuntukmenunjukkanbukti yang meringankannya. • C. Peringatan yang tepatwaktudandipercaya, pengadilantertutupuntukpengambilankeputusan, kesempatanuntukmendengarkanbukti yang memberatkandanbertatapmukadengansaksi yang memberatkandankesempatanuntukmenunjukkanbukti yang meringankan.
Angkatidakurutsesuaidenganbesarnya Apabilaterjadiinfeksipadarongga pelvis yang berulang ( keduakalinya), berapakemungkinanseorangwanitamengalamikeadaan infertile? • A. kurangdari 20% • B. 20 - 30% • C. Lebihdari 50% • D. 90% • E. 75%
Mengandungunsurfrekuensikejadianbersifat multi interpretasi Penderita obesitas berat dewasa muda: • A. biasanyaberresponsecara dramatis terhadap regimen diet • B. seringberkaitandengankelainanhormon • C. memiliki kemungkinan 75 % untuk kembali normal secara spontan • D. mempunyai prognosis yang buruks • E. biasanya berrespon terhadap terapi obat dan psikoterapi intensif
Struktur Soal : Item Flaws • Grammatical Cues ( ) Ya ( ) Tidak • Logical Cues ( ) Ya ( ) Tidak • Istilah yang absolut ( ) Ya ( ) Tidak • Jawaban benar yang panjang ( ) Ya ( ) Tidak • Pengulangan kata dari badan soal ke jawaban ( ) Ya ( ) Tidak • Konvergensi soal ( ) Ya ( ) Tidak • Pilihan jawaban yang panjang, kompleks, atau duplikasi ( ) Ya ( ) Tidak
Pilihan yang berupa angka tidak diurut sesuai dengan besarnya ( ) Ya ( ) Tidak • Pilihan yang mengandung unsur frekuensi suatu kejadian bersifat multi interpretasi ( ) Ya ( ) Tidak • Pilihan jawaban tidak paralel dan urutan tidak logis ( ) Ya ( ) Tidak • Penggunaan BSSD (bukan salah satu di atas pada pilihan jawaban) ( ) Ya ( ) Tidak • Badan soal terlalu panjang, sulit, dan kompleks ( ) Ya ( ) Tidak
Komentar Umum Reviewer ID Soal: Kesimpulan Hasil Review ( ) Diterima tanpa perbaikan ( ) Diterima dengan perbaikan ( ) Perlu konfirmasi pembuat soal ( ) Tidak perlu konfirmasi dengan pembuat soal ( ) Dikembalikan kepada pembuat soal ( ) memerlukan perbaikan keseluruhan ( ) Berpotensi diterima dengan perbaikan
Saran Perbaikan Tanggal: (DD) / (MM) / (YY) Tanda Tangan Reviewer Nama Jelas :
Kesalahanumumdalampembuatansoal yang perludiwaspadai • Ketidaksesuaianantarapertanyaandengankompetensi • Ketidaksesuaiantingkatkesulitansoaldengantingkatkognitif • Kemaknaanklinis yang tidakrelevandengankompetensi • Bahasadankalimattidaklogisatau multi interprestasi • Menanyakansesuau yang bersifathafalan (recall) sederhana • Kasus (vignyet) tidakmenggambarkansuasanaklinis yang sebenarnya • Subtansitidaklogis (misalnya data pemeriksaankliniksdanataulaboratorium) • Pilihanjawabantidakhomogen
Evaluasibutirsoalsecaraumum • Apakahbutirsoalrelevanuntukmenilailearning objectives dalamblok? • Apakahtatabahasa, penulisandanejaansudahbenar? • Apakahkosakata yang tidakperludansulitdipahamisudahdihindari? • Apakah menggunakan kalimat-kalimat yang ringkas, berisi dan mudah dipahami?
Evaluasibutirsoalsecaraspesifik • menggunakanstem/vignette • Apakahstembutirsoaltidakmengandungmateri yang tidakrelevan? • Apakah vignette berisi informasi/data yang memungkinkan mahasiswa yang kompeten mampu menjawab dengan benar? • Apakah vignette merepresentasikan keadaan yang mungkin terjadi di konteks nyata? • Apakahvignettememfoskuskanprinsipataukonseppenting/esensial yang perludimengertiolehmahasiswa, bukanhanyasoalhafalan? • Apakahstembisadijawabolehmahasiswa yang kompetentanpamelihatjawaban yang tersedia? • Apakah stemtidakmenjebakdanjugatidakterlalurumit?
Evaluasi Lead in Question: • Apakah dibuat dengan kalimat tanya? • Apakah telah dihindari menanyakan tentang opini? • Apakah pertanyaan berhubungan dengan stem? • Apakah telah dihindari penggunaan kata “kecuali”?
EvaluasiPilihanJawaban • Apakahalternatifjawabansudahdibuatjelasdansingkat? • Apakahalternatifjawabansudahhomogen? • Apakahalternatifjawabanmempunyaipanjang yang hampirsamadenganjawabankunci? • Apakahalternatifjawabansudahmenghindarialternatif yang tidakrasional? • Apakahalternatifjawabanmerupakanjawaban yang tidakbenarataukurangbenardibandingkandenganjawabankunci?
Lanjut ….. • Apakahalternatifjawabancukupmenarikmahasiswa yang tidakkompetenuntukmemilihnya? • Apakahalternatifjawabansecaratatabahasakonsistendancocokdenganstemdanlead in question? • Apakahalternatifjawabansudahmenghindaripenggunaan “salahsatudiatas” dan “bukansalahsatudiatas”? • Apakahalternatifjawabansudahmenghindarikata “selalu”, “jarang”, “kadang-kadang”? • Apakahpoinjawaban yang benarsudahdiletakkanposisinyasecaraacakterhadapdistractornya?
BaganAlirProses Review Soal baru Scanning isisoalterkaittopiksoal Tidakesensial Dikembalikan Esensial Review struktur Vignette Lead-in Option