Professional Documents
Culture Documents
Materi Item Review 2019 PDF
Materi Item Review 2019 PDF
8/11/17 1
The FACTS of good test items
F • Face valid
A • Accurate
S • Statistically appropriate
8/11/17 2
Creating good test items
Right Sound Efficient
xxx
Expertise Processes Tools
8/11/17 3
Right
Right Sound Efficient
Expertise xxx
Expertise Processes Tools
8/11/17 4
Right Sound
Sound Efficient
Processes xxx
Expertise Processes Tools
Write items
8/11/17 5
Sound item writing processes
Item performance
Assignments Training Review procedures
monitoring
• Intellectual property
rights
• Confidentiality
8/11/17 6
Right Sound Efficient
Efficient Tools xxx
Expertise Processes Tools
Item Bank
A repository of items with their associated metadata & historical record
8/11/17 7
Right Sound Efficient Effective Item
Expertise Processes Tools Development
8/11/17 8
Effective Item
Right Sound Efficient
Expertise Processes Tools Development
8/11/17 9
Effective
Right Sound Efficient Item
Expertise Processes Tools Developmen
t
8/11/17 10
Effective
Right Sound Efficient Item
Expertise Processes Tools Development
8/11/17 11
Effective
Right Sound Efficient Item
Expertise Processes Tools Development
8/11/17 12
Tahap Telaah soal (Review)
Pertanyaan
Pilihan jawaban
8/11/17 14
ISI
8/11/17 16
Vignete
Bisa Berisi: Ketentuan:
• Pernyataan • Logis
• Situasi • Sistematis
• Kasus pasien
Pemeriksaan Pemeriksaan
Identitas Situasi Keluhan fisik Penunjang
8/11/17 18
Apa saja yang perlu ditelaah ?
• Materi :
• Relevansi dengan pekerjaan inti
• Bahasa
• Tingkat kesulitan
• Klasifikasi : sesuai blue print
8/11/17 19
Apa saja yang perlu ditelaah ?
• Struktur :
• Stem (vennette)
• Lead in
• Option
• Kesimpulan
• Komentar umum dan saran
• Diterima/revisi/dikembalikan 8/11/17 20
Kesalahan umum dalam pembuatan soal yang
perlu diwaspadai
8/11/17 22
Evaluasi butir soal secara spesifik
menggunakan stem/vignette
Apakah stem butir soal tidak mengandung materi yang tidak relevan?
Apakah vignette berisi informasi/data yang memungkinkan mahasiswa yang
kompeten mampu menjawab dengan benar?
Apakah vignette merepresentasikan keadaan yang mungkin terjadi di
konteks nyata?
Apakah vignette memfoskuskan prinsip atau konsep penting/esensial yang
perlu dimengerti oleh mahasiswa, bukan hanya soal hafalan?
Apakah stem bisa dijawab oleh mahasiswa yang kompeten tanpa melihat
jawaban yang tersedia?
Apakah stem tidak menjebak dan juga tidak terlalu rumit? 8/11/17 23
Evaluasi Lead in Question:
8/11/17 24
Evaluasi Pilihan Jawaban
• Apakah alternatif jawaban sudah dibuat jelas dan
singkat?
• Apakah alternatif jawaban sudah homogen?
• Apakah alternatif jawaban mempunyai panjang yang
hampir sama dengan jawaban kunci?
• Apakah alternatif jawaban sudah menghindari
alternatif yang tidak rasional?
• Apakah alternatif jawaban merupakan jawaban yang
tidak benar atau kurang benar dibandingkan dengan
jawaban kunci? 8/11/17 25
Evaluasi Pilihan Jawaban
Apakah alternatif jawaban cukup menarik mahasiswa yang tidak
kompeten untuk memilihnya?
Apakah alternatif jawaban secara tata bahasa konsisten dan cocok
dengan stem dan lead in question?
Apakah alternatif jawaban sudah menghindari penggunaan salah
satu di atas dan bukan salah satu di atas ?
Apakah alternatif jawaban sudah menghindari kata selalu ,
jarang , kadang-kadang ?
Apakah poin jawaban yang benar sudah diletakkan posisinya
secara acak terhadap distractornya?
8/11/17 26
Kesimpulan Hasil Review
•Diterima tanpa perbaikan
8/11/17 29
NO Istilah yang ada Istilah dalam uji kompetensi Ners
1. Wanita/Ibu/Ny/Nn perempuan
2. Pria/Bapak/Tn Laki-laki
Umur Usia
Hemoglobin Hb…gr/dL
Rumah Sakit RS
Diagnose Doagnosis 30
8/11/17
No Istilah yang ada Istilah dalam uji kompetensi
Thorax/dada Toraks
Ronchi Ronkhi
hematokrit Ht…%
Thrombosit Trombosit…./mm3
Anamnesa Anamnesis
Oksigen O2
Co2/karbondioksida CO2
X-Ray/rontgent/foto/ronsen X-ray
Ca/Carsinoma/kanker Karsinoma
Cholesterol Kolesterol
Tachycardia Takikardi
Item Selection
Non scored items Item Bank 3 Question book
process
8/11/17 33
Item Bank 4
Workflow Administrasi Bank Soal
Pembuat Soal Local IB Admin Regional IB Admin National IB Admin
Administrasi
Membuat soal Administrasi
Bank Soal dari
sesuai dengan Bank Soal untuk
tiap institusi Administrasi Bank
Blue Print Review
Soal NCE
Data base
Data base
soal Institusi
soal Regional
pasca review
Ya
Benar Benar Ya
NCE
& &
lengkap lengkap
Tidak
Tidak
Item Analysis
8/11/17 34
Item Analysis
Daftar Tilik Soal/Item (Untuk Reviewer)
Catatan: satu set daftar tilik berlaku untuk tiap satu soal/item
Diisi dengan tanda silang (X)
ID Soal :
Isi soal
Relevansi dan kesesuaian terhadap kompetensi ners Indonesia
( ) Sangat Relevan
( ) Relevan
( ) Ragu – ragu
( ) Kurang relevan
( ) Tidak relevan
Bahasa yang digunakan Tingkat kesulitan soal
( ) Sulit dimengerti ( ) Sangat sulit
( ) Kurang dimengerti ( ) Sulit
( ) Mudah dimengerti ( ) Sedang
( ) Mudah
( ) Sangat Mudah
Struktur Soal
Vingete
Terdapat ( ) Ya ( ) Tidak
Berfungsi ( ) Ya ( ) Tidak
FORM review
8/11/17 36
Kesimpulan Hasil Review
( ) Diterima tanpa perbaikan
( ) Diterima dengan perbaikan
( ) Tidak perlu konfirmasi dengan pembuat soal
( ) Perlu konfirmasi pembuat soal
( ) Dikembalikan kepada pembuat soal
( ) Berpotensi diterima dengan perbaikan
( ) Memerlukan perbaikan keseluruhan
Saran Perbaikan
Tanda Tangan Reviewer
Tanggal:
(DD) / (MM) / (YY) Nama Jelas :
Dengan ini menyatakan bahwa proses review soal di atas telah benar – benar telah dilakukan oleh nama
yang bertanda tangan di atas, tidak dilakukan oleh orang lain atau juga tidak dilakukan oleh orang lain
yang mengatasnamakan nama di atas.
Essensial?
Situasi?
Kasus (Vignete) Keluhan?
Pilihan jawaban
a. HormonTiroid Recall
b. Hormon Kortisol
c. Hormon Hipofise
d. Hormon paratiroid
8/11/17 38
e. Hormon Pertumbuhan
Kasus (vignete)
Seorang ibu membawa bayinya yang berusia 1 minggu ke RS. Ibu mengatakan
anaknya kejang selama 5 menit, saat kejang tidak sadar dan setelah kejang
bayinya terlihat tiduran terus dan malas menetek. 4 hari sebelumnya muncul
warna kuning di wajah bayi yang semakin meluas ke badan dan tangan kaki.
Pilihan jawaban
a. Bilirubin Direk
b. Bilirubin Indirek
c. Bilirubin Conjugated
d. Bilirubin fisiologis
e. Bilirubin serum 8/11/17 39
• Essensial ?
Kasus (vignete) • Badan soal?
• Lead in?
Seorang perempuan berusia 24 tahun,. Sejak kecil, klien dianggap mengalami gangguan jiwa,
dianggap bodoh sehingga klien tidak disekolahkan. Di rumah klien selalu dikucilkan dan tidak
pernah diajak berkomunikasi,klien mengatakkan tidak mempunyai teman dekat, dan tidak ada
anggota keluarga yang dianggap teman dekat klien. Akibatnya klien sering menyendiri,
melamun,tidakmau makan. Gaya bicara klien berhati-hati, bicara apabila ditanya, jawaban
singkat. Klien sering duduk sendiri dan banyak tidur.
Pertanyaan soal
Berdasarkan rentang respon sosial yang dihadapi klien masuk pada rentang respon ...
Pilihan jawaban
Ada option mengandung
a. Curiga unsur Pengulangan kata
b. Otonomi dari badan soal
c. Manipulasi
d. Tergantung
e. Menarik diri 8/11/17 40
8/11/17 41
BLUE PRINT
Kompetensi %
Praktik professional, etis, legal dan peka budaya
15-25%
Pengembangan professional
5-15%
8/11/17 42
BLUE PRINT
Keilmuan %
KMB 25-37%
Maternitas 8-14%
Anak 8-14%
Jiwa 8-14%
Keluarga 8-14%
Gerontik 3-9%
Manajemen 3-9%
Gadar 3-9%
Komunitas 3-9% 8/11/17 43