Pedoman Administrasi Bank Soal Uji Kompetensi NasionalTenaga Kesehatan Indonesia (Dokter, Dokter Gigi, Perawat, Bidan)

Health Professional Education Quality Project Direktorat Jenderal Pendidikan Tinggi Kementrian Pendidikan Nasional Jakarta 2010

Daftar IstilahIstilah yang digunakan pada aplikasi SIPENAArea : pembagian wilayah kerja seperti Lokal, Regional, dan NasionalProfesi/Bidang:kelompok profesi kesehatan seperti Medical, Dentistry, Nursery, dan midWiferyInstitusi: Universitas dengan atribut terkecil, contoh Universitas Padjadjaran Fakultas Kedokteran, atau POLTEKKES KEMENKES MEDAN - Prodi Kebidanan LangsaIBA : Item Bank Administrator / Administrator Bank Soal (ABS) CBT: Computer based testing OSCE: Objective Structured Clinical Examination

1. Pendahuluan Upaya peningkatan sistem ujian pada pendidikan dokter yang menjadi fokus Komponen 2 HPEQ Project mensyaratkan adanya suatu proses pelaksanaan ujian yang kredibel, efektif, dan efisien sesuai dengan tingkat kepentingan ujian yang tinggi (High Stake Exam). Salah satu metode ujian yang akan digunakan adalah ujian tertulis dengan dukungan teknologi berbasiskan computer atan disebut juga sebagai computer-based testing (CBT). Untuk itu maka diperlukan upaya untuk mempersiapkan suatu sistem pengelolaan Bank Soal yang sangat kredibel baik dari segi keamanannya, maupun kemudahan dari proses administrasinya dengan dukungan piranti perangkat lunak dan keras yang memadai. Di samping upaya peningkatan kualitas pembuatan dan review soal, diperlukan pula sumber daya manusia pendukung yang dapat secara handal dapat mengelola Bank Soal yang kredibilitasnya sangat tinggi baik dari sisi penguasaan teknis maupun tingkat kepercayaan dalam mengemban kerahasiaanya. Mengingat kepentingan hal itu maka diperlukan serangkaian pelatihan bagi para calon pengelola atau administrator Bank Soal baik di tingkat nasional maupun regional. Dengan demikian proses ujian yang berjalan akan dapat terlaksana dengan lancar dan aman. Untuk mendukung kelancaran mekanisme tersebut maka telah dirancang suatu sistem pengelolaan bank soal yang berbasiskan teknologi dan informasi dalam bentuk SIPENA 02.01 ss-100828. Pedoman ini dibuat untuk membantu pengelola bank soal dalam memahami mekanisme kerja sebagai pengelola bank soal baik di tingkat nasional, regional maupun lokal serta mempermudah pengenalan dan pengoperasionalan aplikasi yang digunakan. 2. Tingkatan Administrator bank soal 1. tingkat nasional, yang mengelola bank soal sesuai profesi di tingkat nasional 2. tingkat regional, yang mengelola bank soal sesuai profesi di regional/wilayah3. tingkat lokal, yang mengelola bank soal di instutusi3. Kriteria Adminitrator Bank Soal 1. Tingkat Administrator Nasional a. Jujur dan amanah b. Memiliki pemahaman tentang Student Assessment c. Memahami kompetensi tenaga kesehatan d. Memahami analisis soal e. Memahami software Item Bank NCE 2. Tingkat Administrator Regional a. = IBA National b. Koordinator IB Admin Regional yang dipilih mewakili Regional/wilayah masing-masing 3. Tingkat Administrator Lokal a. = IBA Nasional b. Ketua Unit/Tim Evaluasi di institusi4. Tingkat Item Writer: a. Dosen/Pembuat soal sesuai bidang keilmuan4. Tugas Administrator Bank Soal 1. Mengelola Bank Soal yang menjadi tanggung jawabnya 2. Mengelola soal yang telah memenuhi format dan struktur yang ditetapkan 3. Bekerja sama dengan Koordinator Pengembang Soal menyelenggarakan review soal 4. Disarankan tidak melakukan telaah terkait materi/substansi soal 5. Melakukan proses seleksi buku soal sesuai blue print yang telah ditetapkan6. Membuat analisis soal dan memberikan feedback kepada pembuat soal 7. Melakukan sosialisasi item bank soft ware kepada pengguna 8. Bekerja sama dengan tenaga teknisi, melakukan pembaruan software dan pemeliharaan terhadap virus/threat/spam secara berkala 5. Peran IBA dalam Koordinasi Pengembangan Soal 1. IBA bekerja sama dengan koordinator pengembangan soal untuk menyelenggarakan review soal baik di tingkat fakultas/program studi, regional maupun nasional 2. Soal yang baik akan menjadi masuk ke dalam Item Bank 3. IBA menjalankan program pemilihan soal berdasarkan blue print yang telah ditentukan 4. IBA memberikan laporan rekapitulasi soal kepada Koordinator CBT & OSCE Center serta IBA regional/lokal

6. PERAN DAN TANGGUNG JAWAB IBA 6.1 Institutional/lokal1. Peran:Administrator bank soal institusi adalah tim yang bertanggung jawab terhadap pengumpulan dan penyimpanan soal di tingkat institusi2. Tanggung jawab:a. Collecting: mengumpulkan soal dari block/modul item administrators untuk selanjutnya memberikan soal dengan kriteria baik kepada IBA regionalb. Analyzing: meminta tim reviewer untuk melakukan item review and analysisc. Sorting: memilah soal yang sudah dianalisis, apakah akan disimpan dalam bank soal atau didaur ulang/koreksid. Banking: menjaga/maintenance of item bank (kapasitas menguasai software dari item bank)e. Reporting: melaporkan kepada penulis soal umpan balik dalam bentuk analisis soal kepada pembuat soal serta melaporkan bank soal kepada pimpinan fakultas. f. Pembuatan buku soal untuk ujian di insitusi yang menggunakan bank soal6.2 Regional1. Peran:Administrator bank soal regional adalah tim yang bertanggung jawab terhadap pengumpulan dan penyimpanan soal di tingkat wilayah regional2. Tanggung jawab:a. Collecting: mengumpulkan soal dari IBA lokal serta menyerahkan soal baik yang telah direview kepada IBA nasional b. Analyzing: meminta tim reviewer regional untuk melakukan item review and analysisc. Sorting: memilah soal yang sudah dianalisis, apakah akan disimpan dalam bank soal atau didaur ulang/koreksid. Banking: menjaga/maintenance of item bank (kapasitas menguasai software dari item bank).e. Reporting: melaporkan kepada penulis soal umpan balik dalam bentuk analisis soal kepada pembuat soal serta melaporkan jumlah & kriteria bank soal kepada IBA lokal di wilayahnya f. Pembuatan buku soal untuk ujian formatif di wilayahnya 6.3 Nasional3. Peran:Administrator bank soal nasional adalah tim yang bertanggung jawab terhadap pengumpulan dan penyimpanan soal untuk uji kompetensi nasional tenaga kesehatan4. Tanggung jawab:a. Collecting: mengumpulkan soal dari IBA regional b. Analyzing: meminta tim reviewer nasional/peer review untuk melakukan item review dan analysisc. Sorting: memilah soal yang sudah dianalisis, apakah akan disimpan dalam bank soal atau didaur ulang/koreksid. Banking: menjaga/maintenance of item bank (kapasitas menguasai software dari item bank).e. Reporting: melaporkan kepada penulis soal umpan balik dalam bentuk analisis soal kepada pembuat soal serta melaporkan jumlah & kriteria bank soal kepada IBA lokal di wilayahnya f. Pembuatan buku soal untuk ujian sumatif sesuai profesinya berdasarkan blue print

KETERANGAN 1. Pembuat soal membuat soal sesuai blue print dan format soal yang telah ditentukan. 2. Soal dikumpulkan kepada Lokal IB Admin 3. Lokal IB Admin bekerja sama dengan Local Item Developer menelaah soal sesuai format yang telah ditentukan 4. Soal yang sesuai format dimasukkan ke dalam Lokal IB 5. Lokal IB bisa digunakan untuk soal masing-masing institusi baik ujian formatif maupun sumatif 6. Lokal IB Admin mengumpulkan soal dari Lokal IB kepada Regional IB Admin sesuai jumlah soal yang diminta 7. Regional IB Admin bekerja sama dengan Coordinator Regional Item Development menelaah soal sesuai struktur yang telah ditentukan 8. Soal yang sesuai struktur dimasukkan ke dalam Regional IB 9. Regional IB bisa digunakan masing-masing regional untuk ujian formatif/try out 10. Soal dari Regional IB Admin diserahkan kepada National IB Admin soal ini menjadi National IB 111. National IB Admin menyelenggarakan Item Review Nasional untuk menelaah NIB 1 sesuai kompetensi 12. Soal yang baik ditelaah selanjutnya oleh Panel Expert Review13. Soal yang diterima dimasukkan ke dalam National IB 214. National IB 2 digunakan untuk NCE dalam bentuk non scored item untuk uji coba 15. Soal dari Non scored item yang secara statistik analisis baik dimasukkan ke dalam NIB 316. Soal untuk NCE terdiri dari 150 soal NIB 3 dan 50 soal NIB 2 17. National IB Admin memberikan umpan balik terhadap analisis soal kepada pembuat soal

Prosedur Pengkodean Pembuat dan Reviewer Soal Uji Kompetensi Dokter Indonesia1. Kriteria Pembuat Soal Pembuat soal adalah ahli di bidang kedokteran dan kesehatan sesuai dengan garis besar materi ujian Pembuat soal dapat berasal dari kalangan dosen, praktisi bidang kedokteran dan kesehatan Pembuat soal mengetahui dan memahami kompetensi minimal yang harus dikuasai seorang dokter umum yang akan melakukan praktik kedokteran di Indonesia (Standar Kompetensi Dokter Indonesia) Persyaratan di atas dibuktikan melalui Curriculum Vitae (CV) dan sertifikat pelatihan dalam bidang student assessment2. Kriteria Reviewer Soal Reviewer soal adalah ahli yang berpengalaman di bidang kedokteran dan kesehatan sesuai dengan garis besar materi ujian Reviewer soal bisa berasal dari kalangan dosen, praktisi bidang kedokteran dan kesehatan Reviewer soal telah pernah mengikuti pelatihan dalam bidang student assessment baik dalam maupun luar negeri Persyaratan di atas dibuktikan melalui CV dan sertifikat pelatihan3. Prosedur Pengkodean Pembuat dan reviewer soal harus diberikan kode yang unik yang merupakan identitas yang bersangkutan dalam pengadministrasi soal Pengkodean Pembuat dan Reviewer oal dilakukan oleh Administrator Bank Soal Institusi dan diklasifikasi berdasarkan: Asal institusi dari pembuat dan reviewer soal Bagian/departemen yang merupakan homebase dari pembuat dan reviewer soal Nomor Urut pembuat/reviewer soal di institusi asal Kode institusi asal pembuat/reviewer soal adalah sebagai berikut:

Daftar Kode Institusi Pendidikan Dokter di IndonesiaNama InstitusiKode Institusi

Universitas Syiah Kuala01

Universitas Abulyatama02

Universitas Sumatra Utara03

Universitas Islam Sumatra Utara04

Universitas Methodist Indonesia05

Universitas Andalas06

Universitas Baiturahmah07

Universitas Riau08

Universitas Lampung09

Universitas Malahayati10

Universitas Sriwijaya11

Universitas Jambi12

Universitas Trisakti13

Universitas Kristen Krida Wacana14

Universitas Pelita harapan15

Universitas Indonesia16

Universitas Katolik Atmajaya17

Universitas YARSI18

Universitas Muhammadiyah Jakarta19

Universitas Kristen Indonesia20

Universitas Tarumanagara21

Universitas Pembangunan Nasional Veteran22

Universitas Padjadjaran23

Universitas Kristen Maranatha24

Universitas Jenderal Achmad Yani25

Universitas Islam Bandung26

Universitas Diponegoro27

Universitas Islam Sultan Agung28

Universitas Jenderal Soedirman29

Universitas Gajah Mada30

Universitas Muhammadiyah Yogyakarta31

Universitas Sebelas Maret32

Universitas Islam Indonesia33

Universitas Muhammadiyah Surakarta34

Universitas Brawijaya35

Universitas Muhammadiyah Malang 36

Universitas Islam Malang37

Universitas Jember38

Universitas Airlangga39

Universitas Hang Tuah40

Universitas Wijaya Kusuma Surabaya41

Universitas Udayana42

Universitas Mataram43

Universitas Islam Al-Azhar Mataram44

Universitas Lambung Mangkurat45

Universitas Mulawarman46

Universitas Hasanuddin47

Universitas Muslim Indonesia48

Universitas Sam Ratulangi49

Universitas Cendrawasih50

Universitas Tanjungpura51

Universitas Syarif Hidayatullah52

Universitas Muhammadiyah Palembang53

Universitas Abdurrab54

Universitas Batam55

Universitas Bengkulu56

Universitas Swadaya Gunung Jati57

Universitas Warmadewa58

Universitas Nusa Cendana59

Universitas Pattimura60

Universitas Muhammadiyah Makassar61

Universitas Tadulako62

Universitas Muhammadiyah Semarang63

Universitas Haluoleo-kendari64

Universitas Prima Indonesia65

Universitas Muhammadiyah Sumatera Utara66

Universitas HKBP Nomensen-medan67

Universitas Malikussaleh- Lhokseumawe68

Institut Ilmu Kesehatan Bhakti Wiyata Kediri69

Universitas Al Khairaat - palu70

Universitas Indonesia Timur71

Universitas Kristen Krida Duta Wacana72

Institusi selain Institusi Pendidikan Dokter73

Kode bagian/depatemen home base asal pembuat/reviewer soal adalah sebagai berikut:

Daftar Kode Asal Bagian/Departemen Pembuat dan Revier Soal UKDI

Departemen/BagianKode Bagian/Departemen

Kimia Medik01

Biologi Medik02

Histologi03

Anatomi04

Biokimia05

Faal06

Farmakologi07

Farmasi Medik08

Mikrobiologi09

Parasitologi10

Ilmu Kesehatan Masyarakat11

Ilmu Gizi12

Epidemiologi dan Biostatistika13

Patologi Anatomi14

Patologi Klinik15

Anestesiologi16

Ilmu Kedokteran Jiwa17

Ilmu Kesehatan Anak18

Ilmu Penyakit Dalam19

Ilmu Penyakit Kulit dan Kelamin20

Ilmu Penyakit Saraf21

Radiologi22

Ilmu Kedokteran Nuklir23

Ilmu Bedah24

Ilmu Bedah Saraf25

Ilmu Bedah Orthopaedi26

Ilmu Kebidanan dan Penyakit Kandungan27

Ilmu Penyakit Mata28

Ilmu Penyakit Gigi dan Mulut29

Ilmu Penyakit THT30

Ilmu Kedokteran Kehakiman31

Ilmu Kedokteran Fisik dan Rehab32

Bioetik dan Humaniora33

Kedokteran Keluarga34

Kardiologi dan Kedoktean Vaskuler35

Urutan pengkodean pada pembuat/reviewer soal adalah sebagai berikut:Kode Institusi Kode Bagian/Departemen Nomor Urut

XX XX XXXX

Contoh (yang dilakukan oleh Administrator Bank Soal di Universitas Padjadjaran) :

Nama Lengkap (sesuai CV)Asal InstitusiBagian Kode

Arif S. Kartasasmita, dr., SpM., M.KesUniversitas PadjadjaranIlmu Penyakit Mata23-29-001

Mohammad Ghozali, dr.Universitas PadjadjaranBiokimia23-05-002

Sari Puspa dewi, dr., MHPEUniversitas PadjadjaranBiokimia23-05-003

Bagi pembuat/reviewer soal yang berasal dari institusi selain institusi pendidikan dokter, seperti praktisi kesehatan di Puskesmas, Rumah Sakit non Pendidikan, Perhimpunan, Kolegium, dan lain-lain, maka yang bersangkutan harus dapat memenuhi kriteria pembuat/reviewer soal serta menyampaikan soal ke Adminstrator Bank Soal Regional.

Pengkodean pembuat/reviewer soal adalah sebagai berikut: Kode asal institusi diberikan kode 73 Kode bagian/departemen disesuaikan dengan bidang ilmu/kepakaran pembuat/reviewer soal

Prosedur Penggunaan Aplikasi Administrasi Bank Soal (Item Bank)Log In Fitur ini adalah gerbang awal seorang pengguna aplikasi dalam mengelola soal, dengan cara memasukkan username dan password yang telah disediakan Level pengguna aplikasi beserta fitur-fitur yang menyertainya adalah sebagai berikut:1. Item Bank Administratora. Menginput soal barub. Mengedit soalc. Menambahkan/mengubah spesifikasi soal berdasarkan tinjauan, penulis soal dan referensid. Menghapus soale. Mencari soal yangtersimpan dalam bank sesuai dengan tinjauan yang diinginkanf. Menginput jenis/klasifikasi tinjauan soalg. Memproduksi dan mengedit Buku Ujianh. Menambahkan, mengedit dan menghapus pengguna aplikasi bank soal, seperti Penulis dan Penelaah Soali. Melakukan back up pada aplikasi2. User Biasa (Penulis Soal/Item Writer, Penelaah Soal/Reviewer Soal)a. Menginput soal barub. Mengedit soalc. Menambahkan/mengubah spesifikasi soal berdasarkan tinjauan, penulis soal dan referensid. Menghapus soale. Mencari soal yangt ersimpan dalam bank sesuai dengan tinjauan yang diinginkan Item Bank Administrator memiliki kewenangan dalam menambahkan, mengedit dan menghapus pengguna aplikasi bank soal, seperti Penulis dan Penelaah Soal. Sehingga username dan password User Biasa ditentukan dan diinput oleh Item Bank Administrator. Masukan username dan password pada kolom yang disediakanHomeBerikut adalah tampilan yang akan muncul di layar komputer Anda setelah sukses menginstall aplikasi dan log in:

Item Bank Kegunaan fitur Item Bank: Menginput soal baru Mereview soal Menambahkan/mengubah spesifikasi soal berdasarkan tinjauan, penulis soal dan referensi Menghapus soal Mencari soal yang tersimpan dalam bank sesuai dengan tinjauan yang diinginkan Mereview soal berdasarkan formulir/cek lis review soal Cara menginput soal baru:1. Pada tampilan Home, pilih dan klik menu drop down box Item Bank2. Pilih Data Soal, maka akan muncul tampilan sebagai berikut:

3. Pilih dan Klik ikon TAMBAH untuk menambah soal baru4. Pilih tinjauan soal sesuai dengan spesifikasi soal yang diinginkan5. Ketik/Inputkan soal pada kolom yang telah disediakan yaitu Vignette, Jawaban, Komentar Soal, Penulis Soal dan Referensi6. Menginputkan jawaban soal degan cara memilih/mengklik kotak yangterdapat di sebelah kanan kolom jawaban7. Kolom komentar soal disediakan bagi penulis soal untuk memberikan pernyataan yang berkaitan dalam menentukan jawaban soal8. Pilih/klik Save untuk menyimpan soal yang telah diinputkan9. Anda akan kembali pada tampilan Data Soal

Cara mencari dan mereview soal yang tersimpan dalam bank soal:1. Pilih Data Soal2. Pilih klasifikasi pencarian soal berdasarkan tinjauan yang disediakan atau pilih soal yang akan diedit dengan memilih ikon tanda panah pada sudut kanan bawah pada tampilan Data Soal3. Pilih/klik ikon Buku dan Pensil untuk memulai mengedit soal4. Pilih tinjauan soal sesuai dengan spesifikasi soal yang diinginkan5. Ketik/Inputkan soal pada kolom yang telah disediakan yaitu Vignette, Jawaban, Komentar Soal, Penulis Soal dan Referensi6. Menginputkan jawaban soal degan cara memilih/mengklik kotak yang terdapat di sebelah kanan kolom jawaban7. Kolom komentar soal disediakan bagi penulis soal untuk memberikan pernyataan yang berkaitan dalam menentukan jawaban soal8. Pilih ikon review soal9. Isi dan pilih formulir review soal10. Pilih/klik Save untuk menyimpan soal yang telah diinputkan11. Anda akan kembali pada tampilan Data Soal

Cara mencari dan menghapus soal yang tersimpan dalam bank soal:1. Pilih Data Soal2. Pilih klasifikasi pencarian soal berdasarkan tinjauan yang disediakan atau pilih soal yang akan diedit dengan memilih ikon tanda panah pada sudut kanan bawah pada tampilan Data Soal3. Pilih/klik ikon Tempat Sampah untuk menghapusData Soal Fitur ini memberikan laporan/rekapitulasi dari soal yang tersimpan dalam Bank Soal berdasarkan tinjauan soal Contoh tampilan rekapitulasi soal adalah sebagai berikut:

Prosedur Penggunaan Aplikasi Administrasi Bank Soal (Adminsitrasi Pengguna)Admin User Kegunaan fitur Admin User:1. Mengaktifkan penggunaan aplikasi2. Menambahkan dan mengaktifkan pengguna aplikasi 3. Mendaftarkan username dan password bagi para pengguna aplikasi4. Menghapus pengguna aplikasi5. Mencari dan menampilkan daftar pengguna aplikasi yang didaftarkan oleh Item Bank Administrator berdasarkan nama

Cara mengaktifkan aplikasi1. Pada saat pertama kali log in, ketikkan username: admin. Pasword : admin2. Pilih menu Data User dan pilih/klik Aktivasi Pengguna.3. Pilih/klik TAMBAH4. Masukkan data diri Item Bank Administration.5. Hal-hal yang harus diperhatikan dalam mendaftarkan username dan password: Item Bank Administrator adalah tim atau staf pengajar yang ditunjuk/ditugaskkan oleh institusi untuk mengelola soal, baik di tingkat institusi, regional dan nasional. Username dan password harus unik dan mudah dihapal oleh empunya Item Bank Administrator memilih tipe user dan tipe level Administrator, sehingga memiliki kewenangan dalam menambah, menghapus dan mengedit user lain seperti Item Writer, Item Reviewer, Item Bank Admin, Exam Coordinator dan Student Item Bank Administrator dapat dibuat lebih dari 1 orang, sesuai SOP/Kebijakan yang berlaku6. PIlih/klik Save. Pada layar akan muncul tampilan di bawah ini:

7. Pada tampilan Home, pilih Aktifasi Pengguna8. Pilih/klik aktifkan sesuai dengan nama user yang akan diaktifkan9. Pilih/klik aktifasi instansi. Prosedur ini bertujuan untuk mengaktifkan institusi asal dari Item Bank Adminsitrator dan pengguna lainnya10. Aktifkan institusi dengan memilih dan klik institusi untuk mengaktifkan, seperti yang muncul pada tapilan di bawah ini:11. Pilih Log Out12. Masukkan username dan password Item bank Administrator

Cara mendaftarkan, mengedit dan menghapus username dan password bagi para pengguna aplikasi:1. Pilih admin user, kemudian klik aktifasi pengguna2. Pilih TAMBAH untuk menambah pengguna aplikasi3. Pilih ikon loupe/kaca pembesar untuk melihat detil input4. Pilih ikon pensil untuk mengedit data input pengguna5. Pilih ikon tanda silang unutk menghapus user.