buku pedoman pelaksanaan ukmppd - pnukmppd 2014 bagian iv ke-2 dari 6

8/9/2019 Buku Pedoman Pelaksanaan UKMPPD - PNUKMPPD 2014 Bagian IV Ke-2 Dari 6

http://slidepdf.com/reader/full/buku-pedoman-pelaksanaan-ukmppd-pnukmppd-2014-bagian-iv-ke-2-dari-6 1/20

Pedoman Pelaksanaan UKMPPD 2014

79

B AGIAN 4.6. P ANDUAN P ERSIAPAN P ELAKSANAAN UK OSCE

A.

Pemilihan Soal

1. Pemilihan soal selalu merujuk kepada blueprint soal UK OSCE dilakukan oleh sub divisi persiapan UK

OSCE.2. Soal dipilih dari bank soal UK OSCE, baik dari folder soal baru maupun soal terpakai .3. Soal yang akan dikeluarkan dalam 1 tahun adalah sejumlah 28 set (1 set untuk 1 sesi @12 station)

a. Periode Februari: 6 setb. Periode Mei: 6 setc. Periode Agustus: 6 setd. Periode November: 6 set

4. Dari 28 set tersebut akan dipilih secara random untuk digunakan sejumlah 6 set dalam setiap periode ujian5. Pada setiap periode UK OSCE, untuk setiap ketegori (per station soal), soal yang dipilih didasarkan pada

kesetaraan dan kesamaan kode kompetensi dan kode bobot.6. Sebelum digunakan , dilakukan telaah dan atau revisi teknis terkait kejelasan, kelengkapan dan kegayutan:

a.

Template dan Rubrikb. Instruksi Pesertac. Skenario PSd. Manekin, Alat dan bahan

7. Soal yang terpilih dan akan dicetak, akan dihilangkan nama penulis soalnya. Meskipun demikian, di banksoal, nama penulis soal dan pentelaah akan tetap ditulis.

B.

Pembuatan Computer Based Scoring (CBS) UK OSCE1. Dari setiap soal yang terpilih untuk setiap periode pelaksanaan UK OSCE, daftar kompetensi yang akan

dinilai dan skala nilai yang akan digunakan (0-3) serta bobot nilai pada setiap kompetensi diserahkan olehpengelolan bank soal UK OSCE kepada Tim Information Technology (IT) Pusat UK OSCE untuk dibuatkanprogram Computer Based Scoring (CBS).

2. Selain CBS, Tim IT UK OSCE juga berkewajiban membuat kuesioner elektronik untuk bahan evaluasipelaksanaan UK OSCE.

3. Prosedur pembuatan program CBS dan kuesioner elektronik dibuat oleh Tim IT UK OSCE.

C.

Penetapan Penyelia Pusat

1.

Syarata. Dipilih dan mendapat surat tugas dari Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi

Dokter sebagai Penyelia Pusat . Pemilihan dilakukan dengan mempertimbangkan syarat berikut: Telahmengikuti pelatihan menjadi Penyelia Pusat UK OSCE dan direkomendasikan oleh fasilitator ATAUPernah menjadi Penyelia Pusat UK OSCE sebelumnya

b. Mengikuti briefing Penyelia Pusat yang diselenggarakan selambat-lambatnya satu hari sebelumrangkaian pelaksanaan UK OSCE.

c. Tidak menjadi pengawas pada institusi asal.

2.

Rekruitmena. Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter memilih Penyelia Pusat yang akan

bertugas dalam satu periode ujian dari daftar PP yang mememuhi syarat, dengan mempertimbangkan:

Asal institusi PP

Rekam jejak PP

Karakteristik OSCE Center tempat penugasanb.

Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter memilih Penyelia Pusat yangmemenuhi kriteria selambat-lambatnya 2 minggu sebelum pelaksanaan UK OSCE.

c. Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter memberikan surat penugasansebagai Penyelia Pusat UK OSCE selambat-lambatnya 2 minggu sebelum pelaksanaan UK OSCE.

d.

Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter memintakan izin ke pimpinaninstitusi Penyelia Pusat UK OSCE selambat-lambatnya 2 minggu sebelum pelaksanaan UK OSCE.

e. Surat penugasan mencantumkan informasi mengenai waktu, tempat, dan rangkaian pelaksanaanrangkaian kegiatan UK OSCE.




80

3.

Jumlah Penyelia PusatPanitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter menentukan jumlah Penyelia Pusatuntuk setiap OSCE center dengan mempertimbangkan:a. Jumlah rotasi yang diselenggarakan oleh OSCE center.b. Lokasi ruang yang digunakan untuk pelaksanaan UK OSCE.

c.

Jumlah sesi yang diselenggarakan oleh OSCE center.

4.

Briefing Penyelia Pusata. Briefing Penyelia Pusat diselenggarakan oleh Panitia Nasional Uji Kompetensi Mahasiswa Program

Profesi Dokter selambat-lambatnya satu hari sebelum rangkaian pelaksanaan UK OSCE.b. Dalam briefing, disampaikan informasi mengenai:

i.

Informasi dasar UK OSCEii. Rangkaian kegiatan pelaksanaan UK OSCE periode tersebutiii. Hak, kewajiban, kode etik, tata tertib, dan tugas Penyelia Pusativ. Penjelasan mengenai berkas kelengkapan ujianv. Administrasi dan keuangan

vi.

Permasalahan yang mungkin timbul dan solusinya

5.

Hak Penyelia Pusata. Mendapatkan honorarium sesuai ketentuan yang berlaku.b. Mendapatkan lumpsum, transportasi dan akomodasi sesuai ketentuan yang berlaku.c. Mendapatkan sertifikat Penyelia Pusat OSCE dari Panitia Nasional Uji Kompetensi Mahasiswa Program

Profesi Dokter

6.

Kewajiban Penyelia Pusata. Mematuhi tata tertib dan melaksanakan kode etik Penyelia Pusat UK OSCE.b. Mengisi lembar kesediaan Penyelia Pusat UK OSCE.

c.

Mengisi lembar persetujuan untuk menjaga kerahasiaan.d. Melaporkan kepada Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter apabila

sebelum pelaksanaan UK OSCE diketahui memiliki konflik kepentingan dengan peserta ujian dan atauinstitusi tempat penugasan. Penyelia Pusat yang memiliki konflik kepentingan dengan peserta ujian danatau institusi tempat penugasan, tidak diperbolehkan menjadi Penyelia Pusat di OSCE center tersebut.Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter akan mengubah penugasanPenyelia Pusat berkaitan dengan masalah ini.Konflik kepentingan dapat berupa:

i. Berhubungan darah dan/ atau terkait pernikahanii. Memiliki riwayat konflik kepentingan yang diketahui sebelumnya, misal riwayat masalah hukum

e. Menjaga kerahasiaan soal dan kelengkapannya.

f.

Mengikuti seluruh rangkaian kegiatan UK OSCE.

7.

Kode Etika. Komitmen terhadap tugas Penyelia Pusatb. Disiplinc. Tidak membocorkan soal dan kelengkapannyad. Tidak membantu atau merugikan peserta ujiane. Bersifat obyektif dan bertanggung jawabf. Menjunjung tinggi nilai-nilai sebagai berikut:

– Kejujuran – Loyalitas –

Kebajikan –

Kehormatan – Kebenaran – Respek – Keramahan – Integritas – Keadilan – Kerjasama




81

8.

Tata Tertiba. Datang tepat waktu.b. Harus hadir pada pelatihan Penyelia Pusat yang dilakukan satu hari sebelum rangkaian pelaksanaan

UK OSCE.c. Tidak meninggalkan tempat selama pelatihan Penyelia Pusat dan pelaksanaan rangkaian kegiatan UK

OSCE dilaksanakan.d. Menjaga kerahasiaan dan keamanan berkas soal sampai kegiatan UK OSCE selesai dilaksanakan. Jika

Penyelia Pusat akan meninggalkan area ujian dalam waktu yang singkat, maka Penyelia Pusat harusmenyimpan berkas soal di dalam lemari terkunci yang disediakan.

i. Mengikuti langkah dalam checklist Penyelia Pusat selama pelaksanaan rangkaian UK OSCE.ii. Menjalankan tugas sebagaimana dideskripsikan dalam pedoman ini.iii.

Bertanggung jawab terhadap pelaksanaan UK OSCE di OSCE center tempat Penyelia Pusatbertugas.

iv. Penyelia Pusat diperbolehkan membawa alat komunikasi ke lokasi UK OSCE dalam keadaantanpa suara (silent) dan atau getar saja.

v. Penyelia Pusat HANYA diperbolehkan mendokumentasikan situasi ujian dan lokasi UK OSCE DI

LUAR station. Penyelia Pusat tidak diperbolehkan mendokumentasikan berkas soal dalam bentukapapun.

vi. Mengirimkan laporan evaluasi terhadap OSCE center tempat Penyelia Pusat bertugas kePNUKMPPD selambat-lambatnya satu minggu setelah rangkaian kegiatan UK OSCE selesai.

9.

Tugas Penyelia Pusata.

Menerima berkas ujian dari Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter untukdibawa ke OSCE center.

b. Datang di OSCE center tempat Penyelia Pusat bertugas pada H-1 pelaksanaan UK OSCE untukpersiapan pelaksanaan UK. Detail langkah yang harus dilakukan Penyelia Pusat pada H-1 dapat dibacapada dokumen checklist Penyelia Pusat .

c.

Melaporkan kepada Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter jika terjadipermasalahan pada kegiatan H-1.

d. Datang sesuai waktu yang ditentukan pada hari H pelaksanaan UK OSCE untuk membuka berkas soaldan melakukan briefing penguji. Detail langkah yang harus dilakukan Penyelia Pusat pada hari H dapatdibaca pada dokumen checklist Penyelia Pusat .

e. Bekerja sama dengan Koordinator OSCE Center untuk memastikan bahwa OSCE berjalan denganlancar dan adil

f. Mengingatkan semua pihak yang terlibat dalam pelaksanaan UK OSCE untuk menaati tata tertib danmelaksanakan tugasnya dengan baik.

g. Hanya yang menggunakan nametag yang diperbolehkan untuk berada di area UK OSCE. Hanya duaorang dari pengurus fakultas/ Dekanat/ Rektorat yang telah ditentukan sebelumnya (BUKAN

BERGANTIAN) dan mengenakan nametag , yang berhak untuk memasuki area UK OSCE. PenyeliaPusat harus tegas dalam mengawasi pihak yang memasuki lokasi UK OSCE.h. Jika terjadi permasalahan, Penyelia Pusat mengambil keputusan demi kelancaran penyelenggaraan

dan melaporkannya pada berita acara ujiani. Melakukan evaluasi terhadap OSCE Center, penguji, koordinator OSCE Center dengan membuat

laporan evaluasi yang harus dikirimkan kembali ke Panitia Nasional Uji Kompetensi Mahasiswa ProgramProfesi Dokter selambat-lambatnya satu minggu setelah rangkaian kegiatan UK OSCE selesai.

j. Memastikan semua berkas ujian sudah lengkap sebelum tas berkas disegel kembali.k. Membawa berkas ujian yang sudah lengkap kembali sesuai petunjuk yang disampaikan pada pelatihan

Penyelia Pusat UK OSCE periode tersebut.

10.

Briefing Penyelia Pusat

Briefing PP dilakukan untuk:a. Menjelaskan prosedur pelaksanaan UK OSCE

Uraian kegiatan UK OSCE per hari

Aturan UK OSCE

Daftar institusi, peserta, sesi dan lokasi

Sistem kendali informasi UK OSCE




82

b. Menyampaikan critical incidents yang terjadi pada UK OSCE sebelumnyac. Menjelaskan terkait pembiayaan, administrasi dan logistik selama PP melaksanakan tugasPembagian dan penjelasan komponen berkas UK OSCE

D.

Persiapan Briefing KOC

1.

Persiapan briefing KOC terdiri dari:a. Menelaah dan mencetak rancangan tata letak ruangan 12 station soal dan perlengkapan serta alat

kesehatan yang diperlukanb. Membagi hasil pencetakan dan memasukan ke dalam amplop sesuai dengan jumlah institusi

penyelenggaara UK OSCE

2.

Sebelum pelaksanaan Briefing KOC, setiap KOC yang akan menyelenggarakan UK OSCEberkewajiban mengirimkan daftar nama panitia UK OSCE yang terdiri dari:

a. Koordinator OSCE Center (KOC)b. Koordinator Lokasi (Korlok)c. Penguji

d.

Pelatih Pasien Standar (PPS)e. Pasien Standar (PS)f. Laborang. Administrator Information Technology (IT)h. Adminstrasi umum

3.

KOC mengirimkan daftar nama panitia UK OSCE tersebut ke sekretaria UK OSCE.

E.

Briefing KOC

Briefing KOC dilakukan untuk:

1.

Menjelaskan prosedur pelaksanaan UK OSCE:a. Uraian kegiatan UK OSCE per harib. Aturan UK OSCEc. Daftar institusi, peserta, sesi dan lokasi dan penguji eksternal

2.

Verifikasi kesiapan OSCE Center

3.

Penjelasan kebutuhan station

4. Menyampaikan critical incidents yang terjadi pada UK OSCE sebelumnya

5.

Menjelaskan terkait pembiayaan, administrasi dan logistik UK OSCE

F.

Pencetakan Berkas Soal

1.

Pencetakan berkas soal terdiri dari:a. Mencetak lembar soal UK OSCE untuk penguji (termasuk foto jika ada)b. Mencetak lembar penilaian kertas untuk penguji (internal dan eksternal)c. Mencetak instruksi peserta (untuk di pintu dan di meja)d. Mencetak instruksi pasien standar (PS)e. Mencetak lembar berita acara ujian

2.

Pencetakan disesuaikan jumlah peserta ujian yang dikelompokan menjadi per sesi per institusipenyelenggara UK OSCE

G.

Pengepakan berkas soal UK OSCE




83

Pengepakan berkas soal UK OSCE terdiri dari:1. Memasukan soal dan lembar penilaian kertas(serta foto jika ada) untuk penguji ke dalam AMPLOP SOAL

per Station Soal (12 station soal)2. Memasukan instruksi peserta ke dalam AMPLOP INSTRUKSI PESERTA3. Memasukan instruksi PS ke dalam AMPLOP PS

4.

Memasukan lembar berita acara ke dalam AMPLOP BERITA ACARA5. Memasukan AMPLOP SOAL, AMPLOP INSTRUKSI PESERTA, AMPLOP PS dan AMPLOP BERITA

ACARA ke dalam AMPLOP SESI (Sesi 1-6)6. Jumlah AMPLOP SESI disesuaikan dengan jumlah peserta di suatu institusi penyelenggara UK OSCE, yang

dibagi ke dalam beberapa sesi dan atau lokasi7. Menyiapkan TAS INSTITUSI (setiap tas memiliki 3 kompartemen, setiap kompartemen menunjukan HARI

UJIAN yang dapat diisi masing-masing 2 AMPLOP SESI).8. Memasukan AMPLOP SESI ke dalam TAS INSTITUSI9. Mensegel TAS INSTITUSI10. Dalam kondisi jumlah peserta di suatu institusi sangat banyak yang berdampak pada jumlah lokasi ujian,

jumlah TAS INSTITUSI di suatu institusi penyelenggara UK OSCE dapat lebih dari satu dan setiap tas

digunakan untuk per lokasi.11. Untuk membawa TAS INSTITUSI ke acara Briefing PP, TAS INSTITUSI dimasukan ke dalam Koper dan

disegel12. Koper dibawa ke Briefing PP dengan pesawat dan atau mobil.13. Pada saat Briefing PP Koper UK OSCE dibuka, dan TAS INSTITUSI penyelenggara UK OSCE dibagikan

kepada PP sesuai institusi tempat tugas PP

H.

Pencetakan dan Pengepakan berkas Penyelia Pusat

1. Pencetakan dan pengepakan berkas Penyelia Pusat terdiri dari:a. Mencetak daftar tilik kegiatan PP dari H-1 sampai hari H (1,2,3) untuk kemudian dimasukan ke dalam

MAP BATIK PP.b. Menyiapkan segel kertas, segel tali plastic, bolpoint dan spidol untuk kemudian memasukannya ke dalam

AMPLOP PLASTIK PP2. Jumlah AMPLOP PLASTIK PP disesuaikan dengan jumlah PP atau TAS INSTITUSI3. AMPLOP PASTIK PP dimasukan ke dalam bagian depan TAS INSTITUSI

I.

Penetapan Petugas Kendali Informasi Teknis UK OSCE

Petugas Kendali Informasi Teknis UK OSCE ditetapkan dengan syarat anggota sub divisi UK OSCE. Dalam

situasi anggota subdivisi OSCE tidak dapat melakukan tugas ini maka ditunjuk dalah satu dari anggota divisi

ujian

Bagan Persiapan UKMPPD OSCE

Persiapan Soal

• Pemilihan Soal

• Pembuatan CBS

Briefing KOC

• PersiapanBriefing

• PelaksanaanBriefing KOC

Persiapan BerkasSoal

• PencetakanBerkas Soal

• PengepakanBerkas Soal

• Pengepakan

Berkas Soal PerSesi

• Pengepakan TasInstitusi

• PengepakanKoper

PersiapanPengawas Pusat

• Pencetakan danpengepakanberkas PP

• Penetapan PP

• Briefing PP

Persiapan KendaliInformasi

• PenetapanPetugas KendaliInformasi teknis




84

B AGIAN 4.7. P ANDUAN P ROSES P ELAKSANAAN UK OSCE

A.

Pemeriksaan Kesiapan Institusi Penyelenggara UK OSCE

1.

Pemeriksaan umum lokasi UK OSCE:

a.

Lokasi tidak digunakan untuk kegiatan lain dan tertutup dari jangkauan umum.b. Seluruh (18 jenis) manekin siap dipakai tersimpan di satu lokasi yang terjangkau di hari ujianc. Seluruh peralatan dan bahan habis pakai (berikut cadangannya) telah disiapkan di dalam tiap-tiap stationd. Sistem CBS dan perangkat laptop/komputer ber-UPS dalam station telah dipersiapkan oleh petugas IT

Lokale. Sistem kelistrikan didukung dengan pembangkit listrik cadangan (generator set ) yang siap dipakai.

2.

Pemeriksaan Aba Waktu (Timer)a. Timer elektronik (di flash disk PP) disimpan di laptop/komputer ber-UPS tersambung pelantam suara.b. Suara timer elektronik dapat terdengar dengan jelas dari tiap-tiap stationc. Tersedia alat isyarat/pelantam suara manual bila sistem pelantam suara tidak berfungsi saat ujian

3.

Pemeriksaan Ruangan:a. 12 ruang station soal (1-6 & 8-13) dan 2 station istirahat (7 & 14) berlabel nomor station jelas terbacab. Tata letak station 1, 2, 3, 4, 5, 6, 8 & 9 telah tertata sesuai Model 1c. Tata letak station 10 & 11 telah tertata sesuai Model 2d. Tata letak station 12 & 13 telah tertata sesuai Model 3e. Alur rotasi dapat dimengerti dengan mudah dan tersedia label penunjuk arahf. Ruang pengarahan Penguji (bila menyelenggarakan sesi pagi & siang, harus ada 2 ruang terpisah)g. Ruang pengarahan Peserta (bila menyelenggarakan sesi pagi & siang, harus ada 2 ruang terpisah)h. Ruang pengarahan dan pelatihan Pasien Standari. Ruang Penyelia Pusat (ruang dan/atau terdapat lemari dengan kunci yang dapat dibawa PP)

4.

Pengarahan peserta UK OSCE:a. PowerPoint pengarahan terdapat dalam flash disk Penyelia Pusatb. Pengarahan Peserta dilakukan oleh Koordinator OSCE Center dan Korlok serta WAJIB diikuti seluruh

Pesertac. Sebaiknya diselenggarakan pada Jumat pagi (antara pukul 08.00-11.00)d. KOC dan Korlok memastikan jumlah peserta sesuai dengan daftar dan jadwal sesi lokasi masing-masinge. KOC dan Korlok memastikan bahwa peserta telah sesuai dengan identitas dan kartu ujianf. Penyelia Pusat dapat mendampingi KOC bilamana jadwal PP memungkinkan

5. Pengarahan penguji:

a.

PowerPoint pengarahan terdapat dalam flash disk Penyelia Pusatb. Pengarahan Penguji dilakukan oleh Penyelia Pusat dan WAJIB diikuti seluruh Penguji Internal &

Eksternalc. Sebaiknya diselenggarakan pada Jumat siang (pukul 14.00-16.00) berkoordinasi dengan IT Lokald. Penyelia Pusat dan IT Lokal mendampingi Penguji saat uji coba CBS di ruang pengarahan (bukan di

station)e. Penguji tidak diperkenankan memasuki ruang station ujian dengan alasan apapunf. Penyelia Pusat memastikan bahwa jumlah dan kriteria penguji yang hadir telah memenuhi syaratg. 1 Sesi: 12 penguji utama + 3 penguji siaga (setiap penguji hanya bertugas 1 sesi dalam 1 hari)h. Khusus sesi 1 lokasi A, 3 penguji eksternal bertugas sebagai penguji utama (station ditentukan oleh

Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter)

6.

Pengarahan Pasien Standar:a.

Pengarahan Pasien Standar dilakukan oleh Pelatih Pasien Standard an WAJIB diikuti seluruh PS.b. Pelatih PS menjelaskan persiapan umum dan peraturan ujian (bukan spesifik tentang soal ujian)c. Sebaiknya diselenggarakan pada Jumat siang (pukul 14.00-16.00)d. Penyelia Pusat bersama PPS memastikan bahwa jumlah dan kriteria PS telah sesuai syarate. 1 Sesi: 10 PS utama + 3 PS siaga sesuai permintaan PUK (setiap PS hanya bertugas 1 sesi dalam 1

hari)




85

7.

Pengarahan panitia lain:Pengarahan Panitia lain (Laboran, Administrasi, dan IT Lokal) dapat dilakukan sesuai pertimbangan PP

B.

Pelaksanaan UK OSCE

1. Pelaksanaan UK OSCE dilaksanakan selama antara 1 hari sampai 3 hari yang dapat dibagi menjadi sesipagi dan sesi siang setiap harinya. Secara keseluruhan, UK OSCE dapat terdiri dari Sesi 1 (hari 1, sesipagi), Sesi 2 (hari 1, sesi sore), Sesi 3 (hari 2 sesi pagi), Sesi 4 (hari 2, sesi sore), Sesi 5 (hari 3, sesi pagi)dan Sesi 6 (hari 3, sesi sore).

2.

Untuk pelaksanaan UK OSCE sesi pagi, kegiatan pelaksanaan dimulai dari jam 6.30 sampai dengan12.00 waktu setempat sesuai wilayah institusi penyelenggara UK OSCE. Uraian kegiatan pada sesipagi per satuan waktu adalah sebagai berikut:a. 06.30: Pembukaan kompartemen tas sesuai hari ujian oleh PP & KOC/Korlok (isi berita acara

pembukaan).b. 06.35: Penyelia Pusat bersama KOC/Korlok mengisi berita acara pembukaan tas (dalam map batik)c. 06.35 Penyerahan Amplop PS dari PP ke Pelatih PSd. 06.35-07.45: Pelatihan, persiapan dan molase Pasien Standar oleh PSe. 06.35-07.00: Penentuan & penempatan manekin yang dipakai ke station oleh PP, KOC & Korlokf. 07.00-07.10: Penyerahan Amplop B (Instruksi Peserta) ke Korlokg. 07.10-07.30: Pengarahan Peserta oleh KOC (Penjelasan & pengisian identitas tiap-tiap Blanko Kuning)h. 07.10-07.45: Penyerahan isi Amplop A (Amplop S.01-S.13 dari PP ke Penguji untuk dipelajarii. 07.30-07.45: Pemasangan Instruksi Peserta di pintu dan meja station oleh Korlok j. 07.45-07.50: Penguji dan PS menempati station; pencocokan instruksi penguji dengan instruksi PSk. 07.45-07.50 Penyerahan Amplop PS dari Pelatih PS ke Penyelia Pusat

l.

07.50-07.55 Peserta ujian duduk tenang di depan station yang telah ditentukanm. 07.50-08.00 Penyelia Pusat memastikan seluruh station siap dan bebas kendala sebelum memulai ujiann. 08.00 UJIAN SESI PAGI DIMULAI (Penyelia Pusat memulai aba-aba waktu)o. 08.00-09.33 Ujian ROTASI 1 – ROTASI 6 (Penyelia Pusat memastikan kelengkapan berita acara) p. 09.33-09.41 (8 menit): Rehat Penguji & Pasien Standar (Peserta duduk tenang di kursi di depan station

berikutnya) Penyelia Pusat , KOC & Korlok bertugas memastikan tidak ada komunikasi antar peserta.q. 09.41-11.40: Ujian ROTASI 7 – ROTASI 14 (Penyelia Pusat memastikan kelengkapan berita acara) r. 11.30-11.40: Penyelia Pusat meminta Korlok melepas Instruksi Peserta yang terpasang di pintu stations. 11.40: UJIAN SESI PAGI BERAKHIRt. 11.40-12.00: Peserta segera ke ruang pengarahan untuk debriefing, mengisi kuesioner online dan

karantinau. 11.40-12.00: Penguji mengisi kuesioner online di komputer station, Amplop Soal ditinggal di dalam stationv.

11.40-12.00: PS kembali ke ruang pengarahan PS, debriefing dan karantina oleh PPSw. 11.40-12.00: Penyelia Pusat bersama Korlok mengumpulkan seluruh Amplop Soal & Instruksi Pesertax. 12.00: Amplop Soal (A) + Amplop Instruksi Peserta (B) + Amplop PS masuk Amplop C lalu disegel.

Seluruh Amplok dimasukan Amplop Sesi.y. 12.00: Bila hanya ada sesi pagi, PP menutup segel kompartemen tas disaksikan KOC/Korlok

3.

Jika ada sesi siang, dari pukul 11.30 sampai dengan 12.40 (70 menit), peserta sesi siang dikarantinadi ruang pengarahan peserta sesi siang. Para peserta sesi siang tidak diperkenankan keluar ruanganselama karantina.

4.

Untuk pelaksanaan UK OSCE sesi siang, kegiatan pelaksanaan dimulai dari jam 6.30 sampai dengan12.00 waktu setempat sesuai wilayah institusi penyelenggara UK OSCE. Uraian kegiatan pada sesipagi per satuan waktu adalah sebagai berikut:a. 12.05: Penyerahan Amplop PS dari PP ke Pelatih PSb. 12.05-13.15: Pelatihan, persiapan dan molase Pasien Standar oleh PSc. 12.05-12.30: Penentuan & penempatan manekin yang dipakai ke station oleh PP, KOC & Korlokd. 12.30-12.40: Penyerahan Amplop B (Instruksi Peserta) ke Korloke. 12.40-13.00: Pengarahan Peserta oleh KOC (Penjelasan & pengisian identitas tiap-tiap Blanko Kuning)f. 12.40-13.15: Penyerahan isi Amplop A (Amplop S.01-S.13 dari PP ke Penguji untuk dipelajari




86

g. 13.00-13.15: Pemasangan Instruksi Peserta di pintu dan meja station oleh Korlokh. 13.15-13.20: Penguji dan PS menempati station; pencocokan instruksi penguji dengan instruksi PSi. 13.15-13.20 Penyerahan Amplop PS dari Pelatih PS ke Penyelia Pusat j. 13.20-13.25 Peserta ujian duduk tenang di depan station yang telah ditentukank. 13.20-13.30 Penyelia Pusat memastikan seluruh station siap dan bebas kendala sebelum memulai ujianl. 13.30 UJIAN SESI SIANG DIMULAI (Penyelia Pusat memulai aba-aba waktu)

m.

13.30-15.03 Ujian ROTASI 1 –

ROTASI 6 (Penyelia Pusat memastikan kelengkapan berita acara) n. 15.03-15.11 (8 menit): Rehat Penguji & Pasien Standar (Peserta duduk tenang di kursi di depan station

berikutnya) Penyelia Pusat , KOC & Korlok bertugas memastikan tidak ada komunikasi antar peserta.o. 15.11-17.10: Ujian ROTASI 7 – ROTASI 14 (Penyelia Pusat memastikan kelengkapan berita acara) p. 17.00-17.10: Penyelia Pusat meminta Korlok melepas Instruksi Peserta yang terpasang di pintu stationq. 17.10: UJIAN SESI SIANG BERAKHIRr.

17.10-17.30: Peserta segera ke ruang pengarahan untuk debriefing, mengisi kuesioner online dankarantina

s. 17.10-17.30: Penguji mengisi kuesioner online di komputer station, Amplop Soal ditinggal di dalam stationt. 17.10-17.30: PS kembali ke ruang pengarahan PS, debriefing dan karantina oleh PPSu. 17.10-17.30: Penyelia Pusat bersama Korlok mengumpulkan seluruh Amplop Soal & Instruksi Peserta

v.

17.30: Amplop Soal (A) + Amplop Instruksi Peserta (B) + Amplop PS masuk Amplop C lalu disegel.Seluruh Amplok dimasukan Amplop Sesi.

w. 17.30 PP menutup segel kompartemen tas yang dibuka tadi pagi, disaksikan KOC/Korlokx. 17.35: Penyelia Pusat bersama KOC/Korlok mengisi berita acara penutupan tas (dalam map batik)

5.

Jika pelaksanaan UK OSCE di suatu institusi penyelenggara lebih dari 2 sesi, maka pada hari ke 2dan ke 3, pelaksanaan UK OSCE sesi pagi dan sesi siang mengikuti prosedur yang sama sepertitelah dijelaskan sebelumnya.

6.

Penyelia Pusat yang telah menyelesaikan tugas, setelah sesi terakhir, memberikan pengarahanterakhir secara singkat kepada KOC dan atau KORLOK serta panitia lainnya berdasarkan hasil

pengawasan selama pelaksanaan UK OSCE.

C.

Pengembalian TAS INSTITUSI UK OSCE

1. Setelah menunaikan tugasnya, PP wajib mengembalikan TAS INSTITUSI kepada Panitia Nasional UjiKompetensi Mahasiswa Program Profesi Dokter melalui petugas yang ditunjuk.

2. Tempat pertemuan PP dan petugas Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokterditetapkan pada saat briefing PP

3. Petugas Panitia Nasional Uji Kompetensi Mahasiswa Program Profesi Dokter dapat memasukan TASINSTITUSI kedalam KOPER UK OSCE atau langsung dibawa kembali ke secretariat UK OSCE




87

Bagan Pelaksanaan UK OSCE

Pengembalian Tas Institusi

Pengembalian Tas ke secretariat UK OSCE

Pelaksanaan UK OSCE

Sesi Pagi Sesi Siang

Pemeriksaan Kesiapan OSCE Center

PemeriksaanLokasi

PemeriksaanAba Waktu

PemeriksaanRuangan

PengarahanPeserta

PengarahanPenguji

PengarahanPS

PengarahanPanitia lain




88

B AGIAN 4.8. P ANDUAN P ENETAPAN N ILAI B ATAS LULUS UK OSCE

A.

Persiapan Penetapan Batas Lulus

1. TAS INSTITUSI baik yang dimasukan ke dalam KOPER UK OSCE atau tidak, dibongkar untuk memisahkan

beberapa berkas:a. Berkas soal dipisahkan menjadi beberapa bagian: lembar soal untuk penguji (termasuk foto jika ada),

lembar penilaian kertas (dari penguji eksternal dan internal), instruksi peserta, instruksi PS dan berita acaraujian.

b. Berkas PP dipisahkan menjadi: daftar tilik kegiatan PP (AMPLOP BATIK PP) dan AMPLOP PLASTIK PPc. Berkas lain yang mungkin terbawa dalam TAS INSTITUSI

2. TAS INSTITUSI yang telah dibongkar dan berkas yang telah dipisah disimpan di secretariat UK OSCE.3.

Berita acara ujian dan lembar penilaian kertas akan ditelaah bersamaan dengan analisis hasil UK OSCE.4. Berkas soal, berkas PP dan berkas lain yang mungkin terbawa dalam TAS INSTITUSI yang tidak digunakan,

dimusnahkan dengan menggunakan mesin penghancur kertas. Limbah hasil pemusnahan dimasukan karunguntuk kemudian ditutup rapat dan dibuang ke tempas sampah.

5.

Berita acara ujian ditelaah untuk memeriksa kejadian –kejadian selama ujian yang dapat mempengaruhi hasilatau kelulusan peserta UK OSCE

6. Lembar penilaian kertas ditelaah untuk tindak lanjut laporan PP atau KOC di berita acara ujian dan untukmemeriksa kecocokan dengan hasil penilaian berbasis compute/Computer Based Scoring (CBS)

B.

Analisis Hasil UK OSCE (standard setting)

1. Berdasarkan hasil telaah berita acara dan lembar penilaiankertas, data CBS dianalisis untuk menetapkan

Nilai Batas Lulus (NBL) UKOSCE.

2. Penetapan NBL menggunakan metode borderline regression method (BRM) dan dilakukan pada setiap

station soal.3. Langkah-langkah pada Borderline Regression Method adalah sebagai berikut:

a. Pada setiap Station, peserta memiliki 2 hasil penilaian:

Penilaian berdasarkan check list

Penilaian Kemampuan secara Umum atau global performance (Contoh: Gagal, Borderline, Lulus,Istimewa)

b. Nilai Global performance setiap peserta diregresi dengan nilai chek listc. Pada regresi:

Nilai check list sebagai dependent variable

Nilai global performance sebagai independent variabled. Nilai batas lulus adalah perpotongan antara borderline dan nilai ujian

4.

NBL UK OSCE adalah nilai rata-rata NBL seluruh station soal ditambah 1 standar error measurement (SEM)dari nilai rata-rata NBL seluruh station soal tersebut.

5. Data hasil penilaian UK OSCE setiap peserta (nilai rata-rata peserta di seluruh station soal) dibandingkan

dengan NBL UK OSCE untuk ditetapkan kelulusannya. Jika nilai rata-rata peserta di seluruh station soal di

atas NBL UK OSCE maka dinyatakan Lulus dari UK OSCE. Sebaliknya, jika dibawah NBL UK OSCE maka

diyatakan Tidak Lulus dan harus mengulang UK OSCE pada pelaksanaan UK OSCE selanjutnya.




90

B AGIAN 4.9. P ANDUAN U MPAN B ALIK DAN L APORAN UK OSCE

A.

Laporan Sementara Pelaksanaan UK OSCE

1. Hasil telaah berita acara UK CBT dan UK OSCE terkait kejadian –kejadian selama ujian yang dapat

mempengaruhi hasil atau kelulusan peserta UK OSCE dilaporkan dalam rapat pimpinan Panitia NasionalUji Kompetensi Mahasiswa Program Profesi Dokter yang dihadiri ketua dan wakil ketua divisi.

2. Laporan sementara ditujukan untuk menghadapi berbagai keluhan atau pertanyaan atau berbagaikemungkin lain yang muncul terkait pelaksanaan UK serta mempersiapkan langkah-langkah tindak lanjutyang harus segera diambil sebelum laporan resmi dan pengumuman hasil UK dilaksanakan.

B.

Pencetakan Hasil UK OSCE

1. Hasil UK OSCE dibuat untuk per individu peserta dan institusi pendidikan kedokteran asal.2. Hasil UK OSCE per individu dicetak dalam bentuk pdf oleh Tim IT UK OSCE dan dicetak dalam lembar

kertas oleh Tim UK OSCE

3.

Hasil UK OSCE untuk individu berisi:a. Skor keseluruhan dari semua station soal untuk setiap komponen kompetensi yang dinilai di UK OSCE:

Anamnesis

Pemeriksaan fisik

Melakukan tes/prosedur klinik atau interpretasi data untuk menunjang diagnosis banding/diagnosis,

Menentukan diagnosis atau diagnosis banding

Tatalaksana farmakoterapi

Tatalaksanan non farmakoterapi

Komunikasi dan edukasi pasien

Perilaku professional

b.

Skor maksimal yang dapat dicapai dari seluruh station soal pada setiap kompetensi yang dinilai di UKOSCEc. Nilai rata-rata total dari 12 station soald. Nilai Batas Lulus (NBL)e. Kesimpulan lulus atau tidak lulus individu terkaitf. Paraf pada tanda tangan oleh yang ditetapkan Panitia Nasional Uji Kompetensi Mahasiswa Program

Profesi Dokter4. Hasil UK OSCE untuk institusi asal peserta berisi:

a. Nomor seluruh peserta dari institusi terkaitb. Nama seluruh peserta dari institusi terkaitc. Skor setiap peserta pada setiap komponen kompetensi yang dinilai di UK OSCE:

Anamnesis

Pemeriksaan fisik

Melakukan tes/prosedur klinik atau interpretasi data untuk menunjang diagnosis banding/diagnosis,

Menentukan diagnosis atau diagnosis banding

Tatalaksana farmakoterapi

Tatalaksanan non farmakoterapi

Komunikasi dan edukasi pasien

Perilaku professional

d. Skor maksimal nasional setiap station soal pada setiap kompetensi yang dinilai di UK OSCEe. Rata-rata nilai total dari 12 station soal setiap peserta dari institusi terkaitf. Rata-rata nilai maksimal nasional dari 12 station soal

g.

Nilai Batas Lulus (NBL)h. Kesimpulan lulus atau tidak lulus setiap peserta dari institusi terkaiti. Paraf pada tanda tangan oleh yang ditetapkan Panitia Nasional Uji Kompetensi Mahasiswa Program

Profesi Dokter5. Hasil UK OSCE (individu dan institusi) dicetak dengan menggunakan kertas berkop surat resmi yang

ditetapkan.6. Hasil UK OSCE (individu dan institusi) yang telah dicetak harus diperiksa kembali dan dimasukan ke dalam

amplop yang ditujukan untuk setiap institusi asal peserta.




91

C.

Penyusunan Laporan Hasil UK

1. Hasil UK OSCE dijadikan satu dengan hasil Computer Based Test (CBT)2. Kelulusan UK didasarkan pada kelulusan UK OSCE dan CBT3. Laporan UK meliputi laporan untuk individu dan institusi

4.

Pelaporan hasil UK dan pelaksanaannya dianalisis dan disusun oleh PNUKMPPD untuk kemudiandilaporkan kepada Menteri Pendidikan dan Kebudayaan melalui Direktorat Jenderal Pendidikan TinggiKemendikbud dan kepada pemangku kepentingan terkait antara lain peserta, institusi asal peserta, BadanPPSDM Kemenkes, Organisasi Profesi (Kolegium Dokter Indonesia).

D.

Pengumuman Hasil UK OSCE

1. Batas waktu pengumuman hasil ujian adalah satu bulan setelah pelaksanaan UK OSCE.2. Pengumuman hasil per institusi diserahkan ke Dekan atau yang mewakili pada saat Forum Dekan yang

diselenggarakan bersama antara PNUKMPPD dengan AIPKI dan dilakukan satu bulan setelah

pelaksanaan UK OSCE.3. Pengumuman kelulusan per individu melalui laman http://pnukmppd.dikti.go.id dan media cetak yang

dilakukan satu bulan setelah pelaksanaan UK OSCE, hardcopy hasil UK per individu disampaikan secararahasia, dikirimkan melalui pos tercatat langsung ke institusi dan institusi yang menyerahkan ke peserta.

http://pnukmppd.dikti.go.id/






92

B AGIAN 4.10. P ANDUAN E VALUASI P ELAKSANAAN UK OSCE

A.

Evaluasi Pelaksanaan UK OSCE

1. Evaluasi UK OSCE dirancang dan dipersiapkan sebelum pelaksanaan UK OSCE

2.

Evaluasi UK OSCE terutama terkait kesahihan (validitas), keandalan (reliabilitas), penerimaan(acceptability), keterlaksanaan (feasibility), dampak terhadap pendidikan (educational effect) dan dampakterhadap pembelajaran (catalytic effect) dari UI OSCE.

3. Metode evaluasi ditentukan dan dikembangkan sesuai dengan tujuan evaluasi yang ingin dicapai.4. Untuk evaluasi dasar terkait penerimaan dan keterlaksanaan UK OSCE, metode yang digunakan adalah

media internet berupa kuesioner elektronik yang disiapkan tim IT UKD OSCE. Evaluasi meliputi seluruhkomponen UK OSCE, yaitu:a.

Peserta UK OSCEb. Penguji UK OSCEc. Pelatih PSd. PS

e.

Koordinator OSCE Centre (KOC)f. Koordinator Lokasi (KORLOK)

B.

Laporan Evaluasi UK OSCE

1. Data hasil evaluasi UK OSCE dianalisis dan hasilnya dijadikan laporan evaluasi pelaksanaan UK OSCE.2. Laporan evaluasi UK OSCE disusun dan dilaporkan kepada stakeholder yang berwenang.3. Hasil evaluasi UK OSCE dapat digunakan untuk memperbaiki pelaksanaan UK OSCE .

C.

Item Analysis

1. Soal yang telah digunakan dalam UK OSCE dianalisis berdasarkan masukan dari para penguji.2. Masukan terkait teknis penulisan akan ditindaklanjuti dengan koreksi teknis.3. Masukan terkait materi soal akan ditindaklanjuti dengan konsultasi tim pakar untuk memutuskan bentuk

koreksi terhadap materi soal.4. Soal yang telah digunakan, baik ada koreksi atau tidak, akan dimasukan ke dalam Bank Soal di folder Soal

Terpakai.




93

L AMPIRAN 1. T EMPLATE P ENULISAN S OAL UK CBT

Contoh Template Penulisan Soal UK CBT

ID (Tidak perlu diisi penulis soal)

Tinjauan 1 Komunikasi efektif

Ketrampilan dasar klinis

Aplikasi biomedis, perilaku, klinis, & epidemiologi pada kedokteran keluarga

Manajemen masalah kesehatan primer

Penelusuran, kritisi, dan manajemen informasi

Profesionalisme, etik, dan pengembangan pribadi

Tinjauan 2 Kognitif / Procedural knowledge / konatif

Tinjauan 3 Recall / Reasoning

Tinjauan 4 Kepala & Leher / Saraf & Perilaku / Saluran Pernapasan / Jantung, Pembuluh Darah &Pembuluh Limfe, / Kulit, Tulang, Otot dan Jaringan lunak / Ginjal dan Saluran Kemih /Darah & Imunologi / Saluran Cerna, hepatobilier, dan pankreas / Reproduksi/Endokrin and Metabolism / Lainnya:………………………..(sebutkan)

Tinjauan 5 Pertumbuhan, perkembangan, dan degenerasi / Kelainan genetik dan kongenital /Penyakit infeksi dan imunologi / Penyakit neoplasma / Penyakit akibat trauma ataukecelakaan / Lainnya:………(sebutkan)

Tinjauan 6 Promosi kesehatan dan pencegahan penyakit /

Penapisan (Diagnosis) /

Manajemen (Terapi) /

Rehabilitasi /

Aspek etik & hukum

Tinjauan 7 : Individu /

Keluarga /

Masyarakat /

Stem soal

Vignette

Pertanyaan

Pilihan jawaban

a.

b.

c.

d.

e.




94

Kunci jawaban

Penulis soal

Bagian/Departemen

Asal Institusi

Referensi literatur

ID (Tidak perlu diisi penulis soal)

Tinjauan 1 Komunikasi efektif

Ketrampilan dasar klinis

Aplikasi biomedis, perilaku, klinis, & epidemiologi pada kedokteran keluarga

Manajemen masalah kesehatan primer

Penelusuran, kritisi, dan manajemen informasi

Profesionalisme, etik, dan pengembangan pribadi

Tinjauan 2 Kognitif / Procedural knowledge / konatif

Tinjauan 3 Recall / Reasoning

Tinjauan 4 Saraf & Perilaku

Tinjauan 5 Pertumbuhan, perkembangan, dan degenerasi / Kelainan genetik dan kongenital /

Penyakit infeksi dan imunologi / Penyakit neoplasma / Penyakit akibat trauma atau

kecelakaan / Lainnya:………(sebutkan)

Tinjauan 6 Promosi kesehatan dan pencegahan penyakit /

Penapisan (Diagnosis) /

Manajemen (Terapi) /

Rehabilitasi /

Tinjauan 7 : Individu /

Keluarga /

Masyarakat /

Stem soal

Vignette Sebuah penelitian berkenaan hubungan antara toksisitas aluminium dan timbulnya

demensia, tipe Alzheimer, 400 pasien yang menderita penyakit tersebut dan 400 orang

kontrol yang bebas dari penyakit tersebut dilakukan wawancara untuk menanyakan

penggunaan panci aluminium selama 10 tahun ke-4 dalam masa hidupnya. Hasilnyamenunjukkan bahwa risiko relatif dari penyakit tersebut atas penggunaan panci

aluminium adalah sebesar 2.6 (interval kepercayaan 95% berkisar 1.9 – 3.2). Peneliti

menyimpulkan bahwa penggunaan panci aluminium menyebabkan demensia tipe

Alzheimer

Pertanyaan Manakah Aspek dibawah ini yang berpotensi mengakibatkan kesalahan pengambilan




95

kesimpulan tersebut?

Pilihan jawaban

a. Bias diagnosisb. Ecologic fallacyc. Kurangnya statistical powerd.

Tidak bermakna secara statistice. Bias recall

Kunci jawaban E

Penulis soal Dwi Agustian, dr

Bagian/Departemen Epidemiologi & Biostatistika

Asal Institusi Universitas Padjadjaran




96

L AMPIRAN 2. T EMPLATE REVIEW S OAL UK CBT

Checklist Administrasi Item Soal (Untuk Item Administrator)

( ) Biodata & CV

( ) Sertifikat

Formulir Soal

( ) Lengkap

( ) Tidak Lengkap

Hasil Preliminary Review

( ) Soal layak untuk direview

( ) Soal tidak layak untuk direview

Alasan Item soal tidak layak review:

Tertanda

Item Administrator




97

Daftar Tilik Soal/Item (Untuk Reviewer)

Catatan: satu set daftar tilik berlaku untuk tiap satu soal/item

Diisi dengan tanda silang (X)

ID Soal :

Isi soal

Relevansi dan kesesuaian terhadap kompetensi dokter umum

( ) Sangat Relevan

( ) Relevan

( ) Ragu – ragu

( ) Kurang relevan

( ) Tidak relevan

Bahasa yang digunakan Tingkat kesulitan soal

( ) Sulit dimengerti ( ) Sangat sulit

( ) Kurang dimengerti ( ) Sulit

( ) Mudah dimengerti ( ) Sedang

( ) Mudah

( ) Sangat Mudah

Struktur Soal

- Vingete1. Terdapat ( ) Ya ( ) Tidak

2.

Berfungsi ( ) Ya ( ) Tidak

3. Badan soal terlalu panjang, sulit, dan kompleks ( ) Ya ( ) Tidak

- Lead in4. Memenuhi Close the option rules ( ) Ya ( ) Tidak

5.

Pertanyaan/pernyataan negatif ( ) Ya ( ) Tidak

- Option6. Kesalahan tata bahasa ( ) Ya ( ) Tidak

7. Penggunaan istilah yang absolut ( ) Ya ( ) Tidak

8. Jawaban benar yang panjang ( ) Ya ( ) Tidak

9.

Pengulangan kata dari badan soal ke jawaban ( ) Ya ( ) Tidak10. Konvergensi option ( ) Ya ( ) Tidak

11. Pilihan jawaban yang panjang, kompleks, atau duplikasi ( ) Ya ( ) Tidak

12.

Pilihan yang mengandung unsur frekuensi suatu kejadian ( ) Ya ( ) Tidak

bersifat multi interpretasi

13. Pilihan jawaban tidak paralel dan urutan tidak logis ( ) Ya ( ) Tidak

14. Penggunaan BSSD (bukan salah satu diatas) pada pilihan jawaban ( ) Ya ( ) Tidak



98

Komentar Umum Reviewer

Kesimpulan Hasil Review

( ) Diterima tanpa perbaikan

( ) Diterima dengan perbaikan

( ) Tidak perlu konfirmasi dengan pembuat soal

( ) Perlu konfirmasi pembuat soal

( ) Dikembalikan kepada pembuat soal

( ) Berpotensi diterima dengan perbaikan

( ) Memerlukan perbaikan keseluruhan

Saran Perbaikan

Tanda Tangan Reviewer

Tanggal:

(DD) / (MM) / (YY)

Nama Jelas :

Dengan ini menyatakan bahwa proses review soal d i atas telah benar – benar telah dilakukan oleh nama yang bertanda tangan di atas, tidak dilakukan oleh orang lain

atau juga tidak dilakukan oleh orang lain yang mengatasnamakan nama di atas.

buku pedoman pelaksanaan ukmppd - pnukmppd 2014 bagian iv ke-2 dari 6

Documents