MONITORING DAN EVALUASI PENDIDIKAN KESEHATAN

MASYARAKAT

OLEHSITI MASFIAH, SKM, M.KES, M.A

STAF PENGAJAR UNIVERSITAS JENDERAL SOEDIRMAN2012

OUTLINEO PENGERTIAN MONITORING DAN

EVALUASIO KOMPONEN MONITORING DAN

EVALUASIO INDIKATOR DALAM MONITORING

EVALUASIO PROSES MONITORING DAN EVALUASI

PENGERTIAN MONITORING DAN EVALUASI

O Monitoring is the routine tracking of key elements of a program or project and its intended outcomes. It usually includes information from record keeping and surveys – both population and client-based.

O Evaluation is a rigorous, scientifically-based collection of information about program activities, characteristics, and outcomes that determine the merit or worth of a specific program. Evaluation studies are used to improve programs and inform decisions about future resources allocations.

Mengapa Perlu MonevO Review perkembangan/progressO Identifikasi masalah dalam perencanaan

dan/atau implementasi O Membantu mengidentifikasi masalah dan

penyebabnyaO Memberikan berbagai kemungkinan solusi

dalam menyelesaikan masalahO Mencerminkan tujuan yang akan dicapai dan

bagaimana mencapainyaO Meningkatkan kemungkinan dalam

membuat perubahan yang positif

FOKUS MONITOR DAN EVALUASI

1. Efisiensi Pemanfaatan input sesuai dengan output yang dihasilkan

2. Efektifitas apakah suatu kegiatan telah mencapai tujuan yang ditetapkan

3. Impact apakah yang telah dilakukan memberikan perbedaan terhadap masalah yang ingin diselesaikan.

PERBEDAAN MONITORING DAN EVALUASI

Aspek Monitoring Evaluasi

Tujuan Menilai kemajuan dalam pelaksanaan program yang sedang berjalan

Memberikan gambaran pada suatu waktu tertentu megenai suatu program

Fokus Akuntabilitas penyampain input program Dasar untuk aksi perbaikanPenilaian keberlanjutan program

Akuntabilitas penggunaan sumber dayaPembelajaran tentang hal-hal yang dapat dilakukan lebih baik dimasa yang akan datang

Cakupan 1. Apakah pelaksanaan sesuai dengan rencana?

2. Apakah terdapat penyimpangan?

3. Apakah penyimpangan dapat dibenarkan?

1. Relevansi2. Keberhasilan3. Efektifitas biaya4. Pembelajaran

Waktu Pelaksanaan

Dilaksanakan terus menerus atau secara berkala selama pelaksanaan program

Umumnya dilaksanakan pada pertengahan atau akhir program

KOMPONEN EVALUASI

1. Process Evaluation 2. Outcome Evaluation3. Impact Evaluation4.

PROCESS EVALUATION

O Mengevaluasi proses pelaksanaan program.

O Beberapa hal yang diukur :O Apakah program sampai pada

sasaran yg telah ditentukan?O Apa persepsi partisipan terhadap

program O Apakah program berjalan sesuai

dengan yang direncanakan O Bagaimana kualitas pelaksanaan

program?

Outcome evaluationO Mengukur hasil dari program yang telah

dilakukan. O Ini dapat berupa hasil langsung, jangka

pendek (Direct effect, intermediate effect).

O Contoh :O Langsung : mengukur jumlah sasaran

yang mendapat edukasi dan informasi.O Jangka pendek : pelaksanaan service

yang sesuai prosedur, perubahan perilaku.

Impact EvaluationO Mengukur perbedaan ketika

dilaksanakan program dan ketika tidak dilaksanakan program.

O Mengukur efek jangka panjang (long term effect)

O Menjawab seberapa besar perubahan yang pada populasi terjadi karena pelaksanaan program.

O Desain penelitian yang teliti dan lebih kompleks diperlukan dalam evaluasi ini.

Tipe Evaluator1. Evaluator Internal

O Menyatu dengan obyek yang dievaluasi

2. Evaluator EksternalO Punya kredibilitas yang lebih tinggi dan

keahlian yang lebih spesifikO Tidak terikat dengan keputusan2

administratif dan keuangan

3. Evaluator PartisipatifO Wakil dari pemerintah dan stakeholder

(termasuk penerima manfaat) bekerjasama dalam merancang dan melaksanakan evaluasi.

O Metode partisipatif memungkinkan digunakan dalam evaluasi internal dan eksternal.

Evaluasi Internal dan Eksternal Evaluat

orKelebihan Kekurangan

Evaluator internal

- Evaluator cukup mengenal dengan lingkungan yang dievaluasi

- Beberapa responden lebih mudah digali informasinya oleh orang dalam daripada orang luar

- Biaya lebih rendah dibanding eksternal

- Objektifitas tim evaluasi thd hasil evaluasi mungkin dapat dipengaruhi berbagai kepentingan

- Tim evaluasi mungkin kurang terlatih atau memiliki kemampuan dalam bidang evaluasi

Evaluator Eksternal

- Evaluasi dapat lebih objektif- Evaluator memiliki

kemampuan dan ketrampilan lebih dalam bidang evaluasi

- Beberapa responden lebih mudah digali informasinya oleh orang luar

- Menggunakan evaluasi eksternal dapat memberikan kredibilitas lebih terhadap hasil temuan

- Evaluasi ekstenal dapat memakan biaya yang besar.

- Evaluator eksternal mungkin salah mengerti keinginan kita terhadap apa yang ingin dievaluasi

INDIKATOR DALAM MONITORING EVALUASIO Indikator : variabel yang

mengindikasi/memberi petunjuk tentang suatu keadaan tertentu, sehingga dapat digunkan untuk mengukur perubahan (Green, 1992).

O Core Indicator : Indikator yang disarankan untuk dipakai secara national.

O Indikator dapat berupa kualitatif indikator maupun kuantitatif indikator.

Illustrative program monitoring indicators

O Number of outreach events carried out (e.g. workshops conducted, support group meetings held, drama or street theatre shows )

O Number of products distributed (e.g. condoms, lubricant)O Number of stakeholders participating in activitiesO Number of staff trained (e.g. in outreach, in counselling for

serodiscordant couples, STI treatment)O Number of information contacts (e.g. calls to a hotline, hits on

a website, pamphlets distributed)O Number of services provided (e.g. HIV tests conducted,

methadone doses provided) O Number of project sites (e.g. STI clinics, drug treatment

centres, drop-in centres)O Number of clients contacted (e.g. through outreach, at drop-in

centres, etc.)O Number of clients receiving services (e.g. IDUs in drug

treatment, FSWs screened for STIs)O Number of clients referred to services (e.g. HIV counselling

and testing, HIV treatment services, psycho-social support services)

Basic Program Reporting Considerations

O Key characteristics of individual clients reached by program activities (sex, age, target population group, location, etc)

O Types of services delivered O Frequency of services delivered (each visit)O Materials distributed (i.e., brochures,

condoms, drugs, or bandages) O Who delivered servicesO Training log for staff (topics/curricula,

dates, etc.) O Supervision / quality assurance visits for

oversight monitoring (checklists) O Needs assessment (diagnostic) of client;

reassess client needs over timeO Financial tracking & expenditures

PROSES MONITORING DAN EVALUASI

What

• Yakni apa yang akan dimonitor dan dievaluasi

How

• Yakni metode dan instrumen yang akan digunakan dalam mengumpulkan insformasi dan membangun indikator

Who

• Yakni pihak yang akan melakukan kegiatan monitoring dan evaluasi, baik itu internal maupun eksternal, institusi yang akan dilibatkan, dan sebagainya

PROSES MONITORING DAN EVALUASI

1. Menetapkan apa yang akan dievaluasi/monitorO Identifikasi program/kegiatan/objek yang akan

dievaluasiO Jelaskan uraian program/kegiatan/objek evaluasiO Tentukan fokus yang menjadi perhatian s.d

informasinya

2. Menyusun rencana evaluasiO Menyusun pertanyaan evaluasiO Menetapkan informasi yang diperlukan O Menentukan kreiteria evaluasiO Menentukan bagaimana, dimana, kapan, dari siapa

informasi didapatO Mengidentifikasi hambatan pelaksanaan evaluasi

PROSES MONITORING DAN EVALUASI

3. Pengumpulan dataO Identifikasi infrmasiO InstrumenO Pilot test untuk menguji informasi

4. Analisis dan presentasi data O Metode analisis dan presentasi dataO Kesimpulan

5. Pengambilan keputusan O Pilihan rekomendasiO Pertanyaan-pertanyaan tersebut adalah

(Ojha, 1998):

SUMBER DATAO Laporan programO Survey masyarakat/populasi, O Survey fasilitasO sero-surveyO Penelitian terkait

Contoh Pelaksanaan Monitoring dan evaluasi

1. COMBI (COMMUNICATION FOR BEHAVIORAL IMPACT) – FLU BURUNG JAWA TENGAH

2. Paticipatory monitoring and evaluation

3. Monitoring in EHCP

TERIMAKASIH