msc indonesian

Upload: sabarud

Post on 30-May-2018

218 views

Category:

Documents


0 download

TRANSCRIPT

  • 8/14/2019 MSC Indonesian

    1/40

    Perubahan yang Paling Signifikan(Most Significant Change Approach)

    Pemantauan dan evaluasi partisipatif denganpendekatan cerita

    Disusun untuk ACCESS oleh Paul Boon daripresentasi Rick Davies dan Jess Dart

    Mei 2005

  • 8/14/2019 MSC Indonesian

    2/40

    MSC: apakah itu? Bentuk kualitatif, M&E partisipatif

    Berdasarkan pada cerita dari perubahan

    yang signifikan Penggunaan indikator (perencanaan) yang

    terbatas

    Bukan merupakan pendekatan yangberdiri sendiri, tetapi sebuah tambahanpenting pada sebuah Kerangka Kerja M&E

  • 8/14/2019 MSC Indonesian

    3/40

    MSC didalam siklus proyek

    MSC sebagai monitoring dan evaluasi

    Monitoring adalah dilakukan terus-menerus dan cenderung terfokus pada

    kegiatan dan outputEvaluasi umumnya kurang rutin dan

    terfokus pada dampak

    Oleh karena itu MSC adalah pemantauandampak sebenarnya bentuk campuran dariM & E

  • 8/14/2019 MSC Indonesian

    4/40

    Maksud dari MSC didalam M&E

    Maksud utamanya adalah untuk memfasilitasiperbaikan dengan cara:Memfokuskan arah kerja ke tujuan secara tegas, sebagai contoh,

    apa yang benar-benar ingin kita capai dan bagaimana kita akanmenghasilkan lebih dari itu?

    Menyumbang terhadap evaluasi akhir:Informasi tentang hasil yang tidak diharapkan

    Informasi prestasi mengenai cerita sukses yang terbaik

    Dapat memberitahu kriteria yang digunakan untuk

    menilai proyek

  • 8/14/2019 MSC Indonesian

    5/40

    MSCvs pemantauan kuantitatif

    Kuantitatif Terfokus padapengukuran

    Pertanyaan tertutup Tentang pembuktian Deduktif Statis Pemindahan tujuan

    dapat menjadi sebuah

    masalah Proyek keluar

    MSC Terfokus pada soal-jawab

    Pertanyaan terbuka Tentang pembelajaran Induktif Dinamis Terfokus pada

    perubahan yang

    obyektif Konteks masuk

  • 8/14/2019 MSC Indonesian

    6/40

    Evaluasi Programberdasar pada Tujuan

    Perluasan

    terhadap

    tujuan yang

    telah

    dicapai

    Dari sudut pandang staf

    program + konsultasi

    bersama para

    stakeholder

    Program out

    change

    change

    change

    change

    change

    From the

    viewpoint

    of the

    Participants

    change

    Context in

  • 8/14/2019 MSC Indonesian

    7/40

  • 8/14/2019 MSC Indonesian

    8/40

    Indikator dan batasan

    Empat jenis hasil

    yang mungkin

    terjadi :

    : Yang diharapkan Yang tidak diharapkan

    Hasil memiliki arti

    yang disetujui

    1. Disini indikator

    berguna

    2.Sepertinya indikator

    tidak mungkin

    dikembangkan disini

    Hasil memiliki artiyang masih

    diperdebatkan

    3. Disini indikator bisamungkin

    dikembangkan

    4. Disini indikatortidakdapat digunakan

  • 8/14/2019 MSC Indonesian

    9/40

    Perubahan yang Paling Signifikan

  • 8/14/2019 MSC Indonesian

    10/40

    Mengapa cerita?

    Orang menyampaikan cerita secara alami

    Cerita dapat menguraikan kerumitan dankonteks

    Orang ingat dengan cerita

    Cerita dapat membawa pesan yang sulit/ hal-hal yang tidak/sulit dapat didiskusikan

    Tetapi cerita tidak diketahui akurasi/kebenarannya

  • 8/14/2019 MSC Indonesian

    11/40

    Menggunakan cerita didalamMSC

    Pengumpulan cerita + penafsiran bersamasecara sistematis = penyampaian cerita dapatsecara efektif dipakai/dirancang untuk

    pemantaunan dan evaluasi yang partisipatif

    Prosesnya memiliki hasil yang bermanfaat

    bagi penggunaan evaluasi

  • 8/14/2019 MSC Indonesian

    12/40

    Mendistribusikan cerita kepada para Stakeholders

    Pertemuan pemilihan

    Daerah 1 Daerah 2 Daerah 3 Daerah 4

    orang yang bercerita

    Arus

    cerita

    orang yang bercerita orang yang bercerita

  • 8/14/2019 MSC Indonesian

    13/40

    Inti dari MSC

    Sebuah pertanyaan: Menurut pendapat anda, perubahan apakah

    yang paling signifikan yang terjadi dalam .selama bulan

    [jelaskan perubahan tersebut dan jelaskan mengapa

    perubahan tersebut signifikan]

    Pengulangan pernyataan mengenaipertanyaan sejenis

    Yang manakah dari cerita SC yang anda kirapaling signifikan dibanding lainnya? [jelaskan perubahan tersebut dan jelaskan mengapa

    perubahan tersebut signifikan]

  • 8/14/2019 MSC Indonesian

    14/40

    Bagaimana MSC berbeda?

    Para peserta memiliki pilihan mengenaiinformasi jenis apa yang diambil

    Menggunakan data yang bermacam-macamdaripada data standar

    Informasi dianalisa oleh seluruh para peserta,tidak hanya oleh sebuah unit pusat/pihakluar/.

    Subyektifitas digunakan daripada dihindari

  • 8/14/2019 MSC Indonesian

    15/40

    MSC: prosesnya Menetapkan Topik Perubahan

    (Menentukan perubahan yang seperti apayang ingin dimonitor)

    Menetapkan masa pelaporan Mengumpulkan cerita SC

    Pemilihan cerita SC yang terkumpul Tanggapan balik terhadap pilihan yang

    telah dibuat Verifikasi Quantifikasi Meta-monitoring dan analisa sekunder Merevisi sistem MSC

  • 8/14/2019 MSC Indonesian

    16/40

    Tahap 1. Menetapkan cakupantopik

    Apakah cakupan topik itu? Kategori keluasan cerita (seperti bagian

    koran: olah raga, keuangan, kesenangan,bisnis, dsb)

    Bukan indikator Tidak dengan tepatditetapkan

    Contoh:

    perubahan didalam kehidupan orang perubahan didalam hubungan denganmitra kita

    perubahan didalam kebijakan pemerintah

    mengenai HIV/AIDS

  • 8/14/2019 MSC Indonesian

    17/40

    Step 1. Menetapkan Cakupan Topik (ctd)

    Berapa jumlah cakupan topiknya? kurang

    dari 5

    Apakah penentuan cakupan topik wajib?

    Tidak

    Cakupan topik seharusnya tentang apa?

    Tergantung

    Siapa yang seharusnya menyusun cakupantopik? - Tergantung

    C k T ik C h

  • 8/14/2019 MSC Indonesian

    18/40

    Cakupan Topik- Contoh Oxfam NZ: Dana hibah upaya peningkatan pendapatan

    kepada 99 LSM-PNG: 4 lingkup cakupan topik perubahanyang dimonitor:

    Perubahan dalam kehidupan perorangan Perubahan di tingkat masyarakatJenis perubahan lainnya Hal-hal yang dipelajari/Pembelajaran

    Program Penyuluhan Perusahaan Susu : 4 cakupan topik

    yang dimonitor: Perubahan didalam praktek di peternakan Perubahan terkait keahlian peternak dalam pembuatan

    keputusan Perubahan didalam kemampuan untuk mendapatkan

    keuntunganJenis perubahan lainnya

    Lainnya: Perubahan didalam partisipasi orang, didalam dinamika

    kekuatan, ..

    Perubahan didalam keberlanjutan organisasi masyarakatJenis perubahan lainnya

  • 8/14/2019 MSC Indonesian

    19/40

    Menetapkan cakupan topik Tidak penting tetapi:

    dapat membantu struktur proses pemilihan dapat membantu terfokus pada tujuan

    mereka berguna dalam memberitahu kita tentangapakah arti tujuan bagi para peserta

    Apabila cakupan topik dibiarkan terbuka,pilihan dari para peserta akan memberikanindikasi kepada kita tentang jenis perubahan

    yang mereka anggap penting = Cakupantopik jendela terbuka

    Jangan lupa: Cakupan topik terkaitperubahan negatif

  • 8/14/2019 MSC Indonesian

    20/40

    Tahap 2. Menetapkan masapelaporan

    Masa yang digunakan oleh LSM bermacam-macam dari 2-mingguan, hingga bulanan,

    hingga 3-bulanan dan tahunan. Yang paling umum adalah tiga bulanan

    Keterbatasan waktunya staf merupakanpembatas utama untuk menentukanfrekwensi

  • 8/14/2019 MSC Indonesian

    21/40

    Tahap 3 Mengumpulkan cerita

    Pertanyaan terbuka kepada para peserta

    Menurut pendapat anda, perubahanapakah yang paling signifikan yang terjadidi selama bulan?

    Bila secara khusus terkait dengan sebuahproyek, kita tambahkan:

    . sebagai sebuah hasil dari proyek?

    . sebagai sebuah hasil dari pelatihan yang

    anda terima?Contoh:

    Lihat 3 bulan terakhir, perubahan apakah yanganda kira paling signifikan didalam kualitas

    kehidupan orang didalam masyarakat ini??

  • 8/14/2019 MSC Indonesian

    22/40

    Tahap 3 Mengumpulkan cerita

    Tanggapan Jawaban peserta dalam 2 bagian:

    1. deskriptif

    2. bersifat menjelaskan

    Format dasar:

    Deskripsi (siapa, apa, dimana, kapan)

    Penjelasan (mengapa hal itu signifikan)

    Siapakah yang mendokumentasikan cerita (nama,posisi, lokasi, tanggal)

    Pilihan: Rekomendasi

  • 8/14/2019 MSC Indonesian

    23/40

    Bagaimana cara mengumpulkancerita?

    Bagaimana cara mendokumentasikan? Wawancara dan mencatatnya Selama diskusi kelompok Pihak penerima manfaat menuliskan sendiri Staf lapangan menuliskan cerita yang tidak diminta

    Informasi apa yang disertakan? Siapa, dimana, kapan? Apa yang terjadi? Mengapa signifikan?

    Cerita siapa yang dikumpulkan? Pihak penerima manfaat Para mitra staf

    Seberapa panjang cerita itu seharusnya? Bentuk pelaporan; lay-out/susunan;

    B i b ik di t

  • 8/14/2019 MSC Indonesian

    24/40

    Bagaimana cara bersikap disaatwawancara?

    Persiapkan diri untuk membangun sebuah hubungansebelum mulai wawancara

    Mendengar, mendengar, mendengar

    Berikan waktu dan ruang pada orang sesuai dansecepat kemauan mereka

    Tunjukkan bahwa anda benar-benar mendengarkan

    Jaga tubuh anda tetap santai dan terbuka

    Mencoba untuk menghindari perasaan terpisah

    dengan adanya sebuah meja Kembali ke hal yang telah anda pelajari untuk

    memastikan kebenarannya

    Berterimakasih pada orang yang terlibat

  • 8/14/2019 MSC Indonesian

    25/40

    Tahap 4. Memilih cerita SC

    Banyak kemungkinannya tetapi padaumumnya melibatkan:

    Membaca ceritanya

    Menuju pada keputusan bersamamengenai hal cerita mana yang dipilih

    Mengadakan sebuah percakapan

    mendalam & mendokumentasikan alasan-

    alasan untuk pilihanProses dapat difasilitasi atau tidak

    difasilitasi

  • 8/14/2019 MSC Indonesian

    26/40

    Tahap 4. Memilih cerita SC

    Tugas bagi pembaca/pemilih adalah untuk membacaseluruh cerita dan mengidentifikasi cerita yangpaling signifikan dari seluruh cerita SC yangdiajukan.

    Menurut pendapat anda, cerita manakah yang menunjukkan

    perubahan yang paling signifikan Lebih baik fokus pada satu cakupan topik dahulu

    Perlu untuk memutuskan siapa yang terlibat:pemberi cerita, atasan mereka, kawan mereka,..

    Perlu untuk diputuskan apakah menentukan kriteriapemilihan sebelumnya, ataukah membiarkannyamuncul melalui diskusi cerita SC

  • 8/14/2019 MSC Indonesian

    27/40

    Tahap 4. Memilih cerita SC

    S

    A G M

    B C D E F H I J K L N O P Q R

  • 8/14/2019 MSC Indonesian

    28/40

    Tahap 4 Pemilihan dilakukan oleh siapa?

    Cerita direview dan dipilih oleh? Pemberi cerita/ para peserta

    Staf (setiap bulan atau 3-bulan)

    Perwakilan daerah (3 atau 6 bulan): reviewcerita dari staf yang berbeda

    Staf nasional atau Dewan Pengurus (6 bulan tahunan): review dari cerita terpilih

  • 8/14/2019 MSC Indonesian

    29/40

    Memilih cerita - proses Voting tertutup (berikan nomor pada cerita,

    selanjutnya dituliskan pada selembar kertascerita manakah yang menurut andamerupakan cerita MSC)

    Diskusi yang difasilitasi: lihat pada semua

    pilihan dan melalui diskusi menuju kesebuah keputusan mengenai 1 cerita Penilaian

    (Catatan: Metodologi apapun yang digunakandidalam memilih sebuah cerita, pastikan bahwasemua orang menuliskan alasan terhadap pilihanmereka sehingga nantinya dapat digunakan dan

    membantu transparansi dari proses).

  • 8/14/2019 MSC Indonesian

    30/40

    Memilih cerita SC

    Harus (bukan merupakan pilihan) Dokumen SC mana yang dipilih

    Mengapa dipilih

    Proses yang digunakan untuk melakukanpemilihan

    Para peserta

    Pilihan mereka [Subyektifitas menjadi akuntabel melalui

    transparansi]

  • 8/14/2019 MSC Indonesian

    31/40

    Tahap 5. Tanggapan balik

    Memberi tanggapan balik adalah bagiandari proses: kepada pihak pemberi cerita SC,

    mengenai apa yang dipilih, mengapa

    dipilih dan proses pemilihan yangdigunakan memungkinkan perluasan fokus dari MSC

    dilain waktu

    faktor yang bersifat motivasi titik terlemah dari seluruh sistem M&E,

    termasuk MSC

  • 8/14/2019 MSC Indonesian

    32/40

    Tanggapan balik: bagaimana?

    Cara yang berbeda untuk memberikantanggapan balikMelalui staf lainnya, line-manajer, dsb

    Tanggapan balik melalui email

    Tanggapan balik secara lisanLaporan berkala

    Laporan resmi

  • 8/14/2019 MSC Indonesian

    33/40

    Tahap 6. Verifikasi cerita SC

    2 cara untuk memilih cerita guna di-verifikasiAcak

    Memverifikasi cerita perubahan yang palingsignifikan

    Aspek verifikasiSeberapa akurat faktanya?

    Seberapa cocok penafsirannya?Apa yang terjadi sejak itu?

  • 8/14/2019 MSC Indonesian

    34/40

    Tahap 6. Verifikasi cerita SC

    Mengapa?Mendorong adanya disiplin didalam pelaporan

    Memungkinkan adanya perluasan danpembelajaran lebih lanjut

    Kapan?Kapan cerita SC pertama kali memasuki sistem

    Kapan dipilih sebagai MS dari keseluruhan SCKapan cerita SC digunakan secara

    umum/terbuka

  • 8/14/2019 MSC Indonesian

    35/40

    Tahap 7. Kuantifikasi

    Didalam cerita SCJumlah orang, kegiatan, dsb yang terlibat

    Sebagai tindak-lanjut dari cerita SC

    Berapa banyak kasus lainnya seperti inidiketahui

    Didalam meta-monitoring (lihat berikutnya)

    Berapa banyak cerita SC yang seperti ini

  • 8/14/2019 MSC Indonesian

    36/40

    Tahap 8. Meta-monitoring & analisa sekunder Meta-monitoring: menjaga cerita SC tetap terdata

    (membuat database atau spreadsheet) dan

    mengorganisir data termasuk diantaranya:Gender/dari orang yang berceritaHasil dari proses pemilihan Frekwensi cerita

    Tema utama dari cerita SC Perubahan didalam jumlah cerita Perubahan didalam prosentase dari cerita yang negatif

    Analisa sekunder diakhir masa pelaporan mungkindiperlukan (fakultatif) dengan caramengkategorisasikan dan menghitung jenisperubahan yang dilaporkan, dan jenis penjelasanyang diberikan, pada tingkat yang berbeda

    Sebuah contoh cerita dapat diverifikasi oleh seorang

    evaluator eksternal (bila dirasa perlu)

  • 8/14/2019 MSC Indonesian

    37/40

    Kegunaan dari cerita yang dipilih Terkadang lebih dari 100 cerita dikumpulkan dari

    fasilitator, staf lapangan, dsb. Cerita yang terpilih disertakan didalam laporan

    perkembangan; disusun didalam sebuah booklet;dimasukkan didalam laporan berkala; dsb.

    Dan juga sebagai tambahan dari pelaporan, cerita

    digunakan untuk: Meningkatkan mutu/memperbaiki perencanaan

    Membantu menjelaskan sebuah maksud kepadaseorang petani

    Merekrut peserta baru Membantu menjelaskan sebuah maksud kepada

    anggota staf lainnya

    PR

    .

  • 8/14/2019 MSC Indonesian

    38/40

    Tahap 9. Merevisi Sistem MSC

    Diperlukan merubah frekwensi pelaporan? Diperlukan merubah definisi dari cakupan wilayah

    untuk digunakan? Perlunya untuk merubah orang yang terlibat didalam

    pemilihan cerita SC kedalam cakupan wilayah Perlunya perubahan didalam rancangan proses

    pemilihan: para peserta & proses yang digunakan

    Tanggapan balik dan tindak lanjut

    Dimana menggunakan MSC?

  • 8/14/2019 MSC Indonesian

    39/40

    Dimana menggunakan MSC?

    Bukan sebagai sebuah metode yang berdiri

    sendiri Disamping sistem yang berdasarkanindikator

    Untuk mengidentifikasi perubahan yang

    tidak diharapkan Untuk melibatkan orang didalam

    menganalisa perubahan Untuk melibatkan berbagai orang

    Untuk fokus pada hasil daripada output Sangat baik untuk program yang partisipatif

    dengan hasil yang komplek, beragam, &stakeholder yang bermacam-macam

    D k d i MSC

  • 8/14/2019 MSC Indonesian

    40/40

    Dampak dari MSC

    Proses tersebut menciptakan ruang bagi parastakeholder untuk mencerminkan, untuk memahamiperubahan yang komplek

    Panitia proyek/ tim pelaksanaan menjadi lebih baikdidalam mengkonseptualisasikan dampak

    Menyediakan dialog untuk membantu memahami

    nilai masing-masing Memfasilitasi dialog yang dinamis yaitu, apa yang

    benar-benar ingin anda capai dan bagaimana kita akanlebih daripada itu? Staf mendapatkan visi bersamasecara lebih penuh

    Proses tersebut mendorong moral mereka Proses tersebut melihat para petani, staf, kolaborator

    duduk bersama dan menafsirkan data kualitatif &penilaian evaluatif