Download - MSC Indonesian
-
8/14/2019 MSC Indonesian
1/40
Perubahan yang Paling Signifikan(Most Significant Change Approach)
Pemantauan dan evaluasi partisipatif denganpendekatan cerita
Disusun untuk ACCESS oleh Paul Boon daripresentasi Rick Davies dan Jess Dart
Mei 2005
-
8/14/2019 MSC Indonesian
2/40
MSC: apakah itu? Bentuk kualitatif, M&E partisipatif
Berdasarkan pada cerita dari perubahan
yang signifikan Penggunaan indikator (perencanaan) yang
terbatas
Bukan merupakan pendekatan yangberdiri sendiri, tetapi sebuah tambahanpenting pada sebuah Kerangka Kerja M&E
-
8/14/2019 MSC Indonesian
3/40
MSC didalam siklus proyek
MSC sebagai monitoring dan evaluasi
Monitoring adalah dilakukan terus-menerus dan cenderung terfokus pada
kegiatan dan outputEvaluasi umumnya kurang rutin dan
terfokus pada dampak
Oleh karena itu MSC adalah pemantauandampak sebenarnya bentuk campuran dariM & E
-
8/14/2019 MSC Indonesian
4/40
Maksud dari MSC didalam M&E
Maksud utamanya adalah untuk memfasilitasiperbaikan dengan cara:Memfokuskan arah kerja ke tujuan secara tegas, sebagai contoh,
apa yang benar-benar ingin kita capai dan bagaimana kita akanmenghasilkan lebih dari itu?
Menyumbang terhadap evaluasi akhir:Informasi tentang hasil yang tidak diharapkan
Informasi prestasi mengenai cerita sukses yang terbaik
Dapat memberitahu kriteria yang digunakan untuk
menilai proyek
-
8/14/2019 MSC Indonesian
5/40
MSCvs pemantauan kuantitatif
Kuantitatif Terfokus padapengukuran
Pertanyaan tertutup Tentang pembuktian Deduktif Statis Pemindahan tujuan
dapat menjadi sebuah
masalah Proyek keluar
MSC Terfokus pada soal-jawab
Pertanyaan terbuka Tentang pembelajaran Induktif Dinamis Terfokus pada
perubahan yang
obyektif Konteks masuk
-
8/14/2019 MSC Indonesian
6/40
Evaluasi Programberdasar pada Tujuan
Perluasan
terhadap
tujuan yang
telah
dicapai
Dari sudut pandang staf
program + konsultasi
bersama para
stakeholder
Program out
change
change
change
change
change
From the
viewpoint
of the
Participants
change
Context in
-
8/14/2019 MSC Indonesian
7/40
-
8/14/2019 MSC Indonesian
8/40
Indikator dan batasan
Empat jenis hasil
yang mungkin
terjadi :
: Yang diharapkan Yang tidak diharapkan
Hasil memiliki arti
yang disetujui
1. Disini indikator
berguna
2.Sepertinya indikator
tidak mungkin
dikembangkan disini
Hasil memiliki artiyang masih
diperdebatkan
3. Disini indikator bisamungkin
dikembangkan
4. Disini indikatortidakdapat digunakan
-
8/14/2019 MSC Indonesian
9/40
Perubahan yang Paling Signifikan
-
8/14/2019 MSC Indonesian
10/40
Mengapa cerita?
Orang menyampaikan cerita secara alami
Cerita dapat menguraikan kerumitan dankonteks
Orang ingat dengan cerita
Cerita dapat membawa pesan yang sulit/ hal-hal yang tidak/sulit dapat didiskusikan
Tetapi cerita tidak diketahui akurasi/kebenarannya
-
8/14/2019 MSC Indonesian
11/40
Menggunakan cerita didalamMSC
Pengumpulan cerita + penafsiran bersamasecara sistematis = penyampaian cerita dapatsecara efektif dipakai/dirancang untuk
pemantaunan dan evaluasi yang partisipatif
Prosesnya memiliki hasil yang bermanfaat
bagi penggunaan evaluasi
-
8/14/2019 MSC Indonesian
12/40
Mendistribusikan cerita kepada para Stakeholders
Pertemuan pemilihan
Daerah 1 Daerah 2 Daerah 3 Daerah 4
orang yang bercerita
Arus
cerita
orang yang bercerita orang yang bercerita
-
8/14/2019 MSC Indonesian
13/40
Inti dari MSC
Sebuah pertanyaan: Menurut pendapat anda, perubahan apakah
yang paling signifikan yang terjadi dalam .selama bulan
[jelaskan perubahan tersebut dan jelaskan mengapa
perubahan tersebut signifikan]
Pengulangan pernyataan mengenaipertanyaan sejenis
Yang manakah dari cerita SC yang anda kirapaling signifikan dibanding lainnya? [jelaskan perubahan tersebut dan jelaskan mengapa
perubahan tersebut signifikan]
-
8/14/2019 MSC Indonesian
14/40
Bagaimana MSC berbeda?
Para peserta memiliki pilihan mengenaiinformasi jenis apa yang diambil
Menggunakan data yang bermacam-macamdaripada data standar
Informasi dianalisa oleh seluruh para peserta,tidak hanya oleh sebuah unit pusat/pihakluar/.
Subyektifitas digunakan daripada dihindari
-
8/14/2019 MSC Indonesian
15/40
MSC: prosesnya Menetapkan Topik Perubahan
(Menentukan perubahan yang seperti apayang ingin dimonitor)
Menetapkan masa pelaporan Mengumpulkan cerita SC
Pemilihan cerita SC yang terkumpul Tanggapan balik terhadap pilihan yang
telah dibuat Verifikasi Quantifikasi Meta-monitoring dan analisa sekunder Merevisi sistem MSC
-
8/14/2019 MSC Indonesian
16/40
Tahap 1. Menetapkan cakupantopik
Apakah cakupan topik itu? Kategori keluasan cerita (seperti bagian
koran: olah raga, keuangan, kesenangan,bisnis, dsb)
Bukan indikator Tidak dengan tepatditetapkan
Contoh:
perubahan didalam kehidupan orang perubahan didalam hubungan denganmitra kita
perubahan didalam kebijakan pemerintah
mengenai HIV/AIDS
-
8/14/2019 MSC Indonesian
17/40
Step 1. Menetapkan Cakupan Topik (ctd)
Berapa jumlah cakupan topiknya? kurang
dari 5
Apakah penentuan cakupan topik wajib?
Tidak
Cakupan topik seharusnya tentang apa?
Tergantung
Siapa yang seharusnya menyusun cakupantopik? - Tergantung
C k T ik C h
-
8/14/2019 MSC Indonesian
18/40
Cakupan Topik- Contoh Oxfam NZ: Dana hibah upaya peningkatan pendapatan
kepada 99 LSM-PNG: 4 lingkup cakupan topik perubahanyang dimonitor:
Perubahan dalam kehidupan perorangan Perubahan di tingkat masyarakatJenis perubahan lainnya Hal-hal yang dipelajari/Pembelajaran
Program Penyuluhan Perusahaan Susu : 4 cakupan topik
yang dimonitor: Perubahan didalam praktek di peternakan Perubahan terkait keahlian peternak dalam pembuatan
keputusan Perubahan didalam kemampuan untuk mendapatkan
keuntunganJenis perubahan lainnya
Lainnya: Perubahan didalam partisipasi orang, didalam dinamika
kekuatan, ..
Perubahan didalam keberlanjutan organisasi masyarakatJenis perubahan lainnya
-
8/14/2019 MSC Indonesian
19/40
Menetapkan cakupan topik Tidak penting tetapi:
dapat membantu struktur proses pemilihan dapat membantu terfokus pada tujuan
mereka berguna dalam memberitahu kita tentangapakah arti tujuan bagi para peserta
Apabila cakupan topik dibiarkan terbuka,pilihan dari para peserta akan memberikanindikasi kepada kita tentang jenis perubahan
yang mereka anggap penting = Cakupantopik jendela terbuka
Jangan lupa: Cakupan topik terkaitperubahan negatif
-
8/14/2019 MSC Indonesian
20/40
Tahap 2. Menetapkan masapelaporan
Masa yang digunakan oleh LSM bermacam-macam dari 2-mingguan, hingga bulanan,
hingga 3-bulanan dan tahunan. Yang paling umum adalah tiga bulanan
Keterbatasan waktunya staf merupakanpembatas utama untuk menentukanfrekwensi
-
8/14/2019 MSC Indonesian
21/40
Tahap 3 Mengumpulkan cerita
Pertanyaan terbuka kepada para peserta
Menurut pendapat anda, perubahanapakah yang paling signifikan yang terjadidi selama bulan?
Bila secara khusus terkait dengan sebuahproyek, kita tambahkan:
. sebagai sebuah hasil dari proyek?
. sebagai sebuah hasil dari pelatihan yang
anda terima?Contoh:
Lihat 3 bulan terakhir, perubahan apakah yanganda kira paling signifikan didalam kualitas
kehidupan orang didalam masyarakat ini??
-
8/14/2019 MSC Indonesian
22/40
Tahap 3 Mengumpulkan cerita
Tanggapan Jawaban peserta dalam 2 bagian:
1. deskriptif
2. bersifat menjelaskan
Format dasar:
Deskripsi (siapa, apa, dimana, kapan)
Penjelasan (mengapa hal itu signifikan)
Siapakah yang mendokumentasikan cerita (nama,posisi, lokasi, tanggal)
Pilihan: Rekomendasi
-
8/14/2019 MSC Indonesian
23/40
Bagaimana cara mengumpulkancerita?
Bagaimana cara mendokumentasikan? Wawancara dan mencatatnya Selama diskusi kelompok Pihak penerima manfaat menuliskan sendiri Staf lapangan menuliskan cerita yang tidak diminta
Informasi apa yang disertakan? Siapa, dimana, kapan? Apa yang terjadi? Mengapa signifikan?
Cerita siapa yang dikumpulkan? Pihak penerima manfaat Para mitra staf
Seberapa panjang cerita itu seharusnya? Bentuk pelaporan; lay-out/susunan;
B i b ik di t
-
8/14/2019 MSC Indonesian
24/40
Bagaimana cara bersikap disaatwawancara?
Persiapkan diri untuk membangun sebuah hubungansebelum mulai wawancara
Mendengar, mendengar, mendengar
Berikan waktu dan ruang pada orang sesuai dansecepat kemauan mereka
Tunjukkan bahwa anda benar-benar mendengarkan
Jaga tubuh anda tetap santai dan terbuka
Mencoba untuk menghindari perasaan terpisah
dengan adanya sebuah meja Kembali ke hal yang telah anda pelajari untuk
memastikan kebenarannya
Berterimakasih pada orang yang terlibat
-
8/14/2019 MSC Indonesian
25/40
Tahap 4. Memilih cerita SC
Banyak kemungkinannya tetapi padaumumnya melibatkan:
Membaca ceritanya
Menuju pada keputusan bersamamengenai hal cerita mana yang dipilih
Mengadakan sebuah percakapan
mendalam & mendokumentasikan alasan-
alasan untuk pilihanProses dapat difasilitasi atau tidak
difasilitasi
-
8/14/2019 MSC Indonesian
26/40
Tahap 4. Memilih cerita SC
Tugas bagi pembaca/pemilih adalah untuk membacaseluruh cerita dan mengidentifikasi cerita yangpaling signifikan dari seluruh cerita SC yangdiajukan.
Menurut pendapat anda, cerita manakah yang menunjukkan
perubahan yang paling signifikan Lebih baik fokus pada satu cakupan topik dahulu
Perlu untuk memutuskan siapa yang terlibat:pemberi cerita, atasan mereka, kawan mereka,..
Perlu untuk diputuskan apakah menentukan kriteriapemilihan sebelumnya, ataukah membiarkannyamuncul melalui diskusi cerita SC
-
8/14/2019 MSC Indonesian
27/40
Tahap 4. Memilih cerita SC
S
A G M
B C D E F H I J K L N O P Q R
-
8/14/2019 MSC Indonesian
28/40
Tahap 4 Pemilihan dilakukan oleh siapa?
Cerita direview dan dipilih oleh? Pemberi cerita/ para peserta
Staf (setiap bulan atau 3-bulan)
Perwakilan daerah (3 atau 6 bulan): reviewcerita dari staf yang berbeda
Staf nasional atau Dewan Pengurus (6 bulan tahunan): review dari cerita terpilih
-
8/14/2019 MSC Indonesian
29/40
Memilih cerita - proses Voting tertutup (berikan nomor pada cerita,
selanjutnya dituliskan pada selembar kertascerita manakah yang menurut andamerupakan cerita MSC)
Diskusi yang difasilitasi: lihat pada semua
pilihan dan melalui diskusi menuju kesebuah keputusan mengenai 1 cerita Penilaian
(Catatan: Metodologi apapun yang digunakandidalam memilih sebuah cerita, pastikan bahwasemua orang menuliskan alasan terhadap pilihanmereka sehingga nantinya dapat digunakan dan
membantu transparansi dari proses).
-
8/14/2019 MSC Indonesian
30/40
Memilih cerita SC
Harus (bukan merupakan pilihan) Dokumen SC mana yang dipilih
Mengapa dipilih
Proses yang digunakan untuk melakukanpemilihan
Para peserta
Pilihan mereka [Subyektifitas menjadi akuntabel melalui
transparansi]
-
8/14/2019 MSC Indonesian
31/40
Tahap 5. Tanggapan balik
Memberi tanggapan balik adalah bagiandari proses: kepada pihak pemberi cerita SC,
mengenai apa yang dipilih, mengapa
dipilih dan proses pemilihan yangdigunakan memungkinkan perluasan fokus dari MSC
dilain waktu
faktor yang bersifat motivasi titik terlemah dari seluruh sistem M&E,
termasuk MSC
-
8/14/2019 MSC Indonesian
32/40
Tanggapan balik: bagaimana?
Cara yang berbeda untuk memberikantanggapan balikMelalui staf lainnya, line-manajer, dsb
Tanggapan balik melalui email
Tanggapan balik secara lisanLaporan berkala
Laporan resmi
-
8/14/2019 MSC Indonesian
33/40
Tahap 6. Verifikasi cerita SC
2 cara untuk memilih cerita guna di-verifikasiAcak
Memverifikasi cerita perubahan yang palingsignifikan
Aspek verifikasiSeberapa akurat faktanya?
Seberapa cocok penafsirannya?Apa yang terjadi sejak itu?
-
8/14/2019 MSC Indonesian
34/40
Tahap 6. Verifikasi cerita SC
Mengapa?Mendorong adanya disiplin didalam pelaporan
Memungkinkan adanya perluasan danpembelajaran lebih lanjut
Kapan?Kapan cerita SC pertama kali memasuki sistem
Kapan dipilih sebagai MS dari keseluruhan SCKapan cerita SC digunakan secara
umum/terbuka
-
8/14/2019 MSC Indonesian
35/40
Tahap 7. Kuantifikasi
Didalam cerita SCJumlah orang, kegiatan, dsb yang terlibat
Sebagai tindak-lanjut dari cerita SC
Berapa banyak kasus lainnya seperti inidiketahui
Didalam meta-monitoring (lihat berikutnya)
Berapa banyak cerita SC yang seperti ini
-
8/14/2019 MSC Indonesian
36/40
Tahap 8. Meta-monitoring & analisa sekunder Meta-monitoring: menjaga cerita SC tetap terdata
(membuat database atau spreadsheet) dan
mengorganisir data termasuk diantaranya:Gender/dari orang yang berceritaHasil dari proses pemilihan Frekwensi cerita
Tema utama dari cerita SC Perubahan didalam jumlah cerita Perubahan didalam prosentase dari cerita yang negatif
Analisa sekunder diakhir masa pelaporan mungkindiperlukan (fakultatif) dengan caramengkategorisasikan dan menghitung jenisperubahan yang dilaporkan, dan jenis penjelasanyang diberikan, pada tingkat yang berbeda
Sebuah contoh cerita dapat diverifikasi oleh seorang
evaluator eksternal (bila dirasa perlu)
-
8/14/2019 MSC Indonesian
37/40
Kegunaan dari cerita yang dipilih Terkadang lebih dari 100 cerita dikumpulkan dari
fasilitator, staf lapangan, dsb. Cerita yang terpilih disertakan didalam laporan
perkembangan; disusun didalam sebuah booklet;dimasukkan didalam laporan berkala; dsb.
Dan juga sebagai tambahan dari pelaporan, cerita
digunakan untuk: Meningkatkan mutu/memperbaiki perencanaan
Membantu menjelaskan sebuah maksud kepadaseorang petani
Merekrut peserta baru Membantu menjelaskan sebuah maksud kepada
anggota staf lainnya
PR
.
-
8/14/2019 MSC Indonesian
38/40
Tahap 9. Merevisi Sistem MSC
Diperlukan merubah frekwensi pelaporan? Diperlukan merubah definisi dari cakupan wilayah
untuk digunakan? Perlunya untuk merubah orang yang terlibat didalam
pemilihan cerita SC kedalam cakupan wilayah Perlunya perubahan didalam rancangan proses
pemilihan: para peserta & proses yang digunakan
Tanggapan balik dan tindak lanjut
Dimana menggunakan MSC?
-
8/14/2019 MSC Indonesian
39/40
Dimana menggunakan MSC?
Bukan sebagai sebuah metode yang berdiri
sendiri Disamping sistem yang berdasarkanindikator
Untuk mengidentifikasi perubahan yang
tidak diharapkan Untuk melibatkan orang didalam
menganalisa perubahan Untuk melibatkan berbagai orang
Untuk fokus pada hasil daripada output Sangat baik untuk program yang partisipatif
dengan hasil yang komplek, beragam, &stakeholder yang bermacam-macam
D k d i MSC
-
8/14/2019 MSC Indonesian
40/40
Dampak dari MSC
Proses tersebut menciptakan ruang bagi parastakeholder untuk mencerminkan, untuk memahamiperubahan yang komplek
Panitia proyek/ tim pelaksanaan menjadi lebih baikdidalam mengkonseptualisasikan dampak
Menyediakan dialog untuk membantu memahami
nilai masing-masing Memfasilitasi dialog yang dinamis yaitu, apa yang
benar-benar ingin anda capai dan bagaimana kita akanlebih daripada itu? Staf mendapatkan visi bersamasecara lebih penuh
Proses tersebut mendorong moral mereka Proses tersebut melihat para petani, staf, kolaborator
duduk bersama dan menafsirkan data kualitatif &penilaian evaluatif