Rencana Monitoring dan Evaluasi

Budi Utomo - FKMUI 2012

Rencana M & ERencana M & E

Budi Utomo - FKMUI 2012

Rencana M&E – suatu dokumenRencana M&E – suatu dokumen• Tujuan program• Serangkaian intervensi• Prosedur monitoring and evaluasi

• Bagaimana hubungan harapan hasil dengan tujuan?

• Kebutuhan data, pengumpulan dan analisis.• Bagaiaman pengembangan informasi?• Kebutuhan sumber-daya.• Bagaimana pertanggung-jawaban kepada

stakeholder?

Budi Utomo - FKMUI 2012

Visi & misi Kesehatan Masyarakat

Visi

Misi

Penduduk sehat di lingkungan hidup sehat

• PromosiPromosi kesehatan fisik, mental kesehatan fisik, mental

• PencegahanPencegahan penyakit, kecelakaan, penyakit, kecelakaan, disabilitasdisabilitas

• Perawatan, dukungan, pengobatanPerawatan, dukungan, pengobatan

Budi Utomo - FKMUI 2012

Misi melalui program-program

• Setiap program bertujuan … perubahan

Promotif

Preventif

Protektif

Kuratif

Rehabilitatif

•Perbaikan perilaku

•Perbaikan lingkungan hidup

•Perbaikan kualitas hidup .. (gizi, disabilitas, kesakitan, kematian)

ProgramTujuan

Budi Utomo - FKMUI 2012

Tujuan program kesehatan

• Perubahan …

– Perbaikan perilaku

– Perbaikan lingkungan hidup

– Perbaikan kualitas hidup• Gizi, kesakitan, disabilitas, kematian

Budi Utomo - FKMUI 2012

Tiga fungsi pokok - intervensi

Asesmen[M&E + Riset]Asesmen

[M&E + Riset]

Jaminan kualitaspelaksanaan

Jaminan kualitaspelaksanaan

Pengembangankebijakan

Pengembangankebijakan

Layanan-Akses

--kualitas--kelangsungan

Perilaku-risiko

-- pencarian layanan

Epidemi penyakitStatus kesehatan

Kualitas hidup

Pemahaman- masalah--solusi

- Legal- Instruksi- Sumberdaya

Efektif, realistik

Sosio-ekonomi - politik

Budi Utomo - FKMUI 2012

Intervensi

Indikator Verifikasi Asumsi

Tujuan akhir/dampak

(impact)

Tujuan antara/ efek (outcome)

Hasil (ouput)

Kegiatan (proses)

Cara Biaya

Pra-kondisi

Matrik Log Frame program: 4 baris 4 kolom

Budi Utomo - FKMUI 2012

M&E dalam Kerangka Logik

OO

PP

R

AMonitoring

Evaluasi

Budi Utomo - FKMUI 2012

Kapan rancangan M&E?Kapan rancangan M&E?• Disiapkan saat merancang program – banyak

cara!

Biasanya mencakup …• Asumsi – mendasari pencapaian tujuan.• Hubungan antara kegiatan, output dan outcome• Definisi konseptual dan operasional – variabel

dan nilai baseline• Skedul monitoring• Sumber data• Perkiraan biaya• Kemitraan dan kolaborasi• Diseminisasi dan utilisasi

Budi Utomo - FKMUI 2012

Mengapa penting?Mengapa penting?

• Akontabiliti

• Konsensus dan transparensi

• Memandu standarisasi dan koordinasi kegiatan

• Menjamin pelembagaan

Budi Utomo - FKMUI 2012

Komponen Rencana M&EKomponen Rencana M&E

• Pendahuluan• Deskripsi program dan kerangka kerja• Deskripsi rencana indikator-indikator• Rencana pengumpulan data• Rencana monitoring• Rencana evaluasi• Rencana utilisasi informasi hasil• Mekanisme updating rencana

Budi Utomo - FKMUI 2012

Pendahuluan

• Informasi tujuan program

• kegiatan spesifik M&E dan mengapa penting; dan

• Motivasi pemangku kepentingan dan mitra dan tingkat ketertarikan, komitmen dan partisipasi mereka.

Budi Utomo - FKMUI 2012

Program dan kerangka kerjaProgram dan kerangka kerja• Pernyataan masalah – suatu situasi perlu

berubah ~ siapa, penyebab, besaran dan dampak terhadap masyarakat.

• Tujuan dampak (goal) dan tujuan outcome/ ouput (obyektif)

• Deskripsi intervensi spesifik – lama, lingkup geografis dan sasaran

• Sumber daya – tenaga, dana, sarana dan prasarana

• Kerangka konsep – logika hubungan faktor• Kerangka logis atau hasil – pengaitan tujuan

dengan kegiatan

Budi Utomo - FKMUI 2012

Tujuan akhir suatu program.. goal

• Situasi yang ingin dicapai– Penurunan kematian ibu, bayi dan anak –

untuk program KIA– Penurunan prevalensi HIV – untuk program

penanggulangan HIV

• Pencapaian perlu waktu relatif lama (5-10 tahun)– dipengaruhi program-program yang lain

Budi Utomo - FKMUI 2012

Tujuan antara .. objectives

• Situasi yang harus dilalui program sebelum mencapai situasi tujuan akhir– Besar cakupan?– Kualitas?– Kelangsungan?

Budi Utomo - FKMUI 2012

Rumusan Tujuan – SMART

• Specificity – apakah spesifik? Mencakup situasi apa saja?

• Measurability Apakah bisa diukur?

• Attainability– Apakah dapat dicapai?

• Relevance Seberapa penting – manfaat?

• Time Kapan dicapai?

Budi Utomo - FKMUI 2012 17

Monitoring dan evaluasi Monitoring dan evaluasi perubahan melalui perubahan melalui IndikatorIndikator

Definisi Indikator: ukuran tidak langsung, mengindikasikan suatu kondisi, keadaan, atau peristiwa ≈ situasi tujuan program

Digunakan menurut waktu …tren perubahan ...‘petanda’ kemajuan program

Budi Utomo - FKMUI 2012 18

Perubahan Perubahan ~ ~ efektivitas efektivitas ProgramProgram

Input

Proses

Output

Dampak

Wak

tu

Indikator Input: biaya, tenaga, fasilitas

Indikator proses: Jumlah pelatihan, jumlah kelompok pendukung

Indikator output: Penggunaan pelayanan, Perilaku,

Indikator dampak: status kesehatan, kondisi lingkungan

Budi Utomo - FKMUI 2012Budi Utomo, 2008 19

Kriteria Kriteria indikatorindikator

Akademik Valid, mengukur faktor yang ‘seharusnya’ diukur

Sensitif, menunjukkan perubahan penting dari faktor yang diukur

Spesifik, menunjukkan perubahan hanya faktor yang diukur, bukan yang lain

Reliabel, konsisten pada pengukuran berulang

Praktis Pengukuran dapat dilakukan sesuai sumber daya, juga etika

Budi Utomo - FKMUI 2012Budi Utomo, 2008 20

Spesifikasi Spesifikasi indikatorindikator Perlu kejelasan: ~ waktu; tempat; sasaran

─ Proporsi atau rate,

numerator/ pembilang: jumlah unit yang terjangkau/ dijangkau

denominator/ penyebut; jumlah unit sasaran yang diharapkan

Menunjukkan besaran atau arah perubahan, tidak menjelaskan mengapa terjadi perubahan ~ untuk penjelasan mengapa, perlu riset

Budi Utomo - FKMUI 201221

Perhitungan indikator

• Untuk setiap indikator, tunjukkan dengan jelas numerator dan denominator yang mewakili

• Jelaskan sumbert data guna mendapatkan numerator dan denominator

• Jelaskan bagaimana, oleh siapa dan seberapa sering denominator perlu diperbaharui

Budi Utomo - FKMUI 2012

Salah satu tantangan

• Memilih indikator yang sesuai ….

• Contoh indkator?

Budi Utomo - FKMUI 2012

Sumber data

• Sistem pengumpulan, pengolahan, analisis dan pelaporan

• Perhatikan potensi ancaman validitas data

Budi Utomo - FKMUI 2012

Rencana monitoringRencana monitoring

• Komponen specifik yang akan dimonitor

• bagaimana monitoring akan dilakukan

• Indikator yang akan digunakan

Budi Utomo - FKMUI 2012

Rencana evaluasi

• Perlu suatu rancangan riset menilai apakah perubahan outcome dikarenakan program

Budi Utomo - FKMUI 2012

Diseminasi & utilisasiDiseminasi & utilisasi

• Rencana pengelolaan informasi, diseminasi dan utilisasi - manfaat

• Pengguna? Bentuk laporan?

• Saluran diseminasi – laporan tertulis, dsb.

Budi Utomo - FKMUI 2012

Implementasi dan update

• Kebutuhan kapasitas dan ketrampilan

• Mekanisme review dan update rencana M&E - dinamika

Budi Utomo - FKMUI 2012

Standar Rencana M&E

• Cara praktis melayani pengguna (perencana, peanggung jawab program, pemangku kepentingan) dari pusat sampai daerah

• Realistik, akurat, diplomatik

• Legal, etika

Budi Utomo - FKMUI 2012

• Lihat test !!!