Setiap tahun, Kemenhaj dan Kemenkes menyelenggarakan rangkaian program kesehatan haji — manasik kesehatan pra-keberangkatan, skrining istithaah, penempatan TKHI, hingga layanan KKHI di Arab Saudi. Pertanyaan yang jarang dijawab secara sistematis adalah: apakah program-program ini benar-benar bekerja sebagaimana dirancang? Evaluasi program berbasis bukti adalah disiplin yang menjawab pertanyaan tersebut secara metodologis, bukan berdasarkan asumsi bahwa program yang telah berjalan bertahun-tahun otomatis efektif.
Setiap tahun, Kemenhaj dan Kemenkes menyelenggarakan rangkaian program kesehatan haji — manasik kesehatan pra-keberangkatan, skrining istithaah, penempatan TKHI, hingga layanan KKHI di Arab Saudi. Pertanyaan yang jarang dijawab secara sistematis adalah: apakah program-program ini benar-benar bekerja sebagaimana dirancang? Evaluasi program berbasis bukti adalah disiplin yang menjawab pertanyaan tersebut secara metodologis, bukan berdasarkan asumsi bahwa program yang telah berjalan bertahun-tahun otomatis efektif.
Sebelum mempelajari teknik evaluasi program, penting menyadari mengapa keterampilan riset klinis yang sudah Anda kuasai tidak dapat langsung dipindahkan begitu saja ke konteks evaluasi kebijakan — kesalahan ini sering membuat evaluasi program menjadi dangkal.
Riset klinis yang Anda kenal dari pelatihan Fellowship umumnya berfokus pada efikasi suatu intervensi terhadap individu dalam kondisi terkontrol. Evaluasi program beroperasi pada level yang berbeda: menilai apakah suatu kebijakan atau program, ketika diimplementasikan dalam kondisi lapangan yang kompleks dan tidak terkontrol, mencapai tujuan yang dirancang, bagi siapa, dalam kondisi apa, dan dengan biaya berapa. Program manasik kesehatan, misalnya, bukan sekadar 'apakah materinya benar secara medis', melainkan 'apakah program ini, sebagaimana dilaksanakan oleh ribuan KBIHU dengan variasi kualitas fasilitator, benar-benar mengubah perilaku dan pengetahuan calon jemaah secara terukur'.
Perbedaan unit analisis ini menuntut kerangka berpikir yang berbeda pula. Evaluasi program mempertimbangkan konteks implementasi (implementation context), kesetiaan pelaksanaan terhadap desain program (fidelity), dan variasi hasil antar wilayah atau kelompok penyelenggara — dimensi yang jarang menjadi perhatian dalam riset klinis konvensional yang Anda pelajari sebelumnya.
Ilustrasi Penerapan:
Sebagai perbandingan konkret: uji klinis obat antihipertensi menilai apakah obat itu sendiri efektif menurunkan tekanan darah dalam kondisi terkontrol. Evaluasi program manasik kesehatan tentang kepatuhan obat antihipertensi menilai sesuatu yang jauh lebih rumit — apakah pesan edukasi tersampaikan, dipahami, diingat, dan benar-benar dipraktikkan oleh jemaah lanjut usia di tengah kerumunan, cuaca ekstrem, dan jadwal ibadah yang padat. Obat yang sama bisa terbukti efektif secara klinis namun program edukasinya gagal total secara implementasi.
Titik awal evaluasi program yang baik, sebelum Anda mengumpulkan data apa pun, adalah menyusun logika program secara eksplisit di atas kertas — langkah yang sering dilewati namun menentukan seluruh kualitas evaluasi berikutnya.
Logika program menjabarkan input (sumber daya yang dialokasikan, misalnya jumlah fasilitator KBIHU dan modul manasik kesehatan), aktivitas (pelaksanaan sesi manasik kesehatan), output (jumlah calon jemaah yang mengikuti sesi), outcome jangka pendek (peningkatan pengetahuan dan kesiapan fisik), outcome jangka menengah (kepatuhan perilaku selama ibadah), dan impact jangka panjang (penurunan morbiditas dan mortalitas jemaah).
Kesalahan yang sering terjadi dalam evaluasi program kesehatan haji adalah mencampuradukkan output dengan outcome — misalnya, melaporkan 'jumlah peserta manasik kesehatan mencapai target' sebagai bukti keberhasilan program, padahal itu hanya menunjukkan cakupan pelaksanaan (output), bukan perubahan pengetahuan atau perilaku yang menjadi tujuan sesungguhnya (outcome). Sebagai calon perumus kebijakan, tugas Anda adalah memastikan indikator yang digunakan benar-benar mengukur outcome, bukan sekadar output administratif.
Ilustrasi Penerapan:
Sebagai gambaran, sebuah embarkasi melaporkan 'hampir seluruh calon jemaah menghadiri sesi manasik kesehatan' (rujuk laporan evaluasi resmi Kemenhaj/Kemenkes terbaru untuk angka cakupan aktual) (output) sebagai indikator keberhasilan tahun itu. Ketika logika program disusun secara eksplisit, tim evaluasi menyadari bahwa angka kehadiran ini tidak pernah dihubungkan dengan data outcome apa pun — tidak ada yang tahu apakah kehadiran itu benar-benar mengubah pengetahuan atau perilaku jemaah di lapangan.
Lima kriteria berikut memberi kerangka sistematis untuk menyusun pertanyaan evaluasi dan, pada akhirnya, pertanyaan tesis Anda — namun perlu diingat sejak awal bahwa satu tesis biasanya tidak perlu menjawab kelimanya sekaligus.
Relevansi menilai apakah program menjawab kebutuhan aktual jemaah — misalnya, apakah materi manasik kesehatan saat ini relevan dengan profil risiko jemaah lanjut usia yang jumlahnya terus meningkat.
Ilustrasi Penerapan:
Sebuah kurikulum yang masih menekankan pencegahan cedera olahraga ringan mungkin kurang relevan dibandingkan kurikulum yang lebih menonjolkan pengelolaan penyakit kronik, mengingat pergeseran demografis jemaah ke arah usia yang lebih lanjut.
Efektivitas menilai sejauh mana tujuan program tercapai — apakah pengetahuan, sikap, atau perilaku yang ditargetkan benar-benar berubah.
Ilustrasi Penerapan:
Program dapat dikatakan efektif jika skor pengetahuan tanda bahaya dehidrasi jemaah meningkat signifikan setelah mengikuti sesi manasik, dibandingkan sebelum sesi.
Efisiensi menilai apakah hasil yang dicapai sepadan dengan sumber daya yang dikeluarkan, sebuah dimensi yang akan diperdalam melalui analisis cost-effectiveness pada Buku C2 Bab 4.
Ilustrasi Penerapan:
Dua metode edukasi bisa sama-sama efektif meningkatkan pengetahuan, namun salah satunya jauh lebih murah per jemaah yang terjangkau — itulah pertanyaan efisiensi.
Dampak menilai perubahan jangka panjang yang dapat diatribusikan pada program, melampaui perubahan pengetahuan jangka pendek semata.
Ilustrasi Penerapan:
Penurunan angka rujukan kegawatan dehidrasi lintas beberapa musim haji berturut-turut, jika dapat dikaitkan secara masuk akal dengan revisi kurikulum tertentu, merupakan bukti dampak.
Keberlanjutan menilai apakah manfaat program dapat bertahan tanpa dukungan eksternal berkelanjutan, misalnya tanpa pendampingan intensif tim pusat setiap musim.
Ilustrasi Penerapan:
Jika kualitas penyampaian manasik kesehatan menurun drastis begitu tim pendamping pusat tidak lagi hadir di suatu KBIHU, itu adalah tanda program tersebut belum berkelanjutan secara mandiri.
Setelah kerangka logika dan kriteria evaluasi ditetapkan, pertanyaan praktis berikutnya yang akan langsung Anda hadapi di lapangan adalah: dari mana data untuk menjawab semua itu benar-benar bisa diperoleh?
Evaluasi program kesehatan haji dapat memanfaatkan beberapa sumber data: data administratif SISKOHAT (cakupan skrining, cakupan manasik kesehatan), data klinis dari KKHI dan laporan TKHI kloter, survei pengetahuan dan sikap calon jemaah pra dan pasca manasik kesehatan, serta wawancara mendalam dengan fasilitator KBIHU dan petugas puskesmas. Kombinasi sumber data ini memungkinkan triangulasi — proses membandingkan temuan dari berbagai sumber untuk memperkuat validitas kesimpulan evaluasi.
Tantangan praktis yang akan Anda hadapi adalah interoperabilitas data kesehatan antar sistem, termasuk keterbatasan integrasi data antara SISKOHAT dan sistem kesehatan Arab Saudi. Keterbatasan ini sendiri sering menjadi temuan evaluasi yang penting untuk direkomendasikan sebagai perbaikan sistem, bukan sekadar hambatan teknis yang dihindari.
Ilustrasi Penerapan:
Sebagai ilustrasi, seorang peneliti yang ingin mengevaluasi waktu rujukan kasus kardiovaskular mungkin menemukan bahwa waktu kejadian di catatan KKHI tidak menggunakan format jam yang sama dengan catatan TKHI kloter — kendala teknis kecil semacam ini, jika didokumentasikan, dapat menjadi rekomendasi perbaikan standar pencatatan waktu lintas sistem.
Studi Kasus
Sebuah tim evaluasi hipotetis ditugaskan menilai efektivitas program manasik kesehatan yang telah berjalan di suatu embarkasi selama beberapa musim haji. Alih-alih hanya melaporkan angka partisipasi peserta, tim menyusun logika program secara eksplisit dan menemukan bahwa indikator keberhasilan yang selama ini dilaporkan ke Kemenhaj hanya mengukur output (jumlah peserta hadir), bukan outcome (perubahan pengetahuan dan kesiapan fisik terukur). Tim kemudian merancang instrumen pra-pasca sederhana untuk mengukur peningkatan pengetahuan calon jemaah tentang tanda bahaya dehidrasi dan pengelolaan obat kronik. (rujuk laporan evaluasi resmi Kemenhaj/Kemenkes terbaru untuk angka partisipasi dan hasil pra-pasca aktual).
Latihan Analisis
1. Susun kerangka logika program (logic model) sederhana untuk salah satu program kesehatan haji yang Anda kenal dari pengalaman lapangan (misalnya skrining istithaah atau layanan KKHI), lengkap dengan input, aktivitas, output, outcome jangka pendek, dan outcome jangka menengah.
2. Dari kelima kriteria evaluasi (relevansi, efektivitas, efisiensi, dampak, keberlanjutan), pilih satu yang menurut Anda paling lemah pada program yang Anda pilih di atas, dan jelaskan alasannya berdasarkan pengamatan lapangan Anda.
3. Identifikasi minimal dua sumber data yang dapat Anda gunakan untuk menjawab pertanyaan evaluasi tersebut, beserta keterbatasan masing-masing sumber data itu.
1. Buku C1 — Bab 2. Evaluasi Program Kesehatan Haji Berbasis Bukti (Program Evaluation). Dalam: Ekosistem Pendidikan Kedokteran Haji, Perpustakaan Digital Program Magister Kedokteran Haji — Jalur RPL Fellowship. (dokumen internal ekosistem pendidikan ini).
Sesi 1 (Minggu 1–5) · Minggu ke-2