Tingkat Indikator
Rumusan Indikator
Tujuan Indikator
Cara Mengumpulkan dan Menganalisis Data yang Diperlukan
Metodologi DG “ ECHO ” dijelaskan secara terperinci dalam dokumen panduan “ECHO ” di bawah ini. Mengingat kompleksitasnya, halaman ini menyajikan ringkasan langkah-langkah utama untuk membantu Anda memahami perhitungan nilai indikator tersebut.
1)Mulailah dengan analisis risiko perlindungan:
Tinjau atau lakukan analisis risiko perlindungan (dengan menggunakan penilaian, wawancara dengan informan kunci/diskusi kelompok terfokus, pemantauan perlindungan, dll.) untuk mengidentifikasi risiko-risiko perlindungan utama yang memengaruhi kelompok sasaran. Pastikan analisis tersebut setidaknya mencerminkan perbedaan berdasarkan jenis kelamin, usia, dan disabilitas.
Berdasarkan analisis ini, sebutkan situasi-situasi konkret di mana orang merasa tidak aman atau mengalami perlakuan yang tidak aman (misalnya, saat bepergian ke tempat layanan/pasar, mengambil air, bepergian pada malam hari, melewati pos pemeriksaan, atau mengakses dokumen). Inilah yang dimaksud oleh ECHO dengan “mendefinisikan dan mengkontekstualisasikan” keamanan.
2) Pilihlah hal-hal yang secara realistis dapat dipengaruhi oleh tindakan Anda:
Untuk setiap risiko utama/situasi yang diidentifikasi pada Langkah 1, catat apakah kegiatan Anda dimaksudkan untuk dan mampu mengurangi risiko tersebut. ECHO mengharapkan adanya keterkaitan antara analisis risiko → kegiatan → pertanyaan survei/fokus indikator.
Pilihlah risiko/situasi yang (a) penting bagi keselamatan masyarakat, dan (b) kemungkinan besar dapat dipengaruhi secara efektif oleh kegiatan Anda. Hal-hal tersebut akan menjadi fokus pertanyaan baseline/endline Anda untuk indikator ini.
3) Tentukan siapa saja yang akan disurvei:
Rasa aman masyarakat terkait risiko/situasi yang diprioritaskan harus diukur melalui survei. Sampel survei harus mewakili para penerima manfaat langsung dari kegiatan perlindungan yang menangani risiko-risiko tersebut.
ECHO Hasil penelitian harus dipisahkan setidaknya berdasarkan jenis kelamin, usia, dan disabilitas. Karena beberapa kelompok mungkin kurang terwakili dalam populasi penerima manfaat, Anda mungkin perlu meningkatkan ukuran sampel melebihi standar tingkat kepercayaan 95% / margin kesalahan 5% agar dapat memperoleh hasil subkelompok yang cukup kuat.
4) Menyusun pertanyaan dasar:
Untuk setiap situasi yang dipilih (dari Langkah 2), tulislah pertanyaan dasar yang menanyakan seberapa aman orang-orang saat ini merasa dalam situasi tersebut. Misalnya: “Seberapa aman Anda merasa ketika harus pergi mengambil air ke sumber air terdekat?”
Untuk jawaban, gunakan skala Likert non-komparatif yang menggambarkan seberapa aman orang-orang saat ini merasa dalam situasi-situasi yang dipilih: Saya merasa sangat aman / Saya merasa agak aman / Saya merasa tidak aman maupun tidak tidak aman / Saya merasa agak tidak aman / Saya merasa sangat tidak aman / Saya tidak tahu / Lebih baik tidak menjawab. Jika responden menjawab “agak tidak aman” atau “sangat tidak aman”, sertakan pertanyaan lanjutan yang menanyakan alasannya untuk memberikan wawasan tambahan dalam analisis risiko Anda.
5)Menyusun pertanyaan penutup:
Untuk tahap akhir, siapkan pertanyaan yang secara eksplisit menanyakan perubahan dalam rasa aman yang dirasakan orang-orang dalam situasi tertentu.
ECHO Memerlukan penyertakan elemen atribusi yang tidak berada di awal, yang mengaitkan perubahan yang dirasakan dengan proyek tersebut. Namun, pertanyaan-pertanyaan yang disarankan dalam panduan tersebut meningkatkan risiko bias kesesuaian sosial, bias kesopanan, dan bias atribusi. Untuk mengurangi risiko bias-bias tersebut, IndiKit menyarankan penggunaan pendekatan yang tercantum di bawah ini.
Pertama, ajukan pertanyaan perbandingan mengenai setiap risiko/situasi yang diprioritaskan tanpa menyebut proyek atau kegiatannya. Misalnya: “Dibandingkan dengan [ sebutkan periode sebelum dukungan perlindungan Anda dimulai], seberapa aman Anda merasa sekarang saat [sebutkan situasinya]?” Untuk jawaban, gunakan skala Likert: Saya merasa jauh lebih aman / Saya merasa agak lebih aman / Saya tidak merasa lebih aman / Saya merasa kurang aman / Saya merasa jauh lebih tidak aman / Tidak tahu / Lebih baik tidak menjawab. Jika responden menjawab “kurang aman” atau “jauh lebih tidak aman”, sertakan pertanyaan lanjutan yang menanyakan alasannya.
Kemudian, tanyakan mengenai faktor penyebabnya: Menurut Anda, apa saja alasan utama di balik perubahan ini (atau tidak adanya perubahan)? Izinkan jawaban ganda, yang mungkin mencakup:
- dukungan atau kegiatan yang diselenggarakan melalui proyek ini
- tindakan yang dilakukan oleh organisasi atau pihak berwenang lainnya
- perubahan dalam situasi umum (misalnya: keamanan, ekonomi, lingkungan)
- keadaan pribadi atau rumah tangga
- tidak terjadi perubahan
- lain-lain (mohon sebutkan)
Para petugas sensus harus diberi pengarahan dan dilatih untuk mengajukan pertanyaan eksploratif yang tidak mengarahkan agar dapat mengurangi risiko kurangnya pelaporan mengenai manfaat dukungan proyek (atau tanggapan lainnya).
6) Lakukan wawancara dengan sampel yang representatif dari penerima manfaat langsung Anda, dengan memastikan keterwakilan yang proporsional berdasarkan jenis kelamin, usia, dan kelompok disabilitas (sesuai dengan yang telah Anda tentukan pada Langkah 3).
7) Khusus untuk survei akhir: Hitunglah responden yang melaporkan merasa “jauh lebih aman” atau “agak lebih aman” terkait semua risiko yang disurvei dan yang penjelasannya mengaitkan perubahan tersebut dengan proyek, baik dengan menyebutkan:
- kegiatan proyek tertentu (misalnya, penerangan yang lebih baik, antrean terpisah untuk perempuan dan laki-laki, titik-titik air yang lebih dekat); atau
- dengan secara umum mengakui keberadaan / dukungan organisasi tersebut
Responden tidak perlu secara eksplisit menyebutkan nama proyek atau mengidentifikasi siapa yang memberikan dukungan tersebut.
Oleh karena itu, para petugas sensus harus dilatih mengenai kegiatan dan hasil khusus proyek ini agar dapat mengklasifikasikan jawaban ke dalam kategori “Dukungan atau kegiatan yang disediakan melalui proyek ini” ketika responden menggambarkan suatu perbaikan yang sesuai dengan apa yang telah diwujudkan oleh proyek. Petugas sensus tidak boleh menyiratkan bahwa proyeklah yang menyebabkan perubahan tersebut; mereka harus mengajukan pertanyaan yang netral (misalnya, “Apa yang berubah?” “Apa yang membuatnya lebih aman?”) dan kemudian mengklasifikasikan jawaban tersebut secara konsisten.
8) Untuk menghitung nilai indikator:
- menghitung jumlah responden yang menyatakan merasa “jauh lebih aman” atau “agak lebih aman” dan yang alasannya terkait dengan proyek tersebut (melalui kegiatan tertentu atau pengakuan umum atas dukungan organisasi)
- bagi angka tersebut dengan jumlah responden yang diwawancarai (kecuali mereka yang menolak menjawab atau tidak tahu)
- kalikan hasilnya dengan 100 untuk mengubahnya menjadi persentase
Catatan: Nilai indikator ini dihitung hanya berdasarkan data akhir periode dan tidak diperoleh dari hasil baseline (lihat Catatan Penting 1 untuk mengetahui bagaimana data baseline digunakan).
Pisahkan berdasarkan
Data tersebut dapat dipisahkan berdasarkan jenis kelamin, usia, dan kelompok disabilitas. Laporkan baik persentase maupun angka absolut untuk setiap kelompok. Jika Anda memperkirakan ukuran subkelompok akan kecil (misalnya, penyandang disabilitas, lansia), rencanakan sampel yang lebih besar untuk mengurangi ketidaktepatan dan memungkinkan perbandingan antar-subkelompok yang bermakna.
Catatan Penting
1) Gunakan panduan DG “ ECHO ” di bawah ini sebagai rujukan utama Anda. Panduan “ IndiKit ” hanya merangkum langkah-langkah utama dalam format yang lebih sederhana dan lebih mudah dipahami.
2) Berdasarkan metodologi PKOI yang dikembangkan oleh DG ECHO, nilai indikator dihitung hanya berdasarkan tanggapan pada tahap akhir (yaitu, persentase responden yang melaporkan bahwa mereka merasa “jauh lebih/agak lebih aman”); data awal tidak digunakan dalam perhitungan tersebut. Data awal tetap penting karena:
- mendokumentasikan kondisi awal;
- membantu memastikan bahwa situasi “keselamatan (dengan martabat)” yang dipilih memang relevan; dan
- memberikan konteks yang diperlukan untuk menafsirkan hasil akhir secara kredibel
3) Analisis risiko perlindungan partisipatif sangat penting untuk menggunakan indikator ini dan mengukur perubahan dalam persepsi keamanan (dengan martabat). Analisis ini membantu Anda mengidentifikasi (i) siapa yang berisiko, (ii) dari apa/siapa, dan (iii) mengapa. Anda dapat memanfaatkan sumber daya yang ada seperti Protection Mainstreaming Toolkit (lihat halaman 28) dan analisis sekunder apa pun yang tersedia (misalnya, analisis regional atau nasional yang dihasilkan oleh klaster). Risiko yang diprioritaskan harus ditentukan terutama berdasarkan persepsi dan pengalaman populasi sasaran. Pastikan analisis tersebut tidak hanya mencakup faktor-faktor yang mengancam keamanan fisik, tetapi juga faktor-faktor yang merendahkan martabat. Lihat contoh di bawah ini mengenai dua masalah keamanan dan dua masalah martabat:
-Para gadis dan perempuan di kamp-kamp merasa tidak nyaman pergi ke toilet setelah gelap.
-Anak-anak tidak diawasi karena orang tua mereka sedang mencari kegiatan yang menghasilkan pendapatan.
-Orang-orang harus menunggu bantuan yang dibagikan di bawah terik matahari pada hari yang panas.
-Masyarakat menerima bantuan pangan, bukan uang tunai, di daerah-daerah di mana pasar masih beroperasi dan masyarakat ingin serta mampu berbelanja.
4) Ukurlah hanya hal-hal yang dapat Anda pengaruhi: Tanyakan mengenai risiko atau situasi spesifik yang diprioritaskan yang ingin Anda tangani melalui tindakan Anda (bukan “keselamatan secara umum”).
5) Pelatihan petugas survei sangat penting: Latih petugas survei mengenai teknik penggalian informasi yang netral dan pengkodean yang konsisten, terutama dalam mengaitkan alasan responden dengan perubahan yang didukung oleh proyek.
6) Pada tahap awal (baseline), panduan di atas menyarankan penggunaan skala “keamanan saat ini” (misalnya: sangat aman → sangat tidak aman) karena tidak ada titik acuan yang berarti untuk perbandingan pada awal pelaksanaan tindakan. Tujuan dari tahap awal ini adalah untuk menggambarkan situasi awal dan memastikan relevansi risiko serta situasi yang dipilih. Pada tahap akhir, skala komparatif “lebih aman daripada sebelumnya”, sebagaimana direkomendasikan oleh ECHO, digunakan untuk menangkap perubahan yang dirasakan dari waktu ke waktu. Karena skala awal dan akhir mengukur konstruk yang berbeda (tingkat saat ini vs perubahan yang dirasakan), hasil awal hanya digunakan untuk interpretasi kontekstual dan tidak digunakan untuk menghitung nilai indikator atau untuk perbandingan numerik langsung dengan hasil akhir.
Akses Panduan Tambahan
- ECHO - Panduan Teknis Perlindungan KOI (.pdf)
- Kelompok Kerja Perlindungan Global (2017) Perangkat Pendukung Pengintegrasian Perlindungan (.pdf)