Tingkat Indikator
Rumusan Indikator
Tujuan Indikator
Cara Mengumpulkan dan Menganalisis Data yang Diperlukan
Tentukan nilai indikator tersebut dengan menggunakan metodologi berikut:
1) Tentukan sejumlah terbatas pengetahuan dan/atau keterampilan terpenting yang diharapkan dapat digunakan oleh peserta setelah program pendampingan ini berakhir. Pastikan bahwa pengetahuan dan/atau keterampilan yang dipilih relevan dengan hal-hal yang secara realistis dapat diterapkan oleh peserta dalam konteks mereka masing-masing.
2) Tetapkan periode acuan di mana para peserta diharapkan telah menerapkan pengetahuan dan/atau keterampilan yang dipilih. Pastikan bahwa para peserta telah memiliki kebutuhan atau kesempatan yang realistis untuk menggunakannya selama periode tersebut.
3) Tentukan cara Anda akan menilai apakah peserta telah menerapkan pengetahuan dan/atau keterampilan yang telah ditetapkan sebelumnya selama periode acuan yang ditetapkan pada langkah 2. Pelajari pendekatan-pendekatan berikut dan pilih opsi yang paling sesuai dengan konteks Anda:
Wawancara terstruktur:
Melakukan wawancara dengan sampel yang representatif peserta. Tanyakan : “Dapatkah Anda memberi tahu saya, pengetahuan atau keterampilan mana dari yang berikut ini—jika ada—yang telah Anda gunakan selama [sebutkan periode referensi] setelah [sebutkan aktivitas proyek tertentu]?”
Pilihan jawaban harus sesuai dengan pilihan yang Anda tentukan pada langkah 1 di atas. Jelaskan pilihan-pilihan tersebut sebagai tindakan atau keputusan spesifik, bukan sekadar topik pelatihan. Berikan kesempatan kepada responden untuk menyatakan bahwa mereka tidak menggunakan satupun dari pilihan tersebut atau tidak ingat. Sertakan juga pilihan “Lainnya – sebutkan: ……...” . Tanggapan yang tercatat di bawah kategori ‘Lainnya’ tidak boleh dihitung saat menghitung indikator, namun dapat memberikan wawasan tambahan yang berguna.
Pertanyaan: “Apakah Anda pernah menggunakan pengetahuan atau keterampilan lain yang terkait dengan [sebutkan aktivitasnya] selama periode ini?”
Terakhir, periksa apakah peserta dapat memberikan contoh konkret mengenai penggunaan yang mereka laporkan dengan menanyakan: “Bisakah Anda menceritakan kepada saya bagaimana dan kapan Anda menggunakan [ sebutkan pengetahuan/keterampilan yang dilaporkan]?”
Pengamatan langsung: Jika memungkinkan, amati apakah peserta menggunakan keterampilan yang menjadi sasaran dengan benar, dengan menggunakan kriteria yang telah ditetapkan sebelumnya jika diperlukan. Dalam beberapa situasi, Anda dapat meninjau catatan tertulis yang menunjukkan penerapan pengetahuan/keterampilan yang telah diberikan.
Laporan dari orang lain: Dalam beberapa konteks, mungkin saja melakukan wawancara dengan atasan, rekan kerja, atau anggota masyarakat mengenai apakah mereka pernah mengamati peserta menggunakan pengetahuan atau keterampilan yang relevan.
4) Tetapkan terlebih dahulu standar minimum mengenai kapan seorang peserta dianggap telah menerapkan pengetahuan dan/atau keterampilan tersebut. Tergantung pada jenis intervensi, standar tersebut dapat mencakup:
jumlah minimum pengetahuan atau keterampilan utama yang harus telah diterapkan;
frekuensi penggunaan minimum, misalnya, “setidaknya dua kali selama sebulan terakhir”; dan/atau
bukti bahwa suatu keterampilan telah diterapkan dengan benar.
Pastikan bahwa setiap standar yang Anda tetapkan mudah diukur dan realistis. Pertimbangkan untuk melibatkan seorang pelatih atau orang lain yang memahami apa yang diharapkan dapat dipelajari oleh para peserta. Lakukan uji coba terlebih dahulu dan sesuaikan jika diperlukan.
5) Kumpulkan data yang diperlukan pada waktu yang tepat setelah kegiatan proyek selesai, dengan menggunakan periode acuan yang telah ditetapkan pada langkah 2.
6) Untuk menentukan nilai indikator:
hitung jumlah peserta yang telah dievaluasi yang memenuhi standar minimum penggunaan sebagaimana ditetapkan pada langkah 4;
bagilah angka ini dengan jumlah total peserta yang dinilai dan yang dapat ditentukan apakah mereka memenuhi standar tersebut; dan
kalikan hasilnya dengan 100 untuk mengubahnya menjadi persentase.
Catat secara terpisah jumlah peserta yang tidak dapat ditentukan apakah pengetahuan atau keterampilan mereka telah diterapkan.
Pisahkan berdasarkan
Data ini dapat dipisahkan berdasarkan jenis kelamin dan kelompok usia, serta—jika relevan dan memungkinkan—juga berdasarkan jenis dukungan yang diterima, status disabilitas, dan kriteria relevan lainnya.
Catatan Penting
1) Jika memungkinkan, lakukan penilaian terhadap pengetahuan/keterampilan yang relevan sebelum dan sesudah kegiatan proyek. Data awal juga dapat membantu Anda dalam merancang kegiatan penguatan pengetahuan/keterampilan dalam proyek.
2) Tentukan apakah indikator tersebut akan mengukur pemanfaatan pengetahuan/keterampilan dari satu kegiatan proyek (misalnya, pelatihan) atau dampak kumulatif dari beberapa kegiatan proyek. Terapkan definisi ini secara konsisten saat memilih pengetahuan/keterampilan yang akan dievaluasi dan saat menanyakan kepada peserta mengenai pemanfaatan tersebut.
3)Pastikan bahwa peserta benar-benar memiliki kebutuhan atau kesempatan yang nyata untuk menerapkan pengetahuan/keterampilan tersebut selama periode yang dimaksud. Jika mereka tidak memiliki kesempatan tersebut, nilai indikator yang rendah mungkin tidak mencerminkan kesediaan atau kemampuan mereka untuk menerapkan apa yang telah dipelajari.
4) Pastikan bahwa pengumpulan data menilai penerapan pengetahuan/keterampilan tersebut dalam praktik, bukan sekadar niat untuk menggunakannya. Mintalah peserta untuk memberikan contoh konkret mengenai bagaimana dan kapan mereka menggunakannya. Jika memungkinkan, lakukan triangulasi antara informasi yang dilaporkan sendiri dengan hasil pengamatan, catatan, atau informasi dari orang lain guna mengurangi bias kesesuaian sosial.
5) Jika memungkinkan, ulangi penilaian tersebut dari waktu ke waktu, misalnya sekali dalam waktu yang relatif singkat setelah kegiatan tersebut dan sekali lagi beberapa bulan kemudian. Hal ini dapat menunjukkan apakah penerapan pengetahuan/keterampilan tersebut berkelanjutan, bukan hanya terjadi sesaat setelah kegiatan tersebut.
6) Tanyakan juga bagaimana dan mengapa para peserta menggunakan atau tidak menggunakan pengetahuan/keterampilan tersebut. Hal ini dapat membantu mengidentifikasi hambatan dan faktor pendorong dalam penerapan, serta menilai apakah dukungan proyek tersebut sesuai dengan kebutuhan para peserta.
Indikator Sektoral yang Relevan
Pertimbangkan juga untuk menggunakan indikator-indikator berikut ini:
Peningkatan Pengetahuan/Keterampilan (mengukur apakah pembelajaran yang diharapkan telah tercapai sebelum menilai apakah hal tersebut telah diterapkan)
Prevalensi Hambatan Terhadap Perubahan (membantu menjelaskan mengapa para peserta mungkin sudah mengetahui apa yang harus dilakukan, tetapi tidak menerapkannya dalam praktik)