Tingkat Indikator
Rumusan Indikator
Tujuan Indikator
Cara Mengumpulkan dan Menganalisis Data yang Diperlukan
Tentukan nilai indikator tersebut dengan menggunakan metodologi berikut:
1) Pilihlah materi yang digunakan dalam kegiatan Anda untuk menyampaikan pesan-pesan yang kejelasan penyampaiannya ingin Anda nilai (misalnya, poster, papan iklan, rekaman radio, pesan teks, pesan suara, dan sebagainya). Jika Anda menggunakan beberapa materi dengan pesan yang persis sama (yaitu, tidak ada perbedaan dalam redaksi pesan, format, dan sebagainya), pilihlah hanya satu materi untuk setiap pesan.
2) Tetapkan jumlah minimum pesan yang maknanya harus dipahami oleh responden agar memenuhi indikator tersebut (misalnya, setidaknya 3 dari 5 pesan). Untuk setiap pesan, tentukan apa saja yang harus tercakup dalam jawaban yang benar. Tergantung pada pesannya, hal ini mungkin mencakup tindakan yang dimaksudkan, kapan tindakan tersebut harus dilakukan, dan syarat-syarat penting lainnya.
3) Lakukan wawancara individu dengan anggota kelompok sasaran. Jika tujuannya adalah untuk memperkirakan nilai indikator tersebut bagi populasi sasaran yang lebih luas, gunakan sampel yang representatif. Jika tujuannya adalah menguji pesan terlebih dahulu sebelum disebarluaskan, sekelompok kecil pengguna yang dituju dan beragam sudah cukup untuk mengidentifikasi masalah serta menyempurnakan materi tersebut, namun hasilnya tidak boleh disajikan sebagai perkiraan yang mewakili populasi.
PERTANYAAN YANG DIREKOMENDASIKAN (Q) DAN JAWABAN YANG MUNGKIN (A)
Pertanyaan 1: Sekarang saya ingin Anda [pilih: membaca materi ini / mendengarkan rekaman ini]. Biarkan responden membacanya / mendengarkannya. Menurut Anda, apakah [sebutkan materi / rekaman audio] ini meminta Anda untuk melakukan sesuatu yang khusus?
A1: ya / tidak / tidak tahu
(ajukan pertanyaan berikut ini hanya jika jawaban sebelumnya adalah „ya“)
Pertanyaan 2: Apa sebenarnya yang diminta oleh [sebutkan materi / rekaman audio] tersebut agar Anda lakukan?
Mintalah responden untuk menjelaskan tindakan tersebut dengan kata-kata mereka sendiri, tanpa memberikan petunjuk mengenai jawaban yang benar. Jika jawabannya terlalu umum, ajukan pertanyaan lanjutan yang netral, seperti "Bisakah Anda menjelaskannya sedikit lebih lanjut?" Nilai jawaban tersebut berdasarkan kriteria yang telah ditetapkan pada langkah 2. Jangan anggap jawaban tersebut benar jika ada bagian penting dari pesan yang terlewatkan.
A2: _
1) responden benar-benar memahami apa yang diminta kepadanya dalam pesan tersebut
2) responden tidak (secara jelas) memahami apa yang diminta dalam pesan tersebut
Ulangi pertanyaan-pertanyaan tersebut untuk semua pesan yang ingin Anda evaluasi. Sajikan setiap materi dalam bahasa dan format yang biasanya digunakan untuk audiens yang dituju. Sejauh mungkin, cerminkan kondisi di mana orang-orang biasanya akan menjumpai pesan tersebut. Misalnya, jangan langsung membacakan poster dengan suara keras jika orang-orang biasanya diharapkan membacanya sendiri, karena hal ini akan menguji cara berkomunikasi yang berbeda. Pertimbangkan untuk mencatat segala kesulitan yang dialami responden dalam mengakses pesan tersebut, seperti kesulitan dalam membaca, mendengar, melihat, atau memahami bahasanya.
4) Hitung jumlah responden yang memahami dengan benar jumlah pesan minimum. 'Memahami' berarti responden mengetahui apa yang diminta dalam pesan-pesan tersebut.
5) Untuk menghitung nilai indikator tersebut, bagi jumlah responden yang memahami dengan benar jumlah pesan minimum yang disyaratkan dengan jumlah total responden yang menyelesaikan penilaian. Kemudian kalikan dengan 100 untuk mendapatkan persentase.
Hitung jawaban yang salah dan tanggapan yang menunjukkan kurangnya pemahaman (misalnya, “tidak tahu”) sebagai tanda bahwa responden tidak memahami pesan yang bersangkutan. Catat penolakan dan penilaian yang tidak lengkap secara terpisah. Laporkan juga persentase responden yang memahami setiap pesan dengan benar untuk mengidentifikasi pesan mana saja yang perlu diperbaiki.
Pisahkan berdasarkan
Data ini dapat dipisahkan berdasarkan kelompok usia dan tingkat melek huruf, serta—jika relevan—juga berdasarkan jenis kelamin, bahasa, lokasi, dan status disabilitas.
Catatan Penting
1) Memastikan bahwa masyarakat memahami dengan benar apa yang diminta dalam pesan-pesan tersebut harus dilakukan melalui uji coba awal (lihat panduan di bawah) sebelum kegiatan komunikasi SBC dimulai. Tujuan utama pengumpulan data setelah kegiatan dilaksanakan adalah untuk memperoleh pemahaman yang lebih baik mengenai sejauh mana pesan-pesan tersebut jelas bagi audiens sasaran. Jika menggunakan sampel yang representatif, hasilnya juga dapat memberikan perkiraan yang lebih andal mengenai tingkat pemahaman di seluruh populasi sasaran.
2) Indikator ini cocok untuk pesan yang meminta orang untuk melakukan tindakan tertentu. Jika pesan tersebut terutama memberikan informasi tanpa meminta orang untuk melakukan apa pun, gunakanlah pertanyaan yang mengukur pemahaman terhadap informasi tersebut. Apabila perbedaan versi bahasa atau format dapat memengaruhi pemahaman, lakukan penilaian terhadap versi-versi yang bersangkutan secara terpisah.
3) Pertimbangkan di mana pertanyaan-pertanyaan ini sebaiknya ditempatkan dalam kuesioner agar jawaban tidak dipengaruhi oleh pertanyaan-pertanyaan sebelumnya dan tidak memengaruhi jawaban atas pertanyaan-pertanyaan selanjutnya.
4) Pastikan bahwa para pengumpul data benar-benar memahami makna setiap pesan yang dievaluasi dan mampu menilai apakah responden benar-benar memahami apa yang diminta dalam pesan tersebut (termasuk apa yang harus dilakukan jika responden memberikan jawaban yang terlalu umum).
Indikator Lintas Sektor yang Relevan
Pertimbangkan juga untuk menggunakan indikator-indikator berikut ini:
Informasi dalam Bahasa Pilihan (membantu menilai apakah komunikasi disampaikan dalam bahasa yang disukai oleh audiens yang dituju)
Informasi Melalui Saluran Pilihan (membantu menilai apakah komunikasi sampai kepada orang-orang melalui saluran pilihan mereka)
Kredibilitas Pesan Perubahan Sosial dan Perilaku (menilai apakah masyarakat mempercayai isi pesan tersebut)
Niat untuk Melakukan Suatu Perilaku (menilai apakah seseorang berniat untuk melakukan perilaku yang dipromosikan)
Prevalensi Hambatan Terhadap Perubahan (mengidentifikasi hambatan yang dapat menghalangi orang untuk bertindak meskipun mereka telah memahami pesan-pesan tersebut)
Akses Panduan Tambahan
- AIDSCAP - Cara Melakukan Pra-tes yang Efektif (.pdf)
- Pathfinder International - Evaluasi Materi IEC (.pdf)