ID|EN
Chat di WhatsApp

Tag: riset

  • Kuesioner yang Baik Itu Seni dan Sains: 7 Jebakan Pertanyaan yang Diam-diam Merusak Datamu

    Ada satu hal yang saya pelajari dari bertahun-tahun mengerjakan survei: hasil analisis sebaik apa pun tidak bisa menyelamatkan kuesioner yang buruk. Kita bisa memakai model paling canggih, tetapi kalau pertanyaannya membingungkan, bias, atau mengarahkan, yang kita analisis hanyalah kebingungan responden dengan tampilan yang rapi.

    Dalam statistik ada ungkapan lama yang cocok di sini: garbage in, garbage out. Dan kuesioner adalah pintu masuk pertama bagi data kita. Berikut tujuh jebakan yang paling sering saya temui, lengkap dengan contoh dan cara memperbaikinya.

    Jebakan 1: Pertanyaan ganda (double-barreled)

    Contoh buruk: “Saya puas dengan gaji dan tunjangan yang saya terima.”

    Bagaimana kalau responden puas dengan gaji tetapi tidak puas dengan tunjangan? Ia tidak punya jawaban yang jujur. Apa pun jawabannya, kamu tidak akan tahu yang mana yang ia maksud.

    Perbaikan: pecah menjadi dua pertanyaan. “Saya puas dengan gaji yang saya terima.” dan “Saya puas dengan tunjangan yang saya terima.”

    Tanda yang mudah dikenali: kata “dan” atau “serta” di tengah pertanyaan. Tidak selalu salah, tapi selalu patut diperiksa.

    Jebakan 2: Pertanyaan yang menggiring

    Contoh buruk: “Seberapa setuju Anda bahwa atasan Anda sudah memberikan dukungan yang sangat baik?”

    Pertanyaan itu sudah menyiratkan jawaban yang diharapkan. Responden cenderung mengikuti arah yang disodorkan, terutama bila pertanyaannya menyangkut atasan atau institusi mereka.

    Perbaikan: gunakan kalimat netral: “Atasan saya memberikan dukungan yang saya butuhkan untuk menyelesaikan pekerjaan.” Dengan pilihan jawaban dari sangat tidak setuju sampai sangat setuju, kedua arah jawaban terasa sama pantasnya.

    Jebakan 3: Istilah yang kabur atau terlalu teknis

    Contoh buruk: “Apakah Anda sering menggunakan layanan digital kami?” Sering itu seberapa? Setiap hari? Setiap minggu? Bagi sebagian orang, tiga kali sebulan adalah “sering”.

    Perbaikan: gunakan batasan yang jelas dan terukur: “Dalam satu bulan terakhir, berapa kali Anda menggunakan aplikasi kami?” dengan pilihan jawaban yang konkret (0 kali, 1 sampai 3 kali, 4 sampai 10 kali, lebih dari 10 kali).

    Selain itu, hindari jargon. Kalau responden harus membuka kamus untuk memahami pertanyaanmu, kamu kehilangan data atau mendapat tebakan.

    Jebakan 4: Kata mutlak (“selalu”, “tidak pernah”, “semua”)

    Contoh buruk: “Atasan saya selalu mendengarkan pendapat saya.”

    Kata “selalu” memaksa responden menolak pernyataan walaupun atasannya mendengarkan sembilan dari sepuluh kali. Hasilnya, skor tampak lebih rendah daripada kenyataan.

    Perbaikan: gunakan skala frekuensi yang eksplisit (“Seberapa sering atasan saya mendengarkan pendapat saya?” dengan pilihan tidak pernah, jarang, kadang-kadang, sering, selalu), atau pernyataan tanpa kata mutlak.

    Jebakan 5: Pilihan jawaban yang tidak seimbang atau tumpang tindih

    Contoh buruk: pilihan usia “20 sampai 30”, “30 sampai 40”, “40 sampai 50”. Seseorang yang berusia 30 tahun akan bingung memilih yang mana.

    Perbaikan: buat kategori yang saling lepas dan menyeluruh: “20 sampai 29”, “30 sampai 39”, “40 sampai 49”, “50 ke atas”.

    Pada skala Likert, pastikan keseimbangan: jumlah pilihan positif dan negatif sama, dengan pilihan netral yang jelas bila diperlukan. Pilihan seperti “sangat baik, baik, cukup, kurang” cenderung condong ke sisi positif dan membuat data menumpuk di atas.

    Jebakan 6: Urutan dan konteks yang memengaruhi jawaban

    Pertanyaan sebelumnya bisa memengaruhi jawaban pertanyaan berikutnya (priming). Kalau kamu menanyakan serangkaian pertanyaan tentang masalah di kantor lalu bertanya, “Seberapa puas Anda secara keseluruhan dengan pekerjaan Anda?”, responden sudah dikondisikan untuk memikirkan hal-hal buruk.

    Perbaikan: tempatkan pertanyaan umum lebih dulu sebelum yang spesifik. Letakkan pertanyaan sensitif (pendapatan, kesehatan, perilaku pribadi) di bagian akhir setelah responden merasa nyaman. Kelompokkan pertanyaan berdasarkan tema, dan pertimbangkan mengacak urutan butir dalam satu skala bila memungkinkan.

    Jebakan 7: Kuesioner yang terlalu panjang dan melelahkan

    Responden yang lelah akan menjawab asal-asalan: memilih jawaban tengah terus-menerus atau pola zig-zag (straight-lining). Di bagian akhir kuesioner yang panjang, kualitas data biasanya turun.

    Perbaikan: tanyakan hanya yang kamu perlukan. Untuk setiap pertanyaan, tanyakan: “Analisis apa yang akan memakai jawaban ini?” Kalau tidak ada jawabannya, buang pertanyaan itu. Perkirakan waktu pengisian dan uji coba. Sebagian besar survei yang disebar umum sebaiknya selesai dalam beberapa menit.

    Bonus: dua kebiasaan yang membedakan kuesioner profesional

    Uji coba (pilot). Berikan kuesioner kepada sepuluh sampai dua puluh orang yang mirip dengan responden sebenarnya. Tanyakan: bagian mana yang membingungkan? Pertanyaan mana yang terasa aneh? Berapa lama waktunya? Dua jam uji coba bisa menyelamatkan dua bulan pengumpulan data yang sia-sia.

    Uji validitas dan reliabilitas. Setelah data uji coba terkumpul, periksa korelasi butir-total, struktur faktor, dan reliabilitas (misalnya Cronbach’s alpha atau composite reliability). Butir yang berperilaku aneh perlu diperbaiki sebelum survei utama dijalankan.

    Pertimbangan etika

    Jelaskan tujuan survei, siapa yang mengakses data, dan bagaimana kerahasiaan dijaga. Berikan pilihan untuk tidak menjawab pertanyaan sensitif. Dan jangan meminta data identitas yang tidak benar-benar kamu perlukan. Responden yang percaya pada kerahasiaan akan menjawab lebih jujur, dan jawaban yang jujur adalah satu-satunya hal yang membuat survei bernilai.

    Ringkasan: daftar periksa tujuh jebakan

    Sebelum menyebar kuesioner, periksa setiap pertanyaan:

    1. Apakah hanya menanyakan satu hal?
    2. Apakah netral, tidak menggiring?
    3. Apakah istilahnya jelas dan terukur?
    4. Bebas dari kata mutlak yang memaksa?
    5. Pilihan jawabannya seimbang dan tidak tumpang tindih?
    6. Urutannya tidak mengondisikan jawaban?
    7. Apakah panjangnya wajar dan setiap pertanyaan punya tujuan?

    Kuesioner yang baik tidak terlihat. Responden mengisinya dengan lancar, dan kamu mendapat data yang bisa dipercaya. Itulah tanda bahwa seni dan sains sudah bekerja bersama.

    Contoh perbaikan tiga pertanyaan lagi

    Contoh A. ‘Bagaimana pendapat Anda tentang kualitas dan harga produk kami?’ (ganda). Perbaikan: pisahkan menjadi ‘Bagaimana pendapat Anda tentang kualitas produk kami?’ dan ‘Bagaimana pendapat Anda tentang harga produk kami?’.

    Contoh B. ‘Tidakkah Anda setuju bahwa pelayanan kami sudah sangat cepat?’ (menggiring dan negatif ganda). Perbaikan: ‘Pelayanan kami cepat.’ dengan skala setuju-tidak setuju.

    Contoh C. ‘Seberapa sering Anda menggunakan layanan kami?’ dengan pilihan ‘jarang, kadang-kadang, sering’. Perbaikan: berikan jangka waktu dan rentang yang jelas, misalnya ‘Dalam 30 hari terakhir, berapa kali Anda menggunakan layanan kami?’ dengan pilihan angka.

    Skala ganjil atau genap?

    Skala dengan jumlah pilihan ganjil (misalnya lima) memberi titik tengah netral. Skala genap (misalnya empat atau enam) memaksa responden memilih arah. Tidak ada yang mutlak benar. Skala ganjil cocok bila netral adalah sikap yang sah. Skala genap cocok bila kamu ingin mengurangi kecenderungan memilih jawaban tengah demi aman. Yang penting, konsisten dalam satu instrumen, dan pahami konsekuensinya saat menganalisis.

    Menerjemahkan kuesioner dari bahasa lain

    Menerjemahkan instrumen dari bahasa Inggris tidak cukup dengan mesin penerjemah. Praktik yang baik: terjemahan oleh dua penerjemah independen, penggabungan oleh peneliti, terjemahan balik oleh penerjemah ketiga yang tidak melihat versi asli, lalu perbandingan dengan versi asli, dan uji coba pada responden. Setelah itu, uji ulang validitas dan reliabilitasnya pada sampelmu, karena makna kata bisa bergeser antarbudaya.

    Butuh kuesioner yang disusun dan diuji dengan benar sebelum disebar? Lihat layanan riset pasar dan survei kami.

    Sedang menyusun kuesioner untuk skripsi, tesis, disertasi, atau survei institusi? Tim datalytics.indo membantu dari perumusan konsep dan butir pertanyaan, uji coba dan uji validitas-reliabilitas, sampling, analisis (regresi, PLS-SEM/SEM, analisis jalur, faktor, klaster, dan lainnya), sampai interpretasi. Tersedia juga bimbingan privat. Hubungi kami untuk mendapatkan solusi terbaik.

    Chat di WhatsApp

  • Survei Kepuasan Karyawan yang Sering Salah Arah: 6 Kesalahan yang Membuat Hasilnya Tidak Dipakai Siapa-siapa

    Hampir setiap perusahaan pernah melakukannya: survei kepuasan atau engagement karyawan. Kuesioner disebar, hasilnya direkap, dibuat presentasi yang rapi, lalu disimpan di folder bersama. Setahun kemudian, survei yang sama diulang. Skornya naik 0,1. Semua tersenyum. Tidak ada yang berubah.

    Saya sudah beberapa kali terlibat dalam survei seperti ini, termasuk survei engagement untuk perusahaan retail dengan ratusan karyawan yang hasilnya dipresentasikan langsung kepada direksi dan dewan komisaris. Dari pengalaman itu, saya belajar bahwa survei yang gagal jarang gagal karena rumus statistiknya. Ia gagal karena arahnya salah sejak awal. Berikut enam kesalahan yang paling sering saya temui.

    1. Mengejar skor, bukan keputusan

    Pertanyaan pertama yang saya ajukan kepada klien selalu sama: “Kalau hasil survei ini keluar, keputusan apa yang akan Anda ambil?” Sering jawabannya hening beberapa detik. Survei yang dirancang tanpa keputusan di belakangnya akan menghasilkan satu angka (misalnya skor engagement 4,12) yang tidak memberi petunjuk apa pun. Apakah itu bagus? Apakah itu buruk? Apa yang harus dilakukan?

    Rancang survei dari belakang. Mulai dari keputusan yang mungkin diambil (misalnya perubahan kebijakan cuti, perbaikan komunikasi atasan, atau program pengembangan karier), baru turunkan pertanyaan yang relevan dengan keputusan itu.

    2. Hanya melaporkan rata-rata

    Skor rata-rata 4,12 dari 5 terdengar bagus. Tapi rata-rata bisa menyembunyikan dua kelompok yang sangat berbeda: sebagian karyawan sangat puas, sebagian lain sangat tidak puas. Rata-rata mereka tampak “lumayan”, padahal perusahaan sedang menghadapi masalah yang serius di satu kelompok.

    Selalu lihat sebaran dan perbandingan antarkelompok: per divisi, per masa kerja, per level jabatan, per lokasi. Dan jangan lupa membaca persentase jawaban “tidak puas” atau “sangat tidak puas”, bukan hanya rata-ratanya. Masalah organisasi biasanya bersembunyi di ekor distribusi.

    3. Tidak mencari penggerak (driver), hanya mengukur tingkat

    Survei engagement sering berhenti pada pertanyaan “seberapa engaged karyawan kita?”. Padahal pertanyaan yang lebih bernilai adalah: “apa yang paling memengaruhi engagement di perusahaan kita?”

    Di sinilah analisis statistik berperan. Dengan regresi atau analisis jalur, kita bisa melihat faktor mana yang paling kuat hubungannya dengan engagement: kepemimpinan langsung, kompensasi, beban kerja, peluang berkembang, atau komunikasi. Ini yang membedakan survei yang sekadar “memotret” dari survei yang “menunjuk arah”. Kalau hanya punya anggaran untuk memperbaiki dua hal tahun ini, kamu perlu tahu dua hal mana yang dampaknya paling besar.

    4. Pertanyaan yang bias, ganda, atau terlalu manis

    Beberapa contoh yang sering lolos:

    • Pertanyaan ganda: “Saya puas dengan gaji dan tunjangan saya.” Bagaimana kalau seseorang puas dengan gaji tetapi tidak dengan tunjangan? Ia tidak punya jawaban yang jujur.
    • Pertanyaan menggiring: “Seberapa setuju Anda bahwa atasan Anda sudah mendukung Anda dengan baik?” Kalimat itu sudah menyiratkan jawaban.
    • Istilah kabur: “Saya merasa dihargai di perusahaan ini.” Dihargai oleh siapa? Dalam bentuk apa?

    Pertanyaan yang baik pendek, spesifik, satu gagasan, dan tidak mengisyaratkan jawaban. Selalu uji coba kuesioner pada sepuluh sampai dua puluh orang sebelum disebar luas, dan tanyakan kepada mereka bagian mana yang membingungkan.

    5. Mengabaikan kerahasiaan dan efek takut

    Survei kepuasan karyawan hanya berguna jika karyawan berani jujur. Karyawan hanya akan jujur jika mereka yakin jawabannya tidak bisa ditelusuri ke dirinya. Dua kebiasaan buruk yang sering merusak kepercayaan ini:

    • Melaporkan hasil untuk kelompok yang terlalu kecil. Kalau satu tim hanya terdiri dari empat orang dan hasilnya dilaporkan per tim, atasan dengan mudah menebak siapa yang menjawab apa. Tetapkan ambang minimum jumlah responden untuk setiap pelaporan.
    • Meminta data identitas yang berlebihan. Kombinasi divisi, jabatan, usia, dan masa kerja bisa mengidentifikasi seseorang dengan hampir pasti, terutama di unit kecil.

    Kalau karyawan curiga, mereka akan menjawab dengan aman, yaitu skor tinggi tanpa makna. Di sinilah survei menghasilkan data yang cantik tetapi kosong.

    6. Tidak ada tindak lanjut, sehingga survei berikutnya makin sepi

    Ini kesalahan yang paling mahal. Karyawan mengisi survei dengan harapan sesuatu berubah. Ketika tidak ada tindak lanjut yang terlihat, mereka belajar satu hal: survei ini formalitas. Tingkat respons turun, kejujuran turun, dan survei berikutnya menghasilkan data yang makin tidak berguna.

    Praktik yang jauh lebih sehat: umumkan hasil (secara jujur, termasuk yang kurang menyenangkan), tetapkan beberapa prioritas yang realistis, tunjuk penanggung jawab, dan laporkan kemajuan sebelum survei berikutnya. Ketika karyawan melihat satu hal kecil yang berubah akibat survei, kepercayaan mereka untuk menjawab jujur berikutnya naik drastis.

    Lalu, survei yang baik itu seperti apa?

    Ringkasnya, survei engagement yang berguna punya lima ciri:

    1. Dirancang dari keputusan yang akan diambil.
    2. Menggunakan kuesioner yang sudah diuji (valid dan reliabel), bukan sekadar daftar pertanyaan yang terdengar bagus.
    3. Dianalisis dengan melihat sebaran, perbandingan kelompok, dan penggerak, bukan hanya rata-rata.
    4. Dijaga kerahasiaannya dengan ambang minimum pelaporan.
    5. Diikuti tindak lanjut yang terlihat dan dikomunikasikan.

    Kalau lima hal itu ada, angka 4,12 tadi berhenti menjadi sekadar angka. Ia menjadi titik awal percakapan yang nyata antara manajemen dan karyawan, dan percakapan itulah yang sebenarnya membuat organisasi berubah.

    Contoh kerangka laporan satu halaman untuk direksi

    Hasil survei yang baik bisa diringkas di satu halaman. Berikut kerangka yang saya anjurkan: (1) tiga angka utama dengan pembanding (skor keseluruhan, tingkat partisipasi, perubahan dari survei sebelumnya), (2) tiga kekuatan terbesar dan tiga area yang perlu perbaikan, lengkap dengan angka, (3) dua sampai tiga penggerak utama engagement yang diperoleh dari analisis statistik, (4) rekomendasi prioritas dengan penanggung jawab dan tenggat, dan (5) satu kalimat tentang keterbatasan data. Halaman-halaman berikutnya adalah lampiran untuk mereka yang ingin menggali. Direksi yang membaca satu halaman yang jelas lebih mungkin bertindak daripada direksi yang membaca lima puluh slide.

    Jangan lupakan pertanyaan terbuka

    Angka memberi gambaran ‘seberapa’, tetapi komentar bebas memberi ‘mengapa’. Satu atau dua pertanyaan terbuka, misalnya ‘Apa satu hal yang paling perlu diperbaiki di perusahaan ini?’, sering menghasilkan wawasan yang tidak terduga. Komentar itu bisa dikelompokkan berdasarkan tema (analisis isi), lalu dihitung frekuensinya. Gabungan angka dan cerita jauh lebih meyakinkan bagi manajemen dibanding angka saja. Pastikan komentar yang dilaporkan sudah dianonimkan sehingga tidak bisa ditelusuri ke individu.

    Tanya jawab singkat

    Seberapa sering survei engagement sebaiknya dilakukan? Banyak perusahaan melakukan survei menyeluruh setahun sekali, dilengkapi survei singkat (pulse survey) beberapa pertanyaan setiap kuartal untuk memantau isu spesifik. Terlalu sering membuat karyawan jenuh, terlalu jarang membuat masalah terlambat terdeteksi. Yang terpenting, jangan melakukan survei baru sebelum tindak lanjut survei sebelumnya terlihat.

    Apakah skor tinggi selalu baik? Tidak selalu. Skor yang sangat tinggi dan seragam di semua divisi kadang menandakan karyawan takut jujur atau pertanyaannya terlalu manis. Bandingkan dengan data perilaku seperti tingkat resign, absensi, dan partisipasi pelatihan sebagai pemeriksaan silang.

    Ingin survei kepuasan atau engagement karyawan yang tepat arah? Lihat layanan riset pasar dan survei kami.

    Sedang merencanakan survei kepuasan pelanggan atau engagement karyawan untuk perusahaan atau institusimu? Tim datalytics.indo membantu dari desain survei, uji instrumen, sampling, analisis (penggerak engagement dengan regresi atau analisis jalur), sampai presentasi rekomendasi untuk manajemen. Tersedia juga pelatihan in-house. Hubungi kami untuk mendapatkan solusi terbaik.

    Chat di WhatsApp