Tag: survei

  • Gaji Rata-rata Rp54,5 Juta? Tunggu Dulu: 4 Pertanyaan Sebelum Kamu Percaya pada Sebuah Angka

    Coba bayangkan kamu sedang mencari kerja. Di sebuah iklan lowongan tertulis dengan huruf tebal: “Gaji rata-rata karyawan Rp54,5 juta per bulan!” Jantung berdebar, CV langsung dikirim, dan di kepala sudah terbayang cicilan rumah yang lunas lebih cepat.

    Lalu hari pertama masuk kantor, kamu baru tahu fakta kecilnya. Kantor itu punya sepuluh orang. Sembilan di antaranya digaji Rp5 juta. Satu orang sisanya, kebetulan sang pemilik, menggaji dirinya sendiri Rp500 juta.

    Hitung sendiri: (9 × 5 juta + 500 juta) ÷ 10 = 54,5 juta. Iklannya tidak berbohong. Angkanya benar. Tapi apakah kamu merasa dibohongi? Tentu saja.

    Inilah yang sejak lama membuat saya betah di dunia statistik sekaligus gemas dengannya. Statistik hampir tidak pernah berbohong. Yang sering berbohong adalah cara kita menyajikan dan membacanya. Judul keynote yang pernah saya bawakan di kampus pun saya ambil dari sini: How to Lie with Statistics. Bukan untuk mengajari orang berbohong, tapi supaya tidak mudah dibohongi.

    Setelah lebih dari dua puluh tahun bekerja dengan survei, riset politik, penelitian akademik, sampai dashboard untuk perusahaan migas dan otomotif, saya menemukan pola yang berulang. Hampir semua angka yang menyesatkan lolos karena orang lupa menanyakan empat hal sederhana. Mari kita bahas satu per satu, pelan-pelan, tanpa rumus yang bikin pusing.

    1. Rata-rata dari apa, dan siapa yang ikut dihitung?

    Mari kembali ke kantor tadi. Selain rata-rata (mean), ada ukuran lain yang namanya median, yaitu nilai tengah kalau semua data diurutkan dari yang terkecil sampai terbesar. Di kantor tadi, median gajinya Rp5 juta. Dan Rp5 juta itulah yang benar-benar dirasakan sebagian besar karyawan.

    Kenapa bisa selisih sejauh itu? Karena rata-rata itu seperti timbangan yang terlalu sensitif: satu nilai ekstrem saja sudah cukup menggesernya. Bayangkan kamu menimbang beras di timbangan emas. Bisa saja angka yang keluar akurat sampai ke milligram, tapi alatnya tidak cocok untuk keperluan yang kamu butuhkan. Untuk data yang miring ke satu sisi, seperti pendapatan, harga rumah, atau saldo tabungan, median hampir selalu lebih jujur.

    Aturan praktisnya begini: kalau rata-rata dan median jauh berbeda, itu pertanda ada nilai ekstrem yang sedang “menarik” angkanya. Jangan berhenti di satu angka. Lihat juga sebarannya.

    Pertanyaan keduanya sama pentingnya: siapa yang tidak ikut dihitung? Ambil contoh survei kepuasan pelanggan yang hanya diisi oleh pelanggan aktif. Hasilnya hampir pasti bagus, karena pelanggan yang kecewa sudah pindah ke tempat lain dan tidak ada di daftar responden. Para ahli menyebutnya survivorship bias: kita hanya melihat yang bertahan, lalu mengira semuanya baik-baik saja. Kalau kamu menilai kondisi sebuah perusahaan dari karyawan yang masih bertahan, kamu mungkin melewatkan cerita dari mereka yang sudah resign.

    2. Berapa orang yang disurvei, dan bagaimana mereka dipilih?

    “Surveinya melibatkan 10.000 responden!” Kedengarannya meyakinkan. Tapi pertanyaan yang lebih penting adalah dari mana 10.000 orang itu datang.

    Kalau tautan survei disebarkan di satu grup percakapan yang isinya orang-orang yang sepemikiran, sepuluh ribu respons itu sebenarnya cuma satu suara yang diulang sepuluh ribu kali. Sebaliknya, 400 orang yang dipilih secara acak dari populasi yang jelas bisa memberi gambaran yang jauh lebih bisa dipercaya.

    Soal margin of error, ada hitungan yang enak dihafal untuk survei dengan tingkat kepercayaan 95%:

    • Sampel 300 orang: margin of error sekitar ±5,7%
    • Sampel 400 orang: sekitar ±4,9%
    • Sampel 1.000 orang: sekitar ±3,1%

    Artinya, kalau sebuah survei acak mengatakan 52% responden memilih A dan 48% memilih B dengan sampel 400 orang, selisih empat poin itu masih tertelan margin of error. Judul berita “A unggul” jadi terlalu berani. Inilah yang membuat dunia survei dan quick count menuntut disiplin: ukuran sampel, cara penarikan sampel, dan margin of error harus disebut terang-terangan. Kalau ketiganya tidak disebut, perlakukan angka itu sebagai opini yang memakai kostum statistik.

    3. Dibandingkan dengan apa?

    Angka tanpa pembanding itu seperti skor 3-0 tanpa tahu siapa lawannya: kedengarannya hebat, tapi tak ada yang tahu artinya. “Penjualan kami naik 20%.” Bagus, sampai kamu tahu bahwa pasar secara keseluruhan naik 35% pada periode yang sama. Dibandingkan pasar, kamu justru tertinggal.

    Pembanding yang adil punya tiga syarat: per kapita (supaya wilayah besar tidak otomatis kalah atau menang), periode yang sama (jangan bandingkan bulan Lebaran dengan bulan biasa), dan definisi yang sama (ini yang paling sering terlewat).

    Contoh yang menarik ada di data kriminal. Kota besar hampir selalu memimpin jumlah kasus kejahatan, tapi itu karena penduduknya memang banyak. Begitu dibagi dengan jumlah penduduk, urutannya bisa terbalik.

    Di dunia dashboard bisnis pun sama. Saya pernah ikut membangun dashboard 21 halaman untuk memantau kinerja enam wilayah di sebuah perusahaan migas. Dashboard secantik apa pun tidak ada gunanya kalau angka pada setiap halamannya tidak punya pembanding yang jelas: dibanding target, dibanding bulan lalu, atau dibanding wilayah lain. Direktur tidak butuh banyak grafik. Direktur butuh grafik yang menjawab pertanyaan “kita sedang baik atau buruk?”.

    4. Siapa yang membuat grafik ini, dan apa yang ingin ia tunjukkan?

    Pertanyaan keempat ini lebih ke soal kewaspadaan. Grafik adalah alat persuasi yang sangat kuat, dan karena itu juga alat yang paling mudah disalahgunakan. Beberapa trik yang sering muncul:

    • Sumbu dipotong. Sumbu vertikal tidak dimulai dari nol, sehingga selisih kecil terlihat seperti lonjakan besar.
    • Skala yang berbeda-beda. Dua grafik disandingkan, tapi skalanya tidak sama, sehingga kesannya serupa padahal tidak.
    • Periode yang dipilih sendiri. Tren yang tampak naik tajam hanya karena grafik dimulai tepat di titik terendah.
    • Persentase tanpa angka dasarnya. “Naik 300%” bisa berarti dari 1 kasus menjadi 4 kasus.

    Bukan berarti setiap pembuat grafik berniat menipu. Sering kali itu sekadar kelalaian. Tapi sebagai pembaca, kita tidak perlu tahu niatnya. Kita cukup memeriksa sumbu, skala, periode, dan angka dasarnya sebelum percaya.

    Satu kebiasaan kecil yang mengubah cara kamu membaca angka

    Keempat pertanyaan tadi bisa dirangkum jadi satu kebiasaan: jangan menerima angka sebagai fakta, perlakukan sebagai klaim yang perlu diuji. Klaim yang baik tidak akan takut diuji. Klaim yang goyah akan terlihat goyah begitu kamu bertanya, “dari apa, dari siapa, dibandingkan dengan apa, dan siapa yang membuatnya?”

    Kebiasaan ini berguna di mana saja: saat membaca berita, membaca laporan kantor, menilai tawaran investasi, sampai menyusun skripsi. Mahasiswa yang terbiasa bertanya begini biasanya langsung naik kelas dalam menulis bab hasil dan pembahasan, karena ia berhenti melaporkan angka dan mulai menafsirkan angka.

    Dan kalau suatu hari kamu merasa data yang kamu pegang terlalu rumit atau kesimpulannya terasa janggal, itu bukan tanda kamu kurang pintar. Itu tanda yang sehat bahwa ada sesuatu yang perlu dicek ulang.


    Butuh angka survei yang bisa dipertanggungjawabkan sejak desain sampelnya? Lihat layanan riset pasar dan survei kami.

    Sedang menyusun skripsi, tesis, atau disertasi, atau butuh data institusimu dibaca dengan jujur? Saya dan tim di datalytics.indo membantu dari desain penelitian, uji instrumen, analisis (regresi, PLS-SEM/SEM, analisis jalur, faktor, klaster, dan lainnya), sampai interpretasi hasil. Ada juga bimbingan privat SPSS, SmartPLS, LISREL, Power BI, dan Excel/VBA. Hubungi kami untuk mendapatkan solusi terbaik.

  • Kuesioner yang Baik Itu Seni dan Sains: 7 Jebakan Pertanyaan yang Diam-diam Merusak Datamu

    Ada satu hal yang saya pelajari dari bertahun-tahun mengerjakan survei: hasil analisis sebaik apa pun tidak bisa menyelamatkan kuesioner yang buruk. Kita bisa memakai model paling canggih, tetapi kalau pertanyaannya membingungkan, bias, atau mengarahkan, yang kita analisis hanyalah kebingungan responden dengan tampilan yang rapi.

    Dalam statistik ada ungkapan lama yang cocok di sini: garbage in, garbage out. Dan kuesioner adalah pintu masuk pertama bagi data kita. Berikut tujuh jebakan yang paling sering saya temui, lengkap dengan contoh dan cara memperbaikinya.

    Jebakan 1: Pertanyaan ganda (double-barreled)

    Contoh buruk: “Saya puas dengan gaji dan tunjangan yang saya terima.”

    Bagaimana kalau responden puas dengan gaji tetapi tidak puas dengan tunjangan? Ia tidak punya jawaban yang jujur. Apa pun jawabannya, kamu tidak akan tahu yang mana yang ia maksud.

    Perbaikan: pecah menjadi dua pertanyaan. “Saya puas dengan gaji yang saya terima.” dan “Saya puas dengan tunjangan yang saya terima.”

    Tanda yang mudah dikenali: kata “dan” atau “serta” di tengah pertanyaan. Tidak selalu salah, tapi selalu patut diperiksa.

    Jebakan 2: Pertanyaan yang menggiring

    Contoh buruk: “Seberapa setuju Anda bahwa atasan Anda sudah memberikan dukungan yang sangat baik?”

    Pertanyaan itu sudah menyiratkan jawaban yang diharapkan. Responden cenderung mengikuti arah yang disodorkan, terutama bila pertanyaannya menyangkut atasan atau institusi mereka.

    Perbaikan: gunakan kalimat netral: “Atasan saya memberikan dukungan yang saya butuhkan untuk menyelesaikan pekerjaan.” Dengan pilihan jawaban dari sangat tidak setuju sampai sangat setuju, kedua arah jawaban terasa sama pantasnya.

    Jebakan 3: Istilah yang kabur atau terlalu teknis

    Contoh buruk: “Apakah Anda sering menggunakan layanan digital kami?” Sering itu seberapa? Setiap hari? Setiap minggu? Bagi sebagian orang, tiga kali sebulan adalah “sering”.

    Perbaikan: gunakan batasan yang jelas dan terukur: “Dalam satu bulan terakhir, berapa kali Anda menggunakan aplikasi kami?” dengan pilihan jawaban yang konkret (0 kali, 1 sampai 3 kali, 4 sampai 10 kali, lebih dari 10 kali).

    Selain itu, hindari jargon. Kalau responden harus membuka kamus untuk memahami pertanyaanmu, kamu kehilangan data atau mendapat tebakan.

    Jebakan 4: Kata mutlak (“selalu”, “tidak pernah”, “semua”)

    Contoh buruk: “Atasan saya selalu mendengarkan pendapat saya.”

    Kata “selalu” memaksa responden menolak pernyataan walaupun atasannya mendengarkan sembilan dari sepuluh kali. Hasilnya, skor tampak lebih rendah daripada kenyataan.

    Perbaikan: gunakan skala frekuensi yang eksplisit (“Seberapa sering atasan saya mendengarkan pendapat saya?” dengan pilihan tidak pernah, jarang, kadang-kadang, sering, selalu), atau pernyataan tanpa kata mutlak.

    Jebakan 5: Pilihan jawaban yang tidak seimbang atau tumpang tindih

    Contoh buruk: pilihan usia “20 sampai 30”, “30 sampai 40”, “40 sampai 50”. Seseorang yang berusia 30 tahun akan bingung memilih yang mana.

    Perbaikan: buat kategori yang saling lepas dan menyeluruh: “20 sampai 29”, “30 sampai 39”, “40 sampai 49”, “50 ke atas”.

    Pada skala Likert, pastikan keseimbangan: jumlah pilihan positif dan negatif sama, dengan pilihan netral yang jelas bila diperlukan. Pilihan seperti “sangat baik, baik, cukup, kurang” cenderung condong ke sisi positif dan membuat data menumpuk di atas.

    Jebakan 6: Urutan dan konteks yang memengaruhi jawaban

    Pertanyaan sebelumnya bisa memengaruhi jawaban pertanyaan berikutnya (priming). Kalau kamu menanyakan serangkaian pertanyaan tentang masalah di kantor lalu bertanya, “Seberapa puas Anda secara keseluruhan dengan pekerjaan Anda?”, responden sudah dikondisikan untuk memikirkan hal-hal buruk.

    Perbaikan: tempatkan pertanyaan umum lebih dulu sebelum yang spesifik. Letakkan pertanyaan sensitif (pendapatan, kesehatan, perilaku pribadi) di bagian akhir setelah responden merasa nyaman. Kelompokkan pertanyaan berdasarkan tema, dan pertimbangkan mengacak urutan butir dalam satu skala bila memungkinkan.

    Jebakan 7: Kuesioner yang terlalu panjang dan melelahkan

    Responden yang lelah akan menjawab asal-asalan: memilih jawaban tengah terus-menerus atau pola zig-zag (straight-lining). Di bagian akhir kuesioner yang panjang, kualitas data biasanya turun.

    Perbaikan: tanyakan hanya yang kamu perlukan. Untuk setiap pertanyaan, tanyakan: “Analisis apa yang akan memakai jawaban ini?” Kalau tidak ada jawabannya, buang pertanyaan itu. Perkirakan waktu pengisian dan uji coba. Sebagian besar survei yang disebar umum sebaiknya selesai dalam beberapa menit.

    Bonus: dua kebiasaan yang membedakan kuesioner profesional

    Uji coba (pilot). Berikan kuesioner kepada sepuluh sampai dua puluh orang yang mirip dengan responden sebenarnya. Tanyakan: bagian mana yang membingungkan? Pertanyaan mana yang terasa aneh? Berapa lama waktunya? Dua jam uji coba bisa menyelamatkan dua bulan pengumpulan data yang sia-sia.

    Uji validitas dan reliabilitas. Setelah data uji coba terkumpul, periksa korelasi butir-total, struktur faktor, dan reliabilitas (misalnya Cronbach’s alpha atau composite reliability). Butir yang berperilaku aneh perlu diperbaiki sebelum survei utama dijalankan.

    Pertimbangan etika

    Jelaskan tujuan survei, siapa yang mengakses data, dan bagaimana kerahasiaan dijaga. Berikan pilihan untuk tidak menjawab pertanyaan sensitif. Dan jangan meminta data identitas yang tidak benar-benar kamu perlukan. Responden yang percaya pada kerahasiaan akan menjawab lebih jujur, dan jawaban yang jujur adalah satu-satunya hal yang membuat survei bernilai.

    Ringkasan: daftar periksa tujuh jebakan

    Sebelum menyebar kuesioner, periksa setiap pertanyaan:

    1. Apakah hanya menanyakan satu hal?
    2. Apakah netral, tidak menggiring?
    3. Apakah istilahnya jelas dan terukur?
    4. Bebas dari kata mutlak yang memaksa?
    5. Pilihan jawabannya seimbang dan tidak tumpang tindih?
    6. Urutannya tidak mengondisikan jawaban?
    7. Apakah panjangnya wajar dan setiap pertanyaan punya tujuan?

    Kuesioner yang baik tidak terlihat. Responden mengisinya dengan lancar, dan kamu mendapat data yang bisa dipercaya. Itulah tanda bahwa seni dan sains sudah bekerja bersama.

    Contoh perbaikan tiga pertanyaan lagi

    Contoh A. ‘Bagaimana pendapat Anda tentang kualitas dan harga produk kami?’ (ganda). Perbaikan: pisahkan menjadi ‘Bagaimana pendapat Anda tentang kualitas produk kami?’ dan ‘Bagaimana pendapat Anda tentang harga produk kami?’.

    Contoh B. ‘Tidakkah Anda setuju bahwa pelayanan kami sudah sangat cepat?’ (menggiring dan negatif ganda). Perbaikan: ‘Pelayanan kami cepat.’ dengan skala setuju-tidak setuju.

    Contoh C. ‘Seberapa sering Anda menggunakan layanan kami?’ dengan pilihan ‘jarang, kadang-kadang, sering’. Perbaikan: berikan jangka waktu dan rentang yang jelas, misalnya ‘Dalam 30 hari terakhir, berapa kali Anda menggunakan layanan kami?’ dengan pilihan angka.

    Skala ganjil atau genap?

    Skala dengan jumlah pilihan ganjil (misalnya lima) memberi titik tengah netral. Skala genap (misalnya empat atau enam) memaksa responden memilih arah. Tidak ada yang mutlak benar. Skala ganjil cocok bila netral adalah sikap yang sah. Skala genap cocok bila kamu ingin mengurangi kecenderungan memilih jawaban tengah demi aman. Yang penting, konsisten dalam satu instrumen, dan pahami konsekuensinya saat menganalisis.

    Menerjemahkan kuesioner dari bahasa lain

    Menerjemahkan instrumen dari bahasa Inggris tidak cukup dengan mesin penerjemah. Praktik yang baik: terjemahan oleh dua penerjemah independen, penggabungan oleh peneliti, terjemahan balik oleh penerjemah ketiga yang tidak melihat versi asli, lalu perbandingan dengan versi asli, dan uji coba pada responden. Setelah itu, uji ulang validitas dan reliabilitasnya pada sampelmu, karena makna kata bisa bergeser antarbudaya.


    Butuh kuesioner yang disusun dan diuji dengan benar sebelum disebar? Lihat layanan riset pasar dan survei kami.

    Sedang menyusun kuesioner untuk skripsi, tesis, disertasi, atau survei institusi? Tim datalytics.indo membantu dari perumusan konsep dan butir pertanyaan, uji coba dan uji validitas-reliabilitas, sampling, analisis (regresi, PLS-SEM/SEM, analisis jalur, faktor, klaster, dan lainnya), sampai interpretasi. Tersedia juga bimbingan privat. Hubungi kami untuk mendapatkan solusi terbaik.