Ukuran sampel sering dijadikan patokan cepat: makin besar jumlah responden, makin dipercaya hasil survei. Dalam praktik survei, patokan itu tidak memadai. Ukuran sampel hanya satu bagian dari rancangan. Keterwakilan bergantung pada siapa populasi yang dituju, dari mana daftar responden diambil, bagaimana sampel dipilih, berapa yang menjawab, apakah data diberi bobot, bagaimana pertanyaan disusun, dan bagaimana hasil dianalisis. Panduan survei Digital Engagement Research Working Group menempatkan galat sampel sebagai salah satu komponen dari total survey error, bersama sumber galat lain seperti cakupan, nonresponse, pengukuran, dan pengolahan data (Blank, 2015).
Apa yang dimaksud ukuran sampel dan keterwakilan?
Populasi adalah kelompok yang ingin digambarkan oleh survei. Sampel adalah bagian dari populasi yang benar-benar diamati atau diwawancarai. Ketika seluruh anggota populasi diperiksa, kegiatan itu disebut sensus. Pembahasan penentuan populasi dan sampel dalam penelitian kuantitatif dan kualitatif menegaskan bahwa keduanya perlu dirumuskan sebelum data dikumpulkan (Subhaktiyasa, 2024).
Keterwakilan bukan sifat yang otomatis melekat pada jumlah besar. Sampel disebut representatif bila komposisi dan karakteristik relevannya mendekati populasi sasaran, atau bila perbedaan itu dapat dikoreksi dan dijelaskan. Karena tidak ada satu ukuran sampel yang cocok untuk semua tujuan, panduan WSU menegaskan tidak ada pendekatan one size fits all. Untuk kelompok kecil, sensus justru bisa lebih tepat, sedangkan sampel dipakai ketika sensus tidak praktis (WSU ACE).
Panduan WHO untuk survei STEPS memperlihatkan bahwa penyiapan sampel adalah rangkaian pekerjaan: menetapkan populasi target, menentukan ukuran sampel, mengidentifikasi kerangka dan desain sampel, memilih peserta, lalu mendokumentasikan proses pemilihan (WHO, Section 2). Pertanyaan yang tepat bukan hanya berapa jumlah responden, tetapi siapa yang punya peluang masuk dan siapa yang tidak.
Mengapa sampel besar tidak otomatis representatif
Sampel besar dapat memperkecil galat sampling bila pemilihannya acak dan kerangkanya lengkap. Namun, memperbesar jumlah responden tidak menghapus bias yang berasal dari kerangka sampel yang tidak mencakup sebagian populasi, dari kelompok tertentu yang lebih sulit dihubungi, dari pertanyaan yang membingungkan, atau dari proses pengolahan data. Panduan Blank membahas sampel, ukuran sampel, galat sampel, dan total survey error secara terpisah justru karena kualitas survei tidak ditentukan oleh satu angka saja (Blank, 2015).
Contoh ilustratif: bayangkan dua survei tentang kebiasaan membaca berita. Survei A memilih 1.000 responden secara acak dari daftar populasi yang lengkap dan memperoleh tingkat respons yang dilaporkan. Survei B mengumpulkan 5.000 jawaban dari tautan yang dibagikan terbuka di media sosial. Jumlah Survei B lebih besar, tetapi tanpa kerangka sampel yang jelas, kelompok yang menjawab bisa sangat berbeda dari populasi. Angka 5.000 tidak menjamin keterwakilan, dan galat samplingnya tidak dapat ditafsirkan dengan cara yang sama seperti sampel acak. Contoh ini hanya ilustrasi, bukan hasil survei nyata.
Komponen yang perlu diperiksa dalam survei
1. Populasi target dan kerangka sampel
Tanyakan siapa populasi yang ingin digambarkan: seluruh penduduk dewasa, pelanggan suatu layanan, atau kelompok tertentu. Lalu periksa kerangka sampel, yaitu daftar, peta, atau sumber lain yang menjadi dasar pemilihan responden. Kerangka yang tidak mencakup pekerja migran, penduduk tanpa alamat tetap, atau pengguna tanpa akses internet akan membatasi kesimpulan. WHO menempatkan identifikasi kerangka dan desain sampel sebagai langkah tersendiri karena kesalahan di tahap ini tidak dapat diperbaiki hanya dengan menambah responden (WHO, Section 2).
2. Desain pemilihan sampel
Dalam kerangka metodologi survei, sampel probabilitas memungkinkan estimasi galat sampling karena peluang pemilihan anggota populasi dapat diketahui. Sampel nonprobabilitas, seperti polling sukarela atau survei berbasis tautan terbuka, dapat berguna untuk eksplorasi, tetapi dasar generalisasinya berbeda. Panduan Blank menempatkan sampling dan desain sebagai bagian penting dari kualitas survei, bukan sebagai lampiran teknis yang bisa diabaikan (Blank, 2015).
3. Ukuran sampel dan galat sampling
Pada desain acak sederhana, presisi umumnya meningkat seiring bertambahnya ukuran sampel, tetapi hubungannya tidak linier. Menambah responden dapat mempersempit rentang ketidakpastian, asalkan pemilihan dan pengukuran dilakukan dengan baik. Karena itu, laporan survei perlu menyebut ukuran sampel, metode pemilihan, dan margin of error bila relevan. Namun, margin of error bukan total kesalahan. Ia biasanya hanya menggambarkan ketidakpastian sampling, bukan bias akibat pertanyaan, nonresponse, atau kerangka yang tidak lengkap (Blank, 2015).
Untuk populasi atau program yang kecil, sensus bisa lebih akurat daripada sampel. WSU mencatat bahwa pilihan antara sensus dan sampel bergantung pada ukuran kelompok, tujuan penilaian, dan ketersediaan sumber daya (WSU ACE).
4. Tingkat respons dan nonresponse
Tingkat respons perlu dilihat karena orang yang tidak menjawab dapat berbeda dari orang yang menjawab. Survei dengan banyak nonresponse berisiko memiliki komposisi responden yang tidak seimbang, meskipun jumlah akhirnya terlihat besar. Panduan Blank memasukkan tingkat respons sebagai bagian dari penilaian teknis survei (Blank, 2015). Tingkat respons yang tinggi tetap tidak menjamin bebas bias bila pertanyaan atau kerangka sampelnya bermasalah.
5. Pembobotan
Pembobotan menyesuaikan kontribusi setiap responden agar komposisi sampel lebih mendekati populasi acuan. Misalnya, kelompok yang kurang terwakili dapat diberi bobot lebih besar. Namun, pembobotan bergantung pada variabel yang diketahui dan kualitas data acuan. Ia dapat membantu mengoreksi ketidakseimbangan, tetapi tidak otomatis menghapus bias yang tidak diukur. Panduan Blank membahas bobot sebagai langkah terpisah dalam pengolahan survei (Blank, 2015).
6. Kuesioner dan cara administrasi
Keterwakilan bukan hanya soal siapa yang menjawab, tetapi juga apa yang ditanyakan dan bagaimana pertanyaan disampaikan. Panduan Blank secara khusus membahas pilihan kata, urutan pertanyaan, instruksi untuk responden, pretesting, dan administrasi survei (Blank, 2015). Pertanyaan yang memuat istilah teknis, memaksa satu jawaban, atau mengubah urutan dapat menghasilkan jawaban yang berbeda dari maksud peneliti. Cara administrasi, misalnya wawancara tatap muka, telepon, atau kuesioner mandiri, juga dapat memengaruhi siapa yang mau dan mampu menjawab.
7. Analisis dan pelaporan metode
Laporan survei yang baik menjelaskan populasi, kerangka sampel, desain, ukuran sampel, tingkat respons, pembobotan, dan batas analisis. Panduan Blank menempatkan pelaporan metodologi sebagai bagian dari praktik survei yang dapat diperiksa (Blank, 2015). Tanpa informasi ini, pembaca sulit menilai apakah angka 45 persen, misalnya, berasal dari seluruh responden, dari yang menjawab pertanyaan tertentu, atau dari subkelompok kecil.
Contoh membaca angka survei
Misalnya sebuah rilis menyebut 45 persen responden setuju dengan margin of error sekitar 3 poin. Angka itu bukan jaminan bahwa hasil sebenarnya tepat 45 persen. Margin of error memberi rentang ketidakpastian sampling; ia tidak mencakup bias akibat kerangka sampel, nonresponse, atau pertanyaan yang membingungkan. Jika survei berasal dari sampel nonprobabilitas, margin of error semacam itu tidak dapat ditafsirkan dengan cara yang sama.
Perhatikan juga subkelompok. Persentase untuk seluruh sampel dapat memiliki ketidakpastian yang lebih kecil daripada persentase untuk kelompok kecil di dalamnya. Jika laporan menyebut hasil untuk responden berusia 18 sampai 24 tahun, tetapi jumlah mereka hanya sebagian kecil dari sampel, tafsirannya perlu lebih hati-hati. Selain itu, pastikan denominator persentase: 45 persen dari seluruh responden berbeda maknanya dari 45 persen dari mereka yang menjawab satu pertanyaan tertentu.
Kesalahan umum dan checklist pembaca
- Menganggap sampel besar pasti representatif. Jumlah besar tidak menghapus bias cakupan, nonresponse, atau pertanyaan.
- Menyamakan margin of error dengan total kesalahan. Margin of error biasanya hanya soal galat sampling.
- Menganggap tingkat respons tinggi berarti survei bebas bias. Kualitas kerangka sampel dan kuesioner tetap perlu diperiksa.
- Mengabaikan siapa yang tidak masuk sampel. Mereka yang tidak tercakup atau tidak menjawab dapat mengubah kesimpulan.
- Membandingkan angka survei tanpa memeriksa definisi, periode, populasi, dan denominator yang sama.
Untuk menilai sebuah survei, mulai dari pertanyaan berikut: siapa populasi targetnya, dari mana kerangka sampelnya, bagaimana responden dipilih, berapa ukuran sampel dan tingkat responsnya, apakah ada pembobotan, bagaimana pertanyaan dirumuskan, dan apakah metode dilaporkan memadai. Untuk menelusuri sumber dan konteks survei, Anda dapat memakai Checklist Pemeriksaan Sumber. Untuk memahami angka dan indikator secara lebih luas, lihat hub Membaca Data.
Ukuran sampel tetap penting, tetapi pertanyaan pertama bukan sekadar berapa jumlah responden. Pertanyaan yang lebih tepat adalah apakah sampel ini dipilih dari populasi yang jelas, dengan cara yang dapat dijelaskan, dan apakah angka yang dilaporkan menyertakan batas ketidakpastian serta konteks metodologisnya. Tanpa itu, jumlah responden yang besar hanya memberi rasa presisi, bukan jaminan keterwakilan.
FAQ
Apakah sampel 400 responden selalu cukup?
Tidak ada angka ajaib yang berlaku untuk semua survei. Kebutuhan ukuran sampel bergantung pada populasi, desain pemilihan, jumlah subkelompok yang ingin dianalisis, dan tingkat ketidakpastian yang dapat diterima. WSU menegaskan tidak ada pendekatan one size fits all dalam memilih antara sensus dan sampel.
Apa bedanya margin of error dan bias?
Margin of error biasanya menggambarkan ketidakpastian akibat sampling. Bias berasal dari sumber sistematis, misalnya kerangka sampel yang tidak lengkap, nonresponse, atau pertanyaan yang membingungkan. Menambah jumlah responden dapat memperkecil galat sampling, tetapi tidak otomatis menghapus bias.
Apakah survei online selalu tidak valid?
Tidak selalu. Penilaiannya bergantung pada kerangka sampel dan tujuan generalisasi. Survei online dari panel yang dirancang dengan peluang pemilihan tertentu berbeda dari polling sukarela yang terbuka bagi siapa saja. Survei nonprobabilitas dapat berguna untuk eksplorasi, tetapi kesimpulannya tidak dapat digeneralisasi dengan cara yang sama seperti sampel probabilitas.
Diskusi pembaca