Sebagai warga yang sedang berdomisili di luar NKRI, saya lebih banyak menerima asupan informasi dari media sosial dan portal berita daring (online). Dimulai dari tiga bulan yang lalu, berita tentang pemilihan presiden (pilpres) 2014 makin nyaring terdengar. Nyaringnya berita ini cukup membuat sakit telinga karena disertai dengan pertarungan yang berdarah-darah antar pendukung kedua capres. Satu berita positif di suatu portal berita, menjadi berita negatif di portal berita yang lain, dan begitu juga sebaliknya. Selain itu, fitnah dan berita menyudutkan yang berasal dari penulis anonim tanpa urat malu bermunculan di mana-mana.

Tadinya saya mengira bahwa pertarungan berdarah ini akan berakhir seiring selesainya pencoblosan suara di Indonesia. Akan tetapi, perkiraan saya salah, pertarungan kembali berlanjut dengan pertarungan adu kuat hitung cepat (quick count). Pertarungan berlanjut karena kesimpulan dari beberapa hitung cepat saling bertolak belakang. Pada episode ini, kita masih melihat kritikan berbalas kritikan di media sosial dan portal berita daring.

Tulisan ini ditujukan tidak untuk mengunggulkan atau membantah salah satu hasil hitung cepat, baik yang selaras ataupun yang berbeda dengan pilihan saya pribadi. Tetapi, tulisan ini ditujukan untuk menyelaraskan pemahaman tentang hasil hitung cepat. Selain itu, tulisan ini juga tergerak karena adanya praktek quick count yang bisa jadi kurang tepat.

Cara membaca hasil hitung cepat (quick count)

Di berbagai media, hasil hitung cepat setidaknya melaporkan dua variable, yakni persentase perolehan suara dan timber galat (margin of error). Sering kali, jumlah sampel juga disertakan sebagai alasan penguat kredibelitas hasil quick count.

Jumlah sampel sangat mempengaruhi keakuratan survei. Sehingga, para peneliti mencoba menggunakan jumlah sampel yang cukup agar mendapatkan bukti yang mendukung kesimpulan yang diambil. Sebelum melakukan survei, peneliti quick count menentukan confidence level α (tingkat keyakinan) dan mengestimasi margin of error ME. Untuk mendapatkan margin of error (terancang) ME, standard error (simpangan baku) SEx¯ dapat dihitung melalui Persamaan (1) [1]:



dengan p adalah persentase perolehan suara calon 1 (atau 2, sama saja), n adalah jumlah TPS yang disampel (disurvei).

Bagi yang memahami teori probabilitas, Persamaan (1) dapat diturunkan dari central limit theorem. Kita bisa anggap setiap TPS melambangkan angka random yang mengikuti distribusi binomial karena pilihannya hanya calon 1 dan calon 2. Karena populasinya sangat besar, yakni sebesar 479.183 TPS, maka gabungan TPS ini bisa dianggap terdistribusi normal. Tetapi tetap dengan syarat, TPS harus bersifat variabel acak independen dan identik (independent identically distributed). Selain itu, statistik yang dikumpulkan untuk tiap TPS adalah harus rata-rata sampel (sample mean). Untuk memenuhi syarat ini, para lembaga survei biasa menggunakan multi-stage random sampling.

Kemudian margin of error dapat dihitung tergantung dengan tingkat keyakinan yang digunakan:

confidence level α=68.2%, maka ME=±SEx¯
confidence level α=95.4%, maka ME=±2SEx¯
confidence level α=99.8%, maka ME=±3SEx¯

Pemahaman ini, tentu saja berasal dari pemahaman confidence interval dari distribusi normal. Ini saya tampilkan bagan distribusi normal [2]:



Setelah data quick count terkumpul, peneliti quick count diharuskan menghitung ulang margin of error baik untuk calon 1 dan calon 2. karena dianggap terdistribusi normal, standard error dihitung dengan Persamaan (2)-(3), bukan dengan Persamaan (1).



dengan s adalah sample standard deviation, xi persentase perolehan suara calon 1 (atau 2), dan x¯ adalah rata-rata persentase perolehan suara calon 1 (atau 2).

Oke, setelah cuap-cuap tentang rumus-rumus nggak jelas, mari kita kita pahami hasil quick count pilpres 2014. Tabel 1 menunjukkan hasil quick count yang dikumpulkan dari berbagai sumber.

Tabel 1. Hasil quick count dari beberapa lembaga survei



* Margin error ME yang dilaporkan lembaga survei (seharusnya dihitung dengan Persamaan (2)-(3))
# Margin error ME yang dihitung berdasarkan Persamaan (1)
^ Standar error SEx¯ yang dihitung berdasarkan Persamaan (1)

Patut diduga, lembaga-lembaga survei tidak melaporkan margin of error ME secara benar. Kalau kita perhatikan pada Tabel 1, margin error yang dilaporkan lebih mirip standard error terancang SEx¯ daripada margin of error terancang. Kalau ini benar, maka tingkat keyakinan yang digunakan seharusnya adalah α=68.2% ketika ME=SEx¯.

Sekarang kita asumsikan, lembaga-lembaga survei melaporkan margin of error ME secara benar. Maka cara membaca hasil quick yang benar adalah sebagai berikut. Kita ambil contoh hasil quick count dari SMRC yang menggunakan tingkat keyakinan 95%. Penjabarannya dengan bantuan confidence interval adalah sebagai berikut:

Dengan kemungkinan 95%, maka persentase perolehan suara calon 1 adalah antara 46,40%-47,64%, sedangkan persentase perolehan suara calon 2 adalah antara 52,36%-53,60%.
Masih ada kemungkinan 5% bahwa persentase perolehan suara calon 1 bukan di antara 46,40%-47,64% dan persentase perolehan suara calon 2 bukan di antara 52,36%-53,6%.
Dengan kata lain, ada kemungkinan 2,5% persentase perolehan suara calon 1 ada di bawah 46,40% dan ada kemungkinan 2,5% persentase perolehan suara calon 1 di atas 47,64%.
Begitu juga sebaliknya ada kemungkinan 2,5% persentase perolehan suara calon 2 ada di bawah 52,36% dan ada kemungkinan 2,5% persentase perolehan suara calon 1 di atas 53,60%.
Jika kita berandai-andai secara santai untuk 100 kali pilpres dan menghasilkan angka yang sama, maka 95 kali pilpres akan mengikuti hasil poin (a), sedangkan pada 5 pilpres akan menghasilkan hasil yang berbeda.

Seperti kita lihat di atas, survei tidak memberikan kesimpulan yang pasti. Sehingga, cukup berlebihan jika ada peneliti survei yang ngotot bahwa kesimpulan surveinya pasti benar. Oleh karena itu, hasil quick count tidak dapat digunakan untuk menunjuk siapa pemenang pilpres 2014 sesungguhnya.

Kita tidak bisa memastikan hasil quick count mana yang benar. Hal ini dikarenakan hasilnya yang bertolak belakang. Mari kita bandingkan hasil quick count Puskaptis dan SMRC yang bertolak belakang walaupun sama-sama menggunakan tingkat keyakinan 95%. Menurut hasil Puskaptis, dengan kemungkinan 95%, calon nomor 1 mendapatkan persentase perolehan suara antara 51,05%-53,05%. Sementara itu, menurut hasil SMRC, dengan kemungkinan 95%, calon nomor 1 mendapatkan persentase perolehan suara antara 46,40%-47,64%. Tentu saja, pembaca bisa mengatakan bahwa perbedaan hasil survei ini karena kedua lemabaga survei ini mendukung calon yang berbeda.

Akan tetapi, kesimpulan serupa juga kita dapatkan untuk lembaga-lembaga survei yang mendukung calon yang sama. Mari kita ambil CSIS dan SMRC. Menurut CSIS dengan kemungkinan 95%, calon nomor 1 mendapatkan persentase perolehan suara antara 47,90%-49,90%. Sementara itu, menurut hasil SMRC, dengan kemungkinan 95%, calon nomor 1 mendapatkan persentase perolehan suara antara 46,40%-47,64%. Silahkan pembaca perhatikan, tidak ada irisan antara kedua interval ini. Padahal, kedua lembaga sama-sama mengklaim dengan kemungkinan 95%. Kalau demikian, kita kemanakan jumlah total probabilitas yang tidak mungkin lebih dari 1? Keanehan ini juga masih valid walaupun kita menganggap para lembaga survei melaporkan margin of error dengan data standard of error. Silahkan pembaca hitung dengan tingkat kepercayaan 68.2%.

Kapan hasil hitung cepat meleset

Hasil yang bertolak belakang ini menguatkan bahwa hasil quick count tidak bisa dipakai sebagai sandaran yang pasti. Lalu, mungkin kita bertanya mengapa hasil yang bertolak belakang ini bisa terjadi? Para ahli sudah mengungkapkan alasannya sebagai berikut [13]-[14]:

pelaku tidak memahami metode sampling dengan baik sehingga sampel tidak representasif terhadap populasi
pelaku paham metodologi tapi pelaksanaan teknisnya berantakan.
pelaku tidak memahami metodologi. Lebih parah lagi, pelaku tidak turun ke lapaghan.
pelaku memahami metodologi dan teknis pelaksanaan tapi hasil yang muncul di lapangan diubah.

Katakanlah, bahwa metodologi dan praktek teknis di lapangan sudah benar dan tidak ada kecurangan lembaga survei mengubah hasil di lapangan. Pada keadaan ini, tetap saja keakuratan hasil quick count akan lebih rendah dari yang didapat dengan persamaan (1)-(3). Hal ini dikarenakan syarat variabel acak independen dan identik (independent identically distributed) sulit terpenuhi. Para lembaga survei boleh mengatakan bahwa mereka sudah menggunakan metode multi-stage random sampling. Akan tetapi, tetap syarat ini sulit terpenuhi.

TPS bisa tidak bersifat variabel acak independen. Misalnya hasil suara perolehan (exit poll) TPS luar negeri dapat mempengaruhi TPS dalam negeri. Selain itu, masing-masing TPS memiliki jumlah pemilih yang berbeda-beda dan kecenderungan pemilih di satu TPS bisa berbeda jauh dengan kecenderungan pemilih di TPS lain. Hal ini menyebabkan TPS tidak bersifat variabel acak identik. ketidak-identik-an inilah yang menyebabkan margin of error bertambah besar. Oleh karena itu, hasil quick count yang berbeda adalah lumrah terjadi.

Kejadian menarik, klaim kemenangan diumumkan ketika 81,3% data terkumpul

Ada kejadian yang menarik di perhelatan pilpres 2014. Ada sebuah lembaga yang mengumumkan klaim kemenangan walaupun data quick count baru terkumpul 81,3% [15]. Alasan lembaga ini, persentase perolehan suara sudah stabil dan tidak ada perubahan yang berarti. Mari kita hitung confidence intervalnya dengan tingkat keyakinan 95%, margin error 0,68%, dan jumlah sampel 3252 (81,3%). Maka dengan probabilitas 95%, calon 1 mendapat persentase perolehan suara 46,52%-47,88%, sedangkan calon 2 mendapat persentase perolehan suara 52,12%-53,48%. Dari hasil ini, persentase perolehan suara kedua calon terpaut cukup signifikan. Sehingga, wajar kalau klaim kemenangan dibuat.

Akan tetapi, klaim kemenangan ini berpotensi ditunggangi sebuah kealpaan yang sangat halus. Lebih jelasnya, quick count ini tidak lagi sebuah multi-stage random sampling. Dari 100% TPS yang dipilih secara acak terkluster, baru dipakai 81,3%. Padahal, pemilihan 81,3% data didasarkan bukan atas randomness, akan tetapi didasarkan dengan waktu sampainya data. Bisa jadi, 81,3% ini lebih mewakili data perkotaan yang lebih memiliki fasilitas komunikasi yang lebih bagus dibanding daerah pedesaan yang lebih terbatas.

Dari uraian di atas, kami mengajak pembaca untuk lebih bijak dan kritis terhadap hasil quick count. Selain itu, kami juga telah mengetengahkan satu analisa awal tentang statistik quick count pilpres 2014. Ini bisa jadi bahan awal penelitian yang lebih serius baik di tingkat perguruan tinggi dan lembaga penelitian lainnya.

Sumber :
http://staff.blog.ui.ac.id/komarudin...-pilpres-2014/