Bagaimana Pelaksana Asosiasi Dapat Menjadi Konsumen Riset yang Lebih Bertanggung Jawab

Eksekutif asosiasi diminta untuk berbuat lebih banyak dengan penelitian akhir-akhir ini, tetapi ada godaan untuk berperan sebagai ahli dalam hal menganalisis data tentang audiens atau industri Anda.

Sebuah kertas putih baru membuat kasus untuk menahan godaan: Caveat Emptor: Menjadi Konsumen Riset‌ yang Bertanggung Jawab [PDF], ditulis oleh Kepala Strategis Spark Consulting Elizabeth Weaver Engel dan konsultan Polly Karpowicz. Dalam sebuah wawancara, Engel dan Karpowicz menjelaskan bahwa tantangan konsumsi data yang bertanggung jawab tersebar luas.

“Sebagian besar dari kita tidak memiliki latar belakang pelatihan penelitian formal apa pun,” kata Engel. Ini sebagian, katanya, karena kepemimpinan asosiasi pada umumnya bukanlah bidang yang dilatih orang. “Tidak ada yang bertanya kepada anak berusia 5 tahun, ‘Apa yang kamu inginkan ketika kamu besar nanti?’ dan mereka berkata ‘Saya ingin menjadi eksekutif asosiasi,’ kan?”

Dengan mempertimbangkan hal tersebut, buku putih membahas sejumlah istilah dasar yang biasa digunakan dalam data, seperti sampel, variabel, keandalan, margin kesalahan, dan bias. Bagian dari tantangannya, kata Karpowicz, adalah bahwa Anda tidak ingin mengambil jalan pintas dalam hal penelitian.

“Kamu tidak bisa melompat. Anda harus mengambil informasi yang masuk—apakah itu data yang ada atau yang sedang Anda kumpulkan—dan memahami artinya,” katanya. “Dan di situlah banyak pendidikan dapat terjadi dalam ruang kita di antara semua asosiasi profesional.”

Memahami Kekurangan dan Kekeliruan

Seringkali, penelitian yang dilakukan oleh asosiasi dapat menimbulkan sejumlah masalah yang dapat mempengaruhi hasil, baik dalam hal penyelesaian maupun pelaksanaan penelitian. Berikut adalah beberapa di antaranya, seperti yang disorot oleh kertas putih:

• Persepsi bahwa penelitian sama dengan survei, ketika itu sering menjadi salah satu aspek penelitian.
• Kurangnya jawaban “tidak ada tanggapan” dalam penelitian kuantitatif, yang dapat menghambat penyelesaian survei atau data miring.
• Efek Hawthorne, mengacu pada jawaban yang diberikan dengan sengaja untuk menyenangkan peneliti — masalah utama dalam penelitian kualitatif.
• Tidak memperhitungkan bias yang berbeda yang dapat diperkenalkan selama proses penelitian, seperti penyimpangan dalam metodologi atau sampel yang digunakan.
• Kecenderungan untuk menarik dari sumber sekunder berkualitas rendah, dengan pemeriksaan yang buruk, yang dapat menimbulkan masalah kualitas dan keandalan untuk temuan yang ingin Anda soroti.

Mengambil Pendekatan Bertanggung Jawab

Salah satu hal utama yang dibahas dalam buku putih ini adalah tanggung jawab yang dimiliki asosiasi dalam menerima dan menggunakan penelitian. Banyak dari ini, Engel dan Karpowicz mencatat, bermuara pada transparansi dan integritas selama proses berlangsung.

“Sebelum Anda memulai penelitian apa pun,” kata Karpowicz, “Anda benar-benar harus memiliki rencana untuk beberapa hal, termasuk bagaimana Anda ingin mengomunikasikan hasilnya,” serta strategi pengelolaan data setelah fakta.

Masalah yang mungkin dihadapi oleh asosiasi adalah kecenderungan alami untuk ingin melunakkan pukulan temuan negatif—yang terdengar seperti ide bagus untuk menyelamatkan muka, tetapi menimbulkan bias, kata Engel.

“Jika kami mengajukan pertanyaan wawancara kepada orang-orang, dan kami mendapatkan banyak orang yang kesal tentang sesuatu, atau yang memiliki keluhan besar dengan asosiasi, ada godaan untuk memasang wajah cerah pada berbagai hal, dan menyembunyikan informasi itu,” katanya. .

Di antara strategi untuk membantu mengelola kekhawatiran tentang terlalu dekat dengan penelitian: Bawalah pihak ketiga yang dapat melakukan penelitian untuk Anda, dan implementasikan proses yang mendorong pendekatan yang lebih objektif, mencegah penambahan bias jika memungkinkan.

Memahami, Bukan Keahlian

Engel dan Karpowicz menjelaskan dalam laporan setebal 51 halaman itu bahwa tujuannya bukan untuk menjadikan Anda seorang ahli, tetapi untuk membantu Anda memperoleh pemahaman yang lebih luas tentang cara bekerja dengan penelitian secara lebih efisien dan efektif. “Apakah itu sesuatu yang Anda gunakan secara eksternal, dalam pekerjaan Anda, atau Anda entah bagaimana terlibat dalam penelitian yang dilakukan asosiasi Anda,” kata Karpowicz, penting untuk memiliki pemahaman dasar tentang bagaimana proses penelitian bekerja.

Buku putih menampilkan studi kasus dari asosiasi seperti American Association of Colleges of Pharmacy dan Association of American Medical Colleges, menyoroti bagaimana setiap kelompok melakukan pendekatan terhadap proyek penelitian tertentu—apakah tujuannya adalah untuk memberikan informasi yang lebih baik kepada publik, meningkatkan pengalaman anggota, atau optimalkan strategi DEI asosiasi.

Meskipun peningkatan keterampilan penelitian tidak akan membuat Anda sempurna, mereka dapat membekali Anda dengan lebih baik untuk sebuah proses yang idealnya akan membantu Anda menghasilkan keputusan yang lebih baik.

“Alasan Anda ingin mengembangkan keterampilan dalam hal ini adalah karena, meskipun penelitian yang baik tidak selalu menjamin bahwa Anda akan membuat keputusan yang baik, itu pasti membantu,” kata Engel. “Dan penelitian yang buruk hampir selalu menjamin keputusan yang buruk. Jadi, Anda ingin mengembangkan keterampilan Anda.”

(Chainarong Prasertthai/iStock/Getty Images Plus)