Setelah berbulan-bulan melakukan pencarian daring, menelaah literatur akademis, dan berbicara dengan para ahli untuk menyelidiki hubungan industri dengan penelitian ilmiah, reporter bidang kuliner The Examination, Sasha Chavkin, berupaya mengungkap hubungan antara akademisi dan perusahaan dengan cara yang berbeda: dengan mengamatinya secara langsung.
Hal ini dimungkinkan berkat mitra pelaporan di Tow Center for Digital Journalism, Columbia Journalism School, yang membuat visualisasi ribuan baris data yang telah dikumpulkan tim tentang konflik kepentingan.
Grafik jaringan ini menyerupai kumpulan bola yang terhubung, mirip molekul atom raksasa dengan banyak ikatan. Di tengah setiap lingkaran terdapat nama seorang peneliti yang telah menyatakan memiliki hubungan finansial dengan raksasa minuman energi Red Bull. Chavkin sudah mengetahui sebagian besar nama-nama ini melalui peliputannya — kecuali satu.
Jonathan Howland, seorang profesor emeritus di Universitas Boston, telah menulis sebuah komentar untuk jurnal medis terkemuka tentang risiko mencampur alkohol dan minuman energi. Dalam pernyataan konflik kepentingan, Howland mengungkapkan survei mahasiswa yang didanai Red Bull yang tidak terkait dengan penyusunan artikel tersebut.
Chavkin hanya melihat studi yang mengungkapkan pendanaan dari Red Bull atau kelompok industri lainnya. Apa yang terjadi dengan survei yang didanai Red Bull tersebut?
Setelah melakukan panggilan telepon, Chavkin mengetahui bahwa Howland akhirnya tidak pernah menerbitkannya. Meskipun ia seharusnya menjadi peneliti utama dalam kontrak antara Red Bull dan Boston Medical Center senilai lebih dari seratus ribu dolar, Howland menarik diri karena kekhawatirannya bahwa metodologi itu akan menghasilkan hasil yang bias.
Alat analisis data eksplorasi dari Tow Center telah memungkinkan The Examination untuk mengidentifikasi seorang peneliti yang akan menjadi sumber kunci dalam investigasi kami mengenai hubungan keuangan Red Bull dengan penelitian tentang minuman energi.
Hal ini juga meletakkan dasar bagi temuan penting: Studi yang didanai oleh Red Bull atau dilakukan oleh para peneliti yang telah mengungkapkan hubungan keuangan dengan perusahaan tersebut hampir secara bulat sampai pada kesimpulan yang sama: Mengonsumsi minuman energi dan alkohol secara bersamaan tidak lebih berbahaya daripada minum alkohol saja.
Hal ini sangat kontras dengan sebagian besar penelitian independen tentang topik tersebut, yang mencapai kesimpulan sebaliknya.
Berikut cara kami melakukan analisis, langkah demi langkah.
Mengidentifikasi konflik kepentingan
Lembaga Examination bekerja sama dengan Tow Center untuk memetakan hubungan antara organisasi, peneliti, dan studi mereka, menganalisis pengungkapan konflik kepentingan, pernyataan pendanaan, dan afiliasi di seluruh penelitian.
Untuk mengeksplorasi pola-pola ini, kami menggunakan PubMed , sebuah basis data literatur ilmiah terkait kesehatan yang berisi lebih dari 40 juta ringkasan artikel jurnal akademik. Tow Center menggunakan kata kunci yang berbeda untuk mengunduh serangkaian abstrak eksplorasi awal dari PubMed tentang penelitian minuman energi.
Namun, mengekstrak pernyataan setiap penulis dari bagian konflik kepentingan bukanlah hal yang mudah. Tidak ada struktur yang seragam, dan penulis seringkali hanya dicantumkan dengan inisial atau nama belakang.
Untuk mengubah informasi ini menjadi data yang dapat kami analisis, Tow Center menggunakan model bahasa besar (LLM) untuk mengidentifikasi hubungan antara nama penulis dan organisasi. Untuk memverifikasi dan meningkatkan akurasi, kami membandingkan hasil ini dengan hasil proyek sebelumnya oleh The Examination, di mana kami secara manual menandai konflik kepentingan untuk penulis di ratusan artikel di PubMed.
Setelah kami yakin bahwa sistem ini akurat, kami mencari petunjuk pelaporan. Tow Center membuat grafik jaringan, yang memungkinkan para pelapor untuk mengeksplorasi hubungan.
Membangun kumpulan data kami
Dari situ, The Examination memfokuskan perhatian pada area pelaporan khusus kami: studi tentang risiko kesehatan dan perilaku manusia akibat mencampur alkohol dan minuman energi. Kami ingin melihat apakah ada perbedaan kesimpulan antara studi yang terkait dengan industri minuman energi dan studi yang tidak.
Kami memutuskan untuk fokus pada kesimpulan studi karena kesimpulan tersebut memberikan gambaran yang baik untuk meneliti potensi pengaruh industri.
Untuk memastikan kami memiliki gambaran komprehensif tentang semua studi terkait minuman energi dari PubMed, kami mengunduh versi baru dari dataset minuman energi. Kali ini, kami mengumpulkan ringkasan artikel dari PubMed yang menyebutkan “minuman energi” atau “minuman energi” dalam judul dan abstrak serta dikategorikan di bawah tag “minuman energi” (label yang digunakan oleh perpustakaan medis untuk mengelompokkan artikel berdasarkan subjek spesifiknya).
Ketika kami menyadari beberapa ringkasan tidak mencantumkan pernyataan konflik kepentingan, kami membuat skrip untuk memeriksa apakah pengungkapan tersebut disertakan dalam artikel lengkap yang tersedia di PubMed Central. Kami mengambil informasi yang hilang menggunakan daftar lebih dari 30 frasa yang umum digunakan dalam pernyataan konflik kepentingan atau pendanaan.
Dataset kami berisi lebih dari 2.300 publikasi tentang minuman energi.
Dari sini, kami mempersempit studi kami ke studi yang berfokus pada alkohol yang dicampur dengan minuman energi, berdasarkan fokus pelaporan Chavkin. Kami mencari frasa “alkohol yang dicampur dengan minuman energi,” singkatan “AMED,” dan kombinasi kata dan frasa yang umum digunakan oleh para peneliti.
Kami mengidentifikasi lebih dari 150 publikasi tentang alkohol yang dicampur dengan minuman energi. Kami memfokuskan analisis kami pada artikel jurnal, sehingga kami menghapus publikasi seperti editorial, surat, dan komentar, serta publikasi yang tidak membahas risiko kesehatan atau perilaku.
Kumpulan data akhir untuk analisis tersebut terdiri dari lebih dari 100 artikel jurnal.
Mengidentifikasi keterkaitan keuangan dan menilai kesimpulan yang menguntungkan perusahaan
Tugas selanjutnya adalah mengidentifikasi studi mana yang memiliki kaitan dengan industri minuman energi.
Dengan menggunakan laporan pasar, The Examination membuat daftar perusahaan minuman energi, merek produk, dan kelompok industri. Berdasarkan daftar tersebut dan organisasi yang disebutkan dalam pernyataan afiliasi, pendanaan, hibah, dan konflik kepentingan, kami mengelompokkan publikasi tentang alkohol yang dicampur dengan minuman energi menjadi dua kelompok — yang memiliki hubungan dengan industri dan yang tidak.
Kami mengklasifikasikan sebuah studi sebagai “terkait industri” jika studi tersebut menyebutkan hibah atau pendanaan lain dari perusahaan minuman energi atau kelompok industri terkait, atau jika salah satu peneliti menyatakan adanya hubungan keuangan dengan industri tersebut, seperti konsultasi dan hibah penelitian.
Kami secara acak memeriksa kategorisasi tersebut secara manual untuk memastikan keakuratannya.
Semua studi yang “terkait industri” dari dataset kami memiliki hubungan finansial dengan Red Bull.
Kemudian, kami menetapkan kriteria untuk menilai artikel-artikel tersebut. Jika kesimpulan sebuah artikel menyatakan bahwa mencampur alkohol dan minuman energi tidak meningkatkan risiko kesehatan atau perilaku , kami memberi label artikel tersebut sebagai artikel yang menguntungkan. Jika kesimpulannya sebaliknya, kami memberi label artikel tersebut sebagai artikel yang tidak menguntungkan. Dan jika kesimpulannya tidak jelas atau beragam, kami memberi label artikel tersebut sebagai artikel yang tidak diketahui.
Dua orang dari tim data The Examination secara independen membaca abstrak, kesimpulan, dan, jika tersedia, bagian hasil dan diskusi dari setiap studi. Peninjau ketiga memeriksa perbedaan antara kedua tinjauan tersebut. Para ahli meninjau metodologi kami, termasuk Lisa Bero, anggota Komite Penasihat Ilmiah The Examination , yang juga memberikan saran tentang penilaian untuk beberapa kasus yang paling menantang.
Dari studi-studi yang menerima pendanaan dari Red Bull atau dilakukan oleh peneliti yang mengungkapkan konflik kepentingan finansial dengan perusahaan tersebut, 95% menyimpulkan bahwa mencampur alkohol dengan minuman energi tidak meningkatkan risiko tersebut. Sekitar 80% dari studi independen mencapai kesimpulan yang berlawanan, demikian temuan kami.
Para eksekutif Red Bull tidak menjawab pertanyaan tentang temuan kami. Sebaliknya, Karlheinz Niederreiter, Kepala Global Bidang Sains, Regulasi, dan Urusan Pemerintahan di Red Bull, memberikan pernyataan singkat: “Otoritas kesehatan di seluruh dunia telah menyimpulkan bahwa Minuman Energi Red Bull aman untuk dikonsumsi.”
Keterbatasan
Analisis konflik kepentingan kami didasarkan pada pengungkapan positif, ketika pendanaan, hibah, pernyataan konflik kepentingan, dan variannya dilaporkan secara proaktif dalam artikel-artikel dalam kumpulan data kami.
Tidak semua publikasi menyertakan pengungkapan konflik kepentingan. Terkadang kolom tersebut hilang atau kosong; di lain waktu, penulis просто tidak melaporkan adanya hubungan tersebut.
Periode pengungkapan juga dapat bervariasi antar jurnal. Meskipun banyak jurnal telah mencontoh kebijakan berdasarkan pedoman yang dikembangkan oleh Komite Internasional Editor Jurnal Medis , standar ini sulit untuk ditegakkan. Jurnal sering memperlakukan pengungkapan sebagai sukarela, dan tidak ada definisi standar tentang apa yang dianggap sebagai konflik . Pada akhirnya, tidak ada cara sistematis untuk menentukan kapan konflik tidak diungkapkan.
Terakhir, analisis ini didasarkan pada entri yang ditemukan di PubMed karena merupakan basis data penelitian biomedis terkemuka, tetapi artikel tentang risiko minuman energi mungkin ada di platform lain.
Comments are closed.