LOS ANGELES — Sebuah laporan baru menunjukkan bahwa spin, termasuk tanda-tanda berlebihan dan kesalahan matematis, terlihat pada 21% dari 150 uji klinis acak cedera otak traumatis yang diterbitkan dalam jurnal medis terkemuka.
“Hasil ini memprihatinkan,” kata dokter umum Lucas Piason F. Martins, MD, dari Fakultas Kedokteran dan Kesehatan Masyarakat Bahiana Brasil. “Banyak dari uji coba ini telah dimasukkan dalam pedoman klinis dan dikutip secara ekstensif dalam tinjauan sistematis dan meta-analisis, terutama yang berkaitan dengan terapi hipotermia.”
Martins mempresentasikan temuan tersebut pada pertemuan tahunan American Association of Neurological Surgeons 2023.
Mendefinisikan Putaran
Dalam beberapa tahun terakhir, peneliti medis telah berusaha untuk mendefinisikan dan mengidentifikasi putaran dalam literatur medis. Menurut laporan tahun 2017 di PLOS Biology, “spin mengacu pada praktik pelaporan yang mendistorsi interpretasi hasil dan menyesatkan pembaca sehingga hasil dilihat dari sudut pandang yang lebih baik.”
Putaran apa pun bisa berbahaya, kata Martins, karena “berpotensi menyesatkan pembaca dan memengaruhi interpretasi hasil studi, yang pada gilirannya dapat memengaruhi pengambilan keputusan klinis.”
Untuk laporan baru, tinjauan sistematis, Martins dan rekannya memeriksa 150 studi yang diterbitkan di 18 jurnal peringkat teratas termasuk Journal of Neurotrauma (26%), Journal of Neurosurgery (15%), Critical Care Medicine (9%), dan Jurnal Kedokteran New England (8%).
Studi diterbitkan antara tahun 1960 dan 2020. Protokol ulasan sebelumnya diterbitkan di BMJ Open.
Menurut laporan tersebut, sebagian besar dari 32 studi dengan spin (75%) memiliki “fokus pada hasil yang signifikan secara statistik, bukan berdasarkan hasil primer.”
Sebagai contoh, Martins mengatakan kepada Medscape Medical News bahwa abstrak untuk studi tentang perawatan obat untuk memar otak menyoroti hasil sekunder alih-alih temuan utama bahwa obat tersebut tidak berpengaruh. Studi lain tentang perawatan untuk cedera kepala tertutup yang parah, katanya, berfokus pada hasil subkelompok.
Seperti yang dicatat Martins, penelitian berpotensi bermasalah untuk memiliki beberapa hasil, mengukur hasil dengan cara yang berbeda, dan memiliki beberapa titik waktu tanpa hasil utama yang telah ditentukan sebelumnya. “Temuan positif berdasarkan strategi semacam itu berpotensi dapat dijelaskan secara kebetulan saja,” katanya.
Para peneliti juga melaporkan bahwa 65% dari studi dengan spin menyoroti “efek menguntungkan dari pengobatan meskipun hasil statistik tidak signifikan” dan bahwa 9% memiliki analisis statistik yang salah.
Temuan ini sangat penting karena “percobaan yang kami analisis dianggap memiliki kualitas metodologi tertinggi,” kata Martins.
Para peneliti tidak mengidentifikasi studi spesifik yang mereka anggap berputar, dan mereka tidak akan melakukannya, kata Martins. Para penulis memang berencana untuk mengungkapkan jurnal mana yang paling berat tetapi hanya ketika temuan ini diterbitkan.
Apakah penulis penelitian mencoba menyesatkan pembaca? Belum tentu, katanya. Peneliti “mungkin mencari hasil positif untuk mengkonfirmasi keyakinan mereka, meskipun dengan niat baik,” kata Martins, menambahkan bahwa para peneliti menemukan bahwa “penelitian positif cenderung lebih banyak dikutip.”
Mereka juga melaporkan bahwa studi dengan ukuran sampel yang lebih kecil lebih mungkin untuk berputar (P = 0,04).
Pada 21%, persentase studi dengan spin lebih rendah daripada yang ditemukan di beberapa laporan sebelumnya yang menganalisis literatur medis di spesialisasi lain.
Sebuah studi tahun 2019 terhadap 93 studi klinis acak di bidang kardiologi, misalnya, menemukan spin di 57% abstrak dan 67% teks lengkap. Angka yang lebih rendah dalam studi baru ini mungkin karena definisi putarannya yang sangat konservatif, kata Martins.
Metodologi yang Sesuai
Ahli jantung Duke University Medical Center Richard Krasuski, MD, yang ikut menulis studi 2019 menjadi spin dalam studi kardiologi, mengatakan kepada Medscape Medical News bahwa analisis baru mengikuti metodologi yang tepat dan tampaknya valid.
Masuk akal, katanya, bahwa studi yang lebih kecil memiliki lebih banyak putaran: “Jauh lebih sulit untuk menunjukkan signifikansi statistik dalam studi kecil dan titik akhir yang lebih lembut bisa lebih sulit diprediksi. Uji coba netral kecil juga jauh lebih sulit untuk dipublikasikan di jurnal tingkat tinggi. Ini semua meningkatkan kecenderungan untuk memutar hasil sehingga peninjau dan akhirnya pembaca lebih terpikat.”
Mengapa ada begitu banyak putaran dalam penelitian medis? “Sebagai seorang penyelidik, Anda selalu berharap untuk memberikan dampak positif bagi kesehatan dan hasil pasien, jadi ada kecenderungan untuk melihat analisis sekunder untuk menekankan sesuatu yang baik,” katanya. “Ini adalah sifat yang melekat pada sebagian besar dari kita, untuk menemukan sesuatu yang baik yang dapat kita fokuskan. Saya percaya bahwa sebagian besar dari ini tidak disadari dan mungkin dengan niat yang mulia.”
Krasuski mengatakan bahwa dia menyarankan peserta pelatihan untuk melihat metodologi penelitian, bukan hanya bagian abstrak atau pembahasan. “Anda tidak perlu menjadi ahli statistik terlatih untuk mengidentifikasi seberapa cocok temuan tersebut dengan interpretasi penulis,” katanya.
“Selalu mencoba untuk mengidentifikasi apa hasil utama dari studi ini pada saat desain dan apakah peneliti mencapai tujuan mereka. Sebagai peninjau, pengalaman pribadi saya sendiri dalam penelitian berputar membuat saya lebih sadar akan keberadaannya, dan saya biasanya meminta penulis untuk menulis ulang dan mengecilkan pesan mereka jika tidak didukung oleh data.”
Apa berikutnya? Para peneliti ingin mencari spin dalam literatur bedah saraf yang lebih luas, kata Martins, dengan tujuan mengembangkan “strategi praktis untuk menilai spin dan memberikan rekomendasi pragmatis untuk praktik yang baik dalam penelitian klinis.”
Tidak ada dana studi yang dilaporkan. Martins tidak memiliki pengungkapan, dan beberapa penulis penelitian melaporkan pendanaan dari Institut Penelitian Kesehatan Nasional Inggris. Krasuski tidak memiliki pengungkapan.
American Association of Neurological Surgeons 2023. Disajikan 21 April 2023.
Untuk berita Neurologi Medscape lainnya, bergabunglah dengan kami di Facebook dan Twitter
Ikuti Medscape di Facebook, Twitter, Instagram, dan YouTube