Dua Sistem AI Tampak Sebanding dengan Polip Kolorektal Kecil

Dalam perbandingan head-to-head, dua sistem diagnosis berbantuan komputer yang tersedia secara komersial tampak setara secara klinis untuk diagnosis optik polip kolorektal kecil, menurut surat penelitian yang diterbitkan di Gastroenterology.

Dr. Cesare Hassan

Untuk diagnosis optik polip kolorektal kecil, kinerja yang sebanding dari CAD-EYE (Fujifilm Co.) dan GI-Genius (Medtronic) memenuhi pedoman cutoff untuk menerapkan strategi cuti-in-situ dan resect-and-discard yang hemat biaya , tulis Cesare Hassan, MD, PhD, profesor gastroenterologi di Universitas Humanitas dan anggota unit endoskopi di Rumah Sakit Penelitian Klinis Humanitas di Milan, dan rekannya.

“Skrining kolonoskopi efektif dalam mengurangi risiko kanker kolorektal tetapi juga merupakan beban keuangan yang besar,” tulis para penulis. “Strategi baru berdasarkan kecerdasan buatan dapat memungkinkan pengangkatan hanya polip yang dianggap neoplastik, sehingga mengurangi beban pasien untuk menghilangkan polip nonneoplastik yang tidak perlu dan mengurangi biaya untuk histopatologi.”

Beberapa sistem diagnosis berbantuan komputer (CADx) tersedia secara komersial untuk diagnosis optik polip kolorektal, tulis penulis. Namun, setiap sistem kecerdasan buatan (AI) telah dilatih dan divalidasi dengan kumpulan data polip yang berbeda, yang dapat berkontribusi pada variabilitas dan memengaruhi hasil klinis dari strategi berbasis diagnosis optik.

Dr. Hassan dan rekan melakukan percobaan perbandingan prospektif di satu pusat untuk melihat kinerja kehidupan nyata dari dua sistem CADx pada diagnosis optik polip yang lebih kecil dari 5 mm.

Pada kolonoskopi, polip yang sama divisualisasikan oleh ahli endoskopi yang sama pada dua monitor berbeda secara bersamaan dengan keluaran masing-masing dari kedua sistem CADx. Diagnosis manusia sebelum dan sesudah CADx juga dikumpulkan.

Antara Januari 2022 dan Maret 2022, 176 pasien berturut-turut berusia 40 tahun ke atas menjalani kolonoskopi untuk skrining kanker kolorektal, pengawasan polipektomi, atau gejala gastrointestinal. Sekitar 60,8% peserta adalah laki-laki, dan usia rata-rata adalah 60 tahun.

Di antara 543 polip yang terdeteksi dan dihilangkan, 169 (31,3%) adalah adenoma, dan 373 (68,7%) adalah nonadenoma. Dari jumlah tersebut, 325 (59,9%) adalah polip rektosigmoid dengan diameter 5 mm atau kurang dan memenuhi syarat untuk dianalisis dalam penelitian ini. Ini termasuk 44 adenoma (13,5%) dan 281 nonadenoma (86,5%).

Dua sistem CADx dikelompokkan sebagai CADx-A untuk CAD-EYE dan CADx-B untuk GI-Genius. CADx-A memberikan keluaran prediksi untuk semua 325 polip rektosigmoid berukuran 5 mm atau kurang, sedangkan CADx-B tidak dapat memberikan keluaran untuk enam nonadenoma, yang dikeluarkan dari analisis.

Nilai prediktif negatif (NPV) untuk polip rektosigmoid 5 mm atau kurang adalah 97% untuk CADx-A dan 97,7% untuk CADx-B, tulis penulis. American Society for Gastrointestinal Endoscopy merekomendasikan ambang batas untuk diagnosis optik minimal 90%.

Selain itu, sensitivitas adenoma adalah 81,8% untuk CADx-A dan 86,4% untuk CADx-B. Akurasi CADx-A sedikit lebih tinggi, yaitu 93,2%, dibandingkan dengan 91,5% untuk CADx-B.

Berdasarkan prediksi AI saja, 269 dari 319 polip (84,3%) dengan CADx-A dan 260 dari 319 polip (81,5%) dengan CADx-B akan diklasifikasikan sebagai nonneoplastik dan menghindari pengangkatan. Ini sesuai dengan spesifisitas 94,9% untuk CADx-A dan 92,4% untuk CADx-B, yang tidak berbeda secara signifikan, tulis para penulis. Kesesuaian prediksi histologi antara kedua sistem adalah 94,7%.

Berdasarkan panduan US Multi-Society Task Force on Colorectal Cancer (USMSTF) 2020, kesepakatan dengan histopatologi dalam penugasan interval pengawasan adalah 84,7% untuk CADx-A dan 89,2% untuk CADx-B. Berdasarkan pedoman European Society of Gastrointestinal Endoscopy (ESGE) 2020, kesepakatannya adalah 98,3% untuk kedua sistem.

Untuk polip rektosigmoid berukuran 5 mm atau kurang, NPV diagnosis optik tanpa bantuan adalah 97,8% untuk diagnosis dengan keyakinan tinggi, tetapi tidak berbeda secara signifikan dengan NPV CADx-A (96,9%) atau CADx-B (97,6% ). NPV dari diagnosis optik berbantuan CADx dengan kepercayaan tinggi adalah 97,7%, tanpa perbedaan yang signifikan secara statistik dibandingkan dengan interpretasi tanpa bantuan.

Berdasarkan pedoman USMSTF dan ESGE 2020, kesepakatan antara interpretasi tanpa bantuan dan histopatologi dalam penetapan interval pengawasan masing-masing adalah 92,6% dan 98,9%. Ada kesepakatan total antara interpretasi tanpa bantuan dan interpretasi dengan bantuan CADx dalam penugasan interval pengawasan berdasarkan kedua pedoman.

Seperti pada temuan sebelumnya, diagnosis endoskopik tanpa bantuan setara dengan bantuan CADx, baik dalam akurasi teknis maupun hasil klinis. Penulis penelitian mengaitkan kurangnya manfaat tambahan dari CADx dengan kinerja tinggi diagnosis endoskopi tanpa bantuan, dengan 97,8% NPV untuk polip rektosigmoid dan kesesuaian 90% atau lebih besar dalam interval pengawasan postpolypectomy dengan histologi. Selain itu, seorang ahli endoskopi manusia adalah satu-satunya yang mencapai 90% atau lebih persetujuan dalam interval pengawasan postpolypectomy di bawah pedoman AS, terutama karena spesifisitas yang sangat tinggi.

“Ini menegaskan kompleksitas interaksi manusia-mesin yang tidak boleh dipinggirkan dalam kinerja mesin yang berdiri sendiri,” tulis para penulis.

Namun, akurasi tinggi dari ahli endoskopi tanpa bantuan di pusat akademik di Italia tidak mungkin mencerminkan kinerja nyata dalam pengaturan komunitas, tambah mereka. Studi selanjutnya harus fokus pada pusat-pusat non-tersier untuk menunjukkan manfaat tambahan, jika ada, yang disediakan CADx untuk polip kolorektal leave-in-situ.

“Tingkat kesesuaian yang tinggi dalam hasil klinis ditunjukkan ketika secara langsung membandingkan secara in vivo dua sistem CADx yang berbeda,” para penulis menyimpulkan. “Hal ini meyakinkan kepercayaan kami pada standarisasi kinerja yang dapat dicapai dengan penggabungan AI dalam praktik klinis, terlepas dari ketersediaan berbagai sistem.”

Penulis penelitian menyatakan tidak ada sumber pendanaan untuk penelitian ini. Beberapa penulis melaporkan hubungan konsultasi dengan banyak perusahaan, termasuk Fuji dan Medtronic, yang masing-masing membuat sistem CAD-EYE dan GI-Genius.

Artikel ini awalnya muncul di MDedge.com, bagian dari Medscape Professional Network.