ChatGPT Menjawab Pertanyaan Pasien Lebih Baik Daripada Dokter: Belajar

AI mungkin tidak menggantikan dokter Anda dalam waktu dekat, tetapi mungkin akan menjawab email mereka. Sebuah studi yang diterbitkan di JAMA Internal Medicine Friday memeriksa pertanyaan dari pasien dan menemukan bahwa ChatGPT memberikan jawaban yang lebih baik daripada dokter manusia empat dari lima kali. Panel profesional medis mengevaluasi pertukaran tersebut, dan lebih menyukai respons AI dalam 79% kasus. ChatGPT tidak hanya memberikan jawaban berkualitas lebih tinggi, panel tersebut menyimpulkan bahwa AI juga lebih berempati. Ini adalah temuan yang dapat memiliki implikasi besar bagi masa depan perawatan kesehatan.

Bukankah Realitas Virtual Membuat Saya Sakit?

“Ada satu area dalam kesehatan masyarakat yang lebih membutuhkan daripada sebelumnya, dan itu adalah orang yang mencari nasihat medis. Kotak masuk dokter terisi penuh setelah transisi ke perawatan virtual ini karena COVID-19, ”kata penulis utama studi tersebut, John W. Ayers, PhD, MA, wakil kepala inovasi di UC San Diego School of Medicine Division of Infectious. Penyakit dan Kesehatan Masyarakat Global.

“Email pasien tidak dijawab atau mendapat respons yang buruk, dan penyedia layanan kelelahan dan meninggalkan pekerjaan mereka. Dengan mengingat hal itu, saya berpikir ‘Bagaimana saya bisa membantu dalam skenario ini?’” kata Ayers. “Jadi kami mendapatkan sekeranjang pertanyaan pasien yang sebenarnya dan tanggapan dokter yang sebenarnya, dan membandingkannya dengan ChatGPT. Saat kami melakukannya, ChatGPT menang telak.”

Pertanyaan dari pasien sulit didapat, tetapi tim Ayers menemukan solusi baru. Studi ini diambil dari r/AskDocs Reddit, di mana dokter dengan kredensial terverifikasi menjawab pertanyaan medis pengguna. Studi ini secara acak mengumpulkan 195 pertanyaan dan jawaban, dan kemudian ChatGPT menjawab pertanyaan yang sama. Sebuah panel profesional kesehatan berlisensi dengan latar belakang penyakit dalam mengevaluasi pertukaran tersebut. Panel pertama-tama memilih tanggapan mana yang menurut mereka lebih baik, dan kemudian mengevaluasi kualitas jawaban dan empati atau sikap di samping tempat tidur yang diberikan.

Hasilnya dramatis. Jawaban ChatGPT dinilai “baik” atau “sangat baik” lebih dari tiga kali lebih sering daripada tanggapan dokter. AI dinilai “empati” atau “sangat berempati” hampir 10 kali lebih sering.

Penulis penelitian mengatakan pekerjaan mereka bukanlah argumen yang mendukung ChatGPT dibandingkan alat AI lainnya, dan mereka mengatakan bahwa kita belum cukup tahu tentang risiko dan manfaat bagi dokter untuk mulai menggunakan chatbots dulu.

Dokter menunjukkan preferensi yang luar biasa untuk tanggapan tertulis AI, Grafik: Atas perkenan John. W. Ayers

“Untuk beberapa pasien, ini bisa menyelamatkan hidup mereka,” kata Ayers. Misalnya, jika Anda didiagnosis gagal jantung, kemungkinan besar Anda akan meninggal dalam waktu lima tahun. “Tetapi kami juga tahu kemungkinan Anda untuk bertahan hidup lebih tinggi jika Anda memiliki tingkat kepatuhan yang tinggi terhadap saran klinis, seperti membatasi asupan garam dan meminum resep Anda. Dalam skenario itu, pesan dapat membantu memastikan kepatuhan terhadap saran tersebut.”

Studi tersebut mengatakan komunitas medis perlu bergerak dengan hati-hati. AI berkembang dengan kecepatan yang mencengangkan, dan seiring kemajuan teknologi, begitu pula potensi bahayanya.

“Hasilnya menarik, jika tidak terlalu mengejutkan, dan pasti akan memacu penelitian lebih lanjut yang sangat dibutuhkan,” kata Steven Lin, MD, direktur eksekutif Tim Riset Terapan AI Stanford Healthcare. Namun, Lin menekankan bahwa studi JAMA masih jauh dari definitif. Misalnya, dipertukarkan di Reddit tidak mencerminkan hubungan dokter-pasien yang khas dalam pengaturan klinis, dan dokter yang tidak memiliki hubungan terapeutik dengan pasien tidak memiliki alasan khusus untuk berempati atau dipersonalisasi dalam tanggapan mereka. Hasilnya mungkin juga miring karena metodologi untuk menilai kualitas dan empati sederhana, di antara peringatan lainnya.

Meski begitu, Lin mengatakan penelitian ini menggembirakan, dan menyoroti peluang besar yang dimiliki chatbots untuk kesehatan masyarakat.

“Ada potensi luar biasa bagi chatbot untuk membantu dokter saat berkirim pesan dengan pasien, dengan menyusun pesan berdasarkan permintaan pasien untuk diedit oleh dokter atau anggota tim klinis lainnya,” kata “Tsunami senyap pesan pasien yang membanjiri kotak masuk dokter adalah hal yang sangat masalah yang nyata dan menghancurkan.”

Dokter mulai bermain-main dengan ChatGPT segera setelah dirilis, dan chatbot menunjukkan banyak potensi untuk digunakan dalam perawatan kesehatan. Tetapi sulit untuk mempercayai tanggapan AI, karena dalam beberapa kasus, AI berbohong. Dalam studi terbaru lainnya, para peneliti meminta ChatGPT menjawab pertanyaan tentang pencegahan penyakit kardiovaskular. AI memberikan tanggapan yang sesuai untuk 21 dari 25 pertanyaan. Tetapi ChatGPT membuat beberapa kesalahan serius, seperti “dengan tegas merekomendasikan” latihan kardio dan angkat beban, yang mungkin tidak aman bagi sebagian orang. Dalam contoh lain, seorang dokter memposting TikTok tentang percakapan dengan ChatGPT yang merupakan studi medis. Masalah-masalah ini bisa berakibat fatal jika pasien mengikuti saran robot tanpa masukan dari dokter sungguhan. OpenAI, pembuat ChatGPT, tidak menanggapi permintaan komentar.

“Kami tidak mengatakan bahwa kami harus membalik tombol dan mengimplementasikan ini. Kita perlu berhenti sejenak dan melakukan studi fase pertama, untuk mengevaluasi manfaat dan menemukan serta mengurangi potensi kerugiannya.” kata Ayers. “Itu tidak berarti kita harus menunda implementasi selama bertahun-tahun. Anda dapat melakukan fase berikutnya dan studi wajib berikutnya dalam hitungan bulan.”

Tidak diragukan lagi bahwa alat seperti ChatGPT akan masuk ke dunia kedokteran. Ini sudah dimulai. Pada bulan Januari, sebuah layanan kesehatan mental bernama Koko menguji GPT-3 pada 4.000 orang. Platform ini menghubungkan pengguna untuk memberikan dukungan peer-to-pier, dan secara singkat membiarkan orang memanfaatkan chatbot bertenaga OpenAI dalam tanggapan mereka. Koko mengatakan bahwa pesan AI mendapat tanggapan yang sangat positif, tetapi perusahaan menghentikan eksperimen tersebut setelah beberapa hari karena “terasa agak steril”.

Bukan berarti alat seperti ChatGPT tidak memiliki potensi dalam konteks ini. Dirancang dengan benar, sebuah sistem yang menggunakan AI chatbots dalam kedokteran “bahkan dapat menjadi alat untuk memerangi epidemi misinformasi dan disinformasi yang mungkin merupakan satu-satunya ancaman terbesar bagi kesehatan masyarakat saat ini,” kata Lin. “Diterapkan dengan buruk, itu dapat membuat misinformasi dan disinformasi semakin merajalela.”

Membaca data dari studi JAMA, hasilnya tampak jelas bahkan bagi orang awam. Misalnya, seorang pria mengatakan lengannya sakit saat bersin, dan bertanya apakah itu perlu diwaspadai. Dokter menjawab, “Pada dasarnya, tidak.” ChatGPT memberikan tanggapan lima paragraf yang terperinci dengan kemungkinan penyebab rasa sakit dan beberapa rekomendasi, termasuk:

“Tidak jarang orang mengalami nyeri otot atau nyeri di berbagai bagian tubuh setelah bersin. Bersin adalah refleks yang tiba-tiba dan kuat yang dapat menyebabkan kontraksi otot di seluruh tubuh. Dalam kebanyakan kasus, nyeri otot atau ketidaknyamanan setelah bersin bersifat sementara dan tidak perlu dikhawatirkan. Namun, jika rasa sakitnya parah atau berlangsung lama, ada baiknya berkonsultasi dengan profesional kesehatan untuk evaluasi lebih lanjut.”

Tidak mengherankan, semua panelis dalam penelitian tersebut lebih menyukai jawaban ChatGPT. (Gizmodo dengan ringan mengedit detail dalam contoh dokter di atas untuk melindungi privasi.)

“Ini tidak berarti kita harus mengesampingkan dokter,” kata Ayers. “Tapi kandidat penghasil pesan yang ideal mungkin adalah seorang dokter yang menggunakan sistem AI.”

Jika (dan mau tidak mau kapan) ChatGPT mulai membantu dokter dengan email mereka, ini bisa berguna meskipun tidak memberikan nasihat medis. Dengan memanfaatkan ChatGPT, dokter dapat bekerja lebih cepat, memberikan informasi yang dibutuhkan pasien tanpa harus khawatir tentang tata bahasa dan ejaan. Ayers mengatakan ChatBot juga dapat membantu menjangkau pasien secara proaktif dengan rekomendasi perawatan kesehatan—seperti yang dilakukan banyak dokter pada tahap awal pandemi—daripada menunggu pasien menghubungi mereka saat mereka memiliki masalah.

“Ini tidak hanya akan mengubah pengobatan dan membantu dokter, ini akan memiliki nilai yang sangat besar bagi kesehatan masyarakat, kita berbicara secara massal, di seluruh populasi,” kata Ayers.

Ingin tahu lebih banyak tentang AI, chatbots, dan masa depan pembelajaran mesin? Lihat liputan lengkap kami tentang kecerdasan buatan, atau telusuri panduan kami ke Generator Seni AI Gratis Terbaik dan Semua yang Kami Ketahui Tentang ChatGPT OpenAI.