ChatGPT Menang dari Dokter Manusia di Kuis Medis

Kamadeva - University of California melakukan kuis media pengobatan manusia menggunakan ChatGPT. Hasilnya mengejutkan, ChatGPT bisa mendapatkan hasil yang lebih tinggi. Studi tersebut mencoba menguji respons empatik dokter dan chatbot AI ChatGPT dengan memeriksa mana yang berkinerja lebih baik dalam menjawab 195 pertanyaan medis.

Masalahnya, banyak dokter kurang empati terhadap pasiennya. Mereka dirancang agar terlihat seperti robot tanpa emosi yang sarat dengan pengetahuan medis. Untuk melanjutkan penelitian ini, para peneliti merancang pertanyaan yang dipublikasikan sebagai "AskDocs" di Internet. Studi tersebut mencakup pertanyaan seperti seberapa berbahaya menelan tusuk gigi atau apakah mereka akan mengalami gegar otak jika kepala mereka terbentur batang logam. Inilah penelitiannya.

 

Metode Penelitian

Setiap panel ditanya jawaban mana yang lebih baik. Anda tidak tahu apakah jawaban diberikan oleh obrolan ChatGPT atau dokter manusia. Setiap kasus ditinjau oleh tiga hakim yang berbeda dan hasilnya rata-rata berjumlah 585 penilaian. Dalam 79 persen kasus, hakim lebih memilih jawaban ChatGPT dengan informasi berkualitas lebih tinggi dan bahasa yang lebih berempati daripada jawaban dokter manusia.

Respons chatbot juga sekitar empat kali lebih lama daripada dokter, dengan rata-rata 211 kata per pesan dibandingkan dengan 52 kata untuk dokter. Science Alert menyatakan bahwa chatGPT lebih baik dari dokter dalam hal kualitas dan empati.

Contoh tanggapan dokter manusia menggunakan ChatGPT

Contoh di bawah ini adalah reaksi terhadap tusuk gigi yang tidak sengaja tertelan. Dokter menjawab:
“Jika Anda pergi lebih dari 2 sampai 6 jam, mereka mungkin sudah memasuki usus. Ini berarti bahwa mereka tidak mudah untuk diambil. Banyak orang dapat dengan mudah menelan silet dan tusuk gigi. Jika Anda memiliki masalah perut, jangan ragu untuk pergi ke sana.” Pergi ke ruang gawat darurat dan ingat untuk menunjukkan tusuk gigi yang dia telan. Sejauh ini ruang gawat darurat tidak banyak membantu.”

Tanggapan ChatGPT adalah:
"Wajar untuk khawatir jika Anda menelan benda asing, tetapi dalam kasus ini sangat tidak mungkin tusuk gigi yang Anda telan akan menyebabkan kerusakan serius." Tusuk gigi terbuat dari kayu yang tidak beracun dan tidak akan menyebabkan keracunan. Namun, tusuk gigi bisa menyebabkan luka jika tersangkut di tenggorokan atau menembus saluran pencernaan. Namun, hal itu tidak bisa dilakukan dengan tusuk gigi tumpul yang sudah matang, yang hanya berukuran 2 cm. Jika Anda mengalami ketidaknyamanan atau gejala seperti sakit perut, sulit menelan atau muntah, penting bagi Anda untuk menghubungi dokter untuk pemeriksaan lebih lanjut. Namun, jika Anda tidak memiliki gejala, asumsikan tusuk gigi melewati saluran pencernaan Anda dan Anda baik-baik saja. Saat makan, seseorang harus selalu berhati-hati dan membuang benda asing sebelum makan. Dapat dimengerti bahwa Anda mungkin takut, tetapi cobalah untuk tidak terlalu khawatir. Tusuk gigi sangat tidak mungkin menyebabkan cedera serius.

Studi ini menunjukkan bahwa chatbot menyampaikan rasa kepedulian yang lebih baik daripada dokter.

Akankah ChatGPT menggantikan dokter?

Namun, masih harus dilihat apakah ChatGPT akan berguna dalam praktik klinis. Forum online mungkin tidak mencerminkan interaksi pasien-dokter yang khas, dengan hubungan yang ada dan lebih banyak personalisasi, tulis para peneliti.

Meskipun ChatGPT memberikan respons yang sopan dan mudah dibaca, ini adalah kesalahan mendasar dalam pengkodean dan matematika. Selain itu, banyak informasi dalam jawaban ChatGPT ternyata salah.

Anthony Cohn, Profesor Pemikiran Otomatis di Universitas Leeds di Inggris, memperingatkan bahwa ChatGPT dapat mengarang fakta. Bergantung pada informasi yang diberikan, ChatGPT sama berbahayanya. "Sangat penting bagi seorang dokter untuk memikirkan dengan hati-hati semua jawaban," katanya.