ChatGPT, 25 meme kanseri tarama sorusunu yanıtladı, ancak “gerçek dünya için hazır değil” – işte nedeni bu

poem

New member
Birçok kişi, OpenAI’nin yapay zeka sohbet robotu ChatGPT’nin bir gün potansiyel olarak Google’a çevrimiçi bir sağlık kaynağı olarak rakip olabileceğini söylüyor – ancak şu anda yanıtları ne kadar güvenilir?

gelen araştırmacılar Maryland Üniversitesi Tıp Fakültesi (UMSOM) öğrenmek için can atıyordu.

Şubat ayında meme kanseri tarama kılavuzlarıyla ilgili 25 sorudan oluşan bir liste oluşturdular ve ardından ChatGPT’den her soruyu üç kez yanıtlamasını istediler.

Araştırmacılar, chatbot’un 25 yanıtından 22’sinin doğru olduğunu buldu. Ancak, sorulardan ikisi, her zaman aşımında önemli ölçüde farklı yanıtlarla sonuçlandı.

SAĞLIK HİZMETLERİNDE YAPAY ZEKA: YENİ ÜRÜN ‘DOKTORLAR İÇİN KOPİLOT’ OLARAK GÖRÜYOR

Ayrıca, bulguları açıklayan bir basın açıklamasına göre ChatGPT, yanıtlarından birinde güncel olmayan bilgiler verdi.

Genel olarak, araştırmacılar ChatGPT’nin soruları yaklaşık %88 oranında doğru yanıtladığını söyledi.



Araştırmacılar, Maryland Üniversitesi tarafından yapılan bir çalışmada, ChatGPT’ye meme kanseri taramasıyla ilgili 25 soru sordu ve %88 doğruluk oranı gördü. Ancak bu yüzde tüm hikayeyi anlatmıyor. (iStock)


Çalışmanın bulguları bu ay Radyoloji dergisinde yayınlandı. Massachusetts General Hospital ve Johns Hopkins Üniversitesi Tıp Fakültesi’nden araştırmacılar da katıldı.

UMSOM’da teşhis radyolojisi ve nükleer tıp profesörü yardımcısı Paul Yi, “Çalışmamızda gösterdiğimiz gibi, ChatGPT’nin tıbbi bilgi sağlama konusunda muazzam bir potansiyeli var” dedi.

“Sıklıkla doğru bilgiler sağlasa da, sunduğu yanlış bilgiler olumsuz sonuçlara yol açabilir.”
“Ancak gerçek dünya için hazır değil” dedi. “Sıklıkla doğru bilgiler sağlasa da, sunduğu yanlış bilgiler olumsuz sonuçlara yol açabilir.”

üzerinde durulan sorular meme kanseri belirtileribireysel risk faktörleri ve mamogram taramaları için öneriler.

Yanıtların doğruluk oranı yüksek olsa da, araştırmacılar bunların bir Google aramasının sağlayabileceği kadar derinlemesine olmadığına dikkat çekti.

“ChatGPT, meme kanseri taraması konusunda Amerikan Kanser Derneği tarafından yayınlanan yalnızca bir dizi öneri sağladı, ancak Hastalık Kontrol ve Önleme Merkezleri (CDC) veya ABD Önleyici Hizmetler Görev Gücü (USPSTF) tarafından ortaya konan farklı önerilerden bahsetmedi. ” Basın açıklamasında Maryland Üniversitesi Tıp Merkezi’nde radyoloji asistanı olan çalışmanın baş yazarı Hana Haver, dedi.


ChatGPT, Kasım 2022'de OpenAI şirketi tarafından piyasaya sürülen bir yapay zeka (AI) sohbet robotudur.


ChatGPT, Kasım 2022’de OpenAI şirketi tarafından piyasaya sürülen bir yapay zeka (AI) sohbet robotudur. (iStock)


Tek “uygunsuz” yanıt, “mamogramımı vücuduma göre planlamam gerekiyor mu?” sorusuna verildi. COVID aşısı?”

ChatGPT, kadınların bir mamogram planlamak için aşıdan sonra dört ila altı hafta beklemesi gerektiğini söyledi – ancak bu kılavuz Şubat 2022’de değişti. Chatbot, yanıtlarını güncel olmayan bilgilere dayandırıyordu.

Chatbot, “Meme kanserini nasıl önleyebilirim?” sorularına da tutarsız yanıtlar verdi. ve “Meme kanseri için nerede tarama yaptırabilirim?”

AI VE KALP SAĞLIĞI: MAKİNELER ULTRASONLARI OKUMA İŞİNİ SONGRAFÇILARDAN DAHA İYİ YAPAR

Yi, Haberler Digital’e “Kulağa çok inandırıcı gelebilecek yanlış bilgiler sağlayabilir – ancak şu anda yanıtlarından emin olup olmadığını gösterecek bir mekanizma yok” dedi.

“Bu chatbot’ların gerçek dünyadaki tıp eğitiminde güvenle kullanılabilmesi için önce çözülmesi önemlidir.”

ChatGPT neden aynı soruya farklı cevaplar veriyor?


ChatGPT’ye aynı soruyu birden çok kez soran kişiler muhtemelen farklı yanıtlar alacaktır. Harvey Castro, bir Dallas, Teksas merkezli kurul onaylı acil tıp doktoru ve sağlık hizmetlerinde yapay zeka konusunda ulusal konuşmacı, bunun birkaç nedeni olduğunu söyledi.

(Castro, UMSOM çalışmasına dahil değildi.)


Çalışmadaki sorular, meme kanseri semptomları, bireysel risk faktörleri ve mamogram taramaları için önerilere odaklandı.


Çalışmadaki sorular, meme kanseri semptomları, bireysel risk faktörleri ve mamogram taramaları için önerilere odaklandı. (iStock)


Haberler Digital’e “ChatGPT, aldığı verilerden her zaman yeni şeyler öğreniyor” dedi. “Bu yazılımın her nesli, erişebildiği veriler nedeniyle daha iyi hale gelecek. Bir insan verileri düzeltirse, ChatGPT yanıtını başkalarının yanıtlarına göre güncelleyecektir.”

Devam etti, “Yarın aynı soruyu sorarsan, daha fazla bilgi edinmiş olabilir. [by then] bu onun cevabını değiştirebilir. Bu, programı faydalı ve güncel yanıtlar vermede daha iyi hale getiriyor.”

Castro, chatbot’un aynı zamanda emrinde zengin bir bilgi birikimine sahip olduğunu, bu nedenle bir soruyu yanıtlamanın birçok farklı yolunu “düşünebildiğini” açıkladı.

Uzmanlar, ChatGPT yanıtlarının bir doktor tarafından incelenmesi gerektiğini söylüyor.
Ek olarak, ChatGPT herhangi bir yanıt için kelime seçimini değiştirir.

Castro, “ChatGPT, bir cümlede hangi kelimelerin gelmesi gerektiğini düşünerek çalışır” dedi. “Farklı kelimelerin birbirine uyma ihtimaline bakıyor. Bu nedenle, cevaplarında her zaman biraz rastgelelik var.”


ChatGPT faydalı bir kaynak olsa da uzmanlar, yanıtların ilgili doktor tarafından incelenmesi gerektiği konusunda hemfikirdir.


ChatGPT faydalı bir kaynak olsa da uzmanlar, yanıtların ilgili doktor tarafından incelenmesi gerektiği konusunda hemfikirdir. (Getty Images aracılığıyla Gabby Jones/Bloomberg)


Castro, ChatGPT’nin konuşmaları da hatırladığını, yani birisi aynı soruyu bir konuşmada birkaç kez sorarsa, chatbot’un daha önce söylenenlere göre yanıtını değiştirebileceğini belirtti.

AI umut vaat ederken, uzmanlar dikkatli olmaya çağırıyor


ChatGPT yararlı bir kaynak olsa da uzmanlar, yanıtların ilgili doktor tarafından incelenmesi gerektiği konusunda hemfikirdir.

“Kulağa çok inandırıcı gelebilecek yanlış bilgiler sağlayabilir.”
Sanjeev Agrawal, Başkan ve COO Kaliforniya merkezli Ülke genelindeki hastaneler için yapay zeka çözümleri geliştiren LeanTaaS, çalışmanın sonuçlarından etkilendi – ancak %88’in hastaların kanser taraması yaptıklarında görmek istedikleri kadar yüksek bir puan olmadığını belirtti.

SAĞLIK BÜLTENİMİZE ÜYE OLMAK İÇİN TIKLAYINIZ

“Bunu henüz nitelikli, eğitimli bir doktora ihtiyaç duymanın son milinin yerini alacak bir şey olarak görmesem de, tarama testinin yapay zeka destekli bir sentezini almanın hem hasta hem de doktor için değerini çok iyi görebiliyorum. başlangıç noktası” dedi Haberler Digital’e.

HABERLER SUNULDU

Agrawal, “Daha az sofistike ve daha rutin tavsiye ve tarama için bu, hastaların daha erken güvenilir ve doğru tavsiye almasını ve sağlık sisteminin yükünün bir kısmını almasını sağlayabilir.”



Melissa Rudy, sağlık editörü ve Haberler Digital’de yaşam tarzı ekibinin bir üyesidir.