谷歌和ChatGPT在醫(yī)療信息查詢中的結(jié)果不一

2023-08-03 10:51

當(dāng)你需要一種嚴(yán)重疾病的準(zhǔn)確信息時(shí)，你應(yīng)該去谷歌還是 ChatGPT ？

加州大學(xué)河濱分校

7月28日消息

一項(xiàng)由加州大學(xué)河濱分校（University of California, Riverside，UCR）的計(jì)算機(jī)科學(xué)家領(lǐng)導(dǎo)的跨學(xué)科研究發(fā)現(xiàn)，對(duì)于尋找阿爾茨海默病（Alzheimer’s disease，AD）和其他形式的失智癥信息的人來說，兩種互聯(lián)網(wǎng)信息收集服務(wù)各有優(yōu)缺點(diǎn)。該團(tuán)隊(duì)包括來自阿拉巴馬大學(xué)（University of Alabama，UA）和佛羅里達(dá)國際大學(xué)（Florida International University，FIU）的臨床科學(xué)家。

研究結(jié)果于近日發(fā)表在《醫(yī)學(xué)互聯(lián)網(wǎng)研究雜志》（Journal of Medical Internet Research，JMIR）上，標(biāo)題為“ChatGPT 與谷歌關(guān)于失智癥和其他認(rèn)知能力下降相關(guān)的查詢：結(jié)果比較”（ ChatGPT vs Google for Queries Related to Dementia and Other Cognitive Decline: Comparison of Results）。

研究于2023年7月25日發(fā)表在《Journal of Medical Internet Research》（最新影響因子：7.4）雜志上

研究人員發(fā)現(xiàn)，谷歌提供了最新的信息，但由于服務(wù)和產(chǎn)品提供商尋求客戶，查詢結(jié)果會(huì)發(fā)生偏差。與此同時(shí)，ChatGPT 提供了更加客觀的信息，但在其敘事回應(yīng)中可能會(huì)過時(shí)，缺乏信息來源。

加州大學(xué)河濱分校伯恩斯工程學(xué)院（Bourns College of Engineering）的計(jì)算機(jī)科學(xué)與工程教授 Vagelis Hristidis 說：“如果你選擇兩者的最佳功能，你可以構(gòu)建一個(gè)更好的系統(tǒng)，我認(rèn)為這將在未來幾年發(fā)生。”

Vagelis Hristidis（又名Evangelos Christidis）

在他們的研究中，Hristidis 和他的合著者向谷歌和 ChatGPT 提交了 60 個(gè)問題，這些問題是失智癥患者及其家人提交的典型問題。

研究人員關(guān)注失智癥是因?yàn)?strong>超過 600 萬美國人受到阿爾茨海默病或相關(guān)疾病的影響，該研究的合著者、阿拉巴馬大學(xué)社會(huì)工作教授 Nicole Ruggiano 說。

Ruggiano說：“研究還表明，失智癥患者的照護(hù)者是在尋求健康信息方面最積極的利益攸關(guān)方之一，因?yàn)樗麄兊娜蝿?wù)往往是為親人的護(hù)理做出決定。”

研究人員提出的問題中有一半是關(guān)于疾病過程的信息，而另一半是關(guān)于幫助患者及其家人的服務(wù)的信息。

結(jié)果喜憂參半

“谷歌擁有更多最新的信息，涵蓋了一切，” Hristidis 說，“而 ChatGPT 每隔幾個(gè)月進(jìn)行一次訓(xùn)練。所以，它落后了。假設(shè)上周有某個(gè)新藥問世，你在 ChatGPT 上找不到它。”

ChatGPT 較谷歌提供了更可靠、更準(zhǔn)確的信息。這是因?yàn)?OpenAI 的 ChatGPT 創(chuàng)建者在通過計(jì)算密集型機(jī)器學(xué)習(xí)訓(xùn)練 ChatGPT 時(shí)選擇了最可靠的網(wǎng)站。然而，用戶對(duì)具體的信息來源一無所知，因?yàn)橛纱水a(chǎn)生的敘述缺乏參考。

然而，谷歌有一個(gè)可靠性問題，因?yàn)樗旧?ldquo;涵蓋了從可靠來源到廣告的所有內(nèi)容，” Hristidis 說。

事實(shí)上，廣告商向谷歌付費(fèi)，讓他們的網(wǎng)站鏈接出現(xiàn)在搜索結(jié)果頁面的頂部。因此，用戶通常首先會(huì)看到試圖向他們出售護(hù)理相關(guān)服務(wù)和產(chǎn)品的盈利性公司網(wǎng)站的鏈接。因此，從谷歌搜索中找到可靠的信息需要一定的用戶技能和經(jīng)驗(yàn)，Hristidis 說。

合著者之一，佛羅里達(dá)國際大學(xué)的護(hù)理學(xué)副教授 Ellen Brown 指出，家庭需要及時(shí)了解有關(guān)阿爾茨海默病的信息。

Brown 說：“雖然目前還沒有治愈這種疾病的方法，但許多臨床試驗(yàn)正在進(jìn)行中，最近 FDA 批準(zhǔn)了一種治療早期阿爾茨海默病的有前景的療法。因此，對(duì)于希望了解最新發(fā)現(xiàn)和可用治療方法的家庭來說，最新的信息是重要的。”

該研究的作者寫道，“健康相關(guān)信息的來源和日期以及其他語言的可用性可能會(huì)增加這些平臺(tái)對(duì)非醫(yī)療和醫(yī)療專業(yè)人員的價(jià)值。”

谷歌和 ChatGPT 的可讀性得分均較低，這使得教育水平較低和健康素養(yǎng)技能較低的人很難閱讀。

“我的預(yù)測(cè)是，可讀性是更容易改善的事情，因?yàn)橐呀?jīng)有一些工具，一些人工智能方法，可以閱讀和解釋文本，” Hristidis 說，“在提高可靠性、準(zhǔn)確性等方面，這要困難得多。別忘了，科學(xué)家們花了幾十年的人工智能研究才建立了ChatGPT。從我們現(xiàn)在的情況來看，這將會(huì)是一個(gè)緩慢的進(jìn)程。”

創(chuàng)立于1907年的加州大學(xué)河濱分校

參考文獻(xiàn)

Source：University of California - Riverside

Google & ChatGPT have mixed results in medical information queries

Reference：

Vagelis Hristidis, Nicole Ruggiano, Ellen L Brown, Sai Rithesh Reddy Ganta, Selena Stewart. ChatGPT vs Google for Queries Related to Dementia and Other Cognitive Decline: Comparison of Results. Journal of Medical Internet Research, 2023; 25: e48966 DOI: 10.2196/48966

免責(zé)聲明

本公眾號(hào)上的醫(yī)療信息僅作為信息資源提供與分享，不用于或依賴于任何診斷或治療目的。此信息不應(yīng)替代專業(yè)診斷或治療。在做出任何醫(yī)療決定或有關(guān)特定醫(yī)療狀況的指導(dǎo)之前，請(qǐng)咨詢你的醫(yī)生。

原文標(biāo)題 : 谷歌和ChatGPT在醫(yī)療信息查詢中的結(jié)果不一