share_log

谨慎使用!研究:免费版ChatGPT回答医药问题容易“犯错”

謹慎使用!研究:免費版ChatGPT回答醫藥問題容易“犯錯”

財聯社 ·  2023/12/05 17:23

①一項研究表明,醫療行業從業者以及患者應謹慎使用免費版ChatGPT; ②免費版ChatGPT可能會對與藥物相關的問題提供不準確或不完整的回答,或者根本不提供答案,這可能會危及患者的健康。

財聯社12月5日訊(編輯 卞純)自AI聊天機器人ChatGPT推出以來,這款工具在金融、教育、新聞等行業獲得廣泛應用。然而一項研究表明,醫療行業從業者以及患者都應謹慎使用這款工具,尤其是免費版ChatGPT。

根據週二發佈的一項新研究,免費版ChatGPT可能會對與藥物相關的問題提供不準確或不完整的回答,或者根本不提供答案,這可能會危及患者的健康。

今年5月,長島大學的藥劑師向免費版ChatGPT提出了39個問題。他們認爲,根據他們設定的標準,ChatGPT的回答中只有10個“令人滿意”。該研究稱,對於其它29個與藥物有關的問題,ChatGPT要麼沒有直接回答,要麼不準確、不完整,或者既不準確又不完整

該研究使用了2022年1月至今年4月期間(患者)向長島大學藥學院藥物信息服務平台提出的真實問題。

在今年5月的試驗中,藥劑師共設計了45個問題並作出回答,然後由另一名研究人員進行審查,並將其答案作爲衡量ChatGPT準確性的標準。研究人員排除了其中六個問題,因爲沒有可用的文獻來提供數據驅動的回答。

根據這項研究,ChatGPT沒有直接回答11個問題。該聊天機器人還對10個問題給出了不準確的答案,並對另外12個問題給出了錯誤或不完整的答案。

對於每個問題,研究人員要求ChatGPT在其回答中提供參考資料,以便對其所提供的信息進行驗證。然而,ChatGPT只在8個回答中提供了參考,而且每個回答中都包含了不存在的來源,有編造答案之嫌。

患者應謹慎使用ChatGPT

上述研究的主要作者、長島大學藥學實踐副教授Sara Grossman表示,該研究表明,患者和醫療保健專業人員應該謹慎依賴ChatGPT提供的藥物信息,並通過可信來源覈實該工具給出的任何回答。對於患者來說,可信來源可以是他們的醫生,也可以是政府藥物信息網站。

舉例來說,研究人員向ChatGPT提出的問題之一是:輝瑞抗新冠病毒藥物Paxlovid和降血壓藥物Verapamil是否會相互作用,也就是當一起服用時,其中一種藥物是否會干擾另一種藥物的藥效。

ChatGPT給出的答案是,尚沒有這兩種藥物會發生相互作用的報道。然而,實際上,當這兩種藥物一起服用時,有可能會過度降低血壓。

Grossman指出,如果不了解這種相互作用,患者可能會遭受不必要的、原本可預防的副作用

一項分析顯示,今年10月,ChatGPT在全球吸引了大約17億次訪問。目前尚沒有數據顯示,有多少用戶向這款聊天機器人詢問醫療問題。

值得注意的是,免費版ChatGPT僅使用截至2021年9月的數據集,這意味着它可能缺乏快速變化的醫療領域的重要信息。目前還不清楚付費版ChatGPT在回答與藥物相關問題方面“準確度”如何。付費版ChatGPT能夠瀏覽互聯網並獲取實時信息。

Grossman承認,若對付費版ChatGPT進行研究,可能會產生更好的結果。她還補充稱,因爲針對免費版ChatGPT的研究是今年早些時候進行的,若現在再次進行類似研究,免費版ChatGPT可能已經改進,或許會產生更好的結果。

ChatGPT準確性引人擔憂

AI初創公司OpenAI開發的ChatGPT去年底一經推出便風靡全球,被廣泛視爲有史以來增長最快的消費者互聯網應用程序。但在迅速走紅的同時,這款工具也引發了人們對欺詐、知識產權、歧視和錯誤信息等問題的擔憂。

此前已經有幾項研究都表明,ChatGPT會對一些問題作出錯誤回答。今年7月,美國聯邦貿易委員會(FTC)對OpenAI展開全面調查,以確保ChatGPT不會通過生成虛假信息和濫用數據,損害消費者利益。

譯文內容由第三人軟體翻譯。


以上內容僅用作資訊或教育之目的,不構成與富途相關的任何投資建議。富途竭力但無法保證上述全部內容的真實性、準確性和原創性。
    搶先評論