谨慎使用!研究:免费版ChatGPT回答医药问题容易“犯错”
财联社12月5日讯(编辑 卞纯)自AI聊天机器人ChatGPT推出以来,这款工具在金融、教育、新闻等行业获得广泛应用。然而一项研究表明,医疗行业从业者以及患者都应谨慎使用这款工具,尤其是免费版ChatGPT。
根据周二发布的一项新研究,免费版ChatGPT可能会对与药物相关的问题提供不准确或不完整的回答,或者根本不提供答案,这可能会危及患者的健康。
今年5月,长岛大学的药剂师向免费版ChatGPT提出了39个问题。他们认为,根据他们设定的标准,ChatGPT的回答中只有10个“令人满意”。该研究称,对于其它29个与药物有关的问题,ChatGPT要么没有直接回答,要么不准确、不完整,或者既不准确又不完整。
该研究使用了2022年1月至今年4月期间(患者)向长岛大学药学院药物信息服务平台提出的真实问题。
在今年5月的试验中,药剂师共设计了45个问题并作出回答,然后由另一名研究人员进行审查,并将其答案作为衡量ChatGPT准确性的标准。研究人员排除了其中六个问题,因为没有可用的文献来提供数据驱动的回答。
根据这项研究,ChatGPT没有直接回答11个问题。该聊天机器人还对10个问题给出了不准确的答案,并对另外12个问题给出了错误或不完整的答案。
对于每个问题,研究人员要求ChatGPT在其回答中提供参考资料,以便对其所提供的信息进行验证。然而,ChatGPT只在8个回答中提供了参考,而且每个回答中都包含了不存在的来源,有编造答案之嫌。
患者应谨慎使用ChatGPT
上述研究的主要作者、长岛大学药学实践副教授Sara Grossman表示,该研究表明,患者和医疗保健专业人员应该谨慎依赖ChatGPT提供的药物信息,并通过可信来源核实该工具给出的任何回答。对于患者来说,可信来源可以是他们的医生,也可以是政府药物信息网站。
举例来说,研究人员向ChatGPT提出的问题之一是:辉瑞抗新冠病毒药物Paxlovid和降血压药物Verapamil是否会相互作用,也就是当一起服用时,其中一种药物是否会干扰另一种药物的药效。
ChatGPT给出的答案是,尚没有这两种药物会发生相互作用的报道。然而,实际上,当这两种药物一起服用时,有可能会过度降低血压。
Grossman指出,如果不了解这种相互作用,患者可能会遭受不必要的、原本可预防的副作用。
一项分析显示,今年10月,ChatGPT在全球吸引了大约17亿次访问。目前尚没有数据显示,有多少用户向这款聊天机器人询问医疗问题。
值得注意的是,免费版ChatGPT仅使用截至2021年9月的数据集,这意味着它可能缺乏快速变化的医疗领域的重要信息。目前还不清楚付费版ChatGPT在回答与药物相关问题方面“准确度”如何。付费版ChatGPT能够浏览互联网并获取实时信息。
Grossman承认,若对付费版ChatGPT进行研究,可能会产生更好的结果。她还补充称,因为针对免费版ChatGPT的研究是今年早些时候进行的,若现在再次进行类似研究,免费版ChatGPT可能已经改进,或许会产生更好的结果。
ChatGPT准确性引人担忧
AI初创公司OpenAI开发的ChatGPT去年底一经推出便风靡全球,被广泛视为有史以来增长最快的消费者互联网应用程序。但在迅速走红的同时,这款工具也引发了人们对欺诈、知识产权、歧视和错误信息等问题的担忧。
此前已经有几项研究都表明,ChatGPT会对一些问题作出错误回答。今年7月,美国联邦贸易委员会(FTC)对OpenAI展开全面调查,以确保ChatGPT不会通过生成虚假信息和滥用数据,损害消费者利益。
- 免责声明
- 本文所包含的观点仅代表作者个人看法,不代表新火种的观点。在新火种上获取的所有信息均不应被视为投资建议。新火种对本文可能提及或链接的任何项目不表示认可。 交易和投资涉及高风险,读者在采取与本文内容相关的任何行动之前,请务必进行充分的尽职调查。最终的决策应该基于您自己的独立判断。新火种不对因依赖本文观点而产生的任何金钱损失负任何责任。