查看更多
密码过期或已经不安全,请修改密码
修改密码壹生身份认证协议书
同意
拒绝
同意
拒绝
同意
不同意并跳过
根据美国妇科肿瘤学会2024年妇科癌症年会上发表的两项研究,ChatGPT可以准确回答与妇科癌症基因检测和咨询有关的常见问题,但在被要求提供适当的治疗选择时却出现了失误。
研究一
研究二
纽约大学朗格尼医学中心的Jharna M. Patel博士说:“ChatGPT能够为细微的问题提供答案,特别是必须根据特定患者的遗传特征进行定制的遗传咨询工作,这绝对令人印象深刻。”
她表示,这个工具有可能回答患者的常见问题,以减少焦虑,并让他们了解情况。
“然而,我确实认为在这一领域还需要开展更多的工作,才能真正将其投入临床实践。我不会说它已经可以投入使用了。”
在这项研究中,Patel及其同事向ChatGPT(3.4版)提出了40个问题,这些问题是在与妇科肿瘤学家协商后制定的,符合专业协会指南。
妇科肿瘤主治医师对这些问题的回答进行了以下打分:
1)正确且全面;2)正确但不全面;3)有些正确,有些不正确;4)完全不正确。
在40个问题中,ChatGPT给出了33个(82.5%)正确而全面的答案,6个(15%)正确但不全面的答案,1个(2.5%)部分错误的答案。没有一个答案是完全错误的。
遗传咨询类问题(例如,你如何知道某人是否患有遗传性或家族性癌症综合征?)的答案“既正确又全面”的比例最高,ChatGPT以100%的准确率回答了所有20个问题。
ChatGPT在特定遗传疾病类别中表现同样良好。例如,在BRCA1/2基因差异测试中,15/17(88.2%)的答案是正确和完整的,而在Lynch综合征(最常见的遗传性结直肠癌)测试中,三分之二(66.6%)的答案是正确的。
“我们认为,通过继续在更多数据上训练人工智能工具,并学习提出更好的问题,可以进一步改善这些结果。”纽约大学格罗斯曼医学院的高级研究作者Marina Stasenko博士在新闻发布会上补充说,“目标是在准备充足后将其应用于临床,但仅作为医生的助手。”
另一项研究——比较ChatGPT和临床医生提出的妇科癌症治疗建议——发现的结果则不那么好。
本研究纳入114例妇科肿瘤患者(中位年龄63岁)(48例子宫癌、43例卵巢癌、9例其他癌、8例外阴癌和6例子宫颈癌),在为期4个月的学术机构肿瘤委员会每周会议上进行讨论。
研究人员将患者临床信息、手术结果和病理/分子结果输入ChatGPT(版本3.5),并指导该工具为临床场景提供单一的最佳治疗选择。
ChatGPT提供的大多数治疗建议与肿瘤委员会的最终决定不一致。
西雅图华盛顿大学医学中心的Eric Rios-Doria医学博士在他的报告中报告说,在所有114例病例中,ChatGPT和肿瘤委员会在治疗方面的共识一致率仅为46%。
根据肿瘤部位,意见一致性也不同:子宫为44%,卵巢为49%,宫颈为83%,外阴为37.5%,其他为22%。
Rios-Doria说,总的来说,“统计上的一致程度是公平的”,但“大多数情况下的建议不同”。
ChatGPT的输出中也缺少治疗细节。在确定妇科癌症的治疗方案时,生成式人工智能可能会为临床医生提供一个框架,但“需要人类的评估,”他总结道。
随着ChatGPT的使用越来越多,重要的是要意识到人工智能工具可能会忽略最新信息,并且可能反映其训练信息中的偏见,研究讨论者,约翰霍普金斯大学的医学博士Benjamin Matthews说。
他指出,这两项研究向ChatGPT提出了“非常不同的问题”。
Patel及其同事的研究表明,该工具可以准确地提供“临床实践中遇到的遗传咨询问题的信息和答案”。
相比之下,Rios-Doria的研究询问ChatGPT是否可以对适当的癌症治疗“做出判断”,但答案是:“不足以取代人类专家委员会的建议。”
CMT-琳 编译自:Can ChatGPT Help Manage Gynecologic Cancers? -Medscape - March 19, 2024.
查看更多