《Annals of Emergency Medicine》:A Pilot Study to Evaluate Artificial Intelligence-Driven Early Retrieval of Medical Histories in the Emergency Department
编辑推荐:
ChatGPT在儿科急诊病史采集中的可行性及接受度研究显示,患者及照顾者对使用ChatGPT生成病史的易用性、客观性和准确性满意度较高(中位数10/11),医师对生成的病史在准确性、完整性和可读性等维度评分也达8/10以上,验证了AI辅助病史采集在低危急诊场景中的可行性。
Alessio Morley-Fletcher | Vidya R. Raghavan | Alexandra T. Geanacopoulos | Molly Maher | Mark Waltzman | Yuval Barak Corren | Andrew M. Fine
波士顿儿童医院儿科部门,有效人工智能委员会,马萨诸塞州波士顿
研究目的
在初步研究中,评估使用ChatGPT直接从儿科急诊科候诊室的患者或护理人员那里获取现病史的可行性和可接受性。
方法
在这项前瞻性混合方法初步研究中,31名急诊严重程度指数(ESI)评分为3至5分的患者使用了符合HIPAA标准的ChatGPT-4版本来生成现病史。这些病史记录与常规护理同时收集,但并未用于临床决策。参与者使用11分制对使用体验和满意度进行评分,并对生成的现病史质量进行了评价。对开放式回答进行了主题分析。儿科急诊医生使用11分制对摘要的准确性、完整性、效率、可读性和整体满意度进行了审查。
结果
参与者表示,生成的现病史摘要在可用性(中位数10分,四分位数范围8至10分)、满意度(8分,四分位数范围7至10分)和整体质量(9分,四分位数范围8至10分)方面表现良好。参与者特别提到了该工具的易用性、系统的客观性以及摘要的准确性。医生评审者在准确性、完整性、效率、可读性和整体满意度这五个方面的评分都很高,其中可读性的评分最高(9分,四分位数范围7至9分),其他方面的评分中位数为8分。临床医生指出,摘要有时会遗漏之前就诊的重要信息,但在最终转录文本中未发现任何幻觉现象。
结论
这项在儿科急诊科候诊室中使用ChatGPT辅助收集患者病史的初步研究是可行的,得到了广泛接受,并且生成了准确、完整、易读且高效的摘要。这种方法有潜力减轻文档工作负担,提高患者参与度,并支持更流畅的分诊流程。
引言
像ChatGPT这样的大型语言模型已经显示出减少文档工作量、改善患者沟通和提升临床效率的潜力。
1,2 以往关于急诊科(ED)中大型语言模型的研究表明,生成式人工智能(AI)能够生成急诊摘要、急诊到住院患者的交接记录以及临床建议,这些在急诊医生中获得了较高的完整性和满意度评价。
3, 4, 5 目前大多数研究都是回顾性地评估AI工具,或者仅依靠临床医生的输入进行评估。
6, 7, 8
为了进一步探索生成式AI在实时儿科护理中的潜力,我们将ChatGPT直接应用于急诊科候诊室,让患者或护理人员直接使用该工具生成现病史。本研究旨在评估在这种新场景下使用ChatGPT的可行性和可接受性,同时测量其可用性、用户满意度、准确性、完整性和效率。通过利用患者在急诊科候诊室中使用生成式AI的情况,我们希望评估一种可扩展的方法来提高文档质量并简化临床工作流程。
研究人群与设计
研究人群与设计
我们在2024年7月至12月期间,在一家大型城市独立学术儿童医院的急诊科候诊室中,前瞻性地招募了一组方便样本的患者。该急诊科每年的就诊量为62,000人次,其中72%的患者急诊严重程度指数(ESI)评分为3、4或5(病情较轻)。通过对参与者使用ChatGPT的经历进行了主题分析,以识别相关概念。
研究队列
我们联系了34名患者,其中31名(91%)同意参与研究。所有同意参与的31名患者都完成了研究的全部内容。在31名患者中,有8名年龄超过12岁并直接参与了研究;对于12岁以下的患者,则由他们的父母代为参与。护理人员所代表的儿童的中位年龄为9.7岁(四分位数范围[IQR] 3.5至12岁),其中55%(n=17)为女孩。
局限性
这项初步研究存在一些局限性需要考虑。首先,研究仅在一个大型城市急诊科进行,这可能限制了其结果在其他临床环境(如社区医院、农村急诊科或患有更多合并症的成人患者群体)中的普遍适用性。其次,研究招募的对象主要是病情较轻(ESI 3–5分)的患者,排除了有心理健康问题或需要紧急护理的患者。
讨论
在这项前瞻性混合方法初步研究中,我们评估了在急诊科候诊室使用ChatGPT获取患者提供的现病史的可行性和可接受性。医生评审者对ChatGPT生成的现病史摘要在准确性、完整性、效率、可读性和整体满意度方面给予了积极评价。患者和护理人员也反馈称,使用该工具的过程非常便捷且令人满意。