
OpenAI发布医疗团队电脑操作智能体评估结果
来源标题:Advancing computer-use agents for healthcare teams (OpenAI)
OpenAI公布了针对医疗场景的computer-use智能体在模型性能、安全性和成本方面的评估结果。该智能体通过点击、输入和跨应用操作完成多步骤工作流,例如从患者病历中提取信息并填入保险授权门户以完成MRI授权申请。OpenAI表示这类AI可帮助医疗团队处理现有软件中的重复性工作流。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
Share 从患者的一条消息到MRI授权申请从患者的一条消息到MRI授权申请 评估有用性、安全性和成本 与医疗机构共同开发computer use 患者数据安全与agent管控 开始使用computer-use agents 从患者的一条消息到MRI授权申请 评估有用性、安全性和成本 与医疗机构共同开发computer use 患者数据安全与agent管控 开始使用computer-use agents 医疗体系是碎片化的,团队往往需要在患者获得诊疗之前,手动在不同系统之间传递信息。例如,当临床医生建议做MRI时,保险公司所需的信息可能就在患者的病历中,但团队成员仍需将其调取出来,并录入另一个门户网站,才能完成授权申请。 Computer-use agents通过点击、输入以及在应用程序之间切换,来执行多步骤工作流。在医疗领域,这使AI能够帮助处理团队已在使用的软件中的重复性工作流。 今天,我们分享新的结果,衡量模型在临床和行政工作流中的性能、安全性和成本。我们还将分享我们如何与Abridge、Ambience、Cigna Healthcare和CVS Health等领先医疗机构合作,推进并应用computer use,覆盖授权申请、转诊、出院规划以及就诊间随访等场景。 医疗团队、开发者和个体临床医生如今可以通过OpenAI API、ChatGPT for Healthcare和ChatGPT for Clinicians使用这些能力。各机构可以支持符合HIPAA要求的工作流,配置审批和agent访问权限,并记录审计日志,以实现安全部署。 为了展示computer-use agent如何帮助临床医生和授权专员处理同一个MRI申请,我们使用合成患者数据构建了一个演示。一位患者就下背痛向临床医生发送消息。computer-use agent会查看该患者的就诊记录、物理治疗记录以及EHR中的既往影像。它会起草一份MRI医嘱、一份就诊记录,以及一封给患者的回复,供临床医生审核。随后,该agent使用相同的记录,在保险公司的门户中准备一份事先授权申请,供授权专员审核。 我们评估了GPT‑6 Astra在临床医生处理EHR收件箱任务时的表现。这些任务由医生参与设计,要求Astra执行多步骤工作流,旨在同时测试基于纵向患者背景的临床推理能力,以及对复杂界面的操作能力。评审人员检查了模型的操作及其生成的记录、医嘱和患者消息,评估其工作在任务背景下是否有帮助且在临床上安全。 临床安全性通过评估模型工作中的不准确、遗漏或操作是否可能导致患者受到伤害来衡量。总体而言,在325项经审核的任务中,99%被评为安全。医生按五分制对有用性进行评分,在646次评估中,93%选择了“非常有帮助”或“极其有帮助”。 我们还评估了用于行政任务的computer-use agents,例如事先授权、申诉和医疗设备订购。在HealthAdminBench(在新窗口中打开)上——这是斯坦福研究人员推出的独立基准,用于衡量常见行政工作流中的表现——GPT‑6 Astra获得了可用评分点中的94.3%,而GPT‑6 Luna获得91.8%,尽管其每项任务成本为8.5美分,便宜了98%。两个模型均在最大推理努力下进行评估。这些结果表明,面向高容量行政工作流的能力强、成本可负担的agents正在取得进展。 我们的合作伙伴构建的软件被数百个医疗系统使用,为全球会员协调诊疗,并为数亿患者提供医疗服务。以下示例展示了各机构如何开发、试点和部署computer-use应用,以节省时间、解决关键问题并改善患者诊疗。 CVS Health正在使用OpenAI的computer-use能力,在临床系统中自动化重复性工作,包括发送文档、处理转诊以及支持专科医生会诊。这些agents操作现有应用程序,完成API无法完全支持的步骤。 在一个生产工作流中,一个agent在周末清理了积压数月的文档发送任务。另一个agent每天处理数万次会诊的系统步骤,帮助团队成员专注于需要其专业判断的工作。CVS Health采用验证检查与人工监督,并通过截图和操作记录来核实操作和应用状态。CVS Health正在开源其Agent Kit(在新窗口中打开),该工具基于OpenAI的Agents SDK构建,将这一方法打包为可重复的流程,以供更广泛使用。 数据保留在CVS Health企业控制的基础设施内,由其企业AI治理团队和既定的负责任AI政策管理。生产数据不用于训练基础模型。 Abridge正在开发computer-use agents,帮助临床医生在其日常使用的各种用例和应用程序中执行护理计划,包括那些没有API的应用。其计划中的住院用例建立在临床对话之上,加入EHR信息以及护士和临床医生的背景信息,以识别需要关注的事项并协调后续步骤。 例如,临床医生可以要求Abridge Assistant帮助解决患者的出院障碍。Agents可以同时处理药物获取和居家健康协调,在电话和消息之外结合计算机交互。临床医生始终专注于患者,并在需要临床判断的决策中被引入。
(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。