微软推出了一款新型语音激活人工智能助手,旨在帮助医生和医疗保健专业人员转录临床记录和起草文书工作,以及快速从医疗来源搜索信息。
这款名为 Dragon Copilot 的新医疗 AI 工具是Microsoft Cloud for Healthcare 的一部分。它利用了 AI 语音公司 Nuance 开发的自然语言语音听写和环境聆听技术,该公司于 2021 年被微软以 160 亿美元收购。
该公司在 3 月 3 日星期一发布的博客文章中表示,这些功能已通过生成式人工智能进一步微调,并已适应纳入医疗保健保障措施。
医疗行业生成式人工智能工具的兴起,源于简化管理任务、提高效率和缓解临床医生倦怠的需求。微软已成为快速增长的人工智能笔记工具市场的主要参与者。
“没有人成为临床医生是为了处理文书工作,但这正在成为越来越重的行政负担,占用了实际治疗和支持患者的时间和注意力。这就是我们推出微软 Dragon Copilot 的原因,它是业界首款用于临床工作流程的 AI 助手,”微软首席执行官 Satya Nadella 在 X 上的一篇文章中说道。
让我们进一步了解 Dragon Copilot 的工作原理、功能以及医疗 AI 工具带来的风险。
什么是 Dragon Copilot?
Microsoft Dragon Copilot 建立在现有工具之上,例如语音识别公司 Nuance Communications 推出的 Dragon Medical One (DMO) 和 DAX。
据微软称,DMO 的语音功能已帮助临床医生转录“数十亿份患者记录”,而 DAX 的环境 AI 技术“仅在过去一个月就协助了 600 家医疗机构进行了超过 300 万次环境患者对话”。
微软表示,Dragon Copilot 的底层架构使组织能够为服务提供商和患者在护理环境中提供增强的体验和结果。
微软健康与生命科学解决方案和平台公司副总裁乔·佩特罗 (Joe Petro) 在一份声明中表示:“随着新款 Dragon Copilot 的推出,我们向市场推出了首个统一的语音 AI 体验,该体验利用我们数十年来值得信赖的专业知识,不断增强服务提供商的健康状况,并改善服务提供商组织及其服务的患者的临床和财务结果。”
如何使用 Dragon Copilot?
根据微软的说法,Dragon Copilot 可用于以个性化的风格和格式起草备忘录和笔记。除了语音转文本转录外,Dragon Copilot 用户界面还允许用户提交提示或使用模板来创建 AI 生成的笔记。
除了文档工作外,人工智能助手还允许临床医生从可靠来源搜索通用医疗信息。微软表示,它还可用于“在一个集中的工作区中自动执行关键任务,例如对话订单、笔记和临床证据摘要、转诊信和就诊后摘要”。
为了证实 Dragon Copilot 在医疗领域的实用性,微软提供了调查结果,结果显示,人工智能助手帮助临床医生在每次患者互动中节省了五分钟。“约 70% 的临床医生报告称倦怠感和疲劳感有所减少,62% 的临床医生表示他们不太可能离开他们的组织,而 93% 的患者报告称整体体验更好,”微软表示。
据报道,Dragon Copilot 可通过移动应用程序、浏览器或桌面访问,并可直接与多种不同的电子健康记录集成。这款人工智能助手将于今年 5 月在美国和加拿大上市。不久之后,它将在英国、德国、法国、荷兰和其他主要市场推出。
不过,微软并未透露访问 Dragon Copilot 的费用细节。
医疗保健领域人工智能工具的兴起
初创公司和科技公司竞相为医疗行业推出生成式 AI 工具和硬件。周一,Google Cloud 发布了一篇博客文章,介绍了医疗服务提供商如何在医疗环境中使用这家科技巨头的产品。Basalt Health 等公司正在使用 Vertex AI、Gemini和其他 Google Cloud 技术来创建 AI 代理,帮助医疗助理准备患者病历、执行管理任务以及标记潜在的健康风险。
Abridge 和 Suki 等初创公司分别筹集了超过 4.6 亿美元和近 1.7 亿美元,用于开发类似的 AI 抄写工具。
然而,医疗领域的生成式 AI 工具同样存在大型语言模型 (LLM) 产生幻觉或捏造事物的风险。在可能危及患者生命的医疗环境中,这种风险变得更加严重。
医疗人工智能工具的隐藏风险
美联社发现,OpenAI 的 Whisper 工具用于记录医生与患者之间的会诊,但容易产生幻觉。该报道援引了对多位软件工程师、开发人员和学术研究人员的采访,声称 Whisper 会编造大量文本,其中包括种族评论和暴力言论以及想象中的医疗治疗。
美国食品和药物管理局(FDA)在承认人工智能设备在医疗保健领域的潜在应用的同时,也将人工智能模型中的幻觉视为一个挑战。
美国食品药品监督管理局 (FDA) 在去年的一份题为《生成式人工智能设备的整个产品生命周期考虑因素
》的报告中指出:“例如,对于一款支持 GenAI 的产品,该产品可能旨在总结患者与医疗保健专业人员之间的互动,但该产品产生幻觉的可能性可能会导致总结医疗保健专业人员与患者的讨论与提供互动期间未提出的新诊断之间的差异。”
它还指出,基础人工智能模型“可能容易受到偏见的影响,
对于单个产品开发人员来说,识别或缓解其最终支持的 GenAI 产品的影响可能尤其困难”。
关于 Dragon Copilot,微软表示,“针对医疗保健的临床、聊天和合规保障措施,确保准确、安全的 AI 输出”,已被纳入该 AI 助手中。该公司补充说,Dragon Copilot 的开发符合微软负责任的 AI 原则。
它没有详细说明医疗人工智能工具如何解决幻觉和性能偏差的风险。