内华达州拉斯维加斯——在2023年的HLTH会议上,谷歌的云部门推出了一种新的人工智能驱动的搜索功能,帮助医生和护士快速访问患者临床记录和其他不同数据源中的医疗信息。
谷歌云的Vertex AI Search for Healthcare工具旨在使医疗专业人员及其他员工更快地找到病历和医疗文档中的关键信息。该公司表示,该技术能够对包括FHIR信息和临床记录在内的广泛数据进行医学调优的生成式AI搜索。
谷歌云继续增强其Vertex AI Search平台,并为医疗领域构建生成式AI功能。该公司在2025年医疗卫生信息与管理系统协会(HIMSS)全球健康大会及展览会上宣布,Vertex AI Search for Healthcare新增了生成式AI功能,其中包括一项名为“视觉问答”的新功能,可以搜索表格、图表和示意图。
谷歌云全球医疗战略和解决方案总监Aashima Gupta在一份声明中表示:“我们通过嵌入Vertex AI Search for Healthcare中的多模态功能,帮助临床医生更高效地工作。多模态分析处理来自不同来源的患者数据,如医学图像和基因信息,以获得更全面的理解并改进决策。”
谷歌云还推出了Gemini 2.0作为该产品中的一个模型。
在医疗领域,近90%的医疗数据都是图像形式,例如X光片、扫描图或照片。多模态技术可以处理和整合来自不同来源的信息,如图像、视频和文本。
AI模型可以结合医学图像、患者病史和基因信息,为医疗专业人员提供患者的全面健康状况。谷歌云高管表示,目的是利用更丰富的数据输入来帮助提供商做出更准确的诊断并设计更个性化的治疗计划。
该公司的视觉问答功能使Vertex AI Search for Healthcare能够直接接收图像(如表格、图表或示意图)作为输入,而无需先将图像转换为文本。谷歌云举例说明,该技术可以接收一张显示患者脚部受伤位置的示意图,以及患者填写的表格中的复选框,指示他们是否穿着治疗鞋以及其他症状。视觉问答还可以分析包含表格信息的医疗表格,并在这些信息与搜索相关时将其纳入结果供临床医生参考。
Gemini 2.0是谷歌最新的AI模型,据称比之前的模型更快、更强大。使用这一AI模型使Vertex AI Search for Healthcare能够提供更快、更准确的答案。
多家医疗科技公司正在与谷歌云合作,使用Vertex AI Search。Counterpart Health是一家由Clover Health子公司开发的基于AI的医生赋能公司,开发了一个名为Counterpart Assistant的技术平台,该平台在医生的工作流程中提供实时的患者特定见解。
Counterpart Health首席医疗官David Tsay博士表示,Vertex AI Search for Healthcare的进步为公司提供了强大的新工具。“多模态AI能力将使临床医生能够整合多种类型的临床数据源,提供对其患者健康的更全面理解,并促进个性化护理管理。”Tsay说。
电子病历公司Meditech在其Expanse EHR中开发了基于AI的搜索和总结功能,使护理团队能够使用熟悉的谷歌搜索功能和生成式AI找到所需信息。该公司表示,新的Vertex AI Search功能将进一步提升其EHR的能力。
医疗科技公司Suki升级了其语音助手技术Suki Assistant,包括患者总结和临床问答功能,基于谷歌云技术。
谷歌云正利用其技术实力,为医疗和生命科学公司构建生成式AI功能,以减轻行政负担并支持临床医生的辅助技术。
在2024年的HIMSS大会上,该公司宣布Vertex AI的搜索和问答功能与MedLM、医疗数据引擎和云医疗FHIR API集成,使医疗和生命科学组织更容易构建先进的数据分析和AI解决方案。
(全文结束)


