谷歌的人工智能支持的临床搜索和回答工具现在可以扫描表格、图表和其他图像中的信息，以期为医生和护士提供比仅靠临床记录更全面的患者健康视图。
这款名为Vertex AI Search for healthcare的工具还得到了谷歌最新AI模型的支持，谷歌在周一宣布了这一消息。这款新模型被称为Gemini 2.0，据称比之前的版本更快、更准确。
在过去几天里，科技巨头和开发者们纷纷宣布了一系列新的AI工具和项目，希望在本周于拉斯维加斯举行的HIMSS健康信息技术大会上吸引潜在买家的关注。
自去年三月推出Vertex AI Search for healthcare以来，谷歌一直在努力扩展其功能。该工具使用生成式AI让临床医生能够搜索患者记录和其他临床数据，并能回答问题，如关于患者病史的查询。
它是Vertex AI Search的一个分支，后者是一个帮助开发者为其网站和数据存储构建搜索引擎的平台，专门针对医疗信息进行了优化。
通过谷歌的新更新，Vertex AI Search for healthcare正在扩展到所谓的多模态AI，即算法可以从文本以外的各种来源理解和提取数据。
多模态AI在医疗领域尤其有用，因为根据研究，该行业中近90%的数据是以图像形式存在的，如X光片或扫描图像。
借助谷歌称之为“视觉问答”的新多模态功能，Vertex AI Search可以直接接收图表等图像作为输入，而无需先将图像转换为文本。如果这些信息与最终用户的搜索相关，Vertex AI会将其包含在结果中。
Vertex AI已经集成了谷歌的两个大型语言模型——Gemini 1.5 Flash和MedLM——现在还将得到Gemini 2.0的支持，后者于去年12月发布。
虽然谷歌发言人在截稿时没有回应有关目前有多少医疗机构正在使用Vertex AI Search的问题，但该工具已被Community Health Systems和Highmark Health等卫生系统以及电子健康记录供应商Meditech采用。Meditech已将谷歌的AI技术整合到其医院健康记录软件中。AI文档公司Suki最近也宣布，其自己的临床助理工具将使用谷歌的患者总结和问答技术。
谷歌还在周一宣布，它将与医生赋能平台Counterpart Health合作，将Vertex AI Search集成到Counterpart的临床决策支持工具中。Counterpart Health是健康保险公司Clover的子公司。Clover在五个州销售Medicare Advantage计划，并于去年春季推出了Counterpart Assistant，向第三方客户推销其技术平台，特别是在其未运营Medicare Advantage计划的市场。
随着医疗机构对AI工具的兴趣日益增长，谷歌、微软和亚马逊等云巨头正在竞相开发其医疗产品，并与持有宝贵患者数据的卫生系统建立合作关系。
除了临床搜索外，谷歌还专注于对医疗数据进行专门调优的大规模语言模型，并于去年12月发布了一个平台，帮助组织打造自己的半自主AI代理。
然而，一些人担心，鉴于联邦监管的缺失和技术出错的倾向，医疗行业可能在采用AI方面行动过快。当引入非文本输入（如图像）时，错误可能会被放大。去年7月，美国国立卫生研究院的研究人员发现，一个AI模型在解答医学测验问题时表现出高准确性，但在描述图像时却犯了错误。
(全文结束)
