每年全球大约进行36亿次医学影像检查,以诊断、监测和治疗各种疾病。加快这些X光片、CT扫描、MRI和超声波的处理和评估对于帮助医生管理工作量和改善健康结果至关重要。
这就是为什么英伟达推出了MONAI,这是一个用于医学影像和其他领域的AI应用的开源研究和开发平台。MONAI将医生与数据科学家联合起来,解锁医疗数据的力量,构建深度学习模型和可部署的应用程序,用于医学AI工作流程。
本周,在北美放射学会(RSNA)的年度会议上,英伟达宣布西门子医疗已采用MONAI部署,这是MONAI中的一个模块,旨在弥合从研究到临床生产的差距,从而提高医学影像AI工作流集成到临床部署的速度和效率。
西门子医疗在全球范围内安装了超过15,000台医疗设备,其Syngo Carbon和syngo.via企业影像平台帮助临床医生更好地解读和提取来自多种来源的医学影像的洞察力。
开发人员通常在构建AI应用程序时使用多种框架,这使得将这些应用程序部署到临床环境变得具有挑战性。通过几行代码,MONAI部署可以构建可以在任何地方运行的AI应用程序。它是一个用于开发、打包、测试、部署和运行医学AI应用程序的工具,简化了将医学影像AI应用程序集成到临床工作流程的过程。
MONAI部署在西门子医疗平台上的应用显著加速了AI集成过程,使用户只需点击几下即可将训练好的AI模型移植到实际临床环境中,而过去这可能需要几个月的时间。这有助于研究人员、企业家和初创公司将他们的应用程序更快地交付给放射科医生。
“通过加速AI模型的部署,我们赋予医疗机构更快地利用基于AI的医学影像最新进展的能力,”西门子医疗数字技术和研究主管Axel Heitland表示。“借助MONAI部署,研究人员可以快速定制AI模型,并将创新从实验室过渡到临床实践,为全球数千名临床研究人员提供直接在其syngo.via和Syngo Carbon影像平台上访问AI驱动的进展。”
增强MONAI开发的应用程序后,这些平台可以显著简化AI集成。这些应用程序可以轻松地在西门子医疗数字市场中提供和使用,用户可以在该市场上浏览、选择并无缝地将其集成到他们的临床工作流程中。
MONAI生态系统促进创新和采纳
在成立五周年之际,MONAI已经拥有超过350万次下载,来自世界各地的220名贡献者,在超过3000篇出版物中被引用,赢得了17项MICCAI挑战赛,并被用于众多临床产品。
最新的MONAI版本v1.4包括更新,为研究人员和临床医生提供了更多机会,利用MONAI的创新并为西门子医疗的Syngo Carbon、syngo.via和数字市场做出贡献。MONAI v1.4和相关英伟达产品的更新包括新的医学影像基础模型,这些模型可以在MONAI中进行定制,并作为英伟达NIM微服务部署。现在一般可用的NIM微服务包括:
- MAISI(Medical AI for Synthetic Imaging)是一种潜在扩散生成AI基础模型,可以模拟高分辨率、全格式3D CT图像及其解剖分割。
- VISTA-3D 是一种用于CT图像分割的基础模型,提供覆盖120多个主要器官类别的开箱即用性能。它还提供了有效的适应能力和零样本能力,以学习分割新结构。
除了MONAI 1.4的主要功能外,新的MONAI多模态模型(M3)现在可以通过MONAI的VLM GitHub仓库访问。M3是一个扩展任何多模态LLM的框架,结合了来自MONAI模型动物园的训练好的AI模型等医学AI专家。这一新框架的威力通过现在在Hugging Face上可用的VILA-M3基础模型得到展示,提供了最先进的放射学图像辅助性能。
MONAI连接医院、医疗初创企业和研究机构
世界各地的领先医疗保健机构、学术医疗中心、初创企业和软件提供商正在采用和推进MONAI,包括:
- 德国癌症研究中心 领导MONAI基准和度量工作组,提供衡量AI性能的指标和使用这些指标的时间和方式的指南。
- Nadeem实验室 从纪念斯隆凯特琳癌症中心(MSK)率先在云中部署多个AI辅助注释管道和病理数据推理模块。
- 科罗拉多大学医学院 教职员工开发了基于MONAI的眼科工具,用于检测视网膜疾病,使用多种成像模式。该大学还在领导一些最初的联邦学习发展和使用MONAI的临床演示。
- MathWorks 将MONAI Label与其医学影像工具箱集成,为参与医学和生物医学应用的数千名MATLAB用户提供医学影像AI和AI辅助注释功能。
- 葛兰素史克 正在探索MONAI基础模型如VISTA-3D和VISTA-2D用于图像分割。
- Flywheel 提供了一个平台,包括MONAI,用于简化影像数据管理、自动化研究工作流程,并支持AI开发和分析,满足研究机构和生命科学组织的需求。
- Alara Imaging 在2024年医学影像信息学学会会议上发表了其关于将MONAI基础模型如VISTA-3D与LLM如Llama 3集成的工作。
- RadImageNet 正在探索使用MONAI的M3框架来开发利用MONAI专家图像AI模型的前沿视觉语言模型,生成高质量的放射学报告。
- Kitware 提供围绕MONAI的专业软件开发服务,帮助将MONAI集成到设备制造商的自定义工作流程以及监管批准的产品中。
研究人员和公司还在云服务提供商上使用MONAI运行和部署可扩展的AI应用程序。提供MONAI访问权限的云平台包括AWS HealthImaging、Google Cloud、Precision Imaging Network(微软医疗云的一部分)和Oracle Cloud Infrastructure。
(全文结束)


