医疗成像系统制造商Carestream Health正在研究使用NVIDIA Clara AGX在单帧和数据流式的X光图像上开发AI功能。NVIDIA Clara AGX是一种为医疗设备设计的嵌入式AI平台。
同时,全世界很多初创公司也都在采用 Clara AGX 提供医学成像、手术和电子显微镜的 AI 解决方案。其中包括位于波士顿的Activ Surgical,该公司的硬件成像模块最近获得了FDA许可,可以为手术室提供实时AI分析。
现在NVIDIA Clara AGX 开发套件已全面上市,旨在促进显微镜、超声和内窥镜等软件定义的设备的开发。
新一代医疗设备需要配备数十种实时 AI 应用程序,才能为临床诊断过程的每一步提供支持,包括从自动化患者的扫描过程、提高图像质量,到分析数据流、向医护人员提供关键分析。
作为一种通用平台,NVIDIA Clara AGX 可以加速这些新型医疗设备的开发。 NVIDIA Clara AGX 平台可以提供高带宽信号处理,加速计算重建、AI 处理以及高级的 3D 可视化。
帮助临床医生实现实时检测
内窥镜和手术机器人等医疗设备都装有摄像头,为操作这些设备的临床医生提供实时视频。通过捕获这些视频流并在视频内容中应用计算机视觉 AI,可以为医疗专业人员提供改善患者护理的工具,并为缺乏医学成像资源的医院增强服务能力。
Clara AGX 开发套件架构采用了 NVIDIA Jetson AGX Xavier、NVIDIA RTX 6000 GPU 和 NVIDIA Mellanox ConnectX-6 SmartNIC。随附的SDK使开发者能够更便捷的使用实时系统软件、输入/输出和视频处理流程的软件库,以及参考应用程序来创建超声和内窥镜 AI 模型,轻松地着手开始并持续进行开发。
该平台内置了适用于云原生容器化软件和微服务的 NVIDIA EGX 堆栈,其中包括 NVIDIA Fleet Command,用于在医院安全地部署一组设备,共同将日常传感器转变成智能传感器。
这些智能传感器将采用软件定义方法,这意味着这些传感器可以随着 AI 算法的改进而定期更新,这是一项重要的功能,有助于持续地将突破性研究成果应用于日常医学实践。
实现智能设备
Carestream Health正在创建智能X光室,其中将包括AI驱动的功能,用以增强成像工作流程,并实现更快、更高效的检查。 这些设备包括针对类似检查类型的自动定位和曝光设置,有助于提高X射线图像的一致性,从而提高诊断可靠性。
Activ Surgical,NVIDIA Inception 初创公司加速计划的成员,正在使用 NVIDIA GPU 加速 AI 提供实时手术指导。该公司新近获得FDA批准的ActivSight模块将为其ActivINSIGHT产品提供动力。该产品将为外科医生提供以前无法获得的视觉叠加效果,包括血液流动和灌注,而无需注射染色剂。
在全球率先使用 NVIDIA AGX 系统实现智能医疗设备的公司远不止 Carestream Health和Activ Surgical 这两家。其他公司包括:
• AJA Video Systems,总部设在美国加利福尼亚州的 Gold Country,开发适用于高带宽流式传输的专业视频和音频 PCIe 卡。该公司的 PCIe 卡与 NVIDIA Clara AGX 开发套件(包括两个 PCIe 插槽和高速网络端口)配合使用时,可用于内窥镜和手术可视化应用程序。
• Kaliber Labs, NVIDIA Inception 计划成员,正在构建 AI 驱动的实时软件解决方案,为外科医生实施关节镜和微创手术提供支持。Kaliber 使用 NVIDIA Clara AGX 部署其手术软件套件,为外科医生配备了首款基于情境的个性化手术工具套件,以帮助外科医生高水平地进行手术,降低手术当中的可变性。
• KAYA Instruments,NVIDIA Inception 计划成员,致力于开发可与成像设备(包括电子显微镜、超声设备和 MRI 设备)配套使用的计算机视觉产品。这家公司总部设在以色列,其视频采集卡和摄像头可将医学成像内容传输至 NVIDIA GPU,实现实时处理和 AI 加速分析。
• Subtle Medical,NVIDIA Inception 计划成员,针对 PET 和 MRI 方案部署了已获 FDA 认证和 CE 标记的深度学习驱动型图像增强软件解决方案。该公司将利用 NVIDIA Clara AGX 开发 SubtleIR,这是一种正在研发的 AI 驱动的软件,可以提升介入成像程序的速度和质量。
• NVIDIA Inception 计划成员Theator将使用NVIDIA Clara AGX开发其手术分析平台。 这家基于Palo Alto的初创公司正在开发边缘GPU加速的AI系统,以注释手术室录像,从而使外科医生可以进行手术后检查。以供将手术的一部分与以前的相同手术进行比较。
• us4us,总部位于波兰的研发用超声系统制造商,正在使用 NVIDIA AGX 系统制造一种支持实时数字波束合成的便携式超声平台。实时数字波束合成是一项捕获高质量超声波图像所必需的计算密集型技术。该软件定义的系统使用嵌入式 GPU 模块,使医学研究人员可以开发和部署用于在超声扫描图像处理的自定义 AI 模型。