妙佑医疗国际(Mayo clinic),于1863年在美国明尼苏达州罗彻斯特创立。它是以不断创新的医学教育和世界领先的医学研究为基础,建立起来的全美规模最大、设备最先进的综合性医疗体系。在2014《美国新闻与世界报道》全美医院排名中,Mayo医学中心排名第一。如今,妙佑医疗国际在佛罗里达州和亚利桑那州另设有分所,同时拥有自己的医学院和涵盖周边几个州的数十家医疗诊所,其临床专家及科学家已达2700多名。2018年12月,世界品牌实验室发布《2018世界品牌500强》榜单,妙佑医疗国际排名第341。
今日,Google Cloud(谷歌云)宣布,与Mayo Clinic(妙佑医疗国际,以下简称“梅奥诊所”)达成合作协议。
根据协议内容,梅奥诊所将在未来的几个月内,使用谷歌云开发的最新聊天机器人工具,以增强医疗保健工作流程,提高临床工作效率。
谷歌云介绍,这项检索工具是基于三月发布的“Generative AI App Builder”平台,名为“Enterprise Search”。它不仅能够快速开发出基于生成式 AI 的客服机器人、产品推荐、定制化搜索引擎等类型的应用,还支持图片、文本、视频、音频多模态搜索。
这意味着,梅奥诊所的工作人员能够通过一个简单的查询,更快速地查询病人的病史、成像记录、基因组学或实验室等数据。
在医学领域中,病历、研究论文、临床指南和 X 光片等各种信息都被用于确定病情和治疗策略。然而这些医疗数据通常以各种格式分发和存储,因此很难快速检索到所有必要信息。
3月30日,谷歌无代码生成式AI应用开发平台Gen App Builder横空出世,为我们解决了这一难题,也让我们看到了生成式AI的魔力。
据悉,Gen App Builder与谷歌的核心搜索引擎、大语言模型等AI技术相结合使用,除了可开发文本类ChatGPT应用,还支持图片、代码、视频、音频等应用,实现混合式对话交互。
企业搜索就是在这个软件中的一个应用场景。在这个场景中,需要用户自己填充数据库的内容,如文本、PDF、图片、视频、电子邮件、资料、网站等。数据上传后,云端系统能够检索信息中的关键词,以便在日后的查询中快速调取。
例如,如果一位医生需要查看一组45至55岁的女性病人的信息,包括她们的乳房X光片和医疗记录,他们可以将该查询输入搜索工具中,而不是分别寻找每个科室的内容。同样,如果医生需要知道病人可能符合哪些临床试验,他们也可以进行搜索。
为了继续在临床环境中开发这些功能,谷歌云正在与多家医疗保健组织合作。梅奥诊所作为一家世界级的医疗机构,成为这一技术的早期采用者。
此次谷歌云与梅奥诊所合作,正式将生成式AI带入了医疗领域。未来的几个月内,梅奥诊所将探索Google搜索质量与生成式AI的结合如何以快速、无缝和对话的方式为医生、临床医生和其他员工带来重要信息。
十年合作协议
值得注意的是,此次合作是基于四年前签订的“十年之约”协议上所延伸的。
早在2019年9月,谷歌就与梅奥诊所签订了长达10年的数字化转型合作协议。根据协议内容,梅奥医院将为其提供患者健康数据,而谷歌将在未来十年内研发一系列AI+医疗的相关产品,同时保证数据的保密性。
同时,梅奥医疗也将使用其产品来强化AI医疗智能诊断,增强医疗科研能力,并提高诊疗准确度,保证临床效果。
谷歌作为全球科技巨头,一路走来开发并提供大量基于互联网的产品和服务,涵盖广告,搜索,云计算等众多领域。尽管涉及领域广泛,其始终保持着对医疗健康领域的浓厚兴趣。
这些年,谷歌也一直在增强其在医疗行业领域布局,不断探索如何利用AI来改善医疗保健。
谷歌云计算业务是谷歌母公司 Alphabet 旗下的一个部门,负责提供云计算、数据分析、机器学习等服务。不过,自从2008年推出以来,谷歌云业务就一直处于亏损状态,直到今年第一季度才终于首次实现了盈利。
财报显示,2023 年第一季度,谷歌云收入为74亿美元,高于去年同期的58亿美元,同比增长27.5%。同时,该公司还报告称,去年谷歌云业务亏损7.06亿美元,而今年报告截至Q1取得了1.91亿美元的收益。2020年时,该部门亏损高达56亿美元。
亏损并不代表没有收入,相反与谷歌云达成合作协议的企业数不胜数,尤其是医疗服务机构。
谷歌云携手Hologic
早在2021年初,Hologic(豪洛捷)公司就与谷歌云达成合作,使用医学影像套件来增强其Genius数字诊断系统,助力临床医生完成宫颈癌筛查项目。
彼时,Hologic公司研发、创新副总裁Michael Quick表示:“通过用谷歌云在AI、深度学习及其基于云的成像存储技术方面的专业知识,弥补我们在诊断和AI方面的短板,我们正在发展我们的市场领先技术,以提高实验室性能、改善医疗服务提供者决策和患者护理。”
谷歌云携手瓦里安
2021年4月,瓦里安与谷歌云达成了合作,这两大巨头打算合作建立用于器官分割的人工智能模型,以进一步推进AI智能在放射治疗的作用,突破癌症治疗的瓶颈。
据悉,瓦里安使用谷歌云AI平台的NAS技术创建了一个AI勾画引擎进行“训练”,利用瓦里安专有的治疗计划图像数据,创建为人体器官定制的自动勾画模型。该公司希望将这些模型应用到其治疗计划软件工具中,供世界各地的癌症中心使用。
谷歌云携手Asensus Surgical
今年2月,腹腔镜手术机器人公司Asensus Surgical与谷歌云达成合作协议。根据协议内容,双方将整合谷歌云的安全云数据架构和机器学习技术,进一步拓数字手术能力,为外科医生提供新颖、实时的术中数字工具和智能机器人系统。
基于众多医疗服务商的数据收集,谷歌云在短短半年连续推出了多个医疗服务工具。
辅助影像诊断工具
2022年12月,谷歌云推出人工智能医学影像套件“Medical Imaging Suite”,其中包含了人工智能辅助的医学成像诊断功能,既可以让医院的专家团队自行训练AI、积累经验,也可以使用现成算法帮助快速完成诊断工作,谷歌表示医学图像非常重要,它们约占所有医疗数据的 90%。
据了解,影像实验室提供了对NVIDIA公司和Monai创建的现成的基于人工智能的注释工具的访问,这些工具可以执行重复性的手工任务,如标记医疗图像。
Google的BigQuery和Looker服务也在其中,可用于搜索和查看PB级的成像数据。然后用户可以对这些数据进行高级分析,甚至可以用它来为新的人工智能模型创建训练数据集。
想要系统了解医学成像以及光学镜头相关研发设计的更多技术内容?来高端医疗设备展Medtec China ,展会开设的议题包含核心部件在内窥镜产品的创新设计和技术研发中的应用、一次性内镜图像传感器CMOS技术详解等,内容再次升级,高校、医院、企业的嘉宾讲多维度剖析重难点。
辅助药物开发工具
今年5月16日,谷歌云曾推出两款新的AI 工具,分别名为“Target and Lead Identification Suite”和“Multiomics Suite”,旨在帮助生物技术和制药公司加速药物发现和推进精准医疗。
据介绍,这两款工具都是为了解决生物制药行业长期存在的问题:药物开发的时间以及成本问题。Target and Lead Identification Suite是一种预测引擎,能够帮助研究人员更好地识别氨基酸的功能并预测蛋白质的结构。Multiomics Suite则能够帮助研究人员分析,开发精确治疗的大量不同的组学数据。
近年来伴随大数据、云计算、5G时代的到来,AI技术正在飞速发展,在颠覆人们固有印象的同时,也展示了人工智能助力各个行业发展的更多可能性。
作为人工智能应用首位的医疗领域,随着AI技术与医疗健康领域的融合不断加深,以计算机视觉、自然语言处理、机器学习等为代表的人工智能技术,越来越广泛地渗透进医疗行业的各个场景中,成为提升医疗服务水平的重要驱动力,频频引发市场关注。
在过去五年时间里,有近千亿资金注入”AI+医疗”领域,主要涉及医学影像AI、AI制药、医疗AI机器人等领域,该赛道也主教成为医疗科技焦点之一。
根据《全球医疗行业人工智能市场(至2027年)》报告预测,2022年至2027年之间,在全球医疗领域的人工智能AI市场将从2021年的69亿美元,以年复合增长率46.2%的速度增长,于2027年达到674亿美元的规模。
而“AI+医疗”市场规模扩大的因素主要包括,医生短缺、医疗资源错配,以及大量复杂的医疗数据集体涌入市场,降低医疗时间与人力成本的需求不断增加等。
此外,AI技术在基因组学,药物发现,医学成像和疾病诊断方面更有着非凡的潜力,不断推动着市场增长,尤其是ChatGPT的爆火出圈,再度引燃这一领域,多家企业已率先入局。
因此机器人系也成为了高端医疗设备展Medtec China吸睛单品。
春江水暖鸭先知,许多专注于医疗机器人等医械产品设计研发的企业也纷纷入驻高端医疗设备展 Medtec China展会现场,包括迈得Maider,米克朗,赛能,IMA spa,欧赛斯,艾利特等,点击快速预登记,来现场看火热与前沿展品。
3M Health Information Systems(HIS)宣布与Amazon Web Services(AWS)合作,将使用AWS机器学习(ML)和生成式AI服务,包括Amazon Bedrock、Amazon Comprehend Medical和Amazon Transcribe Medical,以帮助加快、完善和扩展3M的环境临床文档和虚拟助手解决方案的交付。
通过与AWS合作,3M HIS将推进其对话式AI平台,该平台目前受到30多万临床医生的青睐。该平台支持基于云的解决方案,例如用于实时语音识别的3M TM M*Modal Fluency Direct, 与250多份电子健康记录(EHR)兼容;以及用于环境临床文档的3M TM M*Modal Fluency Align。
微软与美国最大电子病历提供商Epic合作,首次将生成人工智能技术集成到其电子健康记录软件中,使用 Epic 的 EHR 系统的健康系统将能够通过微软的 OpenAI Azure 服务运行生成人工智能解决方案,微软在其 Azure 云解决方案中使用了 OpenAI 的语言模型 GPT-4 功能。
在整合的最初阶段,开发了两个支持 AI 的初始解决方案,第一个用例发生在 Epic 的 In Basket 通信软件系统中,第二个用例允许提供商使用生成式 AI 从 Epic 的数据可视化工具中获取建议。
百度
不久前,在“数启新局智胜未来”2023年百度&GBI生态峰会上,百度“文心一言”首个落地医药行业的产品GBI-Bot正式发布。据悉,这是一款医药垂类对话机器人,使用了百度灵医智惠在医疗健康行业的技术积累,实现了文心一言与GBI专业数据库的有机结合。
时下,“AI+云+医疗”的新模式正在走进我们的生活,同时也推动着医疗行业向数字化转型演进。而谷歌云的此次合作将为医疗上云浇筑更加坚实的基础,相信国内科技企业也正在追逐市场的步伐。“未来”已来,云计算的巨大市场潜力正在打开,后续谷歌云又将如何助力医疗行业发展,器械之家拭目以待。