数智化转型网szhzxw.cn AI 携手“顶流”医院,装载“超级大脑”,商汤医疗启动大模型赋能智慧医院联合共创

携手“顶流”医院,装载“超级大脑”,商汤医疗启动大模型赋能智慧医院联合共创

数字化转型网人工智能专题

与全球关注人工智能的顶尖精英一起学习!数字化转型网建立了一个专门讨论人工智能技术、产业、学术的研究学习社区,与各位研习社同学一起成长!欢迎扫码加入!

2024世界人工智能大会(WAIC)期间,商汤医疗携手瑞金医院、华西医院、新华医院、西京医院、中科大附属第一医院、北京清华长庚医院,在行业内率先启动医疗多模态大模型赋能的智慧医院创新示范共创,打造由大模型“智慧中枢”驱动的智慧医院建设示范样板。

作为共创的重要成果之一,商汤医疗联合中华医学会病理学分会王哲副主委团队、清华大学何永红教授团队,共同发布了国内首个病理大模型PathOrchestra,基于国内规模最大的数字病理图像数据集训练,并实现全球最广泛的临床任务赋能。商汤医疗已将该成果深度嵌入业内领先的数智化病理科整体解决方案,助力医院“一站式”建设大模型驱动的数字化智慧病理科,开启病理诊断“新篇章”。

一、医疗大模型成智慧医院“中枢大脑”

生成式人工智能的出现,让智慧医疗大跨步迈入3.0时代。“2.0时代的医疗人工智能主要集中在‘单点应用’上,尚未实现整体‘一盘棋’布局。在3.0时代,我们希望利用医疗大模型帮助医院建立一个‘中枢大脑’,实现对智慧医院建设的底层赋能。”商汤科技副总裁张少霆表示。

商汤以医疗大语言模型作为智慧医院建设“中枢大脑”,智能调度多模态专用模型。

要成为“中枢大脑”,意味着医疗大模型必须具备综合分析多模态数据的能力。为了跨越这条“鸿沟”,WAIC期间,商汤医疗联合多家国内一流医院,共同举行“大模型赋能智慧医院创新示范共创仪式”,打造以医疗多模态大模型为创新驱动的智慧医院建设示范样板。各方以商汤医疗大语言模型“大医”作为智慧医院建设“中枢大脑”,智能调度覆盖医学文本、放射影像、病理图像等多种数据模态的专用模型,辅助医生完成跨科室、跨模态的复杂诊断推理。

上述多模态能力的实现,离不开“通才”模型和“专才”模型的默契配合。在7月6日下午举办的2024世界人工智能大会医疗大模型创新发展论坛暨上海市医疗大模型应用示范场景征集宣贯会上,张少霆受邀分享了商汤医疗在该方面的创新实践。 数字化转型网www.szhzxw.cn

“通才”模型方面,“大医”的基座模型“商量”实现语言理解和交互能力全面升级,此前在中文大模型测评基准SuperCLUE中刷新了国内最好成绩,成为首个超越GPT-4 Turbo的国产大模型。得益于此,“大医”的逻辑推理和智能问答等“通才”能力再度实现飞跃。“专才”模型研发方面,商汤医疗已推出一系列精通不同模态医学图像分析的领域专用模型,持续引领智慧医疗行业创新。

结合“通才”模型强大的综合性能,与多模态“专才”模型在特定任务中的优势能力,通过“通专融合”的路径打造“医疗多模态智能体”,高效助力智慧医院建设“一盘棋”布局,帮助医院实现多场景全方位智能升级。

二、发布国内首个病理大模型,开启病理诊断“新篇章”

病理诊断被誉为疾病诊断的“金标准”,但该领域长期以来面临病理医生培养周期长、优质病理诊断资源分布不均匀等问题。人工智能技术的应用让国内外病理科迎来数智化转型浪潮,不过由于数字病理切片分辨率高、涉及病种多,在“大数据+精标注”的传统AI模型训练范式下,想要对每一种疾病进行精标注训练几乎是“不可能完成的任务”。 数字化转型网www.szhzxw.cn

此次发布的病理大模型PathOrchestra,利用国内规模最大的近30万张全切片数字病理图像(近300TB数据)数据集训练,并融合了文本、视频等多模态训练数据。通过对海量数据的自监督学习,无需大量精标注数据,即可让模型“触类旁通”学会分析各类器官病理图像,已覆盖肺、乳腺、肝脏、食管等20余种器官,赋能包括泛癌分类、病灶识别和检测、多癌种亚型分类、生物标志物评估等在内的百余项临床任务,已在多器官泛癌分类、淋巴瘤亚型诊断、膀胱癌筛查等近50项任务中准确率超过95%,这也是目前全球赋能临床任务最广的病理大模型。 数字化转型网www.szhzxw.cn

病理大模型PathOrchestra可赋能百余项临床任务。

在训练过程中,研发团队还针对性地增加了食管癌、乳腺癌等中国发病率较高的癌症数据,使模型能力更符合我国临床实际需求。王哲表示:“PathOrchestra是一首由视觉模型、大语言模型以及多模态数据共同奏响的协奏曲,希望这首协奏曲能够奏出美好的曲调,为中国乃至世界的广大患者的病理诊断做出更好的服务。” 数字化转型网www.szhzxw.cn

为了推动大模型技术在病理诊断中的应用,商汤医疗已打造大模型驱动的数智化病理科整体解决方案,串联切片数字化扫描、高性能阅片、AI智能辅助诊断、数据存储等病理智慧化诊断全流程。在病理大模型赋能下可支持百余种临床辅助诊断任务,还可适配众多品牌扫描仪及存储设备,实现千人并发秒级无卡顿调阅,满足多院区病理智能分析需求,开启大模型赋能下的病理诊断“新篇章”。

数字化转型网人工智能专题

与全球关注人工智能的顶尖精英一起学习!数字化转型网建立了一个专门讨论人工智能技术、产业、学术的研究学习社区,与各位研习社同学一起成长!欢迎扫码加入! 数字化转型网www.szhzxw.cn

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于文汇;编辑/翻译:数字化转型网宁檬树。

数字化资料下载-思思
此图片的alt属性为空;文件名为%E5%AE%98%E7%BD%91%E8%AF%BB%E8%80%85%E7%BE%A42.png
免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。http://www.szhzxw.cn/42417.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部