支持诊断40余种癌症,西湖大学发布多模态病理大模型

近日,在首届数智病理西湖峰会上,西湖大学人工智能与生物医学影像实验室发布了全球首个融合了镜下视野和全场图的多模态病理大模型DeepPathAI,该模型即将在杭州市一医院正式落地,让AI时代的数智病理成为可能。

几小时工作量缩短到一杯咖啡时间

病理作为公认的诊断“金标准”,在疾病的诊断、治疗乃至预后中具有举足轻重的作用。在传统的病理诊断模式中,医生需要在数亿像素的切片中搜寻蛛丝马迹,耗时费力且易受主观因素影响。

“一个患者平均需要15张活检切片,一周100名患者就是1500张切片。”杜克大学黄教悌教授在峰会上分享。“人眼会疲劳,经验有边界,而罕见病变的误诊风险始终存在。”

DeepPathAI能以 0.25 微米的精度扫描切片,在几秒之内完成基础筛查,并智能标记可疑病变。DeepPathAI的设计者、西湖大学人工智能与生物医学影像实验室的负责人杨林看来,这将成为病理科医生的“超级私人助理”。

杨林在西湖大学人工智能与生物医学影像实验室

区别于普通病理AI只能识别细胞形态,DeepPathAI能“读病历”,可以结合基因数据、病史甚至家族癌症史,提供更完整的诊断依据。同时,DeepPathAI还能“思考”。当医生面对复杂病症,DeepPathAI不仅能标记病变区域,还能秒级调取全球病例库,提供相似病例分析和治疗建议,让医生不必从零开始查阅海量文献。

通用病理建模范式更使得DeepPathAI成为“全科医生”,能够支持宫颈癌、肺癌、乳腺癌、胃癌等40多种癌症类型的互动式诊断,大幅度提升诊断效率。“十年前可能需要N个小时的工作,现在喝一杯咖啡的时间就能完成。”杨林说。

百万级数据集,打造病理AI“集大成者”

2023年,杨林团队正式从零开始打造系列“病理基座大模型”。同年,团队发布首个成果——医学数据库PathAsst,包含130亿参数、700万医学文献。2024年,团队连续发布4个病理基础大模型,并获得了领域顶级会议MICCAI 2024的青年科学家奖。

此次发布的统一模型DeepPathAI,是杨林团队过往成果的“集大成者”。

作为一种统一的病理图像分析人工智能模型,DeepPathAI能同时处理显微镜下视野和全场扫描图像——打破了传统 AI 只能针对单一病种的局限。一次训练,即可适用于多种癌症和病理类型,如同一把“万能钥匙”。

杨林团队病理大模型研究历程

之所以能快速精准判别不同癌症类型,主要是因为DeepPathAI结合了两种视觉系统,一种专注整体特征,另一种专注细节特征。同时,采用“从小到大”的学习策略,它先学习显微镜下视野图像,再学习全场图;并且能够模拟病理医生进行多尺度分析,既能看到细胞水平的变化,也能观察到组织层面的模式,实现了知识在不同癌症类型间的融合迁移,从而无需为每种癌症单独训练模型。

由DeepPathAI引发的变革正在悄悄发生。在新疆,搭载DeepPathAI的智能扫描系统可以将百万两癌筛查的人群阳性检出率提高2个百分点;在云南,搭载DeepPathAI的智能显微镜系统可以和广州实时交互,让偏远地区的患者也能获得及时诊断;在浙江松阳县,基层医院已开始体验大模型带来的便利......

让病理医生不再吃泡面

从2003年发表首篇AI辅助癌症诊断的论文开始,到2025年正式推出DeepPathAI,病理AI这条路,杨林已经走了20余年。

2004年,在美国新泽西癌症中心的实验室里,杨林第一次感受到了病理医生的日常——医生每天需要看海量的切片,往往一坐就是十几个小时。他开始思考:人工智能能否成为让医生减轻工作负担的临床好帮手?

当时的杨林,正在美国罗格斯大学读博士,师从计算机视觉泰斗Peter Meer和数字病理学先驱David Foran。之后,杨林在新泽西癌症中心病理科和放射科做过两年助理教授,又在美国佛罗里达大学担任生物医学工程系、电子与计算机工程系、计算机系三系终身副教授,直到加入西湖大学工学院人工智能系,担任教授。

跨学科的经历,让杨林得以发现医生群体对数字病理的强烈需求。而他,想做那个能解决问题的人。

首届数智病理西湖峰会现场

在数智病理西湖峰会上,杨林分享了这样一个故事:在一次医院的交流拜访中,他看到一位病理科主任的办公室里堆满了方便面,只因常年需要等待冰冻切片至深夜。病理医生就是一群看似默默无闻,实则为病人付出全部的群体。“我们努力的方向,就是让这样的病理医生晚上能早点回家,吃上一顿热饭。”

“AI不会取代医生,但会重塑医疗场景。”在杨林看来,技术终将回归服务本质——减轻医生负担,拓展诊疗边界,弥合医疗鸿沟。

相关文章

  • 支持诊断40余种癌症,西湖大学发布多模态病理大模型

    近日,在首届数智病理西湖峰会上,西湖大学人工智能与生物医学影像实验室发布了全球首个融合了镜下视野和全场图的多模态病理大模型DeepPathAI,该模型即将在杭州市一医院正式落地,让AI时代的数智病理成为可能。几小时工作量缩短到一杯咖啡时间病理作为公认的诊断“金标准”,在疾病的诊断、治疗乃至预后中具有

    2025-04-04 21:44:00
    0
  • 今日投资参考:存储芯片市场持续回暖

    昨日,三大股指盘中强势上扬,午后一度回落翻绿。截至收盘,沪指微涨0.05%报3350.13点,深证成指涨0.09%报10513.12点,创业板指涨0.13%报2104.63点,北证50指数涨0.52%,沪深北三市合计成交9929亿元,较此前一日减少约1600亿元。行业方面,电力、石油、钢铁、燃气、地

    2025-04-03 10:13:00
    0
  • 短视频文化出海!西安欧亚文化传媒学院国际课程顺利开展

    阳光讯(记者 刘杰) 从“学历提升”到“文化叙事”,从“规模扩张”到“质量优先”,从“资源依赖”到“生态共建”,日前,西安欧亚学院文化传媒学院教师安磊在泰国碧差汶皇家大学的特色课程顺利开展,为欧亚国际文化的交流以及国际课程的出海增添新动能。安磊,高级工程师,国家高级摄影师、独立导演,《流媒体视音频创

    2025-04-03 09:22:00
    0
  • 19位院士专家:AI +优势产业,湖南大有可为

    湖南日报全媒体记者 王铭俊 周顺4月2日,“湘智兴湘”院士专家恳谈会在长沙举行,19位院士专家受邀参加。人工智能(AI)与机器人产业发展成为恳谈会讨论的重点。湖南发展相关产业的落点在哪里?有何具体的操作路径?与会院士专家结合各自研究领域和科研成果,为湖南抢占未来产业制高点建言献策。依靠机器人,做人做

    2025-04-02 23:32:00
    0
  • 有了DeepSeek,福州如何发展AI自主生态?

    2025数字中国创新大赛如火如荼有了DeepSeek 福州如何发展AI自主生态当DeepSeek掀起AI浪潮时,福州正以另一种姿态诠释人工智能的“福州答案”——筑根基、谋应用。从锚定“数字应用第一城”到设置数字中国创新大赛·人工智能赛道,再到2025数字中国创新大赛如火如荼,福州用“智赋百景”的实践

    2025-04-02 10:36:00
    0