支持诊断40余种癌症,西湖大学发布多模态病理大模型

近日,在首届数智病理西湖峰会上,西湖大学人工智能与生物医学影像实验室发布了全球首个融合了镜下视野和全场图的多模态病理大模型DeepPathAI,该模型即将在杭州市一医院正式落地,让AI时代的数智病理成为可能。

几小时工作量缩短到一杯咖啡时间

病理作为公认的诊断“金标准”,在疾病的诊断、治疗乃至预后中具有举足轻重的作用。在传统的病理诊断模式中,医生需要在数亿像素的切片中搜寻蛛丝马迹,耗时费力且易受主观因素影响。

“一个患者平均需要15张活检切片,一周100名患者就是1500张切片。”杜克大学黄教悌教授在峰会上分享。“人眼会疲劳,经验有边界,而罕见病变的误诊风险始终存在。”

DeepPathAI能以 0.25 微米的精度扫描切片,在几秒之内完成基础筛查,并智能标记可疑病变。DeepPathAI的设计者、西湖大学人工智能与生物医学影像实验室的负责人杨林看来,这将成为病理科医生的“超级私人助理”。

杨林在西湖大学人工智能与生物医学影像实验室

区别于普通病理AI只能识别细胞形态,DeepPathAI能“读病历”,可以结合基因数据、病史甚至家族癌症史,提供更完整的诊断依据。同时,DeepPathAI还能“思考”。当医生面对复杂病症,DeepPathAI不仅能标记病变区域,还能秒级调取全球病例库,提供相似病例分析和治疗建议,让医生不必从零开始查阅海量文献。

通用病理建模范式更使得DeepPathAI成为“全科医生”,能够支持宫颈癌、肺癌、乳腺癌、胃癌等40多种癌症类型的互动式诊断,大幅度提升诊断效率。“十年前可能需要N个小时的工作,现在喝一杯咖啡的时间就能完成。”杨林说。

百万级数据集,打造病理AI“集大成者”

2023年,杨林团队正式从零开始打造系列“病理基座大模型”。同年,团队发布首个成果——医学数据库PathAsst,包含130亿参数、700万医学文献。2024年,团队连续发布4个病理基础大模型,并获得了领域顶级会议MICCAI 2024的青年科学家奖。

此次发布的统一模型DeepPathAI,是杨林团队过往成果的“集大成者”。

作为一种统一的病理图像分析人工智能模型,DeepPathAI能同时处理显微镜下视野和全场扫描图像——打破了传统 AI 只能针对单一病种的局限。一次训练,即可适用于多种癌症和病理类型,如同一把“万能钥匙”。

杨林团队病理大模型研究历程

之所以能快速精准判别不同癌症类型,主要是因为DeepPathAI结合了两种视觉系统,一种专注整体特征,另一种专注细节特征。同时,采用“从小到大”的学习策略,它先学习显微镜下视野图像,再学习全场图;并且能够模拟病理医生进行多尺度分析,既能看到细胞水平的变化,也能观察到组织层面的模式,实现了知识在不同癌症类型间的融合迁移,从而无需为每种癌症单独训练模型。

由DeepPathAI引发的变革正在悄悄发生。在新疆,搭载DeepPathAI的智能扫描系统可以将百万两癌筛查的人群阳性检出率提高2个百分点;在云南,搭载DeepPathAI的智能显微镜系统可以和广州实时交互,让偏远地区的患者也能获得及时诊断;在浙江松阳县,基层医院已开始体验大模型带来的便利......

让病理医生不再吃泡面

从2003年发表首篇AI辅助癌症诊断的论文开始,到2025年正式推出DeepPathAI,病理AI这条路,杨林已经走了20余年。

2004年,在美国新泽西癌症中心的实验室里,杨林第一次感受到了病理医生的日常——医生每天需要看海量的切片,往往一坐就是十几个小时。他开始思考:人工智能能否成为让医生减轻工作负担的临床好帮手?

当时的杨林,正在美国罗格斯大学读博士,师从计算机视觉泰斗Peter Meer和数字病理学先驱David Foran。之后,杨林在新泽西癌症中心病理科和放射科做过两年助理教授,又在美国佛罗里达大学担任生物医学工程系、电子与计算机工程系、计算机系三系终身副教授,直到加入西湖大学工学院人工智能系,担任教授。

跨学科的经历,让杨林得以发现医生群体对数字病理的强烈需求。而他,想做那个能解决问题的人。

首届数智病理西湖峰会现场

在数智病理西湖峰会上,杨林分享了这样一个故事:在一次医院的交流拜访中,他看到一位病理科主任的办公室里堆满了方便面,只因常年需要等待冰冻切片至深夜。病理医生就是一群看似默默无闻,实则为病人付出全部的群体。“我们努力的方向,就是让这样的病理医生晚上能早点回家,吃上一顿热饭。”

“AI不会取代医生,但会重塑医疗场景。”在杨林看来,技术终将回归服务本质——减轻医生负担,拓展诊疗边界,弥合医疗鸿沟。

相关文章

  • 具身智能产业发展推进会在郑州召开

    河南日报记者 师喆5月14日,具身智能产业发展推进会在郑州召开。副省长宋争辉出席会议。他指出,以习近平同志为核心的党中央高度重视人工智能发展,作出一系列重要部署,推动了我国人工智能综合实力整体性跃升。具身智能作为人工智能和机器人深度融合的前沿领域,发展潜力巨大、应用前景广阔。宋争辉强调,要深入学习贯

    2025-05-16 08:18:00
    0
  • 智元机器人等在四川成立智能科技公司,含多项AI业务

    天眼查App显示,近日,四川智象启元智能科技有限公司成立,法定代表人为沈力,注册资本1000万人民币,经营范围包括人工智能基础软件开发、人工智能应用软件开发、人工智能基础资源与技术平台、人工智能行业应用系统集成服务等。股东信息显示,该公司由智元机器人关联公司上海智元新创技术有限公司、四川智象奇元智能

    2025-05-13 11:10:00
    0
  • 垂类大模型迎来黄金时期 中国电信深度竞逐多元应用

    来源:【通信信息报社】(记者 林婉玲)种植户打开AI助手,语音提出种植问题,数秒便能获得答案;在工业生产线中,大模型通过视觉检测与自然语言指令结合,实现缺陷自动标注与工艺优化……当前,AI 大模型正加速向产业深水区渗透,而垂类大模型更迎来前所未有的黄金发展期。工信部表示,下一步,将全力推进人工智能赋

    2025-05-12 19:09:00
    0
  • 如何读懂《大学》——朱子文化系列讲会第九期特邀台湾文化大学李纪祥教授分享“大学之道”

    东南网5月11日讯(记者 王亮)南宋著名理学家朱熹毕生心血倾注《四书章句集注》上,临终前仍在修订《大学·诚意》章,希望通过重新阐释经典,让儒学适应新时代的需求。那么朱熹的“大学之道”是什么?《大学》的三大纲领是什么?我们又该如何读懂《大学》呢?5月11日上午,由福建省图书馆联合多家高校社团举办的“明

    2025-05-12 17:24:00
    0
  • 惠州市政府党组会议和市政府常务会议:扎实推动人工智能产业加速发展

    5月12日上午,市政府党组书记、市长陈宇航主持召开市政府党组会议和市政府常务会议,认真传达学习习近平总书记重要讲话、重要指示精神,研究部署贯彻落实工作。会议强调,要深入学习贯彻习近平总书记在中央政治局第二十次集体学习时的重要讲话和在上海考察时的重要讲话、重要指示精神,立足惠州资源禀赋和产业基础,扎实

    2025-05-12 15:34:00
    0