HIT Webinar | [刘澈 帝国理工学院] 通用模型在医学影像领域的潜力与挑战: 我们是否需要重新训练医学基础模型?

星标“医工学人”,第一时间获取医工交叉领域新闻动态~



HIT Webinar 聚焦生物医疗,人工智能及前沿科技,围绕Healthcare,Intelligence & Technology探索医学影像处理、计算机视觉、智慧医疗、生物信息学、新型临床诊疗装备、智能康复机器人、医疗可穿戴设备、人工智能辅助制药等前沿技术的发展与应用。


本期特邀报告将于北京时间2025年10月10日晚上20:00腾讯会议进行,时长2.0小时,欢迎您注册参加。



















通用模型在医学影像领域的潜力与挑战: 我们是否需要重新训练医学基础模型?

北京时间2025年10月10日晚上20:00

#腾讯会议:834-817-487

近年来,在自然图像处理上取得巨大成功的通用视觉模型正越来越多地被应用于专业的医领域。本报告将深入探讨这一跨领域应用的现状、潜力与挑战。我们首先展示了对前沿自监督模型DINOv3的评测,通过在X光、CT、病理切片等多种2D/3D医疗影像上的广泛测试发现其在未经任何医疗数据预训练的情况下依然展现出强大的性能,但也揭示了其在需要深度领域知识的特定任务(如全切片病理分析)上的局限性,且性能扩展规律在医疗领域并不总是鸢先一致。接着,我们对从3B到72B的多种开源视觉语言模型(VLM)在多个医疗VQA基准上进行了综合评测,研究发现了一个关键的“理解-推理鸿沟”:尽管大型通用模型在视觉理解任务上能媲美甚至超越专用模型,但在复杂的医学推理能力上存在显著短板,这构成了其临床安全应用的关键障碍。基于这些发现,我们进一步训练了一个能够同时处理2D、3D及视频数据的统一视觉模型,以探索更适应医疗复杂数据形态的解决方案。综合而言,当前通用模型在医疗应用中展现了巨大潜力,但仍面临专业知识与推理能力的挑战。未来的研究需致力于增强模型的多模态对齐、设计更精细的评测协议以及探索更高效的领域自适应策略。END


研讨会信息


组织单位

医工学人

中科院苏州医工所研究生会

北京协和医学院医药健康创投会

中美生科青年创投俱乐部

NW Technology


招募令


HIT Webinar作为完全开放的非营利性在线知识分享交流平台,聚焦人工智能、生物科技等前沿技术快速发展背景下的医疗保健领域的技术发展与应用,自发起以来已举办上百场在线活动,分享嘉宾包含从国内外知名高校学者到公司创始人,活动累积参与人次高达1万+,建立了良好的口碑。


这里是一个开放的知识分享与交流空间,我们欢迎与HIT相关主题内容的加入,无论你是公司创始人还是技术开发者,医院临床一线的医生朋友还是高校在读的本科及研究生同学,都可扫码填写报名信息预约分享,HIT Webinar组委会诚挚地向你发出邀请,期待你的到来~

<扫码添加小助手微信了解更多~>


点击阅读原文 注册研讨会

本篇文章来源于微信公众号: 医工学人

发表回复