星标“医工学人”，第一时间获取医工交叉领域新闻动态~
HIT Webinar 聚焦生物医疗，人工智能及前沿科技，围绕Healthcare，Intelligence & Technology探索医学影像处理、计算机视觉、智慧医疗、生物信息学、新型临床诊疗装备、智能康复机器人、医疗可穿戴设备、人工智能辅助制药等前沿技术的发展与应用。
本期特邀报告将于北京时间2024年12月29日下午14：00于腾讯会议进行，时长一小时，欢迎您注册参加。
GMAI通用多模态医疗大模型的构建与评测
北京时间2024年12月29日下午14：00
#腾讯会议：874-440-051
近些年，多模态大模型取得了突飞猛进的发展，然而在医疗领域仍然缺乏一款真正可靠的多模态大模型。对此，我们从数百个专业医学数据集中整合并转换了规模庞大的多模态医疗数据集 GMAI-VL-5.5M，通过精心构建的图文配对实现多元医疗任务和高质量标注的覆盖。在此基础上，提出了采用分阶段训练策略的通用医疗视觉语言模型 GMAI-VL，显著提升了对视觉与文本信息的整合与理解能力，从而在多模态医疗场景下更好地支持辅助诊断和临床决策。与此同时，为了全面评估大型视觉语言模型（LVLMs）在医疗领域的实际表现，我们进一步构建了覆盖 38 种医疗图像模态、18 个临床相关任务、18 个科室以及 4 个感知层级的通用医疗 AI 基准 GMAI-MMBench，并以视觉问答（VQA）的形式统一了评估框架。整体而言，这项工作不仅提供了高质量的医疗数据与相应模型方案，也为后续研究如何构建更高效、更可靠的医疗 AI 奠定了坚实基础。 END
研讨会信息
组织单位
医工学人
中科院苏州医工所研究生会
北京协和医学院医药健康创投会
中美生科青年创投俱乐部
NW Technology
招募令
点击阅读原文 注册研讨会
本篇文章来源于微信公众号: 医工学人
